En benchmark, i betydningen av selve ordet, er en benchmark som lar oss sammenligne elementet som analyseres. Når det gjelder smarttelefoner, lar en benchmark oss sammenligne ytelsen til en smarttelefon. Men sannheten er at i dag er resultatene av benchmarkene langt fra virkeligheten, og de er ikke lenger nyttige for nesten hva som helst.
Sammenligning av smarttelefoner
Generelt, nesten alltid når vi analyserer en smarttelefon, gir vi dens seksjon til referansen, en test der en spesifikk poengsum oppnås, som er den som mer eller mindre anses å bestemme nivået på smarttelefonen, en slags målsetting vurdering av ytelsesnivået til denne smarttelefonen, men sannheten er at referansene er stadig mer nyttige for mindre. Ikke alt er hans feil, selve målestokkene, men rett og slett at det er ting som er umulige å beregne. Nivået til en smarttelefon kan ikke bestemmes av en enkelt referanse, så forskjellige referanser har dukket opp, for forskjellige komponenter av smarttelefonen, eller som analyserer ytelsen til telefonen med spill av en type, med spill av en annen, med videoer med visse egenskaper Andre har ansvaret for å analysere ytelsen til hele prosessoren, andre av de forskjellige kjernene... Problemet er at benchmarkene skal brukes slik at brukerne kan sammenligne nivået på smarttelefoner. Når vi i stedet for en benchmark har mer enn et dusin, og det viser seg at noen smarttelefoner i noen tilfeller er bedre og i andre er de dårligere, så ser det ikke ut til at det er veldig lett å trekke konklusjoner, selv om det var endelig mål.
Bedrifter kjenner referansene
Smarttelefonprodusenter ønsker å selge smarttelefoner. De vil at pressen skal snakke godt om smarttelefonene deres. Og hvis pressen i det siste snakker om benchmarks, så vil de at smarttelefonene deres skal få gode score i benchmarkene. For noen år siden var det Samsung som inkluderte funksjoner i programvaren til smarttelefonene sine slik at smarttelefonen oppnådde høyere ytelse ved kjøring av benchmark-tester, men ikke i normal drift. Dette er vanlig i verden av smarttelefoner og datamaskiner, faktisk. Referansemerkene, i dette tilfellet, var egentlig ikke nyttige for å bestemme nivået på smarttelefonen. Bedrifter kjenner målestokkene, og de vet hvordan de skal bruke dem, og i den situasjonen er de ikke lenger verdt noe.
Smarttelefoner endrer seg mye
Noe lignende har skjedd med den nyeste HTC One M9. En smarttelefon som nådde en høy temperatur ved utførelse av prosesser på høyt nivå som for eksempel benchmarks. Målingen av den temperaturen var også i seg selv en målestokk. Da HTC hevdet at det var ikke-endelig programvare, og endte opp med å gi ut slik programvare, var disse problemene over, og igjen, at temperaturdata ikke lenger var nyttige. Men sannheten er at smarttelefoner mottar en enorm mengde modifikasjoner i dag, modifikasjoner som noen ganger ikke oppfattes i referanseresultatene. Det samme har skjedd med HTC One M9, hvis benchmark-resultater ikke har blitt spesielt påvirket til tross for at nå sannsynligvis ikke når prosessoren et så høyt ytelsesnivå. Det er ikke klart om det var en stor optimalisering av HTC eller ikke. Men om det er det eller ikke, det som er klart er at det er noe referanseindeksen ikke vet.
Kun nyttig for å grovt bestemme nivået
Benchmarks i dag tjener ikke lenger til å sammenligne en smarttelefon nøyaktig. På grunn av det nevnte har vi til syvende og sist bare en ting igjen, og det er å kunne bestemme omtrentlig nivået på en smarttelefon i markedet, noe som alle kunne gjøre med kunnskap om noen av de tekniske egenskapene til smarttelefonen, som f.eks. sin prosessor, RAM-minne og skjerm. Den eneste virkelige nytten som vi nylig har funnet i benchmarkene, er i de smarttelefonene som deres egenskaper ikke er fullt kjent, og en score av disse i en benchmark kan gi oss en pekepinn på nivået på dette, selv om sannheten er at scoring er vanligvis ledsaget av tekniske spesifikasjoner, mye mer nyttig for å bestemme kvaliteten på en smarttelefon.
Personlige meninger er mer nyttige
Til slutt er det nysgjerrig hvordan det mest nyttige å sammenligne er personlig mening. Det er egenskaper ved en smarttelefon som ikke er avhengig av hastigheten eller tallene. Faktisk er tallene ikke annet enn menneskelige tilnærminger for å måle detaljer som vi oppfatter med mye mer komplekse sanser. Og nei, jeg har ikke samme oppfatning om smarttelefoner som mine kolleger på denne bloggen, eller redaktørene i andre medier, så meningene vil være forskjellige. Men når jeg sier at en mobil for meg er det beste som har blitt lansert med Android så langt, gir jeg et reelt faktum, og det er at jeg, og folk som meg, elsker akkurat den smarttelefonen over resten. Det vil være lesere som vil tenke det samme som meg, eller vil tenke annerledes enn meg, men selv sistnevnte kan bruke referansen som jeg har til å analysere smarttelefoner. Hvis de vet at jeg liker smarttelefoner som de ikke gjør, så vet de allerede at de smarttelefonene jeg velger, vil de ikke måtte velge. Til syvende og sist fungerer vi som en målestokk, vi begrenser oss til å sammenligne, med den forskjellen at vi ikke kan være like objektive som målestokkene i seg selv. Fordelen, ja, er at folk ikke begrenser oss til å sette tall, og vi lar oss ikke lure. Noen ganger liker vi noe, uten egentlig å vite hvorfor. Det eneste håpet som gjenstår for de av oss som er dedikert til å skrive, er at selv om vi ikke vet hvorfor, håper vi i det minste å vite hvordan vi skal forklare det.
