Därför ska du inte tro på benchmarks

av | jan 26, 2022

⏱ Ca 3 minuter att läsa

De kallas benchmarks, tester med hjälp av mjukvara för att ta fram ett resultat för att kunna jämföra exempelvis datorer, mobiltelefoner och surfplattor med varandra. Det är i högsta grad teoretiska värden som mäts fram men som inte alltid, rätt sällan, säger något huruvida en produkt faktiskt är snabb, effektiv och användbar.

Journalister, teknikskribenter, tycks älska benchmarks därför att de kan de enkelt skapa ett motsatsförhållande, en slags konflikt exempelvis mellan Intel och Apple. Någon torde ju rimligen vara den som har den snabbaste processorn, de snabbaste grafikkort eller vad det nu kan vara så då körs restprogram på prylarna och sedan ställs siffrorna mot varandra.

Teoretiska värden

Det finns dock ett problem med benchmarks – det är teoretiska värden som inte säger något annat än att en viss produkt kan utföra vissa beräkningar på en viss tid.

Benchmarks visar inte hur väl optimerat ett program är för den plattform som det används på eller körs under. Benchmarks visar inte hur väl designat ett program är, hur lätt det är att använda och hur effektiv du som användare kan vara.

Nya salt

Därför ska du ta alla benchmarks med en nypa salt och för egen del kan jag tycka att de är intressanta i ett enda sammanhang – för att jämföra en ny produkt med föregångaren. Hur mycket snabbare är MacBook Air M1 i en jämförelse med den senaste modellen av MacBook Air Intel – för att ta ett exempel.

Just nu så fylls bloggar och teknisk tidskrifter med uppgiften om att Intels nya processor Alder Lake är snabbare än Appels M1-kretsar. Det som inte alltid framgår är att Intels nya processor drar långt mycket mera ström, blir långt mera varm och att det sammantaget gör att den inte är lika effektiv. Du kan mäta fram bättre benchmarks-siffror men i verkligheten, ute bland användare så betyder det att Intels nya processor inte kan arbeta med högsta kapacitet hela tiden därför att den antingen blir för varm alternativt att batteritiden tar slut.

Försvar

Tolka nu inte detta som ett försvar för Apple, det är det inte. Min poäng är att tester, rena benchmarks inte är hela sanningen, tvärtom så ligger testresultaten ganska långt från sanningen om vi med det menar vår tekniska vardag. Med det sagt – tro inte att din dator kommer att vara snabbast, eller snabbare än en annan dator, bara för att du köper den dator med de bästa siffrorna. Du måste väga samman tre delar:

  • Hårdvara
  • Operativsystem
  • Mjukvara

Benchmarks visar på en del – hårdvaran.

Därför ska du inte lita blint eller för mycket på benchmarks.


Mikael Winterkvist

Fyrabarns-far, farfar, morfar och egen företagare i Skellefteå med kliande fingrar. Jag skriver om fotografering, sport, dataprylar, politik, nöje, musik och film. Vid sidan av den här bloggen så jobbar jag med med det egna företaget Winterkvist.com. Familjen består av hustru, fyra barn (utflugna) och fem barnbarn.

Jag har hållit på med datorer sedan tidigt 1980-tal och drev Artic BBS innan Internet knappt existerade. Efter BBS-tiden har det blivit hemsidor, design, digitala medier och trycksaker. Under tiden som journalist jobbade jag med Mac men privat har det varit Windows som har gällt fram till vintern 2007. Då var det dags att byta och då bytte vi, företaget, helt produktionsplattform till macOS. På den vägen är det.

_____________________________________________________________________________________

Anmäl dig till Magasin Mackens nyhetsbrev

Du får förhandsinformation om Macken, våra planer och du får informationen, först och direkt till din mail. Vi lovar att inte skicka din information vidare och vi lovar att inte skicka ut mer än max ett nyhetsbrev per månad.

Anmäl dig här

_____________________________________________________________________________________

Magasin Macken använder AI för att samla in information och underlag för de texter som publiceras. Vi använder även AI för att skapa bilder och illustrationer. Dessa märks alltid med att det är AI-bilder om bilderna är fotorealistiska. I förekommande fall så läggs även till länkar till källa och referenser till i texterna som alltid kontrolleras av en mänsklig skribent - som är den som skriver och redigerar alla texter till alla väsentliga delar.

Vill du kommentera den här texten, komma med förslag, kritik eller ställa frågor så gör du det enklast i något av de sociala medier som jag och Magasin Macken finns med i. Länkarna hittar du nedan.

  • Facebook
  • Instagram
  • Bluesky
  • Threads
  • Mastodon
  • LinkedIn
  • YouTube
  • Vimeo
  • Twitter
  • RSS
  • E-Mail

De senaste inläggen:

Streamingtoppen just nu: Spänning och storfilmer dominerar

Streamingtoppen just nu: Spänning och storfilmer dominerar

Svenska tittare väljer just nu en blandning av nervpirrande dramatik och efterlängtade storfilmer på de digitala plattformarna. Listorna visar en tydlig trend där både nya originalserier och internationella kioskvältare lockar storpublik. Under den aktuella veckan klättrar flera färska titlar snabbt…

läs mer