En bugg orsakade variationerna i Consumer Reports test av nya MacBook Pro

Consumer Reports kommer att göra en ny test av Apples nya MacBook Pro sedan det visat sig att en obskyr bugg kan ha orsakat variationerna i batteritestet.

Consumer Reports har använt sig av en funktion i Safari där cache-funktionen slås av i webbläsaren. En funktion som Apple nu hittat en bugg i.

Apple has just issued a software fix through its Beta Software Program to address an issue that arose when the company’s new MacBook Pro laptops were being tested in Consumer Reports’ labs. Although those computers performed well in tests of display quality, performance, and other factors, we found the battery life to be so variable on the models tested that we could not recommend them to consumers. In our tests of three different MacBook Pro models, we saw battery life results as long as 19.5 hours and as short as 3.75 hours.

Så långt Consumer Reports. 

“We appreciate the opportunity to work with Consumer Reports over the holidays to understand their battery test results. We learned that when testing battery life on Mac notebooks, Consumer Reports uses a hidden Safari setting for developing web sites whoch turns off the browser cache. This is not a setting used by customers and does not reflect real-world usage. Their use of this developer setting also triggered an obscure and intermittent bug reloading icons whoch created inconsistent results in their lab. After we asked Consumer Reports to run the same test using normal user settings, they told us their MacBook Pro systems consistently delivered the expected battery life. We have also fixed the bug uncovered in this test. This is the best pro notebook we’ve ever made, we respect Consumer Reports and we’re glad they decided to revisit their findings on the MacBook Pro.”

Appels uttalande

Landar

Så var landar då detta?

Consumer Reports gör sina tester med webbläsarens cache avslagen. Något som en vanligt användare knappast kommer att göra därför att det är rätt korkat. Det betyder nämligen att allt innehåll på en webbplats hämtas på nytt, varje gång du laddar sidan. Nu visar det sig att det fanns en bugg i den här funktionen som ledde till att ikoner laddades och hämtades på ett felaktigt sätt.

Därmed inte sagt att Consumer Reports test är korkad men gör du ett test på ett sätt som en vanlig användare sannolikt aldrig kommer att använda datorn på så kan du hamna snett. 

Nu finns en buggfix med i den betaversion som Apple just nu testar och så snart som buggfixen finns med i en skarp version av macOS så kommer Consumer Reports att göra om sin test.

Notera Apples uttalande där det sägs att när Consumer Reports gjorde om testet med, ska vi kalla det normala inställningar, så visade det sig att batterierna i de testade datorns fungerade så som Apple har sagt att de ska fungera. Notera också att de raderna i Apples uttalande inte tagits med på Consumer Reports egen webbplats.