Бенчмарк тестовете са приложения, които подлагат устройството на серия проверки на тяхната производителност. Те се смятат като лесен начин да се провери на какво е способен даден компютър, таблет, смартфон и редовно се използват за ревюта и за сравнения между конкурентите, а не малко потребители разчитат в голяма степен на резултатите от тестовете в избора си на покупка.

Още през юли т.г. онлайн изданието AnandTech обяви, че Samsung Galaxy S4 разполага със специален режим на работа, който се активира при пускането на бенчмарк тест. Той му позволява да изкарва по-добри резултати, отколкото са реалните възможности на смартфона в обикновени ситуации от ежедневието. Тогава Samsung отрече обвиненията и обяви, че телефонът сам преценява необходимите от дадено приложение ресурси и му ги осигурява.

Изданието изглежда е останало недоволно от отговора на Samsung и е прекарало следващите месеци в мащабни тестове на множество различни смартфони, три таблета и конзолата Nvidia Shield. Резултатите му показали, че преобладаващата част от устройствата имат специални режими за бенчмарк тестове, които активират моментално при включването им

Устройствата разполагат с такива режими само за някои от седемте най-популярни бенчмарк теста. Единствено Motorola Moto RAZR i, Moto X, Google Nexus 4, Nexus 7 и Nvidia Shield нямат специални режими за който и да е от тестовете.

Останалите тествани устройства са Asus Padfone Infinity, HTC One, HTC One mini, LG G2, Galaxy S4, Galaxy Note 3, Galaxy Tab 3 10.1 и Galaxy Note 10.1 2014. Всички те имат оптимизации за различни бенчмаркове, като единствено за популярния тест AnTuTu всички устройства имат специален режим.

Това поставя под сериозен въпрос доколко може да се вярва на тестовете за производителност. Тази дискусия се води от доста време и като цяло е разделена на две страни: едната, която смята, че тестовете са важни за определяне на способностите на устройствата и друга, която е на мнение, че тестовете разглеждат идеални ситуации и не могат да се сравняват с ежедневната работа с устройствата.

Разбира се, производителите също не са особено доволни от обвиненията. В отговор на паралелен тест на онлайн изданието Ars Technica, Samsung отново обяви, че Galaxy Note 3 оптимизира производителността си за всички приложения, които изискват повече ресурси. В това число попадат и бенчмарковете, но и много други приложения и не е опит за преувеличение на спосоностите на устройството, коментират от Samsung пред онлайн изданието CNET. Другите компании все още не са коментирали темата.

Междувременно създателите на бенчмарка AnTuTu обявиха, че ще пуснат нова версия на своя тест. Тя ще е преработена така, че да не позволява на устройствата да активират оптимизираните си режими и тестовете да се правят на базата на обикновените ежедневни настройки, които използват.