3DMark удалила результаты RedMagic 11 Pro из своей базы данных за нарушение правил

Платформа для тестирования производительности 3DMark удалила результаты для смартфонов RedMagic 11 Pro и RedMagic 11 Pro+ из своей базы данных.

Согласно сообщениям, записи об обоих устройствах были удалены, потому что производитель не соблюдал правила во время тестирования. Проблема заключается в том, как телефоны обрабатывают ограничения производительности при запуске бенчмарков.

В 3DMark заявили, что устройства ведут себя иначе, когда обнаруживают их тесты. В частности, сообщается, что телефоны снимают обычные ограничения по энергопотреблению и температуре во время работы бенчмарка. Это позволяет чипсету работать на необычно высоком уровне без троттлинга, даже при росте температуры.

С точки зрения 3DMark, это создает результаты, которые не отражают типичное реальное использование. Правила платформы разработаны для того, чтобы оценки представляли производительность, которую пользователи могут ожидать в обычных условиях, а не в специальном тестовом режиме. Из-за этого результаты были классифицированы как нарушение и удалены.

Ответ Nubia

Бренд Nubia, стоящий за серией RedMagic, ответил, защищая свой подход.

В заявлении для Android Authority компания заявила, что ее устройства созданы для «высокопроизводительных впечатлений», особенно в требовательных игровых сценариях, и включают несколько режимов производительности, которые пользователи могут активировать. Компания специально указала на функцию под названием «Режим Диабло» (Diablo Mode), которая предназначена для выжимания максимума из аппаратной части при высоких нагрузках.

Компания также заявила, что бенчмаркинг следует рассматривать как «индикатор потенциала производительности устройства в контролируемых условиях высокой нагрузки», добавив, что результаты могут различаться в зависимости от системных настроек и использования.

Другими словами, Nubia утверждает, что оценки отражают то, на что способно железо, даже если такой уровень производительности не всегда активен по умолчанию.

Неудивительно видеть, что бренд оптимизирует конкретные приложения для лучшей работы — это на самом деле хорошо. Но в случае с бенчмарк-приложениями этого происходить не должно, так как это считается манипуляцией с оценками.