Как Маркес Браунли выбрал лучший камерофон с помощью алгоритма Эло

Marques Brownlee 3,9 млн 14 мин 7 мин 21.12.2022
Главное

Известный технологический блогер Маркес Браунли провел масштабное слепое тестирование камер актуальных смартфонов, собравшее колоссальные 21 миллион пользовательских голосов за три дня. Вместо привычной субъективной оценки или классической кубковой сетки в этот раз использовался строгий научный подход и математический алгоритм рейтинга Эло. Результаты эксперимента не только выявили неожиданного лидера среди мобильных камер, но и наглядно продемонстрировали ключевые особенности восприятия мобильной фотографии обычными пользователями.

🔬 Новый подход к тестированию: от турнирной сетки к системе Эло 0:00

В прошлые годы Маркес Браунли устраивал слепые голосования в социальных сетях по системе прямого выбывания. Однако у кубковой сетки есть существенный недостаток: результаты сильно зависят от первоначального распределения пар. Блогер признался, что в прошлых тестах мог случайно столкнуть два сильнейших смартфона уже в первом раунде, из-за чего потенциальный серебряный призер выбывал в самом начале.

Чтобы исключить человеческий фактор и предвзятость, формат тестирования был полностью переработан. В эксперименте приняли участие 16 смартфонов, выпущенных за год: от главных дорогостоящих флагманов до моделей среднебюджетного и начального уровней. Команда проекта сделала три типа снимков на каждое устройство: стандартное фото при дневном свете, кадр в условиях низкой освещенности и портретный снимок. Для чистоты эксперимента все фотографии были сжаты, очищены от метаданных EXIF и зашифрованы случайными буквами.

Для составления объективного рейтинга требовалось сравнить каждое изображение со всеми остальными. Прямое сравнение всех пар потребовало бы от каждого участника проголосовать более сотни раз в каждой категории. Маркес Браунли и его команда нашли изящное решение, внедрив алгоритм рейтинга Эло, который традиционно применяется в шахматах, настольном теннисе и киберспорте. Пользователям веб-сайта случайным образом демонстрировались пары снимков, а система высчитывала динамический рейтинг каждого смартфона на основе побед и поражений в дуэлях.

📊 Масштабный сбор данных и личный тест ведущего 2:28

Перед официальным запуском платформа тестировалась в закрытом режиме. Первыми доступ к сайту получили участники премиальной зоны Discord-сервера Маркеса Браунли, запущенной на базе механизма серверных подписок. Блогер отдельно отметил выгодные условия платформы Discord для авторов контента, предлагающей распределение долей выручки в пропорции 90 на 10 в пользу создателя. Бета-тест позволил отладить экспорт данных, поступающих в текстовом формате, и подготовить систему к экстремальным нагрузкам.

До публикации официальных результатов Маркес Браунли прошел созданный тест вслепую, оценивая фотографии со смартфона в режиме обычного просмотра ленты социальных сетей. В его личном зачете лучшим дневным снимком стал кадр под буквой G, а в категориях ночной съемки и портрета победила буква K. После расшифровки данных выяснилось, что под литерой G скрывался Google Pixel 6A, а под литерой K — Google Pixel 7.

После публичного релиза сайт столкнулся с огромным наплывом посетителей. На пике активности система фиксировала около 35 000 голосов в минуту. За трое суток общая база данных превысила 21 миллион индивидуальных решений, при этом алгоритмы защиты не зафиксировали попыток массовых накруток или деструктивного поведения ботов.

🏆 Абсолютные победители и неожиданные провалы 5:19

Статистический анализ миллионов голосов позволил составить итоговый глобальный рейтинг смартфонов по средней оценке Эло во всех трех категориях съемки. Третье место занял компактный Asus Zenfone 9, серебро досталось флагманскому Google Pixel 7 Pro, а абсолютным триумфатором и обладателем «народной премии» стал относительно недорогой Google Pixel 6A.

Анализ данных показал, что стабильно высокое качество во всех сценариях является редкостью:

По мнению Маркеса Браунли, если признать дневную фотографию приоритетной и присвоить ей троекратный вес относительно других категорий, то именно Oppo Find X5 Pro стал бы победителем всего тестирования. Главный флагман Apple — iPhone 14 Pro — продемонстрировал средние результаты, заняв 6-е, 10-е и 5-е места соответственно.

Главными аутсайдерами голосования стали Sony Xperia 1 mark IV и Motorola Edge 30 Ultra. По словам блогера, смартфон от Sony, оснащенный передовым сенсором и сложнейшими профессиональными приложениями, в полностью автоматическом режиме выдает блеклые кадры, из-за чего занял последнее место по среднему баллу. Motorola Edge 30 Ultra поставила антирекорд по числу чистых поражений: аппарат выдал неестественно темный дневной снимок и избыточно резкую ночную фотографию, собрав против себя более двух миллионов голосов.

💰 Экономическая эффективность: лучшие камеры за свои деньги 7:41

Отдельным вектором исследования стало соотношение качества получаемых фотографий и официальной розничной стоимости устройств (MSRP). В категории «количество голосов на один доллар» безоговорочно победили два смартфона: Google Pixel 6A, набравший более 4200 очков на доллар, и Realme 10 Pro Plus, предлагающий отличную камеру при цене всего 379 долларов.

В то же время дорогие устройства показали худшую окупаемость. По мнению Браунли, покупка Motorola за 900 долларов или Sony Xperia 1 mark IV за 1600 долларов с точки зрения автоматических режимов съемки выглядит экономически неоправданной. Качество алгоритмов Google подтвердил исторический рекорд платформы: в портретной дуэли Pixel 7 Pro против флагмана Sony американское устройство забрало рекордные 98% всех пользовательских голосов.

🔍 Секреты алгоритмов: почему люди выбирали именно эти фото 8:44

Выстраивание всех фотографий в единый ряд по убыванию популярности позволило выявить психологические паттерны человеческого восприятия. Прошлые тесты показывали, что более яркий снимок чаще выигрывает у темного, однако масштабный эксперимент выявил четкую границу допустимого.

Три худшие дневные фотографии оказались критически недоэкспонированными — автоматика смартфонов полностью уничтожила детали в темных волосах Маркеса и текстуре его свитера. Сразу над ними расположились три чересчур ярких, откровенно пересвеченных кадра. Это доказывает, что идеальная экспозиция ценится выше всего, но если автоматика ошибается, массовый пользователь всегда выберет пересвеченный снимок, а не ушедший в глубокую тень.

В ночном режиме зафиксированы следующие особенности работы камер:

Худшим в ночном тесте стал базовый iPhone SE. Блогер подчеркнул, что данное устройство оснащено неплохим сенсором, оптической стабилизацией и современным процессором, однако Apple искусственно лишила модель ночного режима, чтобы защитить продажи более дорогих флагманов линейки, из-за чего аппарат полностью провалился при плохом освещении.

🎭 Портретный режим: битва за идеальное размытие 11:07

Портретная номинация оказалась самой сложной для оценки, поскольку пользователям приходилось одновременно анализировать резкость, цветопередачу, точность отделения объекта от фона и эстетику размытия (боке). Ситуация осложнялась тем, что производители используют разные фокусные расстояния по умолчанию — от стандартного широкого угла 1X до приближения в 2X, 2.5X или 3X.

Google Pixel 7 Pro стал абсолютным доминантом портретного режима благодаря безупречному балансу цветов, мягкому боке и четкому контуру. Второе место удерживает Pixel 6A, а третью строчку неожиданно занял бюджетный Realme 10 Pro Plus. При этом, по оценке Браунли, наилучшую и математически точную работу с краями объекта продемонстрировал Samsung Galaxy S22 Ultra, обошедший по качеству вырезания Asus Zenfone 9, но занявший итоговое четвертое место из-за общей цветопередачи кадра. Статистика опровергла гипотезу о том, что люди охотнее голосуют за портреты с телеобъективов (3X) — корреляции между фокусным расстоянием и числом голосов обнаружено не было.

📋 Главные выводы и итоги эксперимента 12:53

Подводя итоги масштабного исследования, Маркес Браунли выделил три ключевых правила современной мобильной фотографии:

  1. Универсальных камер практически не существует: победа в одном типе съемки не гарантирует высокие результаты в других сценариях.
  2. Рынок среднебюджетных устройств совершил колоссальный рывок. Pixel 6A и Realme 10 Pro Plus доказали, что за скромные деньги можно получить премиальное качество снимков. Победа Pixel 6A подтверждает преемственность алгоритмов Google, ведь в прошлом году аналогичный тест выиграл Pixel 5A.
  3. Стремление алгоритмов к высокой яркости оправдано коммерчески, но имеет свои пределы, за которыми начинается сильный пересвет и потеря лояльности аудитории.

Интерактивный сайт голосования vote.mkbhd.com останется активным до конца января следующего года. Команда приняла решение заменить зашифрованные буквенные индексы реальными названиями моделей смартфонов, чтобы каждый желающий смог наглядно проверить свои визуальные предпочтения и сравнить их с миллионным мнением интернет-пользователей.

💬 Цитаты

«Pixel 6A стал победителем по мнению обычных людей в 2022 году.»

Маркес Браунли 05:33

«Хорошая экспозиция побеждает, но если алгоритмы ошибаются, люди предпочитают слишком яркий снимок слишком темному.»

Маркес Браунли 09:35
👥 Спикер
🔗 Упомянутые сайты и проекты
📖 Термины
Рейтинг Эло
Метод расчета относительной силы игроков или объектов в играх, основанный на результатах парных сравнений.
EXIF-данные
Служебная информация и метаданные, сохраняемые внутри графического файла (модель камеры, дата, настройки экспозиции).
Боке
Характер и качество размытия элементов фона, оказавшихся не в фокусе на фотографии.
📊 Цифры
⚖️ Другая сторона
Технологии и IT Маркес Браунли Pixel 6A алгоритм Эло камера смартфона MKBHD