ИИ-инструмент System1 совпал с оценками живых тестировщиков в 9 из 10 роликов, отказался оценивать худший

13 сентября 2026 · thedrum.com

Andrew Tindall, руководитель отдела роста в System1, протестировал десять известных роликов для ИИ-брендов через инструмент компании Test Your Ad Screen и сверил его вердикты с уже имевшимися у System1 данными тестирования с участием живых людей по тем же роликам. ИИ совпал с человеческим Fluency Rating по всем десяти роликам и попал в верный диапазон Star Rating по девяти из них. Единственный промах случился из-за отказа: получив на вход ролик Claude «Can I Get a Six Pack» для Super Bowl, который получил самую низкую возможную оценку у живых тестировщиков, инструмент отказался выставлять оценку. Он верно определил самые слабые ролики в подборке: кампанию Otter.ai, ролик ChatGPT для Super Bowl, вышедший до смены позиционирования, и ролик Apple о переписывании писем, все три получили одну звезду от живых людей. Также верно выбрал два самых сильных ролика: рождественский ролик Coca-Cola, созданный ИИ, и ролик Google Gemini «Dream Job», набравшие 5 звезд и 3.1 звезды соответственно. Точнее определить позицию оказалось сложнее для запуска Samsung Galaxy S26 и кампании Meta x Ray-Ban: ИИ смог лишь сузить оценку ролика Samsung до «не 1 звезда», а ролика Meta до нижних 40% роликов.

Бюджеты на предварительное тестирование креативов теперь могут проходить через автоматизированный первый этап проверки, прежде чем переходить к дорогостоящим панелям с участием живых людей, при условии что используемый инструмент умеет признавать, когда он не уверен в оценке. Tindall ссылается на исследование NYU Stern и Emory, которое показало, что ИИ-ролики опережали ролики, созданные людьми, до 19% в контролируемых тестах, причем этот отрыв сокращался на 31.5% после того, как становилось известно об участии ИИ, как на доказательство того, что потребители редко замечают или обращают внимание на то, как был создан ролик. Медиакоманды, оценивающие растущие объемы креативов, созданных с помощью ИИ, могут использовать такие инструменты, как Test Your Ad Screen, чтобы отбирать, какие ролики заслуживают полноценного тестирования с участием людей, при этом то же исследование предупреждает, что прогнозы ИИ дают сбой именно там, где креатив наиболее нестандартен, то есть в роликах, у которых больше всего шансов продвинуть бренд вперед.