Ошибка целевого рейтинга: числитель — по целевой аудитории, знаменатель — по всем

Целевой рейтинг (TRP) — это доля: зрители из целевой аудитории, делённые на размер этой же аудитории. Нарушьте вторую половину — числитель по целевой аудитории, а знаменатель по всему населению, — и вы не получите ни TRP, ни GRP. Вы получите отношение со смешанной базой, а у смешанной базы нет определения.

Мы разобрали достаточно таких расхождений, чтобы знать закономерность. Отчёт складывается верно, проценты сходятся, а с эталонной таблицей всё равно не совпадает. Дело почти никогда не в данных и не в методике измерения. Виновата одна строка в слое расчётов.

Почему смешанная база ломает саму метрику

Рейтинг — это пропорция, а у пропорций есть одно жёсткое правило: тот, кто задаёт числитель, задаёт и знаменатель. Возьмите зрителей «женщины 25–54» и разделите на генеральную совокупность в 2 295 613 человек — результат не с чем сравнить. Ни с целевым планом, ни с общим охватом, ни с кампанией прошлого квартала. Такая база не воспроизводится больше нигде.

Опасность в том, насколько обыденно это выглядит. Цифра попадает в правдоподобный диапазон и месяц за месяцем считается одинаково. Ничего не сигналит. Проблема всплывает только при сверке с внешним источником — а это происходит поздно.

Насколько велика ошибка? Решает affinity

Разрыв не случаен. Зависимость прямая:

Affinity показывает, насколько плотнее целевая аудитория смотрит размещение по сравнению со средним по населению. При affinity 200 целевая аудитория смотрит вдвое плотнее, и подмена знаменателя сдвигает результат ровно в два раза.

Это серьёзнее, чем звучит. Речь не о паре процентов, которые можно списать на округление или разницу версий данных. Это кратный сдвиг, и почти всегда в выгодную сторону. Чем точнее таргетинг, тем выше affinity — и тем красивее план. Аналитик с этой ошибкой в расчётах получает наибольшую «награду» именно за самую точную работу по таргетингу.

Второй путь к той же ошибке: усреднение дней в недели

Тот же дефект приходит с другой стороны, когда дневные показатели сворачивают в недельные. Возьмите среднее арифметическое дневных процентов — и база незаметно поплывёт: у каждого дня своя, а неделе нужна одна общая. Усреднение процентов выглядит безобидно. На деле это усреднение дробей с разными знаменателями, и результат снова не описывает никакую конкретную группу людей.

Поэтому в TV Budgeting и TV Planner многодневная агрегация взвешена по генеральной совокупности, а Reach & Frequency считается по людям, а не по долям. Охват вообще нельзя собрать из процентов: чтобы посчитать, сколько разных людей увидели кампанию, нужно работать с самими людьми.

Как мы это проверяли: сверка по ячейкам

Мы проверили это в лоб: воспроизвели официальную таблицу аудитории ячейка за ячейкой.

• 60 858 ячеек в таблице
• 21 548 ненулевых ячеек, все совпали с точностью до 0,5 человека
• 17 из 17 демографических срезов

Важна здесь не аккуратность совпадения, а то, что она доказывает. Все срезы могут сойтись одновременно только тогда, когда числитель и знаменатель в каждом из них описывают одних и тех же людей. Стоит подменить генеральную совокупность хотя бы в одном месте — и любой срез, чей affinity заметно отличается от 100, сразу разойдётся. Сверка по ячейкам — это проверка согласованности базы, только в костюме проверки точности.

Мы воспроизводим цифры Nielsen, а не переосмысливаем их. Эталонная таблица — судья, и наша задача — попасть точно в неё. Nielsen публикует определения аудиторий, на которые опирается индустрия при планировании; Media Rating Council поддерживает стандарты аккредитации, которым должны соответствовать эти измерительные сервисы.

Проверка за одну минуту

Попросите указывать размер базы рядом с каждым процентом. Если таблица по целевой аудитории и таблица по всему населению показывают одну и ту же базу — перед вами гибрид, и сравнивать пока нечего, пока расчёт не пересобран. Смежные проверки — лестницы скидок, разбивка по прайму, длительности роликов, пост-бай — вынесены в чек-лист для софта закупки.

В целевых рейтингах ошибка редко кроется в измерении. Она кроется в базе. Подписанная генеральная совокупность рядом с каждым процентом стоит дешевле любой сверки постфактум — и снимает большинство споров о том, чей отчёт верен.