Как вести таблицу тестов, чтобы через месяц понимать, что реально работает

В арбитраже трафика недостаточно запустить несколько рекламных кампаний, сравнить количество лидов и оставить вариант с самой низкой стоимостью конверсии. Без системного учета легко перепутать случайный всплеск продаж с устойчивым результатом, потерять информацию о настройках связки и повторно потратить бюджет на гипотезы, которые уже проверялись. Таблица тестов должна показывать не только расходы и доходы, но и то, какие изменения проводились, на какой выборке получены результаты, почему принято решение остановить или масштабировать кампанию и можно ли воспроизвести успешную конфигурацию. Если заполнить ее правильно, через 30 дней можно определить наиболее перспективные GEO, источники, креативы, аудитории и лендинги, а также увидеть причины неудачных запусков. Главная задача такого документа — превратить разрозненные наблюдения в накопленную базу данных, которая помогает принимать решения на основании цифр, а не памяти и субъективных впечатлений.

Какие данные необходимо фиксировать в таблице тестов

Структура таблицы должна позволять восстановить ход эксперимента даже спустя несколько недель, когда первоначальные настройки уже забылись, а рекламный кабинет содержит десятки похожих кампаний. Для начала удобно использовать Google Sheets или Microsoft Excel: обе программы позволяют применять фильтры, формулы, сводные таблицы и условное форматирование без разработки отдельной системы аналитики. Для каждого теста необходимо создавать уникальный ID, например T-026, и связывать его с конкретной гипотезой, источником трафика, GEO, оффером и версией креатива. Если в одной кампании одновременно меняются аудитория, заголовок, посадочная страница и модель оплаты, определить причину изменения результата практически невозможно, поэтому в одном эксперименте желательно менять один ключевой фактор при сохранении остальных условий.

Рабочую таблицу лучше разделить на несколько логических групп: идентификация теста, настройки запуска, показатели трафика, экономика, техническое качество данных и итоговое решение. Важно отдельно записывать дату старта, дату окончания, часовой пояс рекламного кабинета и период атрибуции, поскольку статистика за последние сутки может еще не включать подтвержденные конверсии. Для финансовых расчетов нужно фиксировать валюту расходов и доходов, а также использовать единый принцип пересчета курсов, чтобы сравнение кампаний не искажалось колебаниями валют. Рядом с каждой гипотезой полезно указывать ожидаемый эффект и критерий успеха до запуска: например, проверить, снизит ли новый первый экран лендинга стоимость подтвержденного лида минимум на 15% при сопоставимом объеме трафика.

• ID теста, дата запуска, дата остановки, ответственный специалист и статус эксперимента;
• Источник трафика, GEO, устройство, оффер, целевая страница, рекламная кампания и версия креатива;
• Показы, клики, расходы, CTR, CPC, количество лидов, подтвержденные конверсии и доход;
• Период атрибуции, окно конверсии, модель оплаты, валюта и дата последнего обновления статистики;
• Формулировка гипотезы, критерий успеха, итоговое решение и ссылка на исходные данные.

Для удобства стоит завести отдельный справочник креативов, лендингов и офферов, присваивая каждому варианту постоянный идентификатор, например CR-014 для объявления и LP-006 для посадочной страницы. В основной таблице тогда достаточно указывать ID и ссылку на исходный файл, скриншот или архив настроек, вместо того чтобы копировать длинные описания в каждую строку. Названия кампаний лучше строить по единому шаблону: дата, GEO, источник, оффер, аудитория и номер варианта, например 261029-PL-META-OFFER7-BROAD-02. Такая система облегчает поиск результатов, исключает путаницу между похожими объявлениями и позволяет восстановить связку даже после переименования кампании в рекламном кабинете.

Как рассчитывать показатели и сравнивать результаты без ошибок

Основная ошибка начинающих арбитражников заключается в том, что они оценивают тест по одному показателю, чаще всего по CTR или количеству лидов. Высокий CTR показывает, что объявление привлекает внимание, но сам по себе не доказывает, что аудитория готова совершать целевое действие и приносить доход. Аналогично низкий CPC может оказаться бесполезным преимуществом, если переходы не конвертируются или привлеченные пользователи не проходят подтверждение рекламодателя. Поэтому таблица должна автоматически рассчитывать несколько взаимосвязанных метрик и позволять проследить всю цепочку от показа объявления до фактически полученного дохода.

Для базового анализа достаточно настроить формулы в Google Sheets или Excel и протягивать их на все новые строки. CTR рассчитывается как отношение кликов к показам, CPC — как расходы, разделенные на количество кликов, а CPA — как расходы, разделенные на число целевых конверсий. Если рекламодатель оплачивает только подтвержденные лиды, в знаменателе CPA должны стоять именно подтвержденные лиды, а не все отправленные заявки. ROI показывает отношение прибыли к расходам, тогда как ROAS сравнивает полученный доход с рекламными затратами; эти показатели нельзя считать взаимозаменяемыми, поскольку они отвечают на разные вопросы.

• CTR = клики / показы × 100% — помогает оценить привлекательность объявления относительно количества показов;
• CPC = расходы / клики — показывает среднюю стоимость перехода на посадочную страницу;
• CR = конверсии / клики × 100% — отражает долю посетителей, выполнивших целевое действие;
• CPA = расходы / целевые конверсии — показывает стоимость получения одной конверсии выбранного типа;
• Прибыль = доход − расходы, а ROI = прибыль / расходы × 100% — помогает оценить финансовый результат относительно затрат.

Рассмотрим условный пример двух рекламных тестов в одном GEO и с одинаковым оффером. Первый вариант потратил 200 долларов, получил 1 000 кликов и 20 подтвержденных лидов с доходом 12 долларов за каждый, поэтому выручка составила 240 долларов, прибыль — 40 долларов, а ROI — 20%. Второй вариант израсходовал 150 долларов, получил 600 кликов и 18 подтвержденных лидов с той же выплатой, обеспечив выручку 216 долларов, прибыль 66 долларов и ROI 44%. Во втором случае CPA составляет около 8,33 доллара против 10 долларов у первого варианта, поэтому при сопоставимом качестве лидов он выглядит экономически привлекательнее, хотя абсолютный объем выручки ниже.

Однако сравнение нельзя завершать только расчетом итогового ROI, поскольку разница может объясняться размером выборки, задержкой конверсий или различиями в качестве аудитории. Если один вариант получил 20 лидов, а другой — 18, этих данных недостаточно для уверенного вывода о небольшом преимуществе одной креативной концепции. Следует учитывать стоимость теста, доступный бюджет, длительность наблюдения и типичные колебания конверсии, а также проверять, одинаково ли учитываются отмененные и неподтвержденные заявки. Для дорогих или редких конверсий особенно важно заранее определить минимальную выборку и срок наблюдения, иначе тесты будут завершаться слишком рано, а решения окажутся зависимыми от случайных событий.

Как организовать тестирование гипотез и принимать решения

Таблица приносит пользу только в том случае, если результаты тестов приводят к конкретным действиям. До запуска необходимо записать, какое предположение проверяется, какие параметры остаются неизменными, сколько средств допустимо потратить и по каким правилам будет приниматься решение. Например, гипотеза может звучать так: «Новый заголовок повысит конверсию лендинга с 2,0 до 2,4% при неизменных источнике, аудитории и оффере». Такой подход отличается от формулировки «попробуем другой заголовок», потому что задает измеримый результат и не позволяет после получения статистики произвольно менять критерии успеха.

Для каждого теста полезно предусмотреть несколько статусов: «Запланирован», «Запущен», «Недостаточно данных», «Успешен», «Неуспешен», «Нужна проверка» и «Масштабирование». Статус «Недостаточно данных» необходим, когда кампания пока не набрала заданную выборку или часть конверсий еще не успела пройти атрибуцию. «Неуспешен» означает, что тест достиг заранее установленного условия остановки и не показал требуемой экономики, а «Нужна проверка» указывает на проблемы с пикселем, постбэком, метками или расхождениями между рекламным кабинетом и трекером. Не следует отмечать кампанию успешной только потому, что она принесла несколько конверсий: решение должно опираться на финансовые показатели, качество событий и заранее определенные ограничения риска.

• Сформулируйте одну проверяемую гипотезу и заранее запишите ожидаемое изменение показателя;
• Определите основной KPI, допустимую стоимость теста, срок наблюдения и минимально приемлемую экономику;
• Зафиксируйте исходные настройки, версию креатива, параметры аудитории и ссылку на посадочную страницу;
• Проверяйте корректность отслеживания событий, расходов и конверсий до того, как увеличивать бюджет;
• После завершения запишите решение, фактические цифры, возможные ограничения и следующий эксперимент.

При сравнении нескольких вариантов желательно менять по одному ключевому фактору и по возможности запускать их в сопоставимых условиях. Если новый креатив тестируется в понедельник, а старый — в выходные, результат может отражать различия в поведении аудитории или аукционе, а не качество объявления. При тестировании посадочных страниц стоит сохранять одинаковые источник, оффер, аудиторию и правила атрибуции, а распределение трафика по вариантам делать максимально сопоставимым. Если рекламная платформа самостоятельно перераспределяет бюджет между объявлениями, это нужно учитывать при интерпретации результатов, поскольку варианты могут получить существенно разный объем трафика.

Для принятия решения можно использовать заранее установленную систему порогов, но ее параметры должны зависеть от экономики оффера и допустимого риска. Например, если предельный CPA равен 12 долларам, тест можно остановить после расхода 36 долларов без конверсий, если такой лимит соответствует внутренним правилам и ожидаемой вероятности получения лида; это не универсальный статистический закон, а выбранное ограничение потерь. Если CPA ниже целевого уровня, но конверсий мало, правильнее оставить статус «Недостаточно данных» и продолжить наблюдение в пределах установленного бюджета. При увеличении расходов следует отдельно проверять, сохраняются ли CPA и качество лидов, поскольку результаты небольшой тестовой аудитории не всегда воспроизводятся на большем объеме.
Разместить вакансию