Как читать результаты A/B-теста фото

Результаты собраны на странице теста. По ним видно, какое фото покупатели выбирали чаще. Ниже разобрано, что значит каждая строка и как понять, что тест завершён.

Статусы теста

Статус стоит в списке и на странице теста. Значения такие:

• Идёт тест работает, фото меняются по расписанию.
• Завершён тест закончился: срок вышел, вы остановили его или нашли победителя. Причина написана на странице.
• Черновик тест создан, но не запущен. Деньги не списаны.
• Запускается сервис создаёт кампанию и запускает рекламу.
• Завершается реклама остановлена, последний снимок статистики ещё ждём.
• Ошибка шаг запуска или смены фото не прошёл. Причина написана на странице теста.

Итог на завершённом тесте

Когда тест завершён, итог показан сверху страницы.

1. Статус теста справа от названия.
2. Плашка с итогом: тест завершён, победитель ясен.
3. Строка с победителем: какое фото выиграло, его CTR, шанс быть лучшим и на сколько CTR выше исходного.

Таблица по фото

Каждый столбец это одно фото. Главные строки читаются так:

1. CTR доля кликов от показов, в процентах. Если CTR 4,63 %, на каждые 100 показов пришлось 4,63 клика.
2. Шанс быть лучшим вероятность, что фото действительно лучше остальных по CTR, а не обогнало их случайно. Учитываются и CTR, и число показов. Шанс считается от 300 показов.
3. Победитель сколько полных кругов фото выиграло по CTR из тех, где участвовало. Круг это каждое фото по одному разу. Строка наглядная, но тест решает по шансу быть лучшим.

Остальные строки такие. «Результат» показывает, на сколько процентов CTR фото ниже лучшего. «Отклонение CTR от лучшего» показывает разницу в процентных пунктах. «Показы» и «Клики» это сколько раз фото показали и сколько раз на него нажали. «Корзины и заказы» две цифры: сначала корзины, потом заказы. «Потрачено» и «Цена клика» расход на фото и стоимость одного клика.

Сверка с Wildberries

Под таблицей есть блок «Сверка с Wildberries». Он показывает, сколько показов и кликов насчитал Wildberries с запуска теста, и сколько из этого разнесено по фото.

1. «Всего по WB» всё, что Wildberries насчитал с запуска теста.
2. «В итогах по фото» сколько уже разнесено по фото.
3. «Не засчитано» разница между первым и вторым числом. Это окна, которые в итоги не вошли.

Окна

Тест делит время на окна. Окно это один период, когда фото стояло главным. Закрытое окно засчитывается, когда статистика за него пришла. Окна перечислены в блоке «Окна» под сверкой.

1. Открытое окно статистика ещё идёт, цифр пока нет.
2. Засчитанное окно фото показано, цифры вошли в итоги.
3. Колонка «Итог» показывает, засчитано окно или нет.

Частые проблемы

Кнопка «Повторить тест» на завершённом тесте создаёт черновик с теми же фото. Запуска при этом не происходит, и деньги не списываются.

Смотрите также

• Что такое A/B-тест фото
• Как запустить A/B-тест фото