Вопросы
Что такое "сравнимые показы" и "сравнимые клики" в статистике?
Точность - пожалуй, самый важный параметр в А/Б-тесте. Использование обычной статистики РК (общего количества показов/кликов) здесь не подходит, потому что фразы, по которым идут показы РК, постоянно меняются / добавляются / исключаются, как по желанию ВБ, так и во время работы с РК. У каждой фразы своя конверсионность, поэтому сравнения конверсионности различного набора фраз - это сравнение яблок с апельсинами. Скажем мягко - результаты таких тестов часто удивляют :)
Поэтому e-Comet осуществляет сравнение только по общему семантическому ядру - набору кластеров, по которым были показы у всех тестируемых фото. Это требует больше времени (часть показов отфильтровывается как несравнимые), но дает существенно более точный результат.
Какие ограничения накладываются на продвижение и на товар во время теста?
Главное - без резких движений. Не входите / выходите из акций, следите за остатками, не меняйте ставку в разы. Нормальная работа с продвижением артикула не мешает проведению А/Б-тестов.
Единственное ограничение - продвижение должно осуществляться через e-Comet. А/Б-тесты совместимы как с ручным продвижением, так и через автопилот.
Как выбрать РК для теста?
Подходят оба типа РК - и Авто и Аукцион. Тесты работают одинаково точно, так что используйте ту РК, где у вас больше поискового трафика (обычно это Авто) - по ней быстрее будет идти накопление статистики.
Почему смена фото происходит только 1 раз в сутки?
Статистика ВБ внутри дня неточная (информация проверенная, от разработчиков ВБ):
- Показы / клики могут запаздывать на 30-60 минут
- Все, что ниже по воронке (корзины, заказы) может запаздывать на несколько часов
Таким образом, атрибуция метрик к фото также будет неточной в течение дня. Единственный правильный и надежный метод для получения качественных данных - это использовать итоговую статистику по результатам полного дня, которая становится доступна на следующий день.