В этой статье мы собрали ответы на самые популярные вопросы пользователей о работе А/В тестов. Этот материал поможет вам разобраться в технических нюансах .
Одновременный запуск тестов в Sellego и на WB строго запрещен. Это приведет к тому, что слайды будут меняться хаотично сразу с двух сторон, что полностью исказит результаты.
Общий лимит А/Б тестов - 100, но с одним артикулом одновременно можно запускать только один тест. Если нужно протестировать, например, 20 фото, сначала запустите тест с 10 изображениями, дождитесь его завершения, а затем запустите второй тест с оставшимися 10. Так вы соблюдаете ограничения и проверяете все варианты по порядку.
Именно через рекламные кампании система подгружает список доступных товаров для теста. Без привязки к рекламной кампании интерфейс создания теста не сможет отобразить ассортимент, что сделает невозможным выбор товаров для тестирования и запуск теста.
Какой тип кампании можно использовать для теста?
Тип кампании (Единая ставка, Ручная ставка СРМ или CPC) не имеет значения - тест можно запустить в рамках любой РК.
РК может быть приостановлена без влияния на тест: после возобновления кампании тестирование также автоматически возобновится.
Алгоритм работает по принципу временных интервалов: каждое изображение демонстрируется аудитории в течение 30 минут. Это необходимо для того, чтобы алгоритм мог собрать объективные данные и сбалансировать статистику при следующих показах.
Для обеспечения максимальной беспристрастности система может временно приоритизировать те варианты, которые набрали меньше охвата. Такая механика позволяет распределять трафик максимально справедливо, не допуская ситуации, когда одни фото показываются только в часы максимального спроса, а другие - в периоды низкой активности пользователей. Это гарантирует, что каждое фото не будет иметь перекосов на более "горячие" периоды в течение дня.
Минимальный порог показов (например, 1000) устанавливает минимальное количество показов, которое должно быть достигнуто карточкой. Важно понимать, что это не означает мгновенное прекращение показа варианта изображения после достижения указанного числа.
Как это происходит:
Таким образом, вариант не "исчезает" моментально, а лишь перестает быть активным участником в последующих ротациях.
Фото, набравшее нужное число показов, нельзя удалить, так как оно уже завершило участие в тесте и зафиксировано в результатах. При этом любые другие снимки, которые еще находятся в ротации и не набрали лимит просмотров, можно удалять свободно.
Во время тестирования происходит автоматическая замена изображений. Если у товара есть видеообложка, она будет удалена. Видеообложка появится снова только в случае, если текущее изображение займет победное место по итогам теста. Если же победит один из других вариантов изображения, потребуется загрузить видеообложку заново вручную.
В результатах теста учитывается ли только поисковая выдача и какие фразы влияют на итоговое значение?
Статистические метрики в А/Б-тестах отражают все источники трафика, а не только поисковую выдачу (зависит от типа РК и активных зон показов). Для анализа используются суммарные показатели по всей кампании, вне зависимости от того, какие конкретно зоны показов в ней были включены.
Если для проведения А/Б-теста указан артикул, который участвует в кампании совместно с другими товарами, будет ли статистика усредняться по всем артикулам?
Нет, статистика не усредняется. Поскольку маркетплейс предоставляет данные по каждому артикулу отдельно, в А/Б-тесте отображаются показатели конкретного тестируемого товара, а не общие данные по всем артикулам.