Тестирование обложек?
Настоящего A/B здесь нет и быть не может. Показать двум покупателям
разные обложки одной карточки площадка не даёт никому, кроме себя самой —
у Ozon для этого есть встроенные «Мои исследования». Снаружи остаётся
чередование во времени: обложка стоит отрезок, потом её сменяет другая,
и сравниваются отрезки.
Почему это работает хуже сплита. В разные отрезки разная погода:
сезон, акции площадки, чужие цены. Поэтому смотреть надо не на «стало
больше», а на размер прибавки и на то, набралось ли показов, чтобы её
вообще было видно.
Сколько нужно показов. Смена главного фото двигает CTR на три
десятых — восемь десятых процентного пункта. Чтобы отличить такую прибавку
от колебания, нужны десятки тысяч показов на вариант. Портал считает это
заранее и говорит, годится товар для замера или нет.
Судить только по CTR нельзя. Обложка, поднявшая переходы и уронившая
корзины, обещала не то, что внутри, — это убыток. Смотрите на цепочку
целиком.
Только для своих
?
Настоящего A/B здесь нет и быть не может. Показать двум покупателям разные обложки одной карточки площадка не даёт никому, кроме себя самой — у Ozon для этого есть встроенные «Мои исследования». Снаружи остаётся чередование во времени: обложка стоит отрезок, потом её сменяет другая, и сравниваются отрезки.
Почему это работает хуже сплита. В разные отрезки разная погода: сезон, акции площадки, чужие цены. Поэтому смотреть надо не на «стало больше», а на размер прибавки и на то, набралось ли показов, чтобы её вообще было видно.
Сколько нужно показов. Смена главного фото двигает CTR на три десятых — восемь десятых процентного пункта. Чтобы отличить такую прибавку от колебания, нужны десятки тысяч показов на вариант. Портал считает это заранее и говорит, годится товар для замера или нет.
Судить только по CTR нельзя. Обложка, поднявшая переходы и уронившая корзины, обещала не то, что внутри, — это убыток. Смотрите на цепочку целиком.
Настройка теста
Очередь очередь пуста, всего вариантов 0
ещё не грузили
Вариантов пока нет. Напишите пожелание и нажмите «Нарисовать три» — сборщик вернётся примерно через минуту.
Одобренный ждёт своей очереди: сама подмена обложки на площадке ещё не сделана, и поставить вариант на карточку пока можно только руками в кабинете Ozon. Как только поставите — сборщик заметит смену, положит прежнюю обложку в архив и начнёт считать отрезок.
Ход тестирования
Архив обложек по этому товару пуст — сборщик снимает обложки своим проходом, первый снимок появится в течение суток. До него отрезков нет: не с чем сравнивать.
CTR по дням, 90 дней
Пунктиром отмечены дни, когда сборщик заметил смену обложки. День смены — это день, когда её увидели: если обложку поменяли ночью, отметка встанет утром.