Amazon Manage Your Experiments: A/B-тесты листингов

Прия была уверена, что новое главное фото победит.

У её пресса для чеснока было аккуратное фото на белом фоне, ровно такое, какое советует любое руководство по листингам. Дизайнер сделал второй вариант: пресс в работе, зубчик чеснока продавливается сквозь решётку, рядом маленькая миска с измельчённым чесноком. Выглядело лучше. Вся команда сошлась на том, что выглядит лучше.

Она чуть было не заменила фото в какой-то обычный вторник, чтобы забыть об этом. Вместо этого она шесть недель гоняла его через Amazon Manage Your Experiments. Фото в действии победило: вероятность, что это лучший вариант, составила 94%, а конверсия выросла с 11,2% до 13,1%. ACoS при тех же ставках снизился с 29% до 25%, хотя ни одну кампанию она не трогала.

А дальше случилось то, чего она не ожидала. Через два месяца она протестировала «премиальный» вариант заголовка, в котором команда была уверена не меньше. Он проиграл. Конверсия упала почти на целый процентный пункт. Если бы она поставила его вслепую, то неделями резала бы ставки, пытаясь справиться с проблемой ACoS, которую создал её собственный листинг.

Именно для этого и нужен Amazon Manage Your Experiments: чтобы вместо «выглядит лучше» была цифра. В этом руководстве разберём, кому доступен инструмент, что можно тестировать, как настроить тест, который даст понятный результат, как читать то, что показывает Amazon, и почему каждый выигранный тест незаметно поднимает ставку, которую могут себе позволить ваши кампании.

Что такое Amazon Manage Your Experiments

Manage Your Experiments (MYE, «Управление экспериментами») — это бесплатный встроенный инструмент Amazon для A/B-тестирования контента на странице товара. Вы создаёте две версии одного элемента листинга, Amazon делит покупателей между ними примерно 50/50, а по окончании теста показывает, какая версия продала больше и насколько он уверен в этом результате.

Три вещи отличают его от подхода «поменяю и посмотрю, что будет»:

• Одновременно, а не по очереди: обе версии работают в одно и то же время, поэтому сезонность, купон конкурента или всплеск на Prime Day одинаково влияют на обе группы. Сравнение «до и после» не способно отделить ваше изменение от всего остального, что сдвинулось за этот месяц.
• Разделение по покупателю, а не по визиту: один и тот же покупатель на протяжении всего теста видит одну и ту же версию, и сравнение остаётся чистым.
• Реальные данные о продажах: результат измеряется в штуках, выручке и конверсии по настоящим покупкам, а не в кликах по макету или мнениях участников опроса.

По данным самого Amazon, эксперименты могут увеличить продажи до 25%. Считайте это потолком, а не средним значением. Большинство тестов двигают конверсию на несколько процентов, и многие заканчиваются без явного победителя. Главная ценность в том, что вы никогда не выкатите версию, которая стоила бы вам денег.

Кому доступен инструмент: требования

Чтобы попасть в MYE, нужно пройти два условия.

1. Brand Registry. Нужна активная регистрация в Brand Registry и роль в бренде с правом редактировать контент. Если вы ещё не зарегистрированы, MYE станет ещё одной причиной в и без того длинном списке.
2. Достаточный трафик на ASIN. Amazon предлагает эксперименты только для ASIN, которые недавно получили достаточно трафика, чтобы выйти на результат за разумное время. Жёсткого порога Amazon не публикует, и доступность может меняться от недели к неделе. На практике ваши бестселлеры подходят, а длинный хвост нет.

Чтобы проверить, откройте в Seller Central Brands → Manage Experiments (Бренды → Управление экспериментами) и нажмите Create a New Experiment (Создать новый эксперимент). В списке выбора ASIN показываются только подходящие товары. Если вашего главного ASIN там нет, сначала нужен трафик, а тесты потом.

Что можно тестировать

Набор доступных типов контента со временем расширялся и зависит от маркетплейса, поэтому проверьте выпадающий список в своём аккаунте.

С чего начать: с главного фото, затем заголовок. Это единственные два элемента, которые покупатель видит до клика, поэтому они одновременно двигают и CTR, и конверсию. Кроме того, это креатив ваших объявлений Sponsored Products, так что тест главного фото по сути становится тестом рекламного креатива с данными о покупках в придачу.

Следующий на очереди A+ Content. Он влияет на конверсию тех, кто прокручивает страницу вниз, а в нашем руководстве по A+ Content мы разбираем, какие модули обычно дают прирост. Тесты буллетов и описания редко оправдывают трафик, который на них уходит, если только текущий текст не слабый.

Как настроить эксперимент: пошагово

1. Выберите ASIN и элемент. Один ASIN, один тип контента. На одном ASIN одновременно может идти только один эксперимент для каждого типа контента.
2. Сформулируйте гипотезу до того, как делать версию B. «Покупатели не понимают, что пресс справляется с неочищенным чесноком, поэтому если это показать, конверсия вырастет». Гипотеза подсказывает, что тестировать дальше, выиграли вы или проиграли. «Попробовать новое фото» такой подсказки не даёт.
3. Сделайте версию B по-настоящему другой. Замена белого фона на молочный не даст измеримого результата. Поменяйте историю, которую рассказывает элемент: новый ракурс, другое ключевое преимущество, другое первое слово в заголовке.
4. Назовите тест так, чтобы найти его через полгода. Например, GP-01 главное фото в работе vs студия 2026-10.
5. Выберите длительность. Amazon позволяет задать фиксированный срок (от 4 до 10 недель) или вести тест до статистической значимости. По умолчанию мы выбираем до значимости, но не меньше 4 недель. Четыре недели охватывают разницу между буднями и выходными, а также циклы зарплат. Фиксированные 4 недели на ASIN со средним трафиком часто заканчиваются без результата.
6. Решите, нужна ли автопубликация. Amazon может автоматически опубликовать победителя по окончании теста. Включайте это, только если уверены в гипотезе и не планируете других изменений листинга. В остальных случаях проверяйте вручную.
7. Отправьте и дождитесь одобрения. Версия B проходит ту же модерацию контента, что и любое обновление листинга. Отсчёт начинается, когда обе версии опубликованы.

И дальше ничего не трогайте. Любое изменение цены, купонов, структуры вариаций или других элементов листинга во время теста добавляет шум в обе группы, и результату становится сложнее доверять.

Как читать результаты

Когда тест завершается, Amazon показывает по каждой версии продажи в штуках и в деньгах, конверсию, число проданных единиц на уникального посетителя и размер выборки, а также две самые важные цифры:

• Вероятность того, что одна версия лучше: байесовская уверенность Amazon в том, что победитель действительно работает лучше, а не просто получил удачную выборку.
• Прогнозируемый эффект за год: оценка дополнительных продаж в штуках и деньгах, если держать победителя опубликованным весь год.

Наши правила интерпретации:

Две ловушки, которых стоит избегать.

Не принимайте годовой прогноз за план продаж. Он просто растягивает результат тестового периода на двенадцать месяцев. Сезонный товар, запуск конкурента или изменение цены ломают этот прогноз. Используйте его, чтобы понять, какие победы были важнее, а не чтобы планировать выручку.

Не завершайте тест досрочно. Каждый день смотреть на промежуточные итоги и останавливать тест, как только B вырвется вперёд, — самый быстрый способ опубликовать ложного победителя. На маленьких выборках ранний перевес постоянно меняется. Задайте длительность и смотрите в конце.

Почему каждый выигранный тест снижает ACoS

Эту часть пропускает большинство руководств по листингам, и именно поэтому компании, которая делает инструмент для PPC, вообще интересно A/B-тестирование.

ACoS складывается из трёх составляющих:

Возьмём товар за $34,99 и CPC $1,20:

Те же ставки, те же ключевые слова, те же плейсменты. Два пункта конверсии срезают шесть пунктов ACoS.

Это работает и со стороны ставок. Если ваш ACoS безубыточности равен 32%, максимальный прибыльный CPC равен 32% × CVR × цена:

• При CVR 10%: 0,32 × 0,10 × $34,99 = $1,12
• При CVR 12%: 0,32 × 0,12 × $34,99 = $1,34

Выигранный тест листинга поднял потолок ставки на 22 цента за клик. Это разница между второй страницей по конкурентному ключевому слову и прибыльным показом в верхней части поисковой выдачи. Конверсия — единственный рычаг, который одновременно улучшает и ACoS, и позицию рекламы.

У тестов главного фото и заголовка есть второй эффект. Они меняют CTR рекламы, а более высокий CTR влияет на оценку ожидаемой эффективности, которую Amazon использует в аукционе. Механику мы разбирали в статье как устроен аукцион Amazon PPC.

Как тесты взаимодействуют с кампаниями

Несколько практических наблюдений из экспериментов на ASIN с активной рекламой.

Рекламный трафик тоже делится. Покупатели, пришедшие из рекламы, попадают в группу A или B так же, как все остальные. Во время теста конверсия на уровне кампании складывается из двух листингов. Не принимайте серьёзных решений по ставкам для этого ASIN посреди теста из-за резкого скачка ACoS. Возможно, это проигрывающая версия тянет общий показатель вниз.

Держите рекламный бюджет стабильным. Резкое увеличение бюджета на третьей неделе меняет структуру трафика от недели к неделе. Обе группы по-прежнему получают одинаковый трафик, так что сравнение остаётся корректным, но результаты, полученные на трафике, который вы не сохраните, менее полезны. Держите бюджеты примерно на одном уровне, а обычную ежедневную корректировку ставок оставьте автоматизации.

Избегайте распродаж. Томас запустил тест A+ Content для кемпингового фонаря, который пришёлся на Prime Big Deal Days. Четыре дня трафик был втрое выше, а покупатели совсем другие: охотники за скидками, которые почти не долистывали до A+ Content. Тест закончился с результатом 58%, без победителя. В ноябре он перезапустил его на обычном пятинедельном отрезке и получил явного победителя с 91%. Если распродажа попадает в период теста, продлите его или начните после неё.

Следите за Buy Box. Если во время теста вы теряете Buy Box, на затронутых просмотрах страницы не продаёт ни одна версия. Прежде чем доверять результату за период с проблемами по Buy Box, проверьте процент Featured Offer в своих Business Reports.

Что тестировать: список по приоритетам

Запускайте тесты в таком порядке на трёх ASIN с самыми большими рекламными расходами. Именно там пункт конверсии стоит больше всего денег.

1. Главное фото: студия против использования. Самый частый выигрышный тест, который мы видим. Покажите товар за работой.
2. Главное фото: товар отдельно против товара с ориентиром по размеру. Покупатели, которые не могут оценить размер, либо уходят, либо покупают и возвращают. Во что обходится второй вариант, показывает наше руководство по возвратам.
3. Заголовок: бренд в начале против главного ключевого слова в начале. Правила Amazon для заголовков никто не отменял, поэтому обе версии должны им соответствовать.
4. Заголовок: длинный против короткого. На мобильных заголовок сильно обрезается. В заголовке на 200 символов может потеряться именно то преимущество, которое продаёт.
5. A+ Content: положение сравнительной таблицы. Вверху стека модулей A+ против внизу.
6. A+ Content: сначала лайфстайл против сначала характеристики.
7. Буллеты: первая строка про выгоду против первой строки про характеристики.

Каждый тест занимает от четырёх до десяти недель на тип контента. Поскольку у каждого типа контента свой слот, на одном ASIN можно параллельно вести тест главного фото и тест A+ Content. Планируйте на квартал вперёд.

Ведите журнал тестов

Дана, которая продаёт силиконовые коврики для выпечки, записывала каждый результат в таблицу: ASIN, элемент, гипотеза, версии, даты, вероятность, конверсия обеих версий и одна строка о том, что она поняла. Через восемнадцать месяцев и двадцать два теста закономерность стала очевидной. В её каталоге любое фото с едой на коврике выигрывало у любого фото коврика без еды. Любой заголовок, начинавшийся со слова «антипригарный», выигрывал у заголовков, начинавшихся со слова «многоразовый».

Она перестала тестировать эти вопросы и начала использовать ответы по умолчанию при новых запусках. Новые листинги стартовали с той конверсии, до которой старым пришлось добираться через три теста.

Именно журнал превращает отдельные тесты в плейбук. Без него вы каждый год повторяете одни и те же эксперименты и спорите об одних и тех же фотографиях.

Частые ошибки

1. Тестировать мелкие различия. Если покупатель не заметит изменения, тест его тоже не заметит. Действуйте смелее.
2. Тестировать на ASIN с низким трафиком. Вы ждёте десять недель и ничего не узнаёте. Тестируйте там, где есть трафик.
3. Менять что-то ещё во время теста. Снижение цены, новые купоны, новые буллеты. Заморозьте листинг.
4. Останавливаться при первом перевесе. Определите длительность заранее.
5. Игнорировать поражения. Проигранный тест показывает, что покупателям неважно. Запишите его.
6. Не доводить дело до PPC. Рост конверсии на 2 пункта при прежних ставках означает упущенные деньги. Пересматривайте потолки ставок после каждой победы или доверьте это автоматизации.

Частые вопросы

Amazon Manage Your Experiments бесплатный?

Да. За эксперименты не берут плату. Нужны Brand Registry и подходящий ASIN.

Сколько должен длиться A/B-тест на Amazon?

Не меньше четырёх недель, а в идеале пока Amazon не покажет результат с высокой уверенностью. Amazon позволяет выбрать фиксированный срок от 4 до 10 недель или вести тест до значимости.

Можно ли тестировать цену через Manage Your Experiments?

Нет. MYE тестирует контент, а не цену. Ценовые тесты приходится проводить последовательно, поэтому шума в них гораздо больше.

Можно ли запустить несколько экспериментов на одном ASIN?

Одновременно можно вести по одному эксперименту на каждый тип контента. Тест главного фото и тест A+ Content могут идти параллельно на одном ASIN.

Почему мой ASIN недоступен для экспериментов?

Обычно дело в трафике. Amazon предлагает эксперименты только для ASIN, у которых недавно было достаточно трафика, чтобы получить результат. Сначала наберите трафик с помощью рекламы и хорошо проработанного листинга.

Влияет ли эксперимент на позиции в поиске?

Напрямую нет. Выигравшая версия, которая лучше конвертирует, со временем может поддержать органические позиции, потому что скорость продаж влияет на ранжирование. Само разделение трафика во время теста позиции не понижает.

Итог

Любое изменение листинга — это ставка. Amazon Manage Your Experiments позволяет сначала сделать эту ставку на половине трафика, с реальными данными о покупках и бесплатно.

Начните с главного фото на ASIN с самыми большими рекламными расходами. Сформулируйте гипотезу, сделайте версию B, которая рассказывает другую историю, ведите тест не меньше четырёх недель и публикуйте только то, что подтверждают данные. А потом перенесите победу в кампании: более высокая конверсия означает более высокую прибыльную ставку, лучшую позицию рекламы и более низкий ACoS, всё сразу.