A/Б-тестирование — обязательный инструмент всех маркетологов, и существует множество руководств по его выполнению. Однако, практически все из них посвящены тестам в крупных аккаунтах с большим объемом статистики.
Тестирование в небольших аккаунтах часто занимает много времени, и в его процессе вы обязательно столкнетесь с вопросами и возражениями, которые важно обсудить с командой. Они обычно сводятся к трем темам. Давайте обсудим их подробнее.
«Это займет время»
Об этом говорят, как правило, на ранней стадии сразу же после принятия решения о запуске тестирования. Сколько времени займет тест?
Если бюджет аккаунта небольшой, тестирование должно занять 30-60 дней. Следует подробно обсудить, какой результат вы хотите получить, какие гипотезы проверить, какие метрики эффективности использовать. После этого, используя имеющуюся статистику, можно вычислить, сколько он должен длиться.
Отправьте письмо всем заинтересованным в эксперименте коллегам. В нем опишите предстоящее тестирование, укажите его продолжительность и объясните, почему он займет столько времени. Так, вы убедитесь, что все участники ознакомились и согласны с процессом тестирования.
«Не трогай, это повлияет на результаты»
В течение 30–60 дней ситуация меняется, и подобный разговор неизбежно произойдет. Из-за того, что тесты в небольших аккаунтах занимают много времени, приходится приучать себя и команду проверять текущее состояние теста прежде, чем приступать к оптимизации. Естественно, что люди могут забыть о текущем тестировании, когда оно работает уже несколько недель или месяцев.
Любые изменения будут влиять на результаты, и если тест проводится в нескольких кампаниях, вы должны быть осторожны с каждым планируемым изменением.
Однако иногда приходится корректировать настройки: по необходимости в аккаунте или просьбе клиента. В таких ситуациях лучше всего документировать изменения. Это поможет гарантировать, что все будут в курсе событий и смогут правильно интерпретировать результаты.
«Результаты будут случайными»
Нередко один из членов команды завершает тестирование и назначает победителя независимо от статистической значимости. Чтобы избежать этого, нужно в первом разговоре точно определить, какие показатели вы используете для оценки эффективности.
Однако если тест подошел к концу, результаты без статистической значимости являются случайными, и нельзя быть уверенным, что переменная действительно сработала лучше. Поэтому любые решения, принятые на основании этого теста, также будут случайными.
Опасность заключается в том, что продолжая тестировать переменные и опираясь на случайные результаты, в конечном счете специалист упускает возможность принять выгодное решение. Когда такое случается, следует объяснить, почему случайные результаты не могут использоваться в кампаниях с научной точки зрения.
Заключение
В PPC нет возможности провести идеальное A/Б-тестирование, так как есть много переменных, которые специалисты не могут контролировать. Небольшие аккаунты особенно уязвимы: такие факторы, как намерения пользователей и сезонность, всегда будут влиять на тест, который длится несколько месяцев.
Чтобы контролировать ход тестирования и достичь максимально значимых результатов, обязательно обсудите с командой вопросы, о которых мы говорили в этой статье. Они помогут вам найти удачные решения и с их помощью эффективно оптимизировать кампании.
По материалам SearchEngineLand
Читайте больше материалов по теме:
Последние комментарии