Что такое сплит тест?
Перед тем как мы перейдем к наиболее распространенным ошибкам — давайте рассмотрим само понятие сплит-тестирования.
CRO (Conversion Rate Optimization ) тестирование — способ сравнения контрольной и вариативных версий страницы (либо групп страниц) для того, чтобы увидеть какая из версий работает лучше с точки зрения конверсии. Для этого пользователи разбиваются на разные группы и каждой группе показывается своя версия сайта.
Что касается SEO сплит теста — мы определяем версии страниц, которые работают лучше с точки зрения органического SEO трафика. Здесь мы не сможем выделить разные группы пользователей. Есть только одна версия поискового бота, который увидит вашу страницу.
Допустим у нас есть группа страниц с одинаковым шаблоном (например, страница товара). Мы берем ровно половину из них и вносим изменения. Для всех пользователей. Таким образом у нас будет возможность измерить влияние на трафик наших изменений относительно контрольной группы страниц (которые не меняли).
Основные ошибки при проведении SEO сплит-тестов
- Слишком малое время тестирования.
Известный факт — для того, чтобы достигнуть адекватного ранжирования страниц в поиске должно пройти определенное количество времени. На графике прекрасно видно, что какие-либо изменения можно увидеть только спустя пару недель. Но многие уже после недели начинают думать, что сплит тест неудачная идея и не показывает никаких результатов. Просто подождите еще неделю и увидите разницу.
2. Тестирование групп страниц, у которых недостаточно трафика.
Как правило, идеальный показатель трафика для тестируемых групп страниц — 1000 органических сессий в сутки. Только при таком объеме вы сможете увидеть реальный результат. Если трафика будет меньше, то любой сигнал (негативный или позитивный) может быть неверно истолкован. Это азы статистики. Чем больше траффика у вас есть, тем точнее будут показатели отклонения от нормы!
Также не стоит забывать, что трафик может быть неровно распределен между всеми страницами. Если у вас 50% трафика 40-страничной группы занимают 2 топовые страницы — стоит задуматься над правильностью подбора пациентов. Выбирайте страницы, где трафик распределен максимально равномерно!
3. Неравномерное распределение трафика
При CRO тестах наилучшая практика — рандомное распределение пользователей по двум группам. Это практически на 100% гарантирует идентичность групп пользователей.
В случае с SEO нам необходимо действовать более гибко. Как уже говорилось выше — есть страницы где больше траффика, есть где меньше. Точно так же, к примеру, трафик на некоторых страницах зависит от сезонности и дней недели.
Чтобы обеспечить статическое сходство обоих версий их надо создавать, держа в голове следующие параметры:
- Одинаковые уровни трафика
- Одинаковое распределение трафика внутри самих групп
- Одинаковые тенденции в объеме трафика в зависимости от времени
- Сходство в ряде других статических показателей
4. Проведение SEO сплит-тестирования при помощи Javascript
На данный момент не так уж и просто обычным маркетологам взять и поменять страницы сайта для своего сплит теста. На помощь приходит Google Tag Manager. Мощнейший и прекраснейший инструмент любого аналитика, но и у него есть свои изъяны относительно сплит тестирования. Это javascript. Две причины, почему JS не идеален при проведении SEO сплит теста (разговор конкретно о google поисковом роботе, хотя остальные работают примерно аналогично):
1.Процесс индексации и сбора информации в гугле имеет несколько фаз. Как только googlebot обнаружил страницу — он первым делом сканирует сырой HTML. Далее после некоторой задержки он получает данные загруженные с помощью JS.
2. Даже после того, как бот начинает загружать JS — срабатывает правило 5 секунд. Скрипту дается всего 5 секунд, чтобы отобразить весь контент, иначе после этого времени бот перестает работать. Есть мнение, что не все сайты могут отработать полный цикл Javascript за такое короткое время.
Если у вас много JS кода на сайте — постарайтесь обходить стороной javascript сплит тесты.
5. Отсутствие контрольных групп
Многие когда говорят о SEO сплит тестах — имеют в виду изменение определенной страницы либо вообще всего сайта и ждут повышения трафика и ранжирования. Это не есть сплит тест! Без контрольной группы вы никогда не будете уверены, что эффект принесли именно изменения на сайте, нежели другие факторы. А таких может быть много. Начиная от смены алгоритмов поисковиков, заканчивая извержением вулкана в Исландии.
А теперь хотелось бы услышать ваше мнение и отношение к SEO сплит тестам. Какие проблемы вы встречали, какие ошибки совершали, и главное, какие результатов достигали?