Что такое сплит тест?

Перед тем как мы перейдем к наиболее распространенным ошибкам — давайте рассмотрим само понятие сплит-тестирования. 

CRO (Conversion Rate Optimization ) тестирование — способ сравнения контрольной и вариативных версий страницы (либо групп страниц) для того, чтобы увидеть какая из версий работает лучше с точки зрения конверсии. Для этого пользователи разбиваются на разные группы и каждой группе показывается своя версия сайта.

Что касается SEO сплит теста — мы определяем версии страниц, которые работают лучше с точки зрения органического SEO трафика. Здесь мы не сможем выделить разные группы пользователей. Есть только одна версия поискового бота, который увидит вашу страницу.

Допустим у нас есть  группа страниц с одинаковым шаблоном (например, страница товара). Мы берем ровно половину из них и вносим изменения. Для всех пользователей. Таким образом у нас будет возможность измерить влияние на трафик наших изменений относительно контрольной группы страниц (которые не меняли).

Основные ошибки при проведении SEO сплит-тестов

  1. Слишком малое время тестирования.

Известный факт — для того, чтобы достигнуть адекватного ранжирования страниц в поиске должно пройти определенное количество времени. На графике прекрасно видно, что какие-либо изменения можно увидеть только спустя пару недель. Но многие уже после недели начинают думать, что сплит тест неудачная идея и не показывает никаких результатов. Просто подождите еще неделю и увидите разницу.

2. Тестирование групп страниц, у которых недостаточно трафика.

Как правило, идеальный показатель трафика для тестируемых групп страниц — 1000 органических сессий в сутки. Только при таком объеме вы сможете увидеть реальный результат. Если трафика будет меньше, то любой сигнал (негативный или позитивный) может быть неверно истолкован. Это азы статистики. Чем больше траффика у вас есть, тем точнее будут показатели отклонения от нормы!

Также не стоит забывать, что трафик может быть неровно распределен между всеми страницами. Если у вас 50% трафика 40-страничной группы занимают 2 топовые страницы — стоит задуматься над правильностью подбора пациентов. Выбирайте страницы, где трафик распределен максимально равномерно!

3. Неравномерное распределение трафика

При CRO тестах наилучшая практика — рандомное распределение пользователей по двум группам.  Это практически на 100% гарантирует идентичность групп пользователей. 

В случае с SEO нам необходимо действовать более гибко. Как уже говорилось выше — есть страницы где больше траффика, есть где меньше.  Точно так же, к примеру, трафик на некоторых страницах зависит от сезонности и дней недели.

Чтобы обеспечить статическое сходство обоих версий их надо создавать, держа в голове следующие параметры:

  • Одинаковые уровни трафика
  • Одинаковое распределение трафика внутри самих групп
  • Одинаковые тенденции в объеме трафика в зависимости от времени
  • Сходство в ряде других статических показателей

4. Проведение SEO сплит-тестирования при помощи Javascript

На данный момент не так уж и просто обычным маркетологам взять и поменять страницы сайта для своего сплит теста. На помощь приходит Google Tag Manager. Мощнейший и прекраснейший инструмент любого аналитика, но и у него есть свои изъяны относительно сплит тестирования. Это javascript. Две причины, почему JS не идеален при проведении SEO сплит теста  (разговор конкретно о google поисковом роботе, хотя остальные работают примерно аналогично):

1.Процесс индексации и сбора информации в гугле имеет несколько фаз. Как только googlebot обнаружил страницу — он первым делом сканирует сырой HTML. Далее после некоторой задержки он получает данные загруженные с помощью JS.

2. Даже после того, как бот начинает загружать JS — срабатывает правило 5 секунд. Скрипту дается всего 5 секунд, чтобы отобразить весь контент, иначе после этого времени бот перестает работать. Есть мнение, что не все сайты могут отработать полный цикл Javascript за такое короткое время.

Если у вас много JS кода на сайте — постарайтесь обходить стороной javascript сплит тесты.

5. Отсутствие контрольных групп

Многие когда говорят о SEO сплит тестах — имеют в виду изменение определенной страницы либо вообще всего сайта и ждут повышения трафика и ранжирования. Это не есть сплит тест! Без контрольной группы вы никогда не будете уверены, что эффект принесли именно изменения на сайте, нежели другие факторы. А таких может быть много. Начиная от смены алгоритмов поисковиков, заканчивая извержением вулкана в Исландии.

А теперь хотелось бы услышать ваше мнение и отношение к SEO сплит тестам. Какие проблемы вы встречали, какие ошибки совершали, и главное, какие результатов достигали?

Рубрики: SEO

Олег Лукин

Ведущий IT специалист, программист, аналитик.