Сплит — альтернатива Varioqub и экспериментам Яндекс Метрики
Varioqub (Вариокуб) — инструмент экспериментов внутри Яндекс Метрики: A/B-тесты в нём работают только на сайтах со счётчиком Метрики, а срок эксперимента ограничен 90 днями. Если нужен отдельный сервис, который не зависит от одной системы аналитики, посмотрите на Сплит — сервис A/B-тестирования сайтов от Пиксель Тулс.
Сплит подключается одной строкой кода, делит посетителей на варианты, считает конверсию и статистическую значимость. При этом он хорошо дружит с Метрикой: цели Метрики можно сделать целями теста, а варианты передать в Метрику параметрами визита.
+21,4 % вариант B разница не случайна тест идёт · 5 дней
1строка кода на сайте — и можно запускать тесты
5мини скрипт начнёт делить посетителей на варианты
20 000посетителей в тестах в месяц на бесплатном тарифе
0₽чтобы начать: все возможности сервиса доступны сразу
Почему ищут альтернативу экспериментам Яндекс Метрики
Эксперименты в Метрике удобны, пока весь сайт живёт в одном счётчике. Но у Varioqub есть рамки: без счётчика Метрики эксперимент не запустить, длительность ограничена 90 днями, а часть настроек зависит от тарифа. Командам, которые тестируют серверную логику, используют несколько систем аналитики или хотят держать долгую контрольную группу, этого бывает мало.
Сплит закрывает эти сценарии и при этом не заставляет отказываться от Метрики: она остаётся основной системой аналитики.
0306090 дней
Varioqub нужен счётчик Метрики
Сплит с Метрикой или без
сколько нужно
Кому подойдёт Сплит вместо Вариокуба
Тем, кто уже работает в Яндекс Метрике
Переразмечать сайт не придётся: выберите тип цели «Цель Яндекс Метрики», укажите её идентификатор — и Сплит засчитает достижения, которые сайт уже отправляет. Укажите счётчик в настройках сайта, и варианты появятся в отчётах Метрики.
Тем, у кого несколько систем аналитики
Сплит не привязан к одному счётчику. Цели можно отметить вызовом в коде, без кода или взять события Google Analytics. Кроме целей Сплит показывает просмотры, время на странице и клики в каждом варианте.
Тем, кому нужны длинные или постоянные тесты
Дату остановки можно не задавать: Сплит сам напишет, когда появится вывод, когда тест сломается или замолчит. А контрольная группа сайта — например, 5% посетителей без единого теста — покажет общий эффект всех изменений за месяцы работы. Если посетители разойдутся по вариантам не так, как заданы доли, Сплит предупредит, что итогам такого теста верить нельзя.
Сравнение Varioqub и Сплита
В таблице — возможности Varioqub по справке Яндекса и то, как те же задачи решаются в Сплите.
Критерий
Varioqub
Сплит
Где работает
Внутри Яндекс Метрики, нужен счётчик Метрики
Отдельный скрипт, работает с Метрикой и без неё
Изменения без программиста
Визуальный редактор: текст, CSS, HTML
Правки страницы: текст, HTML, скрытие, атрибут, свой CSS
Срок эксперимента
От 1 до 90 дней
Дата остановки по желанию, без даты Сплит напишет, когда появится вывод
Цели
Метрики и цели Яндекс Метрики
Цели в коде или без кода, цели Метрики, события Google Analytics, выручка
Тарифы
Часть настроек зависит от тарифа
Возможности одинаковы на всех тарифах, есть бесплатный тариф
Сплит не заменяет Яндекс Метрику, а работает рядом с ней: Метрика остаётся системой аналитики, а Сплит отвечает за деление трафика, подсчёт и вердикт.
Что можно тестировать в Сплите
С помощью Сплита можно проверить:
первый экран — заголовок, оффер и главную кнопку;
блоки страницы — порядок, наличие отзывов или цен, скрытие лишнего;
новый дизайн — отдельную страницу с собственным адресом;
воронку — шаги регистрации и оформления заказа с выручкой на посетителя.
Для каждого теста можно сузить аудиторию: устройство, источник и кампания, новый или вернувшийся посетитель, язык или параметр адреса.
«Проверить бесплатно» лучше
Цель «Зарегистрировался» достигают чаще: 4,7 % против 3,9 % у «Попробовать» (+21,4 %). Разница не случайна (p = 0,004). Скорее всего эффект от +4,0 % до +39,0 %. Можно оставлять «Проверить бесплатно» для всех.
AПопробовать
Попробовать: 3,9 %184 из 4 710 дошли до целиНа самом деле — скорее всего от 3,4 % до 4,5 %
3,9 %184 из 4 710
контроль
BПроверить бесплатно
Проверить бесплатно: 4,7 %222 из 4 690 дошли до целиНа самом деле — скорее всего от 4,2 % до 5,4 % Эффект — скорее всего от +4,0 % до +39,0 %Разница с контролем не случайна (p = 0,004)
4,7 %222 из 4 690
+21,4 %
Как начать
1
Подключите скрипт
Добавьте строку в <head> сайта рядом с кодом Метрики. На Тильде и WordPress — в поле «Код в <head>», варианты там же можно задать CSS-правилами.
Создайте тест в кабинете, выберите способ показа вариантов и долю трафика. В качестве цели укажите цель Метрики, событие Google Analytics или отметьте её без кода.
js
if (ptsAb.variant('cta') === 'b') {
button.textContent = 'Проверить бесплатно'
}
3
Запустите тест и дождитесь вердикта
Пройдите чек-лист: он сам видит, стоит ли скрипт, попадают ли посетители в тест и приходят ли цели. После запуска Сплит покажет, сколько ещё ждать до вывода.
Если эксперименты в Метрике не подходят из-за привязки к счётчику, срока или тарифа, нужен отдельный сервис A/B-тестов. Сплит работает на любом сайте и сам считает значимость.
Можно ли делать A/B-тесты с Яндекс Метрикой через Сплит?
Да. Цели Метрики используются как цели теста, а вариант каждого посетителя уходит в Метрику параметром визита — так эксперименты можно разбирать и в отчётах Метрики.
Как перенести эксперименты из Вариокуба?
Эксперимент в Сплите настраивается заново: варианты, доли, цели и аудитория. Готовые цели Метрики переносить не нужно — достаточно указать их идентификаторы.
Сколько посетителей нужно для вывода?
Это зависит от конверсии и размера эффекта. Сплит сам показывает, сколько посетителей и дней ещё нужно, а метод CUPED помогает получить вывод на меньшем трафике.
Сколько стоит Сплит?
Есть бесплатный тариф: 1 сайт, 2 теста одновременно и 20 000 посетителей в тестах в месяц. Тарифы «Про» и «Агентство» с большими лимитами — по запросу.
A/B-тесты на сайте — с Метрикой или без неё
Подключите Сплит, оставьте Метрику для аналитики и проверяйте каждое изменение на части посетителей, прежде чем выкатывать его на всех.