×
Россия +7 (495) 139-20-33

Битва за конверсию. Неделя 3: Тестирование

Россия +7 (495) 139-20-33
Шрифт:
5 6616

Мы продолжаем следить, как идут дела у участников проекта «Битва за конверсию». Предлагаем вашему вниманию новый отчет о проделанной работе. Специалисты компании Реаспект рассказывают, как правильно выбрать тип эксперимента и провести тестирование страниц сайта.


Третья неделя — это срок, когда все гипотезы поставлены, технические задания написаны, метрики определены и обсуждаются тонкости экспериментальных страниц. То есть почти все готово. «Почти» — потому что необходимо определить площадки для проведения экспериментов и подготовить техническую сторону экспериментов. Именно об этом я и хочу вам сегодня рассказать.

Существует два основных типа экспериментов, используемых в интернет- маркетинге: «А/Б» и «Мультивариантные» (MVT). В рамках А/Б мы тестируем несколько принципиально различных вариантов страниц. В случае MVT — исследуем эффективность различных элементов в рамках одной и той же страницы. А/Б-тестинг направлен на поиск в целом лучшего варианта, а MVT — на поиск частных возможностей для улучшения. В ходе «Битвы за конверсию» мы будем работать с А/Б-тестами.

В мировой практике существует немало инструментов для проведения А/Б-тестов. Они работают по схожему принципу: весь входящий на исходную экспериментальную страницу трафик делится поровну между вариантами — одна часть остается на исходной странице, а вторая часть поступает на альтернативную страницу. Для проведения А/Б-тестов мы отдаем предпочтение двум инструментам: Google Analytics и Visual Website Optimizer (VWO).

Существует два основных типа страниц, с которыми приходится работать при проведении А/Б-тестинга — работа со «Статическими страницами» и с «Динамическими страницами». Статические страницы — это, например, страницы, сделанные по модели «Landing Page»: корзина, страницы процедуры оформления покупки и главная страница. То есть уникальные страницы в рамках одного шаблона. Динамические — это, например, страницы каталога и подкаталога, карточек товаров и пр. То есть множество страниц с различным содержанием, созданных на одном шаблоне.

При проведении теста статических страниц не возникает никаких сложностей. Для этих целей очень удобно использовать встроенный модуль «Эксперименты» в Google Analytics. В блоке отчетов «Контент» лежит вкладка «Эксперименты». Это и есть необходимый нам, ранее существовавший под самостоятельным названием Google Website Optimizer, инструмент.

Для желающих есть красивое видео и описание возможностей системы, а мы сразу вводим URL «Исходной экспериментальной страницы», то есть той, над которой мы планируем проводить эксперименты. Если помните, на первой неделе мы определили, с какими типами страниц нам в первую очередь необходимо экспериментировать, а на второй неделе выработали гипотезы для тестов. Запуская первый эксперимент, мы указываем адрес первой страницы, на которой будем проверять гипотезу.

Далее необходимо выбрать цель (а если ее нет, то создать новую), для которой мы и будем фиксировать результат. Для оценки результатов можно использовать показатели использования сайта или статистику модуля «Электронная торговля».

А/Б-тест только называется «А/Б». Совсем не значит, что вариантов может быть только два. Допускаются и «А/Б/В» и пр. Так что после указания основных параметров эксперимента необходимо указать адрес или адреса «Альтернативной экспериментальной страницы». Google для проверки показывает превью необходимых страниц.

После этого нам остается получить код эксперимента, поставить его сразу после открывающего < head> только на исходной странице и проверить наличие стандартного кода Google Analytics на исходной и альтернативной страницах. На этом настройка А/Б-теста для статических страниц заканчивается.

С динамическими все намного веселее! Если пользователь зашел на карточку товара, например, дрели «Makita», оформленной одним образом, то при переходе пользователя на другую карточку товара он должен увидеть точно такое же оформление страницы. Поэтому перед запуском экспериментов нам необходимо провести подготовительную работу.

Подготовительная работа

Нам необходимо разработать функционал (php код), который будет менять шаблоны в случае, если URL содержит get-параметр, например, «template=1». То есть, если на web-сервер приходит от пользователя URL без «?template=1», то используем исходный шаблон, а если приходит URL с «?template=1», то используем альтернативный шаблон и заводим сессию. Для пользователя с «?template=1» отсылаем в браузер cookie. В cookie указываем идентификатор сессии, чтобы отличать пользователей. Сессия нужна, только если мы хотим различать отдельных пользователей. Если такой необходимости нет, сессию можно не заводить.

При последующих запросах пользователя с cookie отдаем альтернативный шаблон. Для запросов пользователей без cookie отдаем исходный шаблон.

Теперь, когда все готово, можно настраивать эксперимент. Используем тот же функционал Google Analytics. В качестве исходной страницы мы должны поставить категорию, в которой находятся интересующие нас для эксперимента страницы.

Например, мы хотим проверить все карточки товаров. Каждая из них находится на URL с указанием категории и подкатегории:

http://www.shoes-bags.ru/muzhskaya-obuv/botinki/botinki-muzhskie-alexander-hottokorichnevyy-3.html

http://www.shoes-bags.ru/muzhskaya-obuv/kedy/kedy-alexander-mcqueen-chernyy.html

http://www.shoes-bags.ru/zhenskaya-obuv/botilony/botilony-ballerina-raznocvetnyy-3.html

Единственная общая категория для каждой карточки товаров — домен «/». Именно этот адрес мы и указываем в качестве исходной экспериментальной страницы. В качестве альтернативных страниц мы не можем указать какой-то абсолютный URL. Чтобы запускать тест, мы указываем относительный URL: «?template=1», который и возвращает исследуемый альтернативный шаблон карточки товара.

На третьем шаге запуска эксперимента мы получаем код эксперимента, который необходимо разместить на каждой странице, которую мы хотим протестировать. В предложенном эксперименте — это шаблон карточек товаров. Конечно, каждый случай индивидуален, но в общем виде методология подготовки экспериментов изложена выше.

В VWO запуск А/Б теста для статических страниц аналогичен: выбираем Split URL Test, указываем нужные страницы и запускаем эксперимент.

Тестинг динамических страниц в VWO более простой, поэтому для такого типа экспериментов мы предлагаем использовать именно этот инструмент.

Заходим на страницу «Get tracking code», расположенную в меню «Tools», забираем код, ставим его на все шаблоны сайта перед закрывающим < /head>. Создаем точно такой же Split URL Test. В исходной странице указываем категорию, в которой лежат все необходимые для эксперимента страницы и маркируем знаком «*». Например, для примера выше исходная страница будет выглядеть так:

/*

В качестве альтернативной страницы указываем get-параметр, который ранее создавали. Эксперимент готов!

В общем виде мы рассказали модели для проведения А/Б-тестов и предложили инструменты. Вы можете брать их за основу, адаптируя для своих собственных задач и условий сайта.

(Голосов: 5, Рейтинг: 5)
Читайте нас в Telegram - digital_bar

Есть о чем рассказать? Тогда присылайте свои материалы Ане Макаровой


Новые 
Новые
Лучшие
Старые
Сообщество
Подписаться 
Подписаться на дискуссию:
E-mail:
ОК
Вы подписаны на комментарии
Ошибка. Пожалуйста, попробуйте ещё раз.
Отправить отзыв
  • Dima Rekun
    1
    комментарий
    0
    читателей
    Dima Rekun
    больше года назад
    Здравствуйте!
    Никак не могу найти информацию о том как создавать эту экспериментальную страницу для теста. Все кто рассказывает о А/Б тестах молчат об этом.

    Объясните мне пж на пальцах  как это сделать. Или дайте ссылку на раскрывающий подробно эту тему контент.

    Заранее благодарен.
    С хорошими мыслями о Вас, Рекун Дмитрий
    -
    0
    +
    Ответить
    • Марал Гаипова
      137
      комментариев
      0
      читателей
      Марал Гаипова
      Dima Rekun
      больше года назад
      Может быть, вот эта статья поможет: www.seonews.ru/masterclasses/kak-povisit-konversiyu-sayta-s-pomoshyu-ab-testov/

      -
      0
      +
      Ответить
  • Антон
    больше года назад
    Спасибо за статью!
    Интересует один момент: как трафик делится и перенаправляется на А и Б страницы? Данный функционал доступен в вышеописанных инструментах тестинга, либо нужно задействовать программистов проекта?
    -
    0
    +
    Ответить
  • Андрей
    больше года назад
    Добрый день, Антон.
    Данный функционал лежит в основе предложенных нами инструментов.
    Есть поток трафика, поступающий на исходную экспериментальную страницу. На ней установлен код, который берет в случайном порядке 50% трафика, маркирует и перенеаправляет на альтернативную страницу.
    Так что часть, касающаяся перенаправления трафика, не требует дополнительной реализации программистами.
    -
    0
    +
    Ответить
  • Антон
    больше года назад
    Спасибо за ответ :) Всё понятно, будем тестировать. Удачи в конкурсе.
    -
    0
    +
    Ответить
ПОПУЛЯРНЫЕ ОБСУЖДЕНИЯ НА SEONEWS
Что скрывает «Прогноз бюджета Яндекс.Директ»?
Михаил Мухин
14
комментариев
0
читателей
Полный профиль
Михаил Мухин - Здравствуйте! 1-2. Считает стенд. Ссылка на него дана, но могу повторить: online.p-c-l.ru/competition/task/card/id/106. Нажмите на кнопку "Начать" и заранее приготовьте прогноз бюджета Яндекс. Суть расчета: перебор комбинаций всех ставок на всех фразах, построение бюджетных когорт - бюджетов с одинаковым СРС, отбор в каждой когорте бюджета с максимальным количеством кликов и ..., да упорядочивание этих бюджетов по мере возрастания СРС, причем берем не все, а с фиксированным шагом. 3. Гугл считается через поправочные коэффициенты. Мы перевариваем океан данных и представляем их. На удивление, получается не менее, хотя и не более точно, как и прогноз Яндекс. Конечно, нужно понимать, что это очень примерные прикидки, фактически перевод неточного прогноза Яндекс в удобочитаемую форму, не больше. Самое интересное начинается, когда применяешь метод бюджетных когорт к измерению показателей фраз на реальной рекламной кампании в режиме 48х7. Первые результаты очень хорошие. Если хотите присоединиться к бесплатному тестированию, напишите Эльвире r-support@r-broker.ru. В теме укажите "хочу присоединиться к тестам Умного управления рекламой"
Ссылочное продвижение локальных сайтов: ТОП худших SEO-методов
demimurych
5
комментариев
0
читателей
Полный профиль
demimurych - о господи. это для регионального сайта? в яндексе? где у сайта по региону конкурентов меньше чем выдачи на двух страницах из которых перваш это реклама москвы? потешно ей богу. ктото чего то не понеимает.
«Аудит, чтобы ты заплакала…», или Что делать, когда получил сторонний аудит сайта
Евгений
1
комментарий
0
читателей
Полный профиль
Евгений - Воообще, на самом деле здесь двоякое впечатление от таких аудитов. Конечно, для полного глубокого анализа и подготовки рекомендаций по сайту - нужны доступы к системам аналитики и инструментам вебмастера. Но если оценивать подобные аудиты с точки зрения чистого SEO (которое все больше и больше становится лишь малой частью digital-маркетинга, лишь одним из каналов) - они имеют место быть. Но с оговоркой, что они сделаны с учетом анализа конкурентов/отрасли. Современные инструменты и алгоритмы позволяют делать это маркетологам в автоматическом режиме, и даже давать рекомендации - возможностями машинного обучения уже никого не удивишь. Да, полное перечисление "мифического" списка ошибок, построенного по предикативным правилам, да еще и с учетом устаревших особенностей ПС - это явный признак некачественного аудита. В первую очередь потому, что эти "ошибки" следует рассматривать в качестве рекомендаций от ПС (как и говорится в справочнике вебмастера у Яндекса/Google). Однако если эти данные даются с отсылкой на данные о конкурентах, об отрасли, используются методы ML и Natural language processing для обработки исходных данных, кластеризации запросов, классификации страниц/запросов/сайтов, определения структуры документа - такие отчеты имеют право на существование. Но ключевым моментом является то, что подобные инструменты достаточно сложны в разработке, а значит требуют квалифицированных специалистов для их разработки. Которых просто нет у студий рассылающих подобные "сео отчеты". Подобные отчеты по "ошибках" тоже неплохой источник информации, но лишь на 0 этапе анализа сайта. И в принципе, теоретически, возможно почти полное составление "хороших аудитов" без участия маркетолога, на основе лишь открытых данных сайта/внешних источников, но только при соответствующем применении всех современных возможностей анализа данных и рекомендательных систем. И в любом случае подобный "хороший отчет" требует конечного заключения от эксперта.
Как вывести сайт в ТОП 10 Google в 2019 году
Гость
1
комментарий
0
читателей
Полный профиль
Гость - Интересная статья. Подскажите на каких ресурсах расположить ссылки бесплатно по автобезопасности? Наш сайт bastion-center.ru/
Зачем подменять контент на сайте: разбираем инструмент и развенчиваем мифы
Дмитрий Сульман
4
комментария
0
читателей
Полный профиль
Дмитрий Сульман - Все верно, об этом я и говорю. У крупных компаний есть много данных и они имеют доступ к дорогим технологиям и решениям для персонализации контента. Топовые западные сервисы для персонализации, такие как RichRelevance или Dynamic Yield, стоят от нескольких тысяч до десятков тысяч долларов в месяц. Понятно, что малый бизнес не может себе этого позволить. Да даже если бы чисто теоретически и мог, то это вряд ли бы имело хоть какой-то смысл. Во-первых, у малого бизнеса недостаточно данных, чтобы подобные алгоритмы персонализации начали эффективно работать, а во-вторых, тот профит, который МСБ получит от персонализации, никогда не покроет таких расходов. Мы же предлагаем решение, доступное как раз для малого и среднего бизнеса. При этом наше решение комплексное: МультиЧат - это одновременно и инструмент для персонализации, и для коммуникации.
От мечты стать юристом к собственному SMM-агентству. Как найти себя в современном цифровом мире
Виктор Брухис
5
комментариев
0
читателей
Полный профиль
Виктор Брухис - Статья выглядит так, как пожелали редакторы и интервьюер) Вопросы к интервью подбирал не я)) Хотя, в целом я согласен с вашим видением. А за пожелание удачи большое спасибо!
BDD 2019: Как перестать убивать время на сбор и обработку тонны данных для SEO-аудита
Kosta Bankovski
4
комментария
0
читателей
Полный профиль
Kosta Bankovski - Спасибо за приятные слова! Буду и дальше делиться наработками ;)
Как провести анализ содержания страниц товаров и категорий
Никита Седнин
3
комментария
0
читателей
Полный профиль
Никита Седнин - Спасибо!
10 элементов сайта, которые гарантированно отпугнут посетителей
Андрей
2
комментария
0
читателей
Полный профиль
Андрей - Ну типа потому что клиентское seo больше для коммерции предназначено. Типа контентники и сами знают что делать. В коммерции можно тысячу причин найти чтобы поработать с сайтом, а с контентными такие фокусы уже не прокатят, поэтому и не пишут. Всё продвижение для контентников сеошники описывают в трех словах: скорость, качество, систематичность. А, ну ещё конечно же СЯ, как же я про него забыл (фундамент жеть!).
Как удвоить выручку за счет продвижения в поиске. Кейс coffee-butik.ru
Максим Боровой
2
комментария
0
читателей
Полный профиль
Максим Боровой - Последний вопрос (извиняюсь за количество) - почему на "В корзину" стоит Nofollow. Осознанно для распределение весов?
ТОП КОММЕНТАТОРОВ
Комментариев
910
Комментариев
834
Комментариев
554
Комментариев
540
Комментариев
483
Комментариев
373
Комментариев
362
Комментариев
262
Комментариев
249
Комментариев
171
Комментариев
156
Комментариев
137
Комментариев
121
Комментариев
107
Комментариев
97
Комментариев
97
Комментариев
96
Комментариев
83
Комментариев
80
Комментариев
77
Комментариев
67
Комментариев
60
Комментариев
59
Комментариев
57
Комментариев
55

Отправьте отзыв!
Отправьте отзыв!