×
Россия +7 (495) 139-20-33

Битва за конверсию. Неделя 3: Тестирование

Россия +7 (495) 139-20-33
Шрифт:
5 6700

Мы продолжаем следить, как идут дела у участников проекта «Битва за конверсию». Предлагаем вашему вниманию новый отчет о проделанной работе. Специалисты компании Реаспект рассказывают, как правильно выбрать тип эксперимента и провести тестирование страниц сайта.


Третья неделя — это срок, когда все гипотезы поставлены, технические задания написаны, метрики определены и обсуждаются тонкости экспериментальных страниц. То есть почти все готово. «Почти» — потому что необходимо определить площадки для проведения экспериментов и подготовить техническую сторону экспериментов. Именно об этом я и хочу вам сегодня рассказать.

Существует два основных типа экспериментов, используемых в интернет- маркетинге: «А/Б» и «Мультивариантные» (MVT). В рамках А/Б мы тестируем несколько принципиально различных вариантов страниц. В случае MVT — исследуем эффективность различных элементов в рамках одной и той же страницы. А/Б-тестинг направлен на поиск в целом лучшего варианта, а MVT — на поиск частных возможностей для улучшения. В ходе «Битвы за конверсию» мы будем работать с А/Б-тестами.

В мировой практике существует немало инструментов для проведения А/Б-тестов. Они работают по схожему принципу: весь входящий на исходную экспериментальную страницу трафик делится поровну между вариантами — одна часть остается на исходной странице, а вторая часть поступает на альтернативную страницу. Для проведения А/Б-тестов мы отдаем предпочтение двум инструментам: Google Analytics и Visual Website Optimizer (VWO).

Существует два основных типа страниц, с которыми приходится работать при проведении А/Б-тестинга — работа со «Статическими страницами» и с «Динамическими страницами». Статические страницы — это, например, страницы, сделанные по модели «Landing Page»: корзина, страницы процедуры оформления покупки и главная страница. То есть уникальные страницы в рамках одного шаблона. Динамические — это, например, страницы каталога и подкаталога, карточек товаров и пр. То есть множество страниц с различным содержанием, созданных на одном шаблоне.

При проведении теста статических страниц не возникает никаких сложностей. Для этих целей очень удобно использовать встроенный модуль «Эксперименты» в Google Analytics. В блоке отчетов «Контент» лежит вкладка «Эксперименты». Это и есть необходимый нам, ранее существовавший под самостоятельным названием Google Website Optimizer, инструмент.

Для желающих есть красивое видео и описание возможностей системы, а мы сразу вводим URL «Исходной экспериментальной страницы», то есть той, над которой мы планируем проводить эксперименты. Если помните, на первой неделе мы определили, с какими типами страниц нам в первую очередь необходимо экспериментировать, а на второй неделе выработали гипотезы для тестов. Запуская первый эксперимент, мы указываем адрес первой страницы, на которой будем проверять гипотезу.

Далее необходимо выбрать цель (а если ее нет, то создать новую), для которой мы и будем фиксировать результат. Для оценки результатов можно использовать показатели использования сайта или статистику модуля «Электронная торговля».

А/Б-тест только называется «А/Б». Совсем не значит, что вариантов может быть только два. Допускаются и «А/Б/В» и пр. Так что после указания основных параметров эксперимента необходимо указать адрес или адреса «Альтернативной экспериментальной страницы». Google для проверки показывает превью необходимых страниц.

После этого нам остается получить код эксперимента, поставить его сразу после открывающего < head> только на исходной странице и проверить наличие стандартного кода Google Analytics на исходной и альтернативной страницах. На этом настройка А/Б-теста для статических страниц заканчивается.

С динамическими все намного веселее! Если пользователь зашел на карточку товара, например, дрели «Makita», оформленной одним образом, то при переходе пользователя на другую карточку товара он должен увидеть точно такое же оформление страницы. Поэтому перед запуском экспериментов нам необходимо провести подготовительную работу.

Подготовительная работа

Нам необходимо разработать функционал (php код), который будет менять шаблоны в случае, если URL содержит get-параметр, например, «template=1». То есть, если на web-сервер приходит от пользователя URL без «?template=1», то используем исходный шаблон, а если приходит URL с «?template=1», то используем альтернативный шаблон и заводим сессию. Для пользователя с «?template=1» отсылаем в браузер cookie. В cookie указываем идентификатор сессии, чтобы отличать пользователей. Сессия нужна, только если мы хотим различать отдельных пользователей. Если такой необходимости нет, сессию можно не заводить.

При последующих запросах пользователя с cookie отдаем альтернативный шаблон. Для запросов пользователей без cookie отдаем исходный шаблон.

Теперь, когда все готово, можно настраивать эксперимент. Используем тот же функционал Google Analytics. В качестве исходной страницы мы должны поставить категорию, в которой находятся интересующие нас для эксперимента страницы.

Например, мы хотим проверить все карточки товаров. Каждая из них находится на URL с указанием категории и подкатегории:

http://www.shoes-bags.ru/muzhskaya-obuv/botinki/botinki-muzhskie-alexander-hottokorichnevyy-3.html

http://www.shoes-bags.ru/muzhskaya-obuv/kedy/kedy-alexander-mcqueen-chernyy.html

http://www.shoes-bags.ru/zhenskaya-obuv/botilony/botilony-ballerina-raznocvetnyy-3.html

Единственная общая категория для каждой карточки товаров — домен «/». Именно этот адрес мы и указываем в качестве исходной экспериментальной страницы. В качестве альтернативных страниц мы не можем указать какой-то абсолютный URL. Чтобы запускать тест, мы указываем относительный URL: «?template=1», который и возвращает исследуемый альтернативный шаблон карточки товара.

На третьем шаге запуска эксперимента мы получаем код эксперимента, который необходимо разместить на каждой странице, которую мы хотим протестировать. В предложенном эксперименте — это шаблон карточек товаров. Конечно, каждый случай индивидуален, но в общем виде методология подготовки экспериментов изложена выше.

В VWO запуск А/Б теста для статических страниц аналогичен: выбираем Split URL Test, указываем нужные страницы и запускаем эксперимент.

Тестинг динамических страниц в VWO более простой, поэтому для такого типа экспериментов мы предлагаем использовать именно этот инструмент.

Заходим на страницу «Get tracking code», расположенную в меню «Tools», забираем код, ставим его на все шаблоны сайта перед закрывающим < /head>. Создаем точно такой же Split URL Test. В исходной странице указываем категорию, в которой лежат все необходимые для эксперимента страницы и маркируем знаком «*». Например, для примера выше исходная страница будет выглядеть так:

/*

В качестве альтернативной страницы указываем get-параметр, который ранее создавали. Эксперимент готов!

В общем виде мы рассказали модели для проведения А/Б-тестов и предложили инструменты. Вы можете брать их за основу, адаптируя для своих собственных задач и условий сайта.

(Голосов: 5, Рейтинг: 5)
Читайте нас в Telegram - digital_bar

Есть о чем рассказать? Тогда присылайте свои материалы Ане Макаровой


Новые 
Новые
Лучшие
Старые
Сообщество
Подписаться 
Подписаться на дискуссию:
E-mail:
ОК
Вы подписаны на комментарии
Ошибка. Пожалуйста, попробуйте ещё раз.
Отправить отзыв
  • Dima Rekun
    1
    комментарий
    0
    читателей
    Dima Rekun
    больше года назад
    Здравствуйте!
    Никак не могу найти информацию о том как создавать эту экспериментальную страницу для теста. Все кто рассказывает о А/Б тестах молчат об этом.

    Объясните мне пж на пальцах  как это сделать. Или дайте ссылку на раскрывающий подробно эту тему контент.

    Заранее благодарен.
    С хорошими мыслями о Вас, Рекун Дмитрий
    -
    0
    +
    Ответить
    • Марал Гаипова
      139
      комментариев
      0
      читателей
      Марал Гаипова
      Dima Rekun
      больше года назад
      Может быть, вот эта статья поможет: www.seonews.ru/masterclasses/kak-povisit-konversiyu-sayta-s-pomoshyu-ab-testov/

      -
      0
      +
      Ответить
  • Антон
    больше года назад
    Спасибо за статью!
    Интересует один момент: как трафик делится и перенаправляется на А и Б страницы? Данный функционал доступен в вышеописанных инструментах тестинга, либо нужно задействовать программистов проекта?
    -
    0
    +
    Ответить
  • Андрей
    больше года назад
    Добрый день, Антон.
    Данный функционал лежит в основе предложенных нами инструментов.
    Есть поток трафика, поступающий на исходную экспериментальную страницу. На ней установлен код, который берет в случайном порядке 50% трафика, маркирует и перенеаправляет на альтернативную страницу.
    Так что часть, касающаяся перенаправления трафика, не требует дополнительной реализации программистами.
    -
    0
    +
    Ответить
  • Антон
    больше года назад
    Спасибо за ответ :) Всё понятно, будем тестировать. Удачи в конкурсе.
    -
    0
    +
    Ответить
ПОПУЛЯРНЫЕ ОБСУЖДЕНИЯ НА SEONEWS
Что скрывает «Прогноз бюджета Яндекс.Директ»?
Михаил Мухин
15
комментариев
0
читателей
Полный профиль
Михаил Мухин - Здравствуйте! 1-2. Считает стенд. Ссылка на него дана, но могу повторить: online.p-c-l.ru/competition/task/card/id/106. Нажмите на кнопку "Начать" и заранее приготовьте прогноз бюджета Яндекс. Суть расчета: перебор комбинаций всех ставок на всех фразах, построение бюджетных когорт - бюджетов с одинаковым СРС, отбор в каждой когорте бюджета с максимальным количеством кликов и ..., да упорядочивание этих бюджетов по мере возрастания СРС, причем берем не все, а с фиксированным шагом. 3. Гугл считается через поправочные коэффициенты. Мы перевариваем океан данных и представляем их. На удивление, получается не менее, хотя и не более точно, как и прогноз Яндекс. Конечно, нужно понимать, что это очень примерные прикидки, фактически перевод неточного прогноза Яндекс в удобочитаемую форму, не больше. Самое интересное начинается, когда применяешь метод бюджетных когорт к измерению показателей фраз на реальной рекламной кампании в режиме 48х7. Первые результаты очень хорошие. Если хотите присоединиться к бесплатному тестированию, напишите Эльвире r-support@r-broker.ru. В теме укажите "хочу присоединиться к тестам Умного управления рекламой"
Ссылочное продвижение локальных сайтов: ТОП худших SEO-методов
demimurych
8
комментариев
0
читателей
Полный профиль
demimurych - о господи. это для регионального сайта? в яндексе? где у сайта по региону конкурентов меньше чем выдачи на двух страницах из которых перваш это реклама москвы? потешно ей богу. ктото чего то не понеимает.
Зачем подменять контент на сайте: разбираем инструмент и развенчиваем мифы
Дмитрий Сульман
4
комментария
0
читателей
Полный профиль
Дмитрий Сульман - Все верно, об этом я и говорю. У крупных компаний есть много данных и они имеют доступ к дорогим технологиям и решениям для персонализации контента. Топовые западные сервисы для персонализации, такие как RichRelevance или Dynamic Yield, стоят от нескольких тысяч до десятков тысяч долларов в месяц. Понятно, что малый бизнес не может себе этого позволить. Да даже если бы чисто теоретически и мог, то это вряд ли бы имело хоть какой-то смысл. Во-первых, у малого бизнеса недостаточно данных, чтобы подобные алгоритмы персонализации начали эффективно работать, а во-вторых, тот профит, который МСБ получит от персонализации, никогда не покроет таких расходов. Мы же предлагаем решение, доступное как раз для малого и среднего бизнеса. При этом наше решение комплексное: МультиЧат - это одновременно и инструмент для персонализации, и для коммуникации.
От мечты стать юристом к собственному SMM-агентству. Как найти себя в современном цифровом мире
Виктор Брухис
5
комментариев
0
читателей
Полный профиль
Виктор Брухис - Статья выглядит так, как пожелали редакторы и интервьюер) Вопросы к интервью подбирал не я)) Хотя, в целом я согласен с вашим видением. А за пожелание удачи большое спасибо!
Монетизируйте свой сайт вместе с VIZTROM
VIZTROM
3
комментария
0
читателей
Полный профиль
VIZTROM - Добрый день! Так как мы сейчас работаем в приватном режиме, Вы врятли можете объективно оценить нашу рекламную площадку. У нас будет официальный запуск 3 марта для вебмастеров. Приглашаем Вас присоединиться к нам и лично посмотреть наш функционал.
Как удвоить выручку за счет продвижения в поиске. Кейс coffee-butik.ru
Максим Боровой
3
комментария
0
читателей
Полный профиль
Максим Боровой - Последний вопрос (извиняюсь за количество) - почему на "В корзину" стоит Nofollow. Осознанно для распределение весов?
Digital-разговор: Михаил Шакин про SEO, Google и заработок в интернете
Анна Макарова
368
комментариев
0
читателей
Полный профиль
Анна Макарова - Подготовим ) Пока предлагаю почитать интервью с Денисом Нарижным из той же серии. Там стенограмма =) www.seonews.ru/interviews/digital-razgovor-denis-narizhnyy-pro-ukhod-iz-seo-i-zarabotok-na-partnerkakh/
Почему вы торгуетесь за показы, даже если платите за клики
Константин Требунских
3
комментария
0
читателей
Полный профиль
Константин Требунских - Дмитрий, спасибо за комментарий, хорошие замечания!) 1. "Какая-то подмена понятий. CPM у “Original Works” взлетает не от того, что у них РАВНАЯ цена клика, а оттого, что вы "с потолка" поставили ему CPC в 2 раза выше, чем был. Логично, что и CPM в 2 раза увеличился (см. формулу выше). Если бы вместо 5 вы всем решили поставить 2 или 1.5, то он бы наоборот уменьшился." Вы правы, что CPM уменьшился бы. В первой и второй табличке берем одинаковое количество показов (именно за них мы платим сначала) и считаем данные, в том числе CPC. Мы поставили рекламодателей в одинаковые условия и посмотрели их эффективность в разрезе цены клика при одинаковом количестве показов. А затем изменился аукцион, и, взяв получившиеся данные по кликам и CTR, мы поставили рекламодателей тоже в одинаковое положение, но уже по цене клика, ведь мы теперь за него платим. Посчитали эффективность в разрезе уже CPM. Тут если и есть подмена понятий, то она точно не моя, а рекламных систем, потому и обозначена, как "ход конем" :) 2. "Ок, смотрим таблички "как оно было" и "как оно стало". Было: система суммарно за 2 000 денег показала рекламу 4 000 раз. Стало: система суммарно за 2 000 денег показала рекламу 13 500 раз. Сомнительный профит для системы." Вы правы, именно поэтому для рекламодателей с низким CTR ставка будет выше, чем для рекламодателей с высоким CTR. Просто чтобы система окупилась. Потому что, системе выгодно продавать показы тем, у кого кликов будет больше (ведь они платят за клик). По факту реальные цены за клик в аукционе будут как в таблице 2. Но ранжирование системы проводят по таблице 5.
Кейс Hansa: как увеличить органический трафик в 1,5 раза
Алексей Порфирьев
3
комментария
0
читателей
Полный профиль
Алексей Порфирьев - Спасибо за замечание, о данной проблеме известно, но она не стоит в порядке приоритетных. Вопрос, на самом деле, дискуссионный. В тематике конкуренция не настолько велика, а в топе выдачи часто встречаются сайты с более серьёзными техническими проблемами. По этому, именно в статьях, более важно работать над релевантностью контента, отношением времени пользователя на странице к уровню доскрола, и различным пользовательским функционалом (рейтинг материала, просмотры и т. п.).
Автоматические SEO-аудиты: как напугать некорректными выводами
SEOquick
38
комментариев
0
читателей
Полный профиль
SEOquick - Парсинг сайтов – это самый лучший способ автоматизировать процесс сбора и сохранения информации. Конкурентов всегда нужно мониторить, а не сравнивать свой сайт через автоматический аудит анализатора.
ТОП КОММЕНТАТОРОВ
Комментариев
910
Комментариев
834
Комментариев
554
Комментариев
540
Комментариев
483
Комментариев
373
Комментариев
368
Комментариев
262
Комментариев
249
Комментариев
171
Комментариев
156
Комментариев
139
Комментариев
121
Комментариев
108
Комментариев
97
Комментариев
97
Комментариев
96
Комментариев
85
Комментариев
80
Комментариев
77
Комментариев
67
Комментариев
60
Комментариев
59
Комментариев
57
Комментариев
55

Отправьте отзыв!
Отправьте отзыв!