×
Россия +7 (495) 139-20-33

Разработка и продвижение IT-продукта: какие ошибки подстерегают продуктовую команду

Россия +7 (495) 139-20-33
Шрифт:
0 5991

Партнерский материал

Полтора года назад специалисты сервиса Rookee разработали и запустили технологию «Автопилот» на основе искусственного интеллекта, благодаря которой удалось оптимизировать управление контекстными рекламными кампаниями и существенно повысить их эффективность (в среднем на 20%).

В этом тексте мы расскажем, с какими проблемами мы столкнулись при продвижении новой технологии, почему так произошло и как избежать наших ошибок.

Как Rookee внедряли искусственный интеллект в процессы настройки и оптимизации контекстной рекламы

Когда нужно оптимизировать несколько тысяч ключевых слов

У нас в холдинге (сервис Rookee входит в холдинг Ingate) был продукт, в рамках которого мы создавали и продавали контекстную рекламу, — вспоминает о начале работы над «Автопилотом» руководитель направления проектов Дмитрий Кулагин. — Раньше работа строилась так: специалисты писали объявление, вручную определяли аудиторию и цену. Это было недостаточно эффективно: сотрудники изменяли настройки рекламных кампаний примерно несколько раз в месяц — делать это чаще не было ни сил, ни времени. Учитывая, что в средней рекламной кампании используется примерно 600-700 ключевых слов, а в крупных может быть вообще несколько тысяч. Свести их в Excel — большая работа.

Именно поэтому в агентстве приняли решение оптимизировать управление рекламными кампаниями. Специалисты занимались созданием «Автопилота» почти полтора года. И в итоге разработали технологию на основе искусственного интеллекта, которая в режиме 24/7 собирает статистику по различным объявлениям, анализирует ее и распределяет бюджеты, выставляя ставки так, чтобы получить максимум лидов (или трафика — в зависимости от того, что будет задано в качестве целевого значения).

Дмитрий Кулагин

Технически это задача многомерной оптимизации с ограничениями. Вначале мы пробовали ее решать «алгоритмом рюкзака», предположив, что для попадания на определенную позицию нужно поставить ту ставку, которую указывает Яндекс, но оказалось, что на нужную позицию мы не попадаем. Поэтому мы построили статистическую модель, которая параметрически подстраивается под конкретную статистику конкретного ключа за конкретный период времени, и оставляет один свободный параметр в каждом ключе — ставку.

После тестов стало понятно, что «Автопилот» гораздо эффективнее старой модели управления рекламными кампаниями.

Дмитрий Кулагин: 

На 30 проектах мы провели А/В-тестирование: сделали копию кампаний и начали запускать ее через час — час ручной настройки, час — автоматической. Через две недели сравнили эффективность одного и другого варианта: по всем проектам первенство было у «Автопилота» (за исключением пары сайтов, которые находились на доработке).

Как Rookee внедряли искусственный интеллект в процессы настройки и оптимизации контекстной рекламы

С какими проблемами мы столкнулись и какие ошибки допустили

Сейчас «Автопилот» успешно используется, как внутри холдинга для управления контекстной рекламой, так и клиентами сервиса Rookee. Продукт регулярно улучшают и дорабатывают — например, из-за изменений в Яндекс.Директе или возникновении новых форматов рекламы. Однако в процессе внедрения и продвижения нового продукта мы столкнулись с несколькими проблемами, предусмотреть которые заранее, к сожалению, не смогли.

1. «Давайте не будем»

Внедрение нового продукта внутри холдинга прошло не совсем гладко. 

Так обычно происходит со всем новым: люди не очень хотят этим пользоваться, потому что нужно учиться, — объясняет Дмитрий Кулагин. — Поэтому первой реакцией было: «Давайте не будем». Но потом сотрудники все-таки учатся, а насколько быстро — зависит от заинтересованности руководителя отдела и размера структуры. Со всей нашей компанией мы, наверное, договаривались полгода.

Как Rookee внедряли искусственный интеллект в процессы настройки и оптимизации контекстной рекламы

Рис.1 «Кривая диффузии инноваций» Эверетта Роджерса, дополненная Юргеном Аппело

Дмитрий добавляет, что в управлении это не сложная программа: «в ней задается бюджет, цели и максимальная ставка, а дальше ты в это просто веришь. Но не все хотят верить, потому что от этого зависит премия: то ли получится, то ли не получится — просто страшно».

Такая реакция на новый продукт довольно типична: согласно кривой изменений, в основе которой работа психиатра Элизабет Кюблер-Росс, в ситуации перемен люди обычно проходят несколько этапов: сначала отрицают необходимость нововведений, но в итоге принимают их. Чтобы не допустить «пробуксовки» новых технологий, полезно использовать модель Роджерса (рис.1), поделив сотрудников на типы, и проводить отдельную разъяснительную работу в группах «Инноваторы» и «Первопроходцы». В случае успеха остальное большинство подтянется.

2. Когда не с того начали

После успешных тестов в холдинге команда сервиса проанализировала международный рынок: решения, подобные «Автопилоту» на нем были востребованы, поэтому стали готовить свою технологию к продаже для начала в России. Но что-то пошло не так.

Один из отцов-основателей «Автопилота» Дмитрий Кулагин считает, что главная ошибка связана с продвижением на внешний рынок — в продукт и его позиционирование было вложено слишком много средств на этапе подготовки, и это не окупилось. «Мы думали, что сервис гарантированно будет продаваться, и потратили много времени на «обертку», разработку интерфейса. Однако продать его крупным агентствам не удалось. Точнее не удалось продать массово. Те несколько агентств, которые тогда поверили в технологию, до сих пор работают с «Автопилотом». Но в целом экономика не сошлась, т.е. превратить разовые продажи в массовый поток и зарабатывать больше, чем тратить на привлечение клиентов на тот момент не удалось. Теперь уже очевидно, чтобы не прогореть на продвижении, нужно делать МVР (минимально жизнеспособный продукт) с еще меньшими затратами. Если сервис продается, начинайте быстро доделывать его до нормального состояния, параллельно расширяя аудиторию. Если нет — без сожаления переходите на другой проект».

Решение

В нашем случае ситуация решилась так: сейчас «Автопилот» продают Rookee в более низкочековом сегменте. 

На широкую аудиторию мы активно запустили MVP «Автопилота» год назад, после этого в течение полугода привлекали пользователей в систему и собирали фидбек по функционалу и результативности, — рассказал product owner системы «Автопилот» Константин Орешников. — На текущий момент идет стадия доработки системы после запуска пользовательского MVP. Мы не планируем массово привлекать аудиторию до момента выпуска следующего релиза, в рамках которого готовим масштабное обновление системы: оно отразится на важных деталях работы с сервисом, удобстве его использования, плюс, добавим дополнительную отчетность и аналитику. Основное ядро клиентов сейчас состоит из лояльных пользователей, которые с нами почти с самого начала, но есть и постоянный приток новых клиентов. В основном это представители малого и среднего бизнеса, есть и несколько агентств. Приток осуществляется за счет кросс-привлечения из других наших сервисов.

Как Rookee внедряли искусственный интеллект в процессы настройки и оптимизации контекстной рекламы

Чек-лист: что нужно сделать, чтобы не наступить на наши грабли

1. Внедряя новый продукт внутри компании, гораздо эффективней может быть не декларация решений сотрудникам о нововведениях «сверху», а изменение общественного мнения о них изнутри с помощью «лидеров мнений».

2. При этом внедрять инновации необходимо как можно быстрее, иначе они окажутся нежизнеспособными. Чем меньше времени уйдет на то, чтобы коллектив привык работать «по-новому», тем меньше шансов, что новшество захотят упростить или просто займутся профанацией.

3. И всем известное правило: «Сначала продавайте, потом дорабатывайте». Ключевые слова для внедрения нового продукта — быстро и дешево, т.е. буквально, если что-то не получается, то можно попробовать еще пару раз, но потом нужно без сожаления переключиться на другие задачи.

(Голосов: 4, Рейтинг: 4.75)
Читайте нас в Telegram - digital_bar

Хотите стать нашим партнёром? Пишите в коммерческий отдел.


Новые 
Новые
Лучшие
Старые
Сообщество
Подписаться 
Подписаться на дискуссию:
E-mail:
ОК
Вы подписаны на комментарии
Ошибка. Пожалуйста, попробуйте ещё раз.
Отправить отзыв
ПОПУЛЯРНЫЕ ОБСУЖДЕНИЯ НА SEONEWS
Что скрывает «Прогноз бюджета Яндекс.Директ»?
Михаил Мухин
14
комментариев
0
читателей
Полный профиль
Михаил Мухин - Здравствуйте! 1-2. Считает стенд. Ссылка на него дана, но могу повторить: online.p-c-l.ru/competition/task/card/id/106. Нажмите на кнопку "Начать" и заранее приготовьте прогноз бюджета Яндекс. Суть расчета: перебор комбинаций всех ставок на всех фразах, построение бюджетных когорт - бюджетов с одинаковым СРС, отбор в каждой когорте бюджета с максимальным количеством кликов и ..., да упорядочивание этих бюджетов по мере возрастания СРС, причем берем не все, а с фиксированным шагом. 3. Гугл считается через поправочные коэффициенты. Мы перевариваем океан данных и представляем их. На удивление, получается не менее, хотя и не более точно, как и прогноз Яндекс. Конечно, нужно понимать, что это очень примерные прикидки, фактически перевод неточного прогноза Яндекс в удобочитаемую форму, не больше. Самое интересное начинается, когда применяешь метод бюджетных когорт к измерению показателей фраз на реальной рекламной кампании в режиме 48х7. Первые результаты очень хорошие. Если хотите присоединиться к бесплатному тестированию, напишите Эльвире r-support@r-broker.ru. В теме укажите "хочу присоединиться к тестам Умного управления рекламой"
#SEOnews14: мы празднуем – вы получаете подарки!
Анна Макарова
362
комментария
0
читателей
Полный профиль
Анна Макарова - Гость, добрый день! С победителями мы связывались сразу после розыгрыша. Если мы вам не написали, значит, ваш номер не выпал. Но не расстраивайтесь, у нас обязательно будут новые розыгрыши!
Ссылочное продвижение локальных сайтов: ТОП худших SEO-методов
Блорик Саакашвили
2
комментария
0
читателей
Полный профиль
Блорик Саакашвили - Ну а так конечно согласен видно что у автора статьи не такие и глубокие знания...
Как ускорить сайт на WordPress, чтобы получить 100/100 в Google PageSpeed Insights
Георгий
1
комментарий
0
читателей
Полный профиль
Георгий - Все что рекомендуется в этой статье есть у w.tools. Ни разу не пожалел что подключился. Своя CDN сеть, кеш статики и динамики, минификация js\css и кешируемого html, оптимизация всех типов картинок и еще куча всего полезного. Сайт летает и я не знаю проблем. Могу рекомендовать от души.
Война с дубликатами. Как нужно и как не нужно канонизировать URL
Ann Yaroshenko
5
комментариев
0
читателей
Полный профиль
Ann Yaroshenko - Дмитрий, добрый день! Если вы проставили на странице с автозапчастями rel=canonical ( а я вижу в коде, что не проставили) или в HTTP хедере, то бот, как правило: выберит ту страницу главной, которую вы указали в rel=canonical ссылке. Eсли же вы этого не сделали, то бот сам выберит оригинал (алгоритмы, по которым бот это делает, скрыты Googl-ом)
«Аудит, чтобы ты заплакала…», или Что делать, когда получил сторонний аудит сайта
Евгений
1
комментарий
0
читателей
Полный профиль
Евгений - Воообще, на самом деле здесь двоякое впечатление от таких аудитов. Конечно, для полного глубокого анализа и подготовки рекомендаций по сайту - нужны доступы к системам аналитики и инструментам вебмастера. Но если оценивать подобные аудиты с точки зрения чистого SEO (которое все больше и больше становится лишь малой частью digital-маркетинга, лишь одним из каналов) - они имеют место быть. Но с оговоркой, что они сделаны с учетом анализа конкурентов/отрасли. Современные инструменты и алгоритмы позволяют делать это маркетологам в автоматическом режиме, и даже давать рекомендации - возможностями машинного обучения уже никого не удивишь. Да, полное перечисление "мифического" списка ошибок, построенного по предикативным правилам, да еще и с учетом устаревших особенностей ПС - это явный признак некачественного аудита. В первую очередь потому, что эти "ошибки" следует рассматривать в качестве рекомендаций от ПС (как и говорится в справочнике вебмастера у Яндекса/Google). Однако если эти данные даются с отсылкой на данные о конкурентах, об отрасли, используются методы ML и Natural language processing для обработки исходных данных, кластеризации запросов, классификации страниц/запросов/сайтов, определения структуры документа - такие отчеты имеют право на существование. Но ключевым моментом является то, что подобные инструменты достаточно сложны в разработке, а значит требуют квалифицированных специалистов для их разработки. Которых просто нет у студий рассылающих подобные "сео отчеты". Подобные отчеты по "ошибках" тоже неплохой источник информации, но лишь на 0 этапе анализа сайта. И в принципе, теоретически, возможно почти полное составление "хороших аудитов" без участия маркетолога, на основе лишь открытых данных сайта/внешних источников, но только при соответствующем применении всех современных возможностей анализа данных и рекомендательных систем. И в любом случае подобный "хороший отчет" требует конечного заключения от эксперта.
От мечты стать юристом к собственному SMM-агентству. Как найти себя в современном цифровом мире
Виктор Брухис
5
комментариев
0
читателей
Полный профиль
Виктор Брухис - Статья выглядит так, как пожелали редакторы и интервьюер) Вопросы к интервью подбирал не я)) Хотя, в целом я согласен с вашим видением. А за пожелание удачи большое спасибо!
BDD 2019: Как перестать убивать время на сбор и обработку тонны данных для SEO-аудита
Kosta Bankovski
4
комментария
0
читателей
Полный профиль
Kosta Bankovski - Спасибо за приятные слова! Буду и дальше делиться наработками ;)
Как провести анализ содержания страниц товаров и категорий
Никита Седнин
3
комментария
0
читателей
Полный профиль
Никита Седнин - Спасибо!
Как вывести сайт в ТОП 10 Google в 2019 году
Роман
1
комментарий
0
читателей
Полный профиль
Роман - Вот скажите пожалуйста, Мне разработали сайт на мою фирму, www.линк.kz и теперь надо решить, сео продвижение у нас стоит около 25000 - 30000 руб. в месяц, для меня сумма не маленькая стоит ли оно того? или можно просто оптимизировать сайт в плане СЕО и выходить в ТОП за счет трафика?
ТОП КОММЕНТАТОРОВ
Комментариев
910
Комментариев
834
Комментариев
554
Комментариев
540
Комментариев
483
Комментариев
373
Комментариев
362
Комментариев
262
Комментариев
249
Комментариев
171
Комментариев
156
Комментариев
137
Комментариев
121
Комментариев
107
Комментариев
97
Комментариев
97
Комментариев
96
Комментариев
82
Комментариев
80
Комментариев
77
Комментариев
67
Комментариев
60
Комментариев
59
Комментариев
57
Комментариев
55

Отправьте отзыв!
Отправьте отзыв!