Как увеличить трафик с помощью SEO и не загубить его системой безопасности. Кейс

Павел Кондрашов

Ведущий менеджер поискового продвижения i-Media

Клиент пришел в агентство на SEO-продвижение в феврале 2023 года. Компания создает украшения, которые добавляют красок в повседневность и будут уместны в разные моменты жизни: на работе, в окружении семьи и друзей, на прогулке с детьми.

Основная задача – привлечение целевого трафика и повышение позиций в выдаче. За год нам удалось выйти в топ-10 и увеличить органический трафик на 973%, но из-за ошибок при настройке систем безопасности сайт упал в выдаче, что привело к снижению трафика и конверсий.

Расскажем, что случилось, удалось ли нам исправить ситуацию, и поделимся советами, как избежать подобных факапов.

Начало работы: первые сложности и успехи

В первый месяц работы столкнулись с проблемой. При анализе сайта выявили ошибку в структуре размещения товара. Один и тот же товар отображался в разных категориях под разным URL. Данный факт негативно влиял на ранжирование: такие товары выбивают друг друга из индекса поисковых систем.

Для решения проблемы сделали следующее:

• вынесли все товары в одну категорию;
• заменили прошлые ссылки на товар в остальных категориях на актуальные;
• настроили 301 редиректы со старых URL на новые;
• заменили все ссылки на карточках с параметрами в URL на корректные без включения параметров;
• удалили неактуальные директивы и добавили директивы для закрытия страниц фильтрации в robots.txt;
• открыли для индексации часть страниц, которые раньше были скрыты.

Когда корректному индексированию ничего не мешало, мы создали порядка 80 посадочных страниц для привлечения ранее не охваченного целевого трафика.

Когда все сломалось

Еще до нового года клиента беспокоили наплывы роботов. Мы об этом знали и уверяли, что ситуация под контролем, но по просьбе клиента порекомендовали несколько сервисов по безопасности сайта. С января 2024 года клиент подключил Cloudflare, а уже спустя две недели показатели начали падать.

Первый откат по трафику произошел 14 января. Искали проблемы в работе сайта, но не обнаружили того, что могло повлиять на отвал трафика. При ручной проверке нашли – некорректно работали все теговые страницы.

Все ссылки одинаковые на разных тегах

На мобильной версии ссылки стали не кликабельны, а поскольку 80% трафика шло с мобильных устройств, это стало критической ошибкой

Вместе с этим при выгрузке нового товара некорректно отображались фильтры на некоторых теговых страницах. После всех исправлений трафик начал понемногу восстанавливаться, но ненадолго. Вторая волна падения произошла в начале февраля. Снова начали искать ошибки, из-за которых мог так резко обвалиться трафик.

Выяснили, что при настройке безопасности через сервис подрядчики закрыли доступ к сайту всем ботам. Пользователи видели и открывали сайт, а роботы поисковых систем – нет, и при обходе они определяли все страницы как 403 ошибки и выкидывали их из индекса.

Мы оперативно составили техническое задание и передали клиенту, чтобы он внес исправления. После подрядчик разрешил обход для ботов поисковых систем, но проблема решилась не полностью. Поскольку доступ к парсингу был запрещен клиентом, мы опирались только на данные официальных сервисов: Яндекс Вебмастера и GSC.

Через некоторое время с помощью Яндекс Вебмастера обнаружили, что при посещении страниц пагинации робот получает ответ 404, и доступ к запрошенному ресурсу запрещен. При том что аналогичная страница без пагинации отдает 200 ОК, что означает корректный ответ сервера.

Ошибку исправили. Спустя месяц трафик стал восстанавливаться.

Как найти баланс между системами безопасности и SEO

Настройка Cloudflare для сохранения SEO требует внимательного подхода. Делимся рекомендациями.

Оптимизируйте скорость загрузки. Включите функции Cloudflare, такие как автоматическое сжатие, минификацию CSS, JavaScript и HTML, а также изображений, для ускорения загрузки страниц. Это улучшит пользовательский опыт и положительно скажется на позициях в поиске.

Включите Cloudflare CDN (сеть доставки контента). CDN сокращает время загрузки страниц, кешируя контент на серверах, расположенных ближе к пользователю. Это уменьшает время отклика сервера и улучшает общую производительность сайта.

Проводите мониторинг и обслуживание сайта. Регулярно проверяйте отчеты и логи Cloudflare, чтобы вовремя обнаружить ошибки, негативно влияющие на SEO. Убедитесь, что Cloudflare не блокирует поисковых ботов.

Избегайте потенциальных SEO-проблем. Убедитесь, что Cloudflare не кеширует страницы с динамическим контентом, поскольку это может привести к нежелательным последствиям для индексации сайта.

Работайте в команде с SEO. Настройте функции безопасности Cloudflare так, чтобы обеспечить защиту от DDoS-атак и вредоносных ботов, сохранив при этом доступность сайта для поисковых систем.

Важно помнить, что каждый сайт индивидуален, и эффективность конкретных настроек Cloudflare может варьироваться. Рекомендуем провести тестирование до и после внесения изменений, чтобы определить их влияние на производительность сайта и его SEO-показатели. И сообщать SEO-специалистам обо всех изменениях на сайте, которые планируются, чтобы сохранить деньги и не перечеркнуть достигнутые результаты. ​