×
Россия +7 (495) 139-20-33

Магия rel=canonical и переменная ved

Россия +7 (495) 139-20-33
Шрифт:
11 8780

В данной статье хотелось бы привлечь внимание специалистов к несовершенству тега rel="canonical" и интересной переменной &ved=0CCMQ0Qw.

При стандартной проверке сайта на наличие ошибок было выявлено, что у продвигаемой страницы появился дубль в выдаче поисковой системы Google. В Яндексе такой проблемы замечено не было.

1.png

Дубль был обнаружен при проверке текста на уникальность.

http://site.com.ua/usluga1&ved=0CCMQ0Qw

При анализе дубля было выявлено, что это та же продвигаемая страница, которая отличается лишь переменной в GET запросе ved=0CC0Q0Qw, которая добавлена к URL-адресу. Откуда взялась эта переменная, я не знаю, ранее с таким не встречался.

Попробуем обнаружить, какое количество страниц с переменной &ved было проиндексировано на всем сайте, при помощи поискового запроса:

site:site.com.ua inurl:ved=

В результате найдены 3 таких страницы в индексе поисковой системы:

http://site.com.ua/usluga1&ved=0CCMQ0Qw

http://site.com.ua/usluga2&ved=0CCMQ0Qw

http://site.com.ua/usluga3&ved=0CCMQ0Qw

Хорошо, что дублей не так много. Однако совпадение значения переменной ved у всех таких страниц заставляет задуматься.

Проверим, сколько страниц поисковая система проиндексировала с таким значением переменной для всех сайтов:

inurl:0CCMQ0Qw

Как мы видим из скриншота, множество крупных магазинов содержит аналогичные дубли в индексе поисковой системы Google.

2.jpg

Совет. Проверьте свои сайты, возможно, страницы с переменной &ved есть в индексе, ведь такие сайты, как rozetka.com.ua, eldorado.com.ua и hotline.ua, уже вплотную с ними столкнулись.

Примеры проиндексированных страниц с переменной &ved:

http://hard.rozetka.com.ua/logitech_wireless_mouse_m185_910_002240_red/p178126/&ved=0CCMQ0Qw/

http://www.eldorado.com.ua/led/mystery/c1038962/v352/%26ved=0CCMQ0Qw/

http://hotline.ua/foto-fotoapparaty/nikon-1-aw1-series/?tab=2&ved=0CCMQ0Qw%2F

Я попытался узнать у своих коллег, встречался ли кто-то ранее с данной переменной. Но, к сожалению, это не дало результатов.

Почему данные страницы попали в индекс?

Самое интересное то, что со страниц-дублей (которые содержат различные переменные) на клиентском сайте автоматически прописывается rel="canonical" на основную страницу. Т.е. со всех страниц, которые содержат какие-либо переменные, автоматически добавляется canonical на родительскую страницу.

Приведу пример:

Есть продвигаемая страница http://site.com.ua/usluga1

Мы не хотим, чтобы какие-нибудь страницы с идентификатором сессии в URL-адресе индексировались и попадали в базы поисковых систем, поэтому мы прописываем на http://site.com.ua/usluga1 и всех страницах с переменными в URL:

< link rel="canonical" href="http://site.com.ua/usluga1" />

Т.е. если у нас появится каким-то образом страница http://site.com.ua/usluga1&ved=0CCMQ0Qw, —

то на ней автоматически будет прописан тег: < link rel="canonical" href="http://site.com.ua/usluga1" />

Таким образом мы избавляемся от всевозможных дублей с переменными, делая их дочерними от продвигаемой страницы. Но в данном случае это по каким-то неведомым мне причинам не срабатывает.

Получается так, что страница содержит canonical, является дочерней и все равно индексируется поисковой системой Google.

Попытки решения проблемы

Для того чтобы исключить данные страницы из индекса поисковой системы, было предпринято множество действий, но они не увенчались успехом. Добавляли страницы на повторное индексирование через GWT, пинговали, даже ждали 2 недели, все тщетно.

В конце концов прописали со страниц с переменной &ved=0CCMQ0Qw 301 редирект на соответствующие страницы, и через некоторое время дубли были устранены из индекса поисковой системы Google.

Выводы

Данной статьей я ни в коем случае не хочу сказать, что тег link rel="canonical" плох для избавления сайтов от страниц-дубликатов. Хочу только донести мысль о том, что нужно всегда следить за индексом поисковых систем и анализировать их результаты. Там может быть много интересного.

Также следует максимально часто перепроверять продвигаемые сайты на наличие ошибок с точки зрения оптимизации и своевременно их устранять.

P.S. Буду очень признателен, если кто-то мне объяснит происхождение данной переменной.


(Голосов: 5, Рейтинг: 5)
Читайте нас в Telegram - digital_bar

Есть о чем рассказать? Тогда присылайте свои материалы Ане Макаровой


Новые 
Новые
Лучшие
Старые
Сообщество
Подписаться 
Подписаться на дискуссию:
E-mail:
ОК
Вы подписаны на комментарии
Ошибка. Пожалуйста, попробуйте ещё раз.
Отправить отзыв
  • Сидор Оптимимизатор
    17
    комментариев
    0
    читателей
    Сидор Оптимимизатор
    больше года назад
    "P.S. Буду очень признателен, если кто-то мне объяснит происхождение данной переменной."

    Ох, я всегда считал что коллеги-SEOшники должны уметь искать информацию, особенно в поисковиках. Ну да ладно. Переменная показывает с какой именно части SERP Google (новости, картинка, просто ссылка из органики), пришел пользователь.
    Ознакомьтесь: moz.com/blog/decoding-googles-referral-string-or-how-i-survived-secure-search
    -
    0
    +
    Ответить
  • Женя Кравчук
    1
    комментарий
    0
    читателей
    Женя Кравчук
    больше года назад
    Добрый день ! Анализируя свои сайты тоже нашел такие переменные
    &ved=0CMoBENEM
    &ved=0CBwQ0Qw
    &ved=0CJMBENEM
    -
    0
    +
    Ответить
  • Skarui
    96
    комментариев
    0
    читателей
    Skarui
    больше года назад
    Можно же в robots.txt запретить этот ved не?
    Disallow: */?ved=*
    Disallow: */ved=*
    -
    0
    +
    Ответить
    • quTG
      0
      комментариев
      0
      читателей
      quTG
      Skarui
      больше года назад
      Лучше 301, поведенческие на закрытой странице могут не учитываться
      -
      0
      +
      Ответить
    • Владислав Наумов
      36
      комментариев
      0
      читателей
      Владислав Наумов
      Skarui
      больше года назад
      1.Можно закрыть в Robots.txt.
      2.Можно прописать meta name="robots" content="noindex, nofollow".
      3.Можно удалить данные url через GWT.
      4.Можно сделать чтобы данная страница отдавала код отличный от 200.
      5.Можно запретить сканирование через GWT.
      6.Можно прописать 301 редирект.

      Но тема статьи немножко о другом, а именно о теге link rel="canonical" и переменной ved.
      -
      0
      +
      Ответить
  • SeoBudo
    2
    комментария
    0
    читателей
    SeoBudo
    больше года назад
    Да, поисковые системы хитрые и изворотливые штуки:)
    -
    0
    +
    Ответить
  • SeoBudo
    2
    комментария
    0
    читателей
    SeoBudo
    больше года назад
    &ved=0CCMQ0Qw - подобные переменные могут быть сформированы cms сайта, проверьте, возможно у всех сайтов с наличием этой переменной в урл - одна и та же админка.

    link rel="canonical" - если память не изменяте тег не гарантирует того, что страница с ним не будет проиндексирована, он указывает лишь дает сигнал поисквому роботу о на главную страницу, на которой расположен основной контент

    "support.google.com/webmasters/answer/139066?rd=1   - В э...
    &ved=0CCMQ0Qw - подобные переменные могут быть сформированы cms сайта, проверьте, возможно у всех сайтов с наличием этой переменной в урл - одна и та же админка.

    link rel="canonical" - если память не изменяте тег не гарантирует того, что страница с ним не будет проиндексирована, он указывает лишь дает сигнал поисквому роботу о на главную страницу, на которой расположен основной контент

    "support.google.com/webmasters/answer/139066?rd=1   - В этой статье описано, как использовать канонические URL, чтобы улучшить рейтинг одинакового содержания, размещенного на разных страницах."
    -
    0
    +
    Ответить
    • Владислав Наумов
      36
      комментариев
      0
      читателей
      Владислав Наумов
      SeoBudo
      больше года назад
      На моем подопечном сайте какой-то самопис, не думаю что у розетки и work.ua такой же :)

      Поисковая система ничего не гарантирует, чтобы к ней потом не предъявляли претензий вида :

      - Моя страница не проиндексирована, а в справке написано что в Sitemap.xml укажите страницу и все будет проиндексировано.
      - Canonical не склеил дубликаты.
      - Запрещено сканирование страницы в Robots.txt, а страница всё-равно в индексе.
      - На странице размещен мета тег met...
      На моем подопечном сайте какой-то самопис, не думаю что у розетки и work.ua такой же :)

      Поисковая система ничего не гарантирует, чтобы к ней потом не предъявляли претензий вида :

      - Моя страница не проиндексирована, а в справке написано что в Sitemap.xml укажите страницу и все будет проиндексировано.
      - Canonical не склеил дубликаты.
      - Запрещено сканирование страницы в Robots.txt, а страница всё-равно в индексе.
      - На странице размещен мета тег meta name="robots" content="noindex,nofolow" но страница всё-равно индексируется.
      - И так далее.

      В справке рекомендуется устранять полные дубликаты при помощи тега link rel="canonical", а страницы, которые отличаются только по url как раз полными дубликатами и являются.

      Поэтому следует логичный вывод - Доверяй, но проверяй)
      -
      0
      +
      Ответить
  • Герман Мотуз
    3
    комментария
    0
    читателей
    Герман Мотуз
    больше года назад
    Обнаружил у себя такую штуку: ved=0CJABENEM
    -
    0
    +
    Ответить
    • Владислав Наумов
      36
      комментариев
      0
      читателей
      Владислав Наумов
      Герман Мотуз
      больше года назад
      Добрый день, Герман.

      Тогда получается значение переменной ved может быть разным, очень интересно, спасибо за информацию.

      И Вы не одиноки, у многих других сайтов есть такие же дубли.


      Значит при поиске дублей данного типа необходимо использовать запрос inurl:ved= , а не значение самой переменной.
      -
      0
      +
      Ответить
ПОПУЛЯРНЫЕ ОБСУЖДЕНИЯ НА SEONEWS
Что скрывает «Прогноз бюджета Яндекс.Директ»?
Михаил Мухин
14
комментариев
0
читателей
Полный профиль
Михаил Мухин - Здравствуйте! 1-2. Считает стенд. Ссылка на него дана, но могу повторить: online.p-c-l.ru/competition/task/card/id/106. Нажмите на кнопку "Начать" и заранее приготовьте прогноз бюджета Яндекс. Суть расчета: перебор комбинаций всех ставок на всех фразах, построение бюджетных когорт - бюджетов с одинаковым СРС, отбор в каждой когорте бюджета с максимальным количеством кликов и ..., да упорядочивание этих бюджетов по мере возрастания СРС, причем берем не все, а с фиксированным шагом. 3. Гугл считается через поправочные коэффициенты. Мы перевариваем океан данных и представляем их. На удивление, получается не менее, хотя и не более точно, как и прогноз Яндекс. Конечно, нужно понимать, что это очень примерные прикидки, фактически перевод неточного прогноза Яндекс в удобочитаемую форму, не больше. Самое интересное начинается, когда применяешь метод бюджетных когорт к измерению показателей фраз на реальной рекламной кампании в режиме 48х7. Первые результаты очень хорошие. Если хотите присоединиться к бесплатному тестированию, напишите Эльвире r-support@r-broker.ru. В теме укажите "хочу присоединиться к тестам Умного управления рекламой"
#SEOnews14: мы празднуем – вы получаете подарки!
Анна Макарова
362
комментария
0
читателей
Полный профиль
Анна Макарова - Гость, добрый день! С победителями мы связывались сразу после розыгрыша. Если мы вам не написали, значит, ваш номер не выпал. Но не расстраивайтесь, у нас обязательно будут новые розыгрыши!
Ссылочное продвижение локальных сайтов: ТОП худших SEO-методов
demimurych
5
комментариев
0
читателей
Полный профиль
demimurych - о господи. это для регионального сайта? в яндексе? где у сайта по региону конкурентов меньше чем выдачи на двух страницах из которых перваш это реклама москвы? потешно ей богу. ктото чего то не понеимает.
Как ускорить сайт на WordPress, чтобы получить 100/100 в Google PageSpeed Insights
Георгий
1
комментарий
0
читателей
Полный профиль
Георгий - Все что рекомендуется в этой статье есть у w.tools. Ни разу не пожалел что подключился. Своя CDN сеть, кеш статики и динамики, минификация js\css и кешируемого html, оптимизация всех типов картинок и еще куча всего полезного. Сайт летает и я не знаю проблем. Могу рекомендовать от души.
«Аудит, чтобы ты заплакала…», или Что делать, когда получил сторонний аудит сайта
Евгений
1
комментарий
0
читателей
Полный профиль
Евгений - Воообще, на самом деле здесь двоякое впечатление от таких аудитов. Конечно, для полного глубокого анализа и подготовки рекомендаций по сайту - нужны доступы к системам аналитики и инструментам вебмастера. Но если оценивать подобные аудиты с точки зрения чистого SEO (которое все больше и больше становится лишь малой частью digital-маркетинга, лишь одним из каналов) - они имеют место быть. Но с оговоркой, что они сделаны с учетом анализа конкурентов/отрасли. Современные инструменты и алгоритмы позволяют делать это маркетологам в автоматическом режиме, и даже давать рекомендации - возможностями машинного обучения уже никого не удивишь. Да, полное перечисление "мифического" списка ошибок, построенного по предикативным правилам, да еще и с учетом устаревших особенностей ПС - это явный признак некачественного аудита. В первую очередь потому, что эти "ошибки" следует рассматривать в качестве рекомендаций от ПС (как и говорится в справочнике вебмастера у Яндекса/Google). Однако если эти данные даются с отсылкой на данные о конкурентах, об отрасли, используются методы ML и Natural language processing для обработки исходных данных, кластеризации запросов, классификации страниц/запросов/сайтов, определения структуры документа - такие отчеты имеют право на существование. Но ключевым моментом является то, что подобные инструменты достаточно сложны в разработке, а значит требуют квалифицированных специалистов для их разработки. Которых просто нет у студий рассылающих подобные "сео отчеты". Подобные отчеты по "ошибках" тоже неплохой источник информации, но лишь на 0 этапе анализа сайта. И в принципе, теоретически, возможно почти полное составление "хороших аудитов" без участия маркетолога, на основе лишь открытых данных сайта/внешних источников, но только при соответствующем применении всех современных возможностей анализа данных и рекомендательных систем. И в любом случае подобный "хороший отчет" требует конечного заключения от эксперта.
От мечты стать юристом к собственному SMM-агентству. Как найти себя в современном цифровом мире
Виктор Брухис
5
комментариев
0
читателей
Полный профиль
Виктор Брухис - Статья выглядит так, как пожелали редакторы и интервьюер) Вопросы к интервью подбирал не я)) Хотя, в целом я согласен с вашим видением. А за пожелание удачи большое спасибо!
BDD 2019: Как перестать убивать время на сбор и обработку тонны данных для SEO-аудита
Kosta Bankovski
4
комментария
0
читателей
Полный профиль
Kosta Bankovski - Спасибо за приятные слова! Буду и дальше делиться наработками ;)
Как провести анализ содержания страниц товаров и категорий
Никита Седнин
3
комментария
0
читателей
Полный профиль
Никита Седнин - Спасибо!
Как вывести сайт в ТОП 10 Google в 2019 году
Роман
1
комментарий
0
читателей
Полный профиль
Роман - Вот скажите пожалуйста, Мне разработали сайт на мою фирму, www.линк.kz и теперь надо решить, сео продвижение у нас стоит около 25000 - 30000 руб. в месяц, для меня сумма не маленькая стоит ли оно того? или можно просто оптимизировать сайт в плане СЕО и выходить в ТОП за счет трафика?
Как я пытался купить CRM-систему, но мне ее поленились продать
Kristina
1
комментарий
0
читателей
Полный профиль
Kristina - Очень рекомендую CRM-систему польской фирмы Firmao. Все функции настраиваются в соответствии с индивидуальным потребностям компании! Советую попробовать бесплатную демо-версию, чтобы попробовать все необходимые функции, без лишних кнопок и траты дополнительных финансов! :) Сайт: firmao.ru/info
ТОП КОММЕНТАТОРОВ
Комментариев
910
Комментариев
834
Комментариев
554
Комментариев
540
Комментариев
483
Комментариев
373
Комментариев
362
Комментариев
262
Комментариев
249
Комментариев
171
Комментариев
156
Комментариев
137
Комментариев
121
Комментариев
107
Комментариев
97
Комментариев
97
Комментариев
96
Комментариев
82
Комментариев
80
Комментариев
77
Комментариев
67
Комментариев
60
Комментариев
59
Комментариев
57
Комментариев
55

Отправьте отзыв!
Отправьте отзыв!