×
Россия +7 (495) 960-65-87

Дайджест антиспамерской политики Яндекса (2005-2006 гг.)

Россия +7 (495) 960-65-87
SEOnews
Шрифт:
0 3061

Кривые успеха

Поисковые системы разрабатывают и усовершенствуют математические модели оценки качества страниц и ссылок в Сети. Но они редко озвучивают методы борьбы со спамом. Ниже приведен граф, задача которого показать, что поисковая система Яндекс борется со спамом. Граф представлен Александром Садовским, руководителем отдела веб-поиска компании «Яндекс» на конференции «Поисковая оптимизация и продвижение сайтов в Интернете'05». Александр презентовал в 2005 году новые разработки борьбы, только что запущенные в работу.

Этот граф свидетельствует только о том, что в 2005 году Яндексом были запущены в работу автоматические средства борьбы со спамом.

В 2006 году Яндекс перед очередной конференцией оптимизаторов выкладывает новую страницу FAQ для вебмастеров, в которой охарактеризовывает основные принципы «хороших» сайтов и примеры «плохих» методов продвижения. Формально спор SEO и Яндекса о том, что поисковики сами порождают спам SEO, не предоставляя оптимизаторам описание спама, можно считать завершенным. Теперь у оптимизаторов есть целая страница, являющаяся навигационным ориентиром для «правильной» оптимизации.

Методы борьбы

Использовать понятие «принцип оценки» спам-методов Яндекс начал за год до выкладывания описания принципов в справочном материале для вебмастеров. На конференции в 2005 году Александр Садовский выделил общие принципы, на основании которых Яндекс оценивает качество сайта и причисляет (или не причисляет) сайт к спаму. Со слов Садовского, Яндекс разделяет для себя «мусорные» страницы и «спамовые», но и те и другие не представляют интереса для пользователей, поэтому алгоритмы антиспама борются с обеими категориями.

Борьба с мусором

  • дубликаты и клоны: шинглы, лексические сигнатуры, сниппеты;
  • технический мусор: высокая изменчивость текстов и URL.

Антиспам

  • статистический анализ текста;
  • анализ распределения ссылок;
  • обнаружение колец;
  • TrustRank.

Хроники ратного труда Яндекса и SEO

Нигде не запечатлены. И я тоже вам их не представлю. Скажу лишь, что за короткий век функционирования сетевых поисковых систем были вехи «успехов» и «поражений» обеих сторон. И обе стороны отдают себе отчет, что противостояние – не лучший способ для сосуществования, если кидаться на амбразуру твоя звезда будет освещать поле боя несколько секунд, но если просто работать, на регулярной основе осваивая методики «противника», то практическая выгода не заставит себя ждать.

Очередной этап противостояния прошел в начале осени 2006 . В целом это обострение борьбы похоже на все предшествующие. Подробно об этом писал Хабрахабр. Основные вехи:

«Яндекс наносит удар по дорвеям»

«Я не помню, чтобы лично мне ру-дорвеи приносили так мало денег, как стало в последние недели две-три, — говорит один из «черных» оптимизаторов, который скрывается за ником Дмитрий Гуглов. — Да и посмотрев топ-10 мастеров рупоиска за сутки (25 августа 2006 г.), хочется рыдать: относительно нормальные результаты только у первых четырех мест, остальное же просто ужас. Про себя вообще молчу, сутки я закончу примерно на 25-27 месте».

Ситуацию комментирует Илья Сегалович, технический директор «Яндекса»: «Возможно, автор заметки прав в том, что в “Яндексе” дорвеи любого типа перестали держаться дольше суток-двух. Мы действительно провели важный этап усовершенствований системы антиспама: по наши собственным измерениям, доля спама в выдаче во второй половине лета заметно и устойчиво упала».

О планах… технический директор «Яндекса» запугивает дорвейщиков «маховиком антиспама»: «Мы видим, что дорвеестроительство — пока еще выгодный бизнес, и нам надо немало потрудиться. Есть еще куда развивать систему, и мы намерены с еще большей энергией раскручивать “маховик” своего антиспама. Пользователи поисковой системы “Яндекс” должны видеть качественную выдачу, свободную от спама — это для нас приоритет номер один», — сказал Илья Сегалович.

«Дорвеи наносят ответный удар»

«Дорвейщики рыдают так громко, что от их стенаний уже нигде не спрячешься. Однако те, кто уже подсели на иглу дешевого дорвейного трафика, так просто с нее не слезут.

Это значит что «блокнотиков» и «рупоисков» в рунете будет сотни и сотни. А что поделаешь, Яндекс ужесточает правила игры и ребята с темной стороны отвечают ему тем же. Пострадает, конечно, сервер, но до него дела нет ни тем, ни другим».

Отсутствие правового регулирования

Цитата из интервью Александра Садовского, руководителя отдела веб-поиска Яндекса:
SEONEWS:
- Возможно один из путей цивилизации данного рынка - это попытка внедрения определенных норм и законов? Александра Садовский:
- Проблема в том, что грань данной области настолько тонкая, если ее не могут определить даже на словах, то действие каких-либо законов, карающих в этой области, может привести к значительному перекосу, к каким-то непредсказуемым явлениям. Вмешательство серьезного игрока, например, государства, который действует по формальным законам, создаст сегодня гораздо больше перекосов, чем пользы. Веб-поиск – это поиск по открытой коллекции, проблемы спама в закрытой коллекции не существует. Открытая коллекция, по определению, бесконечна, поисковые системы дают себе право экономить ресурсы, не индексируя до бесконечности, а индексируя только то, что может быть интересно пользователям.

Лицом к Западу

Западный рынок поисковых систем шире и представляется более «цивилизованным», поэтому и возможные методы борьбы со спамом (они же и методы усовершенствования поисковых алгоритмов ранжирования) можно отслеживать по патентам, регистрируемым поисковиками.

Сейчас, например, SEO-общественность взбудоражена новым патентом Google, в котором описывается методология обнаружения спам-документов, основанная на анализе словосочетаний (фраз). Патенты (как официальные документы) позволяют оптимизаторам системно отслеживать обновления алгоритмов ранжирования, а не отдаваться целиком на гипотетические пересуды в формах. Стоит отметить, что представители российских поисковых систем участвуют в научных форумах, и представленные там материалы, конечно же, обладают ценностью для seo-шников.

В итоге

Фактически представители поисковых систем отказались от декларации противостояния оптимизаторскому сообществу. Огласка «плохих» методов и участие в SEO-шных конференциях это уже сотрудничество. Но не стоит сбрасывать со счетов и то, что возможными причинами для сотрудничества являются и такие: дезинформация, сбор информации, информация, нацеленная оказать влияние на методы вебмастеров (оптимизаторов) с целью защиты алгоритма, общность интересов.

(Голосов: 5, Рейтинг: 5)
Читайте нас в Telegram - digital_bar

Есть о чем рассказать? Тогда присылайте свои материалы Даше Калинской


Новые 
Новые
Лучшие
Старые
Сообщество
Подписаться 
Подписаться на дискуссию:
E-mail:
ОК
Вы подписаны на комментарии
Ошибка. Пожалуйста, попробуйте ещё раз.
Отправить отзыв
ПОПУЛЯРНЫЕ ОБСУЖДЕНИЯ НА SEONEWS
Google Data Studio: делаем красивые отчеты по контекстной рекламе для клиентов
Светлана Зубрицкая
1
комментарий
0
читателей
Полный профиль
Светлана Зубрицкая - Нужно убрать пробелы между строк и заменить кавычки на вот такие "
#SEOnews14: мы празднуем – вы получаете подарки!
Анна Макарова
358
комментариев
0
читателей
Полный профиль
Анна Макарова - Гость, добрый день! С победителями мы связывались сразу после розыгрыша. Если мы вам не написали, значит, ваш номер не выпал. Но не расстраивайтесь, у нас обязательно будут новые розыгрыши!
Как ускорить сайт на WordPress, чтобы получить 100/100 в Google PageSpeed Insights
Георгий
1
комментарий
0
читателей
Полный профиль
Георгий - Все что рекомендуется в этой статье есть у w.tools. Ни разу не пожалел что подключился. Своя CDN сеть, кеш статики и динамики, минификация js\css и кешируемого html, оптимизация всех типов картинок и еще куча всего полезного. Сайт летает и я не знаю проблем. Могу рекомендовать от души.
Война с дубликатами. Как нужно и как не нужно канонизировать URL
Ann Yaroshenko
5
комментариев
0
читателей
Полный профиль
Ann Yaroshenko - Дмитрий, добрый день! Если вы проставили на странице с автозапчастями rel=canonical ( а я вижу в коде, что не проставили) или в HTTP хедере, то бот, как правило: выберит ту страницу главной, которую вы указали в rel=canonical ссылке. Eсли же вы этого не сделали, то бот сам выберит оригинал (алгоритмы, по которым бот это делает, скрыты Googl-ом)
«Аудит, чтобы ты заплакала…», или Что делать, когда получил сторонний аудит сайта
Евгений
1
комментарий
0
читателей
Полный профиль
Евгений - Воообще, на самом деле здесь двоякое впечатление от таких аудитов. Конечно, для полного глубокого анализа и подготовки рекомендаций по сайту - нужны доступы к системам аналитики и инструментам вебмастера. Но если оценивать подобные аудиты с точки зрения чистого SEO (которое все больше и больше становится лишь малой частью digital-маркетинга, лишь одним из каналов) - они имеют место быть. Но с оговоркой, что они сделаны с учетом анализа конкурентов/отрасли. Современные инструменты и алгоритмы позволяют делать это маркетологам в автоматическом режиме, и даже давать рекомендации - возможностями машинного обучения уже никого не удивишь. Да, полное перечисление "мифического" списка ошибок, построенного по предикативным правилам, да еще и с учетом устаревших особенностей ПС - это явный признак некачественного аудита. В первую очередь потому, что эти "ошибки" следует рассматривать в качестве рекомендаций от ПС (как и говорится в справочнике вебмастера у Яндекса/Google). Однако если эти данные даются с отсылкой на данные о конкурентах, об отрасли, используются методы ML и Natural language processing для обработки исходных данных, кластеризации запросов, классификации страниц/запросов/сайтов, определения структуры документа - такие отчеты имеют право на существование. Но ключевым моментом является то, что подобные инструменты достаточно сложны в разработке, а значит требуют квалифицированных специалистов для их разработки. Которых просто нет у студий рассылающих подобные "сео отчеты". Подобные отчеты по "ошибках" тоже неплохой источник информации, но лишь на 0 этапе анализа сайта. И в принципе, теоретически, возможно почти полное составление "хороших аудитов" без участия маркетолога, на основе лишь открытых данных сайта/внешних источников, но только при соответствующем применении всех современных возможностей анализа данных и рекомендательных систем. И в любом случае подобный "хороший отчет" требует конечного заключения от эксперта.
От мечты стать юристом к собственному SMM-агентству. Как найти себя в современном цифровом мире
Гость
1
комментарий
0
читателей
Полный профиль
Гость - Статья выглядит, как резюме студента - когда рассказать нечего, рассказываешь все подряд: "а потом я школу закончил, о жизни, о том, о сем..." Удачи, конечно, ребята, вам! Но, видимо, гранит науки ещё грызть и грызть, опыт нарабатывать и нарабатывать... Дерзайте.
BDD 2019: Как перестать убивать время на сбор и обработку тонны данных для SEO-аудита
Feth
1
комментарий
0
читателей
Полный профиль
Feth - Тот момент, когда от статьи в интернете получаешь больше полезных знаний и навыков, чем от своего начальства. По статьям нетпиковцев можно учебник про SEO уже сшивать, ребята молодцы. Спасибо, что делитесь информацией.
10 элементов сайта, которые гарантированно отпугнут посетителей
Андрей
2
комментария
0
читателей
Полный профиль
Андрей - Ну типа потому что клиентское seo больше для коммерции предназначено. Типа контентники и сами знают что делать. В коммерции можно тысячу причин найти чтобы поработать с сайтом, а с контентными такие фокусы уже не прокатят, поэтому и не пишут. Всё продвижение для контентников сеошники описывают в трех словах: скорость, качество, систематичность. А, ну ещё конечно же СЯ, как же я про него забыл (фундамент жеть!).
Как вывести сайт в ТОП 10 Google в 2019 году
Анна Макарова
358
комментариев
0
читателей
Полный профиль
Анна Макарова - Сергей, в нашей отрасли много заимствований из английского, иногда с ними быстрее, проще .Но будем стараться ))
Как улучшить репутацию сайта недвижимости с помощью крауд-маркетинга
Евгений
2
комментария
0
читателей
Полный профиль
Евгений - а у вас какое впечатление от статьи?
ТОП КОММЕНТАТОРОВ
Комментариев
910
Комментариев
834
Комментариев
554
Комментариев
540
Комментариев
483
Комментариев
373
Комментариев
358
Комментариев
262
Комментариев
249
Комментариев
171
Комментариев
156
Комментариев
137
Комментариев
121
Комментариев
106
Комментариев
97
Комментариев
97
Комментариев
96
Комментариев
80
Комментариев
77
Комментариев
73
Комментариев
67
Комментариев
60
Комментариев
59
Комментариев
57
Комментариев
55

Отправьте отзыв!
Отправьте отзыв!