×
Россия +7 (495) 139-20-33

Дайджест антиспамерской политики Яндекса (2005-2006 гг.)

Россия +7 (495) 139-20-33
Шрифт:
0 3178

Кривые успеха

Поисковые системы разрабатывают и усовершенствуют математические модели оценки качества страниц и ссылок в Сети. Но они редко озвучивают методы борьбы со спамом. Ниже приведен граф, задача которого показать, что поисковая система Яндекс борется со спамом. Граф представлен Александром Садовским, руководителем отдела веб-поиска компании «Яндекс» на конференции «Поисковая оптимизация и продвижение сайтов в Интернете'05». Александр презентовал в 2005 году новые разработки борьбы, только что запущенные в работу.

Этот граф свидетельствует только о том, что в 2005 году Яндексом были запущены в работу автоматические средства борьбы со спамом.

В 2006 году Яндекс перед очередной конференцией оптимизаторов выкладывает новую страницу FAQ для вебмастеров, в которой охарактеризовывает основные принципы «хороших» сайтов и примеры «плохих» методов продвижения. Формально спор SEO и Яндекса о том, что поисковики сами порождают спам SEO, не предоставляя оптимизаторам описание спама, можно считать завершенным. Теперь у оптимизаторов есть целая страница, являющаяся навигационным ориентиром для «правильной» оптимизации.

Методы борьбы

Использовать понятие «принцип оценки» спам-методов Яндекс начал за год до выкладывания описания принципов в справочном материале для вебмастеров. На конференции в 2005 году Александр Садовский выделил общие принципы, на основании которых Яндекс оценивает качество сайта и причисляет (или не причисляет) сайт к спаму. Со слов Садовского, Яндекс разделяет для себя «мусорные» страницы и «спамовые», но и те и другие не представляют интереса для пользователей, поэтому алгоритмы антиспама борются с обеими категориями.

Борьба с мусором

  • дубликаты и клоны: шинглы, лексические сигнатуры, сниппеты;
  • технический мусор: высокая изменчивость текстов и URL.

Антиспам

  • статистический анализ текста;
  • анализ распределения ссылок;
  • обнаружение колец;
  • TrustRank.

Хроники ратного труда Яндекса и SEO

Нигде не запечатлены. И я тоже вам их не представлю. Скажу лишь, что за короткий век функционирования сетевых поисковых систем были вехи «успехов» и «поражений» обеих сторон. И обе стороны отдают себе отчет, что противостояние – не лучший способ для сосуществования, если кидаться на амбразуру твоя звезда будет освещать поле боя несколько секунд, но если просто работать, на регулярной основе осваивая методики «противника», то практическая выгода не заставит себя ждать.

Очередной этап противостояния прошел в начале осени 2006 . В целом это обострение борьбы похоже на все предшествующие. Подробно об этом писал Хабрахабр. Основные вехи:

«Яндекс наносит удар по дорвеям»

«Я не помню, чтобы лично мне ру-дорвеи приносили так мало денег, как стало в последние недели две-три, — говорит один из «черных» оптимизаторов, который скрывается за ником Дмитрий Гуглов. — Да и посмотрев топ-10 мастеров рупоиска за сутки (25 августа 2006 г.), хочется рыдать: относительно нормальные результаты только у первых четырех мест, остальное же просто ужас. Про себя вообще молчу, сутки я закончу примерно на 25-27 месте».

Ситуацию комментирует Илья Сегалович, технический директор «Яндекса»: «Возможно, автор заметки прав в том, что в “Яндексе” дорвеи любого типа перестали держаться дольше суток-двух. Мы действительно провели важный этап усовершенствований системы антиспама: по наши собственным измерениям, доля спама в выдаче во второй половине лета заметно и устойчиво упала».

О планах… технический директор «Яндекса» запугивает дорвейщиков «маховиком антиспама»: «Мы видим, что дорвеестроительство — пока еще выгодный бизнес, и нам надо немало потрудиться. Есть еще куда развивать систему, и мы намерены с еще большей энергией раскручивать “маховик” своего антиспама. Пользователи поисковой системы “Яндекс” должны видеть качественную выдачу, свободную от спама — это для нас приоритет номер один», — сказал Илья Сегалович.

«Дорвеи наносят ответный удар»

«Дорвейщики рыдают так громко, что от их стенаний уже нигде не спрячешься. Однако те, кто уже подсели на иглу дешевого дорвейного трафика, так просто с нее не слезут.

Это значит что «блокнотиков» и «рупоисков» в рунете будет сотни и сотни. А что поделаешь, Яндекс ужесточает правила игры и ребята с темной стороны отвечают ему тем же. Пострадает, конечно, сервер, но до него дела нет ни тем, ни другим».

Отсутствие правового регулирования

Цитата из интервью Александра Садовского, руководителя отдела веб-поиска Яндекса:
SEONEWS:
- Возможно один из путей цивилизации данного рынка - это попытка внедрения определенных норм и законов? Александра Садовский:
- Проблема в том, что грань данной области настолько тонкая, если ее не могут определить даже на словах, то действие каких-либо законов, карающих в этой области, может привести к значительному перекосу, к каким-то непредсказуемым явлениям. Вмешательство серьезного игрока, например, государства, который действует по формальным законам, создаст сегодня гораздо больше перекосов, чем пользы. Веб-поиск – это поиск по открытой коллекции, проблемы спама в закрытой коллекции не существует. Открытая коллекция, по определению, бесконечна, поисковые системы дают себе право экономить ресурсы, не индексируя до бесконечности, а индексируя только то, что может быть интересно пользователям.

Лицом к Западу

Западный рынок поисковых систем шире и представляется более «цивилизованным», поэтому и возможные методы борьбы со спамом (они же и методы усовершенствования поисковых алгоритмов ранжирования) можно отслеживать по патентам, регистрируемым поисковиками.

Сейчас, например, SEO-общественность взбудоражена новым патентом Google, в котором описывается методология обнаружения спам-документов, основанная на анализе словосочетаний (фраз). Патенты (как официальные документы) позволяют оптимизаторам системно отслеживать обновления алгоритмов ранжирования, а не отдаваться целиком на гипотетические пересуды в формах. Стоит отметить, что представители российских поисковых систем участвуют в научных форумах, и представленные там материалы, конечно же, обладают ценностью для seo-шников.

В итоге

Фактически представители поисковых систем отказались от декларации противостояния оптимизаторскому сообществу. Огласка «плохих» методов и участие в SEO-шных конференциях это уже сотрудничество. Но не стоит сбрасывать со счетов и то, что возможными причинами для сотрудничества являются и такие: дезинформация, сбор информации, информация, нацеленная оказать влияние на методы вебмастеров (оптимизаторов) с целью защиты алгоритма, общность интересов.

(Голосов: 5, Рейтинг: 5)
Читайте нас в Telegram - digital_bar

Есть о чем рассказать? Тогда присылайте свои материалы Ане Макаровой


Новые 
Новые
Лучшие
Старые
Сообщество
Подписаться 
Подписаться на дискуссию:
E-mail:
ОК
Вы подписаны на комментарии
Ошибка. Пожалуйста, попробуйте ещё раз.
Отправить отзыв
ПОПУЛЯРНЫЕ ОБСУЖДЕНИЯ НА SEONEWS
Что скрывает «Прогноз бюджета Яндекс.Директ»?
Михаил Мухин
14
комментариев
0
читателей
Полный профиль
Михаил Мухин - Здравствуйте! 1-2. Считает стенд. Ссылка на него дана, но могу повторить: online.p-c-l.ru/competition/task/card/id/106. Нажмите на кнопку "Начать" и заранее приготовьте прогноз бюджета Яндекс. Суть расчета: перебор комбинаций всех ставок на всех фразах, построение бюджетных когорт - бюджетов с одинаковым СРС, отбор в каждой когорте бюджета с максимальным количеством кликов и ..., да упорядочивание этих бюджетов по мере возрастания СРС, причем берем не все, а с фиксированным шагом. 3. Гугл считается через поправочные коэффициенты. Мы перевариваем океан данных и представляем их. На удивление, получается не менее, хотя и не более точно, как и прогноз Яндекс. Конечно, нужно понимать, что это очень примерные прикидки, фактически перевод неточного прогноза Яндекс в удобочитаемую форму, не больше. Самое интересное начинается, когда применяешь метод бюджетных когорт к измерению показателей фраз на реальной рекламной кампании в режиме 48х7. Первые результаты очень хорошие. Если хотите присоединиться к бесплатному тестированию, напишите Эльвире r-support@r-broker.ru. В теме укажите "хочу присоединиться к тестам Умного управления рекламой"
Ссылочное продвижение локальных сайтов: ТОП худших SEO-методов
demimurych
5
комментариев
0
читателей
Полный профиль
demimurych - о господи. это для регионального сайта? в яндексе? где у сайта по региону конкурентов меньше чем выдачи на двух страницах из которых перваш это реклама москвы? потешно ей богу. ктото чего то не понеимает.
«Аудит, чтобы ты заплакала…», или Что делать, когда получил сторонний аудит сайта
Евгений
1
комментарий
0
читателей
Полный профиль
Евгений - Воообще, на самом деле здесь двоякое впечатление от таких аудитов. Конечно, для полного глубокого анализа и подготовки рекомендаций по сайту - нужны доступы к системам аналитики и инструментам вебмастера. Но если оценивать подобные аудиты с точки зрения чистого SEO (которое все больше и больше становится лишь малой частью digital-маркетинга, лишь одним из каналов) - они имеют место быть. Но с оговоркой, что они сделаны с учетом анализа конкурентов/отрасли. Современные инструменты и алгоритмы позволяют делать это маркетологам в автоматическом режиме, и даже давать рекомендации - возможностями машинного обучения уже никого не удивишь. Да, полное перечисление "мифического" списка ошибок, построенного по предикативным правилам, да еще и с учетом устаревших особенностей ПС - это явный признак некачественного аудита. В первую очередь потому, что эти "ошибки" следует рассматривать в качестве рекомендаций от ПС (как и говорится в справочнике вебмастера у Яндекса/Google). Однако если эти данные даются с отсылкой на данные о конкурентах, об отрасли, используются методы ML и Natural language processing для обработки исходных данных, кластеризации запросов, классификации страниц/запросов/сайтов, определения структуры документа - такие отчеты имеют право на существование. Но ключевым моментом является то, что подобные инструменты достаточно сложны в разработке, а значит требуют квалифицированных специалистов для их разработки. Которых просто нет у студий рассылающих подобные "сео отчеты". Подобные отчеты по "ошибках" тоже неплохой источник информации, но лишь на 0 этапе анализа сайта. И в принципе, теоретически, возможно почти полное составление "хороших аудитов" без участия маркетолога, на основе лишь открытых данных сайта/внешних источников, но только при соответствующем применении всех современных возможностей анализа данных и рекомендательных систем. И в любом случае подобный "хороший отчет" требует конечного заключения от эксперта.
От мечты стать юристом к собственному SMM-агентству. Как найти себя в современном цифровом мире
Виктор Брухис
5
комментариев
0
читателей
Полный профиль
Виктор Брухис - Статья выглядит так, как пожелали редакторы и интервьюер) Вопросы к интервью подбирал не я)) Хотя, в целом я согласен с вашим видением. А за пожелание удачи большое спасибо!
Как вывести сайт в ТОП 10 Google в 2019 году
Гость
1
комментарий
0
читателей
Полный профиль
Гость - Интересная статья. Подскажите на каких ресурсах расположить ссылки бесплатно по автобезопасности? Наш сайт bastion-center.ru/
Зачем подменять контент на сайте: разбираем инструмент и развенчиваем мифы
Дмитрий Сульман
4
комментария
0
читателей
Полный профиль
Дмитрий Сульман - Все верно, об этом я и говорю. У крупных компаний есть много данных и они имеют доступ к дорогим технологиям и решениям для персонализации контента. Топовые западные сервисы для персонализации, такие как RichRelevance или Dynamic Yield, стоят от нескольких тысяч до десятков тысяч долларов в месяц. Понятно, что малый бизнес не может себе этого позволить. Да даже если бы чисто теоретически и мог, то это вряд ли бы имело хоть какой-то смысл. Во-первых, у малого бизнеса недостаточно данных, чтобы подобные алгоритмы персонализации начали эффективно работать, а во-вторых, тот профит, который МСБ получит от персонализации, никогда не покроет таких расходов. Мы же предлагаем решение, доступное как раз для малого и среднего бизнеса. При этом наше решение комплексное: МультиЧат - это одновременно и инструмент для персонализации, и для коммуникации.
Как провести анализ содержания страниц товаров и категорий
Никита Седнин
3
комментария
0
читателей
Полный профиль
Никита Седнин - Спасибо!
BDD 2019: Как перестать убивать время на сбор и обработку тонны данных для SEO-аудита
Kosta Bankovski
4
комментария
0
читателей
Полный профиль
Kosta Bankovski - Спасибо за приятные слова! Буду и дальше делиться наработками ;)
10 элементов сайта, которые гарантированно отпугнут посетителей
Андрей
2
комментария
0
читателей
Полный профиль
Андрей - Ну типа потому что клиентское seo больше для коммерции предназначено. Типа контентники и сами знают что делать. В коммерции можно тысячу причин найти чтобы поработать с сайтом, а с контентными такие фокусы уже не прокатят, поэтому и не пишут. Всё продвижение для контентников сеошники описывают в трех словах: скорость, качество, систематичность. А, ну ещё конечно же СЯ, как же я про него забыл (фундамент жеть!).
Как удвоить выручку за счет продвижения в поиске. Кейс coffee-butik.ru
Максим Боровой
2
комментария
0
читателей
Полный профиль
Максим Боровой - Последний вопрос (извиняюсь за количество) - почему на "В корзину" стоит Nofollow. Осознанно для распределение весов?
ТОП КОММЕНТАТОРОВ
Комментариев
910
Комментариев
834
Комментариев
554
Комментариев
540
Комментариев
483
Комментариев
373
Комментариев
362
Комментариев
262
Комментариев
249
Комментариев
171
Комментариев
156
Комментариев
137
Комментариев
121
Комментариев
107
Комментариев
97
Комментариев
97
Комментариев
96
Комментариев
83
Комментариев
80
Комментариев
77
Комментариев
67
Комментариев
60
Комментариев
59
Комментариев
57
Комментариев
55

Отправьте отзыв!
Отправьте отзыв!