×
Россия +7 (909) 261-97-71

Написание скрипта для определения страниц сайта, проиндексированных Яндексом

Россия +7 (909) 261-97-71
Шрифт:
0 7499
Подпишитесь на нас в MAX

1. Введение
2. Как узнать, какие страницы проиндексировал Яндекс
3. Скрипт для определения проиндексированных Яндексом страниц сайта
4. Заключение
5. Дополнительные материалы по теме

1. Введение

Что такое проиндексированные страницы? Проиндексированные страницы - это страницы уже зарегистрированные поисковыми роботами.

Если вы меняетесь с сайтом ссылками очень важно, чтобы ваша ссылка стояла именно на проиндексированной странице. Лучше всего, если к странице, где будет стоять ваша ссылка, есть прямой переход, максимум в три клика, с главной страницы - тогда вы на 90% можете быть уверены в том, что страница с вашей ссылкой проиндексирована.

Почему на 90%, а не на все 100%? Потому что прямой переход к странице ссылкой с главной страницы - еще не 100% гарантия того, что страница с вашей ссылкой проиндексирована. При желании веб-мастер может закрыть любую страницу своего сайта от индексации. Тогда Ваша ссылка, даже если она прямая, невзаимная и тематическая, даже если к странице с вашей ссылкой есть прямой переход с главной страницы, даже если Ваша ссылка одна единственная внешняя ссылка на всей странице - даже в этом случае она не принесет Вам никакой пользы. Следите за тем, чтобы страница с вашей ссылкой была не закрыта от индексации при помощи, например, файла robots.txt . В данном мастер-классе автор предлагает схему написания собственного скрипта, позволяющего определять проиндексированные страницы поисковой системой Яндекс.

2. Как узнать, какие страницы проиндексировал Яндекс

Подобную информацию можно узнать с помощью «Расширенного поиска Яндекс». На данной странице в поле "находятся на сайте" (в нижней части страницы) необходимо ввести url сайта, для которого необходимо выяснить, какие именно документы Яндекс на нем проиндексировал, и нажать кнопку "Найти", оставив поле для ввода ключевых слов пустым. В результатах поиска будут показаны все страницы (документы), проиндексированные Яндексом на указанном сайте. Если ничего не найдено, значит Яндекс на указанном сайте не проиндексировал ни одну страницу (и/или ни один документ).

3. Скрипт для определения проиндексированных Яндексом страниц сайта

Для облегчения поиска проиндексированных страниц лучше использовать скрипт, написанных на каком-либо языке программирования.

Интерфейс рассматриваемого в данном мастер-классе скрипта представляет собой:

  • текстовое поле для ввода URL сайтов;
  • кнопку для запуска скрипта.

Ниже приведен оригинальный текст скрипта, созданного на PHP:



   < title >Проиндексированные Яндексом страницы сайта
   < meta http-equiv="content-type" content="text/html; charset=windows-1251">
В В  < meta http-equiv="content-language" content="ru">



В В 


В В В В 

В В 
   // Убираем пробелы из начала и конца строк
В В  $urls = trim($_POST["urls"]);

   // Разделяем входые данные (URLs) по строкам
В В  $url = explode (" ", $urls);

   // Количество введенных URLs
В В  $count = count ($url);

В В  function getPage($url)
В В  {
    // Открывает сокет соединения указанного домена/страницы
В В В  $fp = fsockopen ("www.yandex.ru", 80);

    // Формируем запрос для указанного домена
В В В  // Р

Есть о чем рассказать? Тогда присылайте свои материалы Марине Ибушевой


Новые 
Новые
Лучшие
Старые
Сообщество
Подписаться 
Подписаться на дискуссию:
E-mail:
ОК
Вы подписаны на комментарии
Ошибка. Пожалуйста, попробуйте ещё раз.
Отправить отзыв
ПОПУЛЯРНЫЕ ОБСУЖДЕНИЯ НА SEONEWS
Как ChatGPT выбирает компании для рекомендаций: что уже известно и как бизнесу подготовиться к эпохе AI Search
Игорь Антонов
1
комментарий
0
читателей
Полный профиль
Игорь Антонов - Для молодых сайтов в YMYL-тематиках я бы добавил отдельный блок про согласованность сущности: одинаковые название, телефон, адрес и перечень услуг на сайте, в картах, каталогах и профильных публикациях. Мы сейчас проверяем это на новом медицинском проекте narkologmsk.ru — без массовых анкорных ссылок, через подтверждённые карточки и содержательные материалы. Было бы полезно увидеть в продолжении сравнение источников, которые чаще цитируют Google AI Overviews и ChatGPT именно для локальных запросов.
Рынок безалкогольных напитков в 2026 году: как категория продает через доверие к бренду
Алексей
1
комментарий
0
читателей
Полный профиль
Алексей - Все бы хорошо, но это в прошлом. В 2026 г. о росте 2020-2025 гг. остается только мечтать. Рынок БАН перешел к снижению. К серьезному снижению.
Яндекс открыл продажи через Алису и Поиск для продавцов без сайтов
Дмитрий Орлов
1
комментарий
0
читателей
Полный профиль
Дмитрий Орлов - Прикольно, покупать через колонку-))
Яндекс выложил в опенсорс языковую модель, которая лежит в основе быстрых ИИ-ответов в Поиске
Роман Каржонков
1
комментарий
0
читателей
Полный профиль
Роман Каржонков - Молодцы! Такие AI-модели могут широко используется в корпоративных, обучающих и научных АI-enabled платформах.
Сервисы для создания квизов: сравнение по конверсии, гибкости сценариев и интеграциям
Виктор
1
комментарий
0
читателей
Полный профиль
Виктор - Без сервиса FormDesigner.ru эта подборка будет не полной. Удивлен, почему вы его не включили в список?
Поисковые роботы Яндекса резко сократили обход сайтов после атак на дата-центры
дмитрий Беляков
1
комментарий
0
читателей
Полный профиль
дмитрий Беляков - К сожалению не только этим всё ограничилось..
5 полезных сервисов для работы с учебными текстами
Anna B.
2
комментария
0
читателей
Полный профиль
Anna B. - Отличный разбор, очень своевременно!
Блоки AI Overviews появляются для более чем 80% брендовых запросов Google в США
Galina Zarhi (Rabinovich) Zarhi (Rabinovich)
2
комментария
0
читателей
Полный профиль
Galina Zarhi (Rabinovich) Zarhi (Rabinovich) - Расширение AI Overviews меняет единицу репутационного мониторинга: вместо одной позиции в выдаче приходится проверять связку «утверждение о бренде - источник - дата». По каждому важному запросу стоит фиксировать, что именно говорит модель, совпадают ли контакты, услуги и ограничения с официальными данными и повторяется ли ошибка при другой формулировке вопроса. Так видны источники, которые действительно распространяют неверный факт, а не просто присутствуют рядом с брендом.
Сайт компании в 2026 году: что проверяет Роскомнадзор и как не получить штраф
Олег Черников
1
комментарий
0
читателей
Полный профиль
Олег Черников - Дима спасибо, отличный обзор! За ГОСТ Р 52872-2019 спасибо! Давно около него ходил.
Выручка VK увеличилась на 21% до 47 млрд рублей за III квартал 2026 года
Galina Zarhi (Rabinovich) Zarhi (Rabinovich)
2
комментария
0
читателей
Полный профиль
Galina Zarhi (Rabinovich) Zarhi (Rabinovich) - Расширение AI Overviews меняет единицу репутационного мониторинга: вместо одной позиции в выдаче приходится проверять связку «утверждение о бренде - источник - дата». По каждому важному запросу стоит фиксировать, что именно говорит модель, совпадают ли контакты, услуги и ограничения с официальными данными и повторяется ли ошибка при другой формулировке вопроса. Так видны источники, которые действительно распространяют неверный факт, а не просто присутствуют рядом с брендом.
ТОП КОММЕНТАТОРОВ
Комментариев
910
Комментариев
834
Комментариев
554
Комментариев
540
Комментариев
483
Комментариев
393
Комментариев
373
Комментариев
262
Комментариев
249
Комментариев
171
Комментариев
156
Комментариев
142
Комментариев
130
Комментариев
121
Комментариев
100
Комментариев
97
Комментариев
97
Комментариев
96
Комментариев
80
Комментариев
77
Комментариев
74
Комментариев
67
Комментариев
66
Комментариев
60
Комментариев
59

Отправьте отзыв!
Отправьте отзыв!