Использование инструмента переобхода страниц в Яндекс Вебмастер

Если вы опубликовали на сайте новый контент или внесли изменения в уже существующую новость, карточку товара, необходимо указать на это обновление поисковому роботу. Для этого в Яндекс Вебмастер есть функция переобхода страниц. Рассмотрим, как работает инструмент, и приведем подробную инструкцию об отправке конкретной ссылки или ресурса на переиндексацию.

О принципе работы функции

Для индексации страниц сайта автомату требуется время — занести их в базу, чтобы те появились в выдаче. На это уходит от 3 до 14 дней. За этот период контент может устареть и потерять актуальность. Чтобы упростить работу вебмастеров в панели «Яндекс.Вебмастер» доступен инструмент «Переобход страниц». Пользователь вводит и отправляет ссылку на переиндексацию. Так роботу сообщают о новых данных в принудительном порядке. Он зайдет на указанный ресурс в первую очередь.

Пользователь может добавить на перепроверку ограниченное количество URL в сутки. После отправки заявки появляется статус запроса:

1. «В очереди» —запрос отправлен и принят.
2. «Робот обошел» — заявка обработана, индексация выполнена.
3. «Ошибка» — адрес недоступен для посещения роботом.

Заявка обрабатывается в течение 3-х суток. В базу поисковой системы информация попадает практически сразу, поэтому обновленная страница появится в выдаче буквально через пару часов.

Влияет ли переобход на позиции сайта в поисковой выдаче?

Напрямую не влияет, но если на ресурсе присутствует оригинальный материал и проиндексировано большое количество ссылок, перепроверка позволит быстрее вывести сайт на первые позиции в поисковой выдаче.

Если грамотно составлен sitemap.xml, робот и так зайдет на сайт и проиндексирует. Но если ресурс был под санкциями поисковика или на нем имелись ошибки, первостепенная задача — вывести проект в поисковую выдачу, чтобы пользователи смогли его увидеть, а инструмент позволит сделать это за короткие сроки.

Когда требуется использовать инструмент «Переобход страниц»

Перепроверка полезна, когда на ресурсе размещен новый материал или были внесены значительные изменения в уже опубликованный контент.

Проверка старых ссылок

Переиндексация старых ссылок актуальна для интернет-магазинов или новостных порталов. Например, если вы внесли изменения в карточку товара, об это нужно сообщить поисковику, чтобы пользователь получил точную информацию.

Еще один пример, опубликована новость, но позже материал был дополнен. Об этом также нужно известить поискового робота, чтобы сайт вышел на первые позиции и привлек больше органического трафика.

Индексация новых ссылок

Если был опубликован новый уникальный контент, рекомендуют использовать инструмент «Переобход страниц» для быстрого отображения сайта в выдаче. Стандартное сканирование занимает от нескольких суток до двух недель, а с перепроверкой время сокращается до нескольких часов.

По наблюдениям пользователей, если отправить в переиндексацию новые адреса, робот их проверит за 10 минут, и они практически сразу окажутся в индексе поисковика. Если ресурс использует панель управления содержимым WordPress, можно настроить протокол IndexNow с помощью API c HTTP и JSON, чтобы обеспечить обмен сведениями. Этот инструмент позволяет в автоматическом режиме сообщать роботу о появлении новых ссылок или об обновлении уже размещенного контента. Функция схожа с переобходом. Время сканирования занимает 10 минут, и вручную добавлять URL не нужно.

Использование инструмента «Переобход страниц»

Рассмотрим, как через панель Yandex Webmaster отправить ссылки или сайт целиком в переобход.

Последовательная проверка URL

При последовательной проверке робот проверяет ссылки одну за другой:

1. В главном меню «Яндекс.Вебмастера» перейдите в раздел «Индексирование».
2. Найдите подкатегорию «Переобход страниц».
3. Скопируйте нужный URL в поле для ввода.
4. Кликните по клавише Enter на физической клавиатуре и последовательно укажите данные для проверки.
5. Нажмите на кнопку «Отправить».

Робот обойдет URL в приоритетном порядке. Согласно данным «Яндекса», это займет не более 3 суток. В среднем сканирование занимает 10 минут, и ссылка сразу же оказывается в индексе. В течение 24 часов разрешается проверка ограниченное количество ссылок.

Проверка по SITEMAP

Если ссылок много, можно запустить перепроверку по карте сайта. Главное условие — страницы, подлежащие сканированию должны быть указаны в файле sitemap.xml:

1. В панели «Яндекс.Вебмастера» найдите раздел «Индексирование».
2. Выберите подкатегорию с наименованием «Файлы sitemap».
3. Внизу отобразится таблица, где указаны найденные в файле роботс карты. В столбце «Статус» нажмите на изображение стрелки.

Проверка запущена. Процесс будет завершен примерно за неделю. Применять инструмент допускается 1 раз в месяц.

Статус «Ошибка»: что это такое и как исправить

При использовании инструмента переобхода страниц в Яндекс Вебмастер может появиться статус «Ошибка». Сбой происходит, если робот не смог получить доступ к ссылке. Случается, если задан атрибут запрета индексации в robot.txt. Выяснить, что привело к ошибке, поможет функция «Проверка ответов сервера»:

1. В шапке рядом с аватаркой кликните «Инструменты».
2. В контекстном меню выберите «Проверка ответов сервера».
3. Скопируйте URL, где была выявлена ошибка.
4. Кликните «Проверить».

Если адрес доступен, код статуса HTTP будет 200 ОК. Если код ответа 403 (запрещено), 404 (не найдено), 504 (не отвечает) или иной, необходимо исправить проблему. Откройте вкладку «Содержимое», где указан HTML-код. Обратите внимание на раздел <meta name=»robots» content=»атрибут»>. Если в нем указано noindex или nofollow, URL закрыт для индексации поисковыми системами. После устранения проблемы, повторите операцию.

Удаление из поисковой выдачи

Если вы удалили URL, роботу также нужно сообщить об этом. Отправьте ссылку на переобход, чтобы ее убрали из выдачи, и та не снижала трафик, так как стандартная переиндексация занимает до 2 недель. Когда робот зайдет на страницу, она передаст сервису код 404 Not Found и будет исключена из индекса.

Инструмент «Переобход страниц» необходим вебмастерам. С его помощью можно уменьшить время переиндексации старых и быстрее добавить в индекс новые адреса. Если страница была удалена, благодаря инструменту она практически моментально будет исключена из поиска, что предотвратит потерю трафика.