В Яндекс.Вебмастере появился новый инструмент — «Скорость обхода», который находится в разделе «Индексирование».
Скорость обхода
Этот инструмент позволяет регулировать, как часто Яндекс может делать запросы к вашему сайту, то есть регулировать скорость обхода вашего сайта со стороны поисковых роботов. По умолчанию будет подбираться максимальная скорость для конкретного сайта, учитывая допустимые нагрузки для сервера.
Отказ от Crawl-delay
Для того чтобы все действительно нужные страницы сайтов появлялись и обновлялись в поиске быстро, Яндекс решил отказаться от учёта директивы Crawl-delay. Если же клиент все-таки хочет по какой-то причине ограничить скорость обхода сайта, он может воспользоваться новым инструментом — «Скорость обхода». Он заменит собой рекомендации из директивы, его настройки можно выставить уже сейчас: они начнут учитываться через неделю, с 22 февраля.
Если вы не знаете, какое именно значение Crawl-delay нужно было устанавливать для вашего сайта или какое теперь значение необходимо установить в настройках инструмента, — просто оставьте значение «Доверять Яндексу». Робот сам выберет наиболее оптимальную частоту индексирования вашего сайта.
Реакция на статьюподелюсь0%интересно0%полезно0%не уверен0%скучно0%где автор?0%лайк