Новый инструмент для проверки файла robots.txt от Bing

Поисковая система Bing официально представила новый инструмент для проверки robots.txt, интегрированный в платформу Bing Webmaster Tools.

С его помощью можно будет протестировать то, как именно поисковые роботы реагируют на файл robots.txt, а также диагностировать потенциальные проблемы.

В ходе проводимого аудита новый инструмент от Bing Webmaster Tools проанализирует содержимое файла robots.txt, а также определит потенциальные проблемы и проверит используемые директивы allow/disallow.

Что касается опции «Download» — она позволит инициировать прохождение пошагового процесса обновления файла robots.txt. Он включает в себя загрузку отредактированной версии файла, его загрузку в корень домена, который также можно будет проверить на наличие действующей версии robots.txt, и, наконец, отправление запроса к поисковой системе Bing на его обновление.

Ещё одной полезной особенностей является отображение четырёх версий файла robots.txt во встроенном редакторе:

  • http://
  • https://
  • http://www
  • https://www

В заключение стоит напомнить о том, что обновленный инструмент для проверки файла robots.txt является одним из ключевых обновлений, которые были успешно реализованы в новой версии платформы Bing Webmaster Tools, официально представленной в августе текущего года.

Меню