Запрос Bingbot для трафикаbasedsspsitemap.xml, который не существует

28

Журналы веб-сайта, которым я управляю, показывают запрос на несуществующий файл от Bingbot. Детали запроса

  • Путь: /trafficbasedsspsitemap.xml
  • Useragent: «Mozilla / 5.0 (совместимо; bingbot / 2.0; + http://www.bing.com/bingbot.htm )»
  • IP-адрес: 65.55.213.244 (обратный поиск разрешается в msnbot-65-55-213-244.search.msn.com )

По какой причине Bingbot ищет этот файл? Что означает «Карта сайта SSP на основе трафика»?

bing logging web-crawlers Spongeboy
источник
1
Я получал несколько таких за последние 24 часа на одном из моих сайтов, тоже любопытно.
Родольфо
Я тоже много их

Ответы:

12

Это Винсент из Bing Webmaster Tools.

Это была проверка Bingbot для карты сайта XML, сгенерированной плагином Bing Sitemap (бета-версия) для IIS и Apache - для получения более подробной информации см. Следующее:

Вы не должны видеть такой запрос на обнаружение очень часто.

Vincent_Bing
источник
10
Сканер не спрашивает robots.txtи не смотрит sitemap.xml- он просто снова и снова использует какой-то придуманный путь? Это должно быть исправлено быстро.
Fuxia
2
Я проверил одного из моих хостов, и он получает этот запрос раз в минуту . Я надеюсь, что некоторые люди из Bingbot смогут это исправить в ближайшее время.
sigurdga
1
Похоже, я получаю этот запрос примерно один раз в день для каждого сайта (с «www.» И без него), хотя иногда дважды на один и тот же сайт за 30 минут.
Родольфо
Я также вижу слишком много запросов такого типа в моем error_log на нескольких серверах, где я еще не попал в черный список bingbot. , , ну, еще одна причина занести этот глючный бот в черный список
neofutur
1
Есть ли в robots.txt директива, сообщающая bingbot, где находится эта специальная карта сайта? (или если нет такой специальной
карты