Виды роботов Яндекс


Виды роботов Яндекс

Ниже представлен список роботов поисковой системы Яндекс и их назначение. Каждый робот выполняет свои специализированные задачи. Данная информация может оказаться полезной для тонкой настройки robots.txt:

  • Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)основной индексирующий робот, занимающийся поиском и индексации информации;

  • Mozilla/5.0 (compatible; YandexImages/3.0; +http://yandex.com/bots)индексатор картинок, которые в конечном итоге становятся доступными к поиску в сервисе Яндекс.Картинки на основании имени и alt-атрибута изображения;

  • Mozilla/5.0 (compatible; YandexVideo/3.0; +http://yandex.com/bots)индексатор видеофайлов, которые в конечном итоге становятся доступными к поиску в сервисе Яндекс.Видео на основании названия и title видео;

  • Mozilla/5.0 (compatible; YandexFavicons/1.0; +http://yandex.com/bots) — робот, индексирующий пиктограммы сайтов для последующего вывода их в результатах поисковой выдачи слева от данного сайта;

  • Mozilla/5.0 (compatible; YandexWebmaster/2.0; +http://yandex.com/bots) — робот Яндекс.Вебмастера;

  • Mozilla/5.0 (compatible; YandexMetrika/2.0; +http://yandex.com/bots) — робот Яндекс.Метрики;

  • Mozilla/5.0 (compatible; YandexMarket/1.0; +http://yandex.com/bots) — робот Яндекс.Маркета;

  • Mozilla/5.0 (compatible; YandexNews/3.0; +http://yandex.com/bots) — робот Яндекс.Новостей;

  • Mozilla/5.0 (compatible; YandexDirect/3.0; +http://yandex.com/bots) — робот, индексирующий страницы сайтов, участвующих в Яндекс.Директ;

  • Mozilla/5.0 (compatible; YandexBlogs/0.99; robot; +http://yandex.com/bots) — робот, индексирующий xml-файлы для поиска по блогам;

  • Mozilla/5.0 (compatible; YandexPagechecker/1.0; +http://yandex.com/bots) — робот, проверяющий страницу при валидации микроразметки через форму Валидатор микроразметки;

  • Mozilla/5.0 (compatible; YandexWebmaster/2.0; +http://yandex.com/bots) — робот сервиса Яндекс.Вебмастер.

Кроме того, имеется группа роботов, которые занимаются проверкой доступности ресурсов, так или иначе связанных с сервисами Яндекса:

  • Mozilla/5.0 (compatible; YandexCatalog/3.0; +http://yandex.com/bots) — робот Яндекс.Каталога. Если сайт недоступен в течение нескольких дней, он снимается с публикации и возвращается обратно в случае обнаружения доступности сайта;

  • Mozilla/5.0 (compatible; YandexDirect/2.0; Dyatel; +http://yandex.com/bots) — робот Яндекс.Директ. Он проверяет корректность ссылок из объявлений перед модерацией;

  • Mozilla/5.0 (compatible; YandexNewslinks; +http://yandex.com/bots) — робот Яндекс.Новостей. Он формирует отчет для контент-менеджера, связывается с партнером.

Факт посещения сайта тем или иным роботом можно отследить через логи сервера.

Оцените статью:
5 1 1



Комментарии (0)
Оставить комментарий

  • bowtiesmilelaughingblushsmileyrelaxedsmirk
    heart_eyeskissing_heartkissing_closed_eyesflushedrelievedsatisfiedgrin
    winkstuck_out_tongue_winking_eyestuck_out_tongue_closed_eyesgrinningkissingstuck_out_tonguesleeping
    worriedfrowninganguishedopen_mouthgrimacingconfusedhushed
    expressionlessunamusedsweat_smilesweatdisappointed_relievedwearypensive
    disappointedconfoundedfearfulcold_sweatperseverecrysob
    joyastonishedscreamtired_faceangryragetriumph
    sleepyyummasksunglassesdizzy_faceimpsmiling_imp
    neutral_faceno_mouthinnocent