Во время очередного хэнгаута с вебмастерами, разговоры о котором продолжаются в SEO-тусовке всю неделю, Джон Мюллер (John Mueller) поведал о том, что Googlebot вполне может позволить себе обращаться к форме поиска по сайту. Обычно это происходит в случае, если роботу не удается просканировать весь контент ресурса самостоятельно.
Дословно заявление Мюллера звучало примерно следующим образом: «Мы поступаем так лишь в исключительных случаях. Обычно это происходит, если мы не вполне уверены, что краулер видит всё содержимое, доступное для сканирования на сайте. Тогда поисковый робот вычленяет из контента несколько ключевых слов и вводит их в поисковую форму и анализирует число страниц по данному запросу. И всё же, эти ситуации встречаются крайне редко.
На самом деле, обычно такой подход не способствует обнаружению чего-то принципиально нового или интересного на сайте. Однако иногда этим способом можно найти содержимое, которое краулер не смог бы обнаружить при стандартном сканировании сайта. Так, например, если у ресурса файла Sitemap, а навигация оставляет желать лучшего, но при этом у Google есть подозрение, что на ресурсе есть качественный контент; Googlebot, скорее всего, предпочтёт обратиться к форме поиска по сайту».
На самом деле, обычно такой подход не способствует обнаружению чего-то принципиально нового или интересного на сайте. Однако иногда этим способом можно найти содержимое, которое краулер не смог бы обнаружить при стандартном сканировании сайта. Так, например, если у ресурса файла Sitemap, а навигация оставляет желать лучшего, но при этом у Google есть подозрение, что на ресурсе есть качественный контент; Googlebot, скорее всего, предпочтёт обратиться к форме поиска по сайту».
Полную запись хэнгаута с вебмастерами, состоявшегося в конце прошлой недели, желающие могут посмотреть здесь.
Оцените статью: