Компания Google запустила GoogleOther, нового робота-индексатора.

GoogleOther будет использоваться различными командами Google для внутреннего сканирования общедоступной сети, сказал Гэри Иллиес из Google в LinkedIn.

Он следует тем же правилам и протоколам, что и основной поисковый робот Googlebot, и высвобождает ресурсы для основных поисковых роботов Googlebot.

GoogleДругое. Google добавил GoogleOther в свою документацию по роботам:

«Универсальный сканер, который может использоваться различными группами разработчиков для извлечения общедоступного контента с сайтов. Например, его можно использовать для специального сканирования для внутренних исследований и разработок. Другой сканер Google всегда соблюдает правила robots.txt для своего токена пользовательского агента. и глобальный пользовательский агент

и использует те же диапазоны IP-адресов, что и Googlebot».

Обзор поисковых роботов Google (пользовательских агентов) Пользовательский агент.

Токен пользовательского агента и полная строка пользовательского агента просты, это просто «GoogleOther». Почему новый бот?

  • Этот новый бот «наконец-то снимет нагрузку с робота Google», пояснил Иллиес:

«Поскольку мы оптимизируем то, как и что сканирует Googlebot, мы хотели убедиться, что задачи сканирования Googlebot используются только для внутреннего использования для создания индекса, используемого поиском. Для этого мы добавили новый поисковый робот GoogleOther, который заменит некоторые другие задачи Googlebot, таких как сканирование исследований и разработок, чтобы высвободить ресурсы сканирования для робота Googlebot». Google использует его для внутренних целей.

Означает ли это, что он используется для Барда? Это неясно. Стоит ли блокировать GoogleДругое?

Неизвестно, что произойдет, если вы попытаетесь заблокировать этого нового бота. Но я подозреваю, что вы должны следить за этим, и если это вызывает слишком большую нагрузку на ваш сервер, вы можете решить, хотите ли вы разрешить или запретить доступ к вашему сайту для этого нового Googlebot. Почему мы заботимся.

ЧИТАТЬ   Google Bard добавляет связанные темы и страницу примечаний к выпуску в Google It.

Многие из вас проверяют свои действия по сканированию и активности ботов на своем веб-сайте и в своих файлах журналов. Когда вы увидите этого нового робота GoogleOther, не волнуйтесь. Это настоящий робот Google.

Source

От admin