Поведение ботов и отладка сайта Помимо обнаружения обновлений...

Поведение ботов и отладка сайта

Помимо обнаружения обновлений, мониторинг версий ботов Google позволяет узнать, как Google взаимодействует с вашим сайтом.

Например, вы можете заметить, что боты Google для десктопов и мобильных устройств получают разные активы встроенного контента.

Если мобильный бот получает 404 ошибку при сканировании вложений Instagram, а десктопный бот - нет, это дает ключевые сведения для отладки взаимодействия с ботом.

Это показывает, что Google ожидает от вашего сайта наличия тех областей, которые на нем отсутствуют, и сигнализирует о неэффективности краулинга, которую необходимо устранить.

Отслеживание версий ботов Googlebot выводит анализ лог файлов на новый уровень.

Выявляя фингерпринты Гуглобота, вы опережаете саму поисковую систему.

Уменьшение времени рендеринга Googlebot

Помимо отслеживания версий Googlebot, анализ логов дает представление о том, как Google осуществляет краулинг и рендеринг страниц.

Раньше Googlebot ждал 20 секунд после события готовности документа, чтобы сделать снимок содержимого страницы.

Теперь же, как показывают тесты, Googlebot рендерит HTML страницы всего через 4 секунды после готовности документа.

Такое сокращение времени визуализации имеет большое значение для сайтов с большим количеством JavaScript.

Любой динамический контент на JavaScript должен быть загружен в течение 4 секунд после загрузки страницы, чтобы попасть в индекс Google.

Очевидно, что Google оптимизирует загрузку в соответствии с современной практикой веб-разработки.

Но об этих изменениях не сообщается публично.

Изучите аналитику своего сайта на предмет того, когда Googlebot запускает действия на странице по сравнению с пользователями.

Если вы видите большое отставание Googlebot, возможно, у вас проблемы с эффективностью краулинга.

Уменьшение времени рендеринга увеличивает количество информации, которую Google может увидеть и проиндексировать.

@MikeBlazerX

Источник новости https://t.me/mikeblazerx/2455...