Для улучшения эффективности краулинга Google рекомендует...

221

Для улучшения эффективности краулинга Google рекомендует размещать как можно больше ресурсов на сторонних доменах:

В статье Google "Crawling December", они опубликовали материал, в котором Google реально рекомендует перенести максимальное количество ресурсов на сторонние сайты.

Они советуют использовать CDN или даже "хостить ресурсы на отдельном поддомене".

Получается, что ресурсы на вашем сайте влияют на эффективность краулинга.

Если вы храните много ресурсов на своём сайте (например, JavaScript и CSS), Google учитывает это в краулинговом бюджете.

Чем больше таких ресурсов, тем меньше времени Google выделит на краулинг непосредственно HTML-страниц.

Это показывает, что эффективность краулинга определяется на уровне поддомена.

Для небольших сайтов это вообще не проблема.

Однако если у вас крупный сайт с серьезными проблемами краулинга, стоит подумать о переносе тяжелых ресурсов на CDN или отдельный поддомен.

Но эти рекомендации могут и навредить — если не быть осторожным.

Хотя с точки зрения краулинга, хостить все ресурсы сайта на отдельном хостнейме, - это логично, применение такого подхода ко всем ресурсам, особенно критичным для рендеринга, создаёт реальные проблемы с производительностью:

1️⃣ Дополнительные DNS-запросы

2️⃣ Усложнение кэширования и поддержки

3️⃣ Возможные задержки для критичных ассетов

А вот в чём главный подвох:

Google также отмечает:

"Если WRS (сервис веб рендеринга) не может получить критичный для рендеринга ресурс, Google Search может испытывать трудности с извлечением контента страницы и её ранжированием в поиске".

Какой вывод?

✔️ Всегда оценивайте лучшие практики через призму потребностей ваших пользователей

✔️ Приоритизируйте критичные для рендеринга ресурсы

✔️ Тщательно тестируйте перед внедрением инфраструктурных изменений, которые могут повлиять на производительность

В конечном счёте, ключ к долгосрочному успеху — это баланс между рекомендациями Google и тем, что лучше работает для ваших пользователей.

@MikeBlazerX