Если Google не краулит весь ваш контент, проверьте время ответа...

Если Google не краулит весь ваш контент, проверьте время ответа сервера.

Сайты с откликом <200 мс краулятся глубже, чем более медленные.

Иногда лучшее SEO-решение — это просто более хороший хостинг-план.

-

Заметен явный порог отсечения на 350 мс.

-

"Время краулинга" давно является частью "краулингового бюджета".

У Google есть ограниченное время на выполнение задач, и более медленные сайты получают меньше прокрауленных URL.

Решения:

1) Ускорение:

Начните с основ — уменьшите DNS/TTFB и т.д., так как это влияет на все запросы ресурсов.

И извините — но часто вам не нужно менять хостинг, либо настройте кэширование на вашем сайте и сервере, либо установите CDN (обычно это гораздо дешевле и проще, чем миграция хостинга).

2) Уборка:

Убедитесь, что не тратите краулы на дубликаты, soft-404, линковку реальных 404/410, индексацию слабого/мусорного контента, цепочки редиректов и т.д.

3) Приоритизация:

Расставьте приоритеты контента.

Имейте несколько сайтмапов, по разделам/типам контента.

Вам нужен 1+ для существующих страниц и отдельный "новый" сайтмап, который указывает на новый контент (вы также можете иметь один для "обновленного" контента).

Продумайте внутренние ссылки для продвижения нового (и обновленного) контента, чтобы боты приоритизировали эти URL.

4) Наращивание:

Получайте новые ссылки.

Google, похоже, по-прежнему учитывает входящие ссылки при приоритизации краулов — так что получение нескольких ссылок на новый контент может привлечь внимание Google.

И чем больше у вас ссылочная масса, тем чаще Google, как правило, краулит.

@MikeBlazerX

Источник новости https://t.me/mikeblazerx/4911...