Тег noindex на страницах пагинации отрезает краулер от каталога...

Тег noindex на страницах пагинации отрезает краулер от каталога — в худшем случае отваливаются две трети сайта

Запусти краулинг в Screaming Frog (или любом другом краулере), исключив все урлы пагинации вроде /page/2 и ?page=2, а затем сравни с обычным краулингом.

Каждая исчезнувшая страница — это та, до которой Гугл может добраться только через пагинацию, и в крайних случаях это две трети сайта.

Проставь noindex на этих страницах пагинации, и дорога ко всем ним исчезнет.

Страницы пагинации — это точки доступа, а не контент.

Именно через них Гугл добирается до глубоких страниц продуктов и статей, и именно так ссылочный вес перетекает на них.

Точные шаги из этого:

1. Настрой каноникал каждой страницы пагинации саму на себя. Страница 2 должна говорить: "Я страница 2". Если она указывает на страницу 1 как на реальную, Гугл перестает заходить на вторую страницу, и всё, что доступно только с неё, становится страницей-сиротой.

2. Никогда не закрывай пагинацию через noindex, nofollow или блокировку от ботов. Гугл выбрасывает страницу, а затем перестает передавать сигналы через ее ссылки: индекс выглядит чище, а каталог становится сиротой. Комбинация noindex, follow не спасает, потому что со временем Гугл может начать относиться к ссылкам на noindex-странице как к nofollow.

3. Не бойся индексации страниц пагинации. Сами по себе они почти никогда не ранжируются, а весь профит оседает на продуктах и статьях внутри них.

4. Сделай кнопку "Далее" реальной ссылкой <a href> и по возможности рендери пагинацию на сервере. Отключи JavaScript и перезагрузи страницу: если номера страниц исчезают, примерно это и видит Гугл.

5. Никогда не используй # в урлах пагинации. Гугл игнорирует всё после решетки, поэтому /shoes#page=3 превращается просто в /shoes, а страниц с 2 по 50 не существует.

6. Параметры вроде ?page=2 работают, если параметр пагинации отделен от параметров фильтрации и сортировки, и каждый из них обрабатывается целенаправленно.

7. Бесконечный скролл отрабатывает хуже всего. Гугл не скроллит как живой юзер, поэтому продукты, подгружаемые только после скролла, могут вообще никогда не проиндексироваться. Если бесконечный скролл остается, добавь под ним реальные ссылки с номерами.

8. Пофикси структуру до пагинации. Блог, растянутый до 40-й страницы, имеет проблему с архитектурой: разбей его на категории, чтобы под каждой лежало по 10 постов, а не 400 под одной.

9. Добавь прямые ссылки. Блок "1 2 3 … 25" вместо одинокой кнопки "Далее" делает 25-ю страницу доступной в один клик вместо двадцати четырех.

10. Настраивай порядок осознанно. Первая страница получает максимум внимания, поэтому сортируй по выручке или трафику, а не по дефолту CMS.

11. Вычищай уникальный текст со страниц пагинации. Вводный абзац на четвертой странице может начать каннибализировать главную страницу категории.

12. Проверяй наличие дубля первой страницы. Многие CMS плодят и /shoes, и /shoes/page/1 — выбери что-то одно.

Инсайты комьюнити

— Практики расходятся во мнениях насчет noindex, follow. Один полевой отчет подтверждает: Гугл продолжает краулить закрытую от индексации пагинацию и урлы на ней, при этом пессимизации связанных страниц не наблюдается. Встречная позиция утверждает, что вдолгую это работает как noindex, nofollow.

— Гибридный подход сохраняет краулинг при бесконечном скролле: каждый шаг подгружает новый урл с настроенными атрибутами rel-next/prev, поэтому у каждой страницы остается единая точка входа.

— Самоканоникализированная пагинация имеет больший ссылочный вес на новостных сайтах, как для видимости, так и для прокачки тематического авторитета.

@MikeBlazerX

📈 "Пушки" — в @MikeBlazerPRO