SEOFAQ Telegram, маркетинг и SEO Канал SEOFAQT в мессенджере Telegram

Все чаты​AEO-совет: ваш Sitemap.xml теперь нужен не только для Google

 76  


​AEO-совет: ваш Sitemap.xml теперь нужен не только для Google.

Наши логи показывают, что GPTBot и ClaudeBot ОЧЕНЬ активно краулят sitemap.xml, отмечает Крис Лонг.

Поэтому в последнее время мы проводим много тестов на сайте Nectiv.

Мы пробуем разные вещи, например, тестируем отдачу Markdown ботам, мониторим логи и смотрим, как ИИ-краулеры взаимодействуют с нашим сайтом.

Возможно, об этом мы еще расскажем подробнее.

Главное, что мы заметили, и это происходит стабильно: ИИ-краулеры 100% используют наш файл sitemap.xml.

Как для ClaudeBot, так и для GPTBot — это прокрауленные страницы на нашем сайте.

Мы даже видели, что если попросить Claude Code проанализировать наш сайт (единичный случай), он сначала переходит именно на sitemap.xml, чтобы провести инвентаризацию всего доступного контента.

Мы еще не тестировали LLMs.txt, но уже очевидно, что sitemap.xml — это сигнал, который ИИ-краулеры действительно используют.

Так что теперь оптимизация вашего sitemap.xml имеет значение не только для поиска Google.

ИИ-движки, скорее всего, тоже им пользуются.

Инсайты комьюнити

— Сгенерированные плагинами сайтмапы обычно включают архивы тегов и страницы пагинации, а lastmod зеркалит updated_at в базе, поэтому исправление опечатки выглядит как изменение страницы. Это было терпимо, пока файл служил лишь подсказкой для Google; но это уже другой риск, если ИИ-краулеры воспринимают его как реестр контента.

— Стоит протестировать, учитывают ли GPTBot и ClaudeBot тег lastmod: ежедневное обновление даты для всех урлов или обновление при деплое делает это поле недостоверным. В итоге боты учатся его игнорировать и забивают на страницы, которые реально изменились.

— Идея для теста: вынос мани-страниц в отдельный sitemap делает запросы ИИ-краулеров легко заметными в логах.

@MikeBlazerX

🚀Схемы — в MikeBlazerPRO.com / @MikeBlazerPRO

Ссылки из поста:
– https://www.linkedin.com/posts/chris-long-marketin...
– https://t.me/MikeBlazerX
– https://t.me/tribute/app?startapp=sE4X

Источник новости https://t.me/mikeblazerx/6849...