Несколько нюансов о X-Robots-Tag Есть три способа закрыть...

Несколько нюансов о X-Robots-Tag

Есть три способа закрыть страницу от индексации

1. Через файл robots.txt.

2. В мета тегах.

3. X-Robots-Tag.

О третьем способе расскажу подробнее. Вы можете отправить специальный тег, X-Robots-Tag в хедере страницы и собственно в этом хедере вы можете прописать индексировать страницу или нет, тег аналогичен meta robots.

В чем опасность? Дело в том, что не так часто сеошники заглядывают в хедер и обнаружить что страница закрыта от индексации в X-Robots-Tag достаточно сложно, поэтому вы должны знать что существует такой тег и проверять его если индексация у вас вызывает какие-то сомнения.

По исследованию имеющихся данных, выявил что около 3% сайтов таки используют X-Robots-Tag, но напомню, самый надежный и быстрый способ убрать страницу из индекса ‒ отдавать в хедере 404 (так делать не ок, но это быстро поможет скрыть страницу вместе с удалением по запросу из вебмастерки)

Источник новости https://t.me/gelo_seo/28...