Perplexity обходит запреты на сканирование сайтов

Perplexity обходит запреты на сканирование сайтов

Запретили нейросети сканировать ваш сайт? Не важно, она все равно доберется до контента. 😎

Cloudflare провели эксперимент и обнаружили, что Perplexity использует скрытые методы обхода запретов сканирования. Даже если сайт блокирует сканирование через robots.txt или сетевые правила, поисковик на базе ИИ всё равно собирает данные.

Дело в том, что Perplexity использует не только свой официальный пользовательский агент. Когда он блокируется, сервис обращается к сайту через универсальный браузер, маскирующийся под Google Chrome на macOS. 😏

Что вы об этом думаете? Запрещаете ИИ сканировать сайты или вы не против? ⤵️

____

@prcynews

Источник новости https://t.me/prcynews/6752...