Как защититься от дорвеев? Дорвеи могут нанести серьезный ущерб...

Как защититься от дорвеев?

Дорвеи могут нанести серьезный ущерб вашему сайту через размытие уникальности текстов.

Конкретный пример: Cтатья ранжировалась в Google, потом текст по кускам растащили дорвеи.

Итог: статья почти полностью потеряла трафик. По тексту в кавычках на первых местах в Google стояли дорвеи, а сама статья попала в дополнительные результаты. Причем, вы об этом можете даже не подозревать, поскольку дорвеи отмирают/банятся со временем. В данном конкретном случае, падение трафика пришлось на самый высокий сезон (ноябрь, декабрь), когда эта статья приносит максимальный доход в году.

http://joxi.ru/Y2L4768HQeNjQ2

В данном случае помогла только полная перепись статьи. А это, обычно, недешевое удовольствие.

Ниже варианты защиты от дореев:

1) Закрытие сайт от индексации Bing. Львинная доля популярных доргенов построена на парсинге Bing и небольшим трафиком с этого поисковика можно пренебречь.

2) Добавление сайта на CloudFlare. CloudFlare позволит отсечь часть ботов.

Также там можно отсечь все нецелевые страны, например Россия, Украина, Беларусь, Китай, Индонезия, Филиппины.

3) Отлов диапазонов IP адресов для vps / dedic тех хостинг провайдеров, с которых идет парсинг, добавление этих диапазонов в Firewall.

Источник новости https://t.me/amazonpartnerka/1...