Вот так набегают плохие парни (ой, боты), чтобы парсить ваш сайт. Наша защита банит, обрезает и возвращает ошибку им. А если бы не было защиты - сервер работал бы в холостую, отдавая контент. Защита от ботов неплохой бизнес, как мне кажется.

p.s. это с наших проектов, мы их уже защищаем. И мне в личку пишут ребята, подключаем и их сайты. Занятное дело - борьба с ботами, т.к. у нас большой опыт их написания для парсинга :)

tg / max

В этом посте были ссылки, но мы их удалили по правилам Сетки