Боты совсем оборзели, парсят все что попало, причем совести вообще нет, долбят под пару десятков запросов в секунду и все казалось бы на перспективу, где-то может попаду в ответы ИИ.. Развелось гуглов, дак еще и Семраш и Ахреф тоже стараются.
Короче Если Семраш и Ахреф - как люди подписывюатся собой, то остальные просто оборзели Юзерагента ставят как попало Хромы сомых разных версий, часто окончивается на 0.0.0, но еще чаще просто рандом какой-то
Пришслось забанить все Хромы с версиями 40-140
Да жестко, а что делать ...
