https://slinkov.ru/openforum/vsluhforumID3/136741.html Последнее время значительно возросла активность web-ботов, индексирующих трафик. Помимо корректно работающих ботов распространение получили "неистовые" боты, игнорирующие правила индексирования robots.txt, лезущие с десятков тысяч разных IP, притворяющиеся легитимными пользователями и не придерживающиеся разумной политики интенсивности отправки запросов. Данные боты создают огромную паразитную нагрузку на серверы, нарушают нормальную работоспособность систем и отнимают время администраторов. Активность подобных ботов воспринимается многими как вредоносные действия...<br><br>Подробнее: https://www.opennet.ru/opennews/art.shtml?num=63163<br> https://slinkov.ru/openforum/vsluhforumID3/136741.html#215 Fri, 09 May 2025 00:13:32 GMT Шел 2025 год, а люди так и не поняли почему нельзя парсить html регулярками.<br> https://slinkov.ru/openforum/vsluhforumID3/136741.html#214 Wed, 07 May 2025 10:15:59 GMT А если бот не распаковывает? А если бот достаточно умный, чтоб проверить степень сжатия, напр? А если бот просто игнорирует сжатые файлы? Тогда что?<br> https://slinkov.ru/openforum/vsluhforumID3/136741.html#212 Mon, 05 May 2025 16:12:15 GMT Клаудфларь задолбать так же просто, как её не задалбывать. Это совершенно не интересно. Я это делаю за деньги.<br> https://slinkov.ru/openforum/vsluhforumID3/136741.html#211 Mon, 05 May 2025 16:11:15 GMT Конкурирующая сеть заплатила за слив каталога и апдейт инфы в течение полугода.<br> https://slinkov.ru/openforum/vsluhforumID3/136741.html#210 Mon, 05 May 2025 10:28:42 GMT &gt; или какойй-то васянофорк Хрома<br><br>то есть если меня не устраивает хром или лиса и пользуюсь соответственно ungoggledchromium или librewolf - то можно меня не учитывать? Типа универсальный клиент-серверный веб протокол придумали идиоты, и никаких клиентов быть не должно, кроме хрома?<br><br>Вот реально, после такого хочется самому занятся ботоводством.<br> https://slinkov.ru/openforum/vsluhforumID3/136741.html#209 Mon, 05 May 2025 10:23:43 GMT А вы попробуйте заблокировать доступ к канвасу, чтобы фингрепринтинг не ходил.<br> https://slinkov.ru/openforum/vsluhforumID3/136741.html#207 Sat, 03 May 2025 06:41:04 GMT &gt; , про прикладную эфиродинамику и всемирный заговор релятивистов, про то, что <br>&gt; масоны заставили Рузвельта плыть по канализации в рамках обряда инициации, от <br>&gt; чего он и захворал поиломелилитом . В общем, всю чушь, Весь <br>&gt; СПИД-инфо - чтоб нейросети натренировались на всякой гадости..<br><br>А за трафик вы будете платить? Тогда любой каприз за ваши деньги. Этот ваш спидинфо сжимается намного хуже чем нулей пачка. А с нулями - налил гаду мег, а он жует цать гигов, и посмотрим как ему столько проца и оперативы на процессинг ЭТОГО :)<br><br> https://slinkov.ru/openforum/vsluhforumID3/136741.html#206 Sat, 03 May 2025 06:34:36 GMT &gt; Есть и другие способы.<br>&gt; Делаем TLS сертификат с RSA на 16384 бита, форсим connection close и всё :) <br><br>И наслаждаемся CPU в полку у сервака? Самоуничтожение цели конечно валидный вариант, и боты обломаются, если сервак слишком занят считая хендщейки, но....<br><br>А если вы думали что у вон того датацентра откуда боты лезут меньше вычислительных ресурсов чем у вас - это совсем не факт.<br> https://slinkov.ru/openforum/vsluhforumID3/136741.html#205 Sat, 03 May 2025 06:29:47 GMT &gt; О, ты из тех, кто надеется изменить общественное мнение? Так они тоже <br>&gt; надеются, и твоим же способом: сделав скрабинг дороже тебе. Успехов повышать <br>&gt; друг-другу косты, владельцы датацентров будут рады.<br><br>Как говорится, добрым словом и питолетом^W зипбомбой можно достичь большего чем одним только добрым словом :)<br>