«Архив Интернета» отбивается от ИИ-ботов — под блокировки начали попадать обычные пользователи

🤖 «Архив Интернета» отбивается от ИИ-ботов — под блокировки начали попадать обычные пользователи Wayback Machine столкнулась с огромным объёмом автоматизированного трафика и усилила защиту от ботов. Побочный эффект — система иногда принимает за ботов реальных людей и ограничивает им доступ к архиву. Пользователь может получить ошибку 429 — Too Many Requests, даже если сам не занимается массовым сбором данных. Internet Archive признала проблему и обещает точнее отделять обычных посетителей от автоматизированных систем. Одна из причин происходящего — боты, которые массово собирают интернет-контент, в том числе для обучения ИИ. Ещё в 2023 году одна ИИ-компания, по данным Internet Archive, создавала десятки тысяч запросов в секунду, пытаясь извлечь текстовые данные. Источник