Опенсорсний інструмент Anubis блокує ШІ-скраперів🕸
У січні 2025 року Ксе Іасо (Xe Iaso) створила опенсорсний інструмент Anubis, призначений для боротьби з ШІ-скраперами. Наразі його вже завантажили майже 200 000 разів, і Anubis застосовується в таких організаціях, як ЮНЕСКО, а також його використовують розробники GNOME і FFmpeg.
Іасо вирішила створити Anubis, коли виявила, що її власний Git-сервер страждає від ШІ-скраперів до такої міри, що перестає працювати.
Іасо каже, що подумувала про видалення Git-сервера з відкритого доступу, але оскільки деякі вихідні коди хотілося залишити загальнодоступними, вона вирішила спробувати зупинити бота Amazon.
“Я пробувала різні речі, про які не можу розповісти під запис. Але жоден із цих способів не спрацював. Тому в мене виникла погана ідея, – каже Іасо. – Я написала трохи коду, виклала його на GitHub як експериментальний проєкт, і тут розробники середовища робочого столу GNOME стали використовувати його як засіб останнього шансу. Тоді я зрозуміла, що потрапила в точку”.
Anubis – це безоплатний інструмент з відкритим вихідним кодом, який можна розгорнути у себе і вбудувати практично куди завгодно. При цьому Іасо продовжує активно працювати над поліпшеннями і додаванням нових функцій. Вона розповіла виданню, що зараз розробляє варіант перевірки без криптографії, щоб менше навантажувати процесори користувачів, а також працює над версією, яка взагалі не вимагатиме JavaScript (адже деякі користувачі, що піклуються про приватність, його відключають).
“Потрібен баланс, щоб зрозуміти, як блокувати ботів, але не блокувати людей і не створювати занадто багато помилкових спрацьовувань. Також потрібно, щоб люди, які керують ботами, не могли зрозуміти, за яким шаблоном їх ловлять. А ось звичайні люди, які потрапили в цей фільтр, мають мати змогу зрозуміти, у чому річ, щоб вони могли зв’язатися з організацією та отримати допомогу. Ну, тобто типове, неможливе завдання”, – жартує Іасо.
Засновниця Anubis вважає, що АІ-компанії уважно спостерігають за її проектом. Але якщо вони дійсно хочуть її зупинити, Іасо радить просто її відволікти.
“Якщо ви працюєте в АІ-компанії, ось як ви можете максимально ефективно саботувати розробку Anubis, – пише вона на своєму сайті. – По-перше, звільніться. По-друге, влаштуйтеся в Square Enix. По-третє, почніть робити кришесносний контент для Final Fantasy XIV. Ось що спрацює найкраще”.