Gentoo временно отключила Bugzilla из-за нашествия ИИ-скраперов

Разработчик дистрибутива Gentoo Михал Гурны (mgorny) сообщил в своём аккаунте в сети Mastodon, что ему пришлось отключить Bugzilla — систему отслеживания ошибок проекта. Причиной стала чрезмерная нагрузка со стороны автоматических ботов-скраперов, которые массово выкачивали содержимое ресурса.

Подобные боты, как правило, собирают доступный в открытом виде текст для последующего обучения языковых моделей. Проблема в том, что публичные трекеры ошибок, вики и репозитории с историей коммитов для таких сборщиков — лакомый и объёмный источник данных, а генерируемый ими поток запросов способен положить сервис, рассчитанный на живых пользователей и разработчиков.

Случай с Gentoo вписывается в общую тенденцию последнего времени: сопровождающие свободных проектов всё чаще жалуются на агрессивное поведение краулеров, которые игнорируют ограничения и создают нагрузку, сопоставимую с распределённой атакой. В отличие от классических DDoS, здесь у трафика нет злого умысла в привычном смысле — но для небольшой команды, поддерживающей инфраструктуру на добровольных началах, разница невелика.

Коротко о ситуации известно немного: Bugzilla была именно отключена, а не потеряна, и речь идёт о вынужденной мере, а не о закрытии проекта. Однако сам факт показателен. Инфраструктура open source традиционно держится на открытости — любой может прочитать отчёт об ошибке, изучить обсуждение, воспроизвести проблему. Именно эта открытость и делает её беззащитной перед волной автоматических сборщиков, которым безразлично, кто оплачивает трафик и чьи выходные уходят на восстановление сервиса.

Обсуждение новости на Hacker News собрало сотню голосов и несколько десятков комментариев — тема перегрузки открытых ресурсов ИИ-ботами явно задевает сообщество разработчиков за живое.

Источник: Hacker News