Patreon переходит к активной блокировке ИИ-ботов
Платформа для авторов контента Patreon ужесточает меры против ИИ-парсинга данных, используемых для обучения моделей. В четверг компания сообщила, что сотрудничает с интернет-инфраструктурным провайдером Cloudflare, чтобы напрямую блокировать доступ ИИ-ботов, которые без разрешения обучаются на работах создателей.
Усиление защиты потребовалось из-за того, что методы ИИ-скрапинга стали сложнее с тех пор, как в 2023 году Patreon впервые внедрил меры противодействия. Кроме того, платный доступ Patreon долгое время скрывал большую часть материалов авторов от сканеров. Однако недавно компания запустила новые инструменты для поиска контента, такие как переработанная главная лента и Quips — короткие сообщения в духе твитов, которые могут сделать больше материалов доступными для ботов.
Эти изменения происходят на фоне того, как всё больше онлайн-издателей и создателей контента осознают, что ИИ поглощает их труды для улучшения своих моделей. Для борьбы с этим Cloudflare предлагает инструменты, позволяющие владельцам сайтов ограничивать ИИ-ботов, включая маркетплейс Pay Per Crawl, где сайты могут взимать плату с ботов за сканирование. Ранее в этом месяце Cloudflare изменил политику, блокируя по умолчанию на страницах с рекламой «смешанных» ботов, которые одновременно индексируют и обучаются на контенте.
Patreon заявляет, что расширяет сотрудничество с Cloudflare, применяя технологию AI Crawl Control для обновления политик и инструментов контроля. Ключевое отличие: вместо того чтобы просто просить ботов не сканировать контент через файл robots.txt — стандартный способ дать инструкции ботам — Patreon теперь активно блокирует обучающие ИИ-боты.
«Согласие не должно зависеть от того, насколько послушным решит быть скрапер», — говорится в блоге Patreon, где объясняются более строгие меры.
В ходе тестирования новых функций еженедельное количество попыток доступа отдельных обучающих ботов упало с «тысяч до нуля», отметили в компании. Это свидетельствует о том, что ИИ-скраперы игнорировали файл robots.txt и всё равно сканировали сайт, несмотря на запреты.
Тем не менее, компания разрешит работу ботов, которые индексируют страницы и структурируют информацию, помогая возвращать пользователей на Patreon.
«Поскольку ИИ-агенты становятся всё более мощными и популярными, авторы заслуживают значимого права голоса в том, как их работы используются ИИ-компаниями», — заявил директор по продуктам Patreon Дрю Роуни.
«На большей части интернета создатели вынуждены мириться с обучением ИИ на своих материалах ради расширения аудитории. У Patreon иное видение: авторы должны иметь возможность наращивать аудиторию и одновременно контролировать использование своих трудов».