Patreon перешёл от предупреждений к активной блокировке ИИ-ботов
Платформа для авторов Patreon объявила о радикальном усилении защиты своего контента от ИИ-скрейпинга. Вместо того чтобы полагаться на стандартные инструкции для роботов, компания начала напрямую блокировать боты, предназначенные для обучения искусственного интеллекта на материалах создателей.
Решение было принято на фоне того, что попытки ИИ-краулеров получить доступ к контенту Patreon резко возросли — и при этом игнорировали ранее установленные запреты.
Почему прежних мер оказалось недостаточно
Patreon впервые внедрил механизмы защиты от ИИ-скрейпинга ещё в 2023 году, однако с тех пор технологии краулеров стали значительно совершеннее. Кроме того, платформа долгое время полагалась на платный доступ (paywall), который скрывал значительную часть контента авторов от автоматических сборщиков данных.
В последнее время Patreon запустил новые инструменты для обнаружения контента — обновлённую ленту Home Feed и микроблог-подобный формат Quips, — что, по мнению компании, могло непреднамеренно расширить доступ для ИИ-ботов.
Партнёрство с Cloudflare и технология AI Crawl Control
Для реализации блокировки Patreon сотрудничает с провайдером интернет-инфраструктуры Cloudflare, используя его технологию AI Crawl Control. Ранее Cloudflare представил инструменты, позволяющие издателям ограничивать доступ ИИ-ботов, включая маркетплейс Pay Per Crawl, через который сайты могут взимать плату за скрапинг.
Кроме того, Cloudflare недавно изменил политику, согласно которой «смешанные» краулеры — те, что одновременно индексируют и обучаются на контенте сайта, — теперь блокируются по умолчанию на всех страницах с рекламой.
Авторам предоставляется реальный контроль над своими данными
По данным Patreon, в ходе тестирования новых мер количество еженедельных попыток отдельных ИИ-краулеров получить доступ к платформе сократилось с «тысяч до нуля». При этом компания подчёркивает, что разрешит ботам, которые индексируют страницы и организуют информацию для перенаправления пользователей обратно на платформу.
«Согласие не должно зависеть от того, решит ли скрейпер вести себя корректно», — поясняется в блоге Patreon. Продакт-директор платформы Дрю Рауни добавил: «По мере того как ИИ-агенты становятся всё более мощными и популярными, авторы заслуживают реального влияния на то, как их работа используется компаниями в сфере искусственного интеллекта».