Patreon, платформа для монетизации авторского контента, усиливает борьбу с ИИ-ботами, которые собирают материалы создателей для обучения нейросетей без разрешения.
В четверг компания сообщила о сотрудничестве с провайдером интернет-инфраструктуры Cloudflare для прямой блокировки ботов, обучающих ИИ-модели на работах авторов.
Меры пришлось ужесточить, поскольку с 2023 года ИИ-скрапинг стал изощрённее. Хотя пейволл Patreon давно закрывал большую часть контента, новые инструменты вроде обновлённой ленты и Quips могли открыть материалы для краулеров.
Cloudflare предлагает издателям инструменты для ограничения ИИ-ботов, включая маркетплейс Pay Per Crawl, где сайты могут брать плату за скрапинг. Недавно провайдер стал по умолчанию блокировать «смешанные» краулеры на страницах с рекламой.
Теперь вместо простой просьбы не собирать контент через файл robots.txt, Patreon активно блокирует обучающих ИИ-ботов с помощью технологии AI Crawl Control.
Согласие не должно зависеть от того, решит ли скрапер вести себя прилично.
При тестировании еженедельные попытки отдельных краулеров получить доступ к Patreon упали «с тысяч до нуля». Это показало, что боты игнорировали robots.txt и собирали данные вопреки запретам.
При этом компания разрешит ботам, которые индексируют страницы и направляют пользователей обратно на Patreon.
По словам продуктового директора Дрю Роуни, авторы заслуживают реального права голоса в том, как их работы используются ИИ-компаниями.
0 комментариев