Cloudflare предложил Content Signals Policy для регулирования ИИ-краулеров через robots.txt
Ключевые факты
- 1 Cloudflare представил Content Signals Policy в октябре 2023 года.
- 2 Политика использует robots.txt для регулирования доступа ИИ-краулеров к контенту.
- 3 Цель — дать владельцам сайтов контроль над использованием их данных для обучения ИИ.
- 4 Google и OpenAI пока не объявили о поддержке или интеграции этой политики.
Cloudflare представил инициативу Content Signals Policy, которая призвана дать владельцам сайтов больше контроля над тем, как их контент используется для обучения моделей искусственного интеллекта. Эта политика предполагает использование расширений в файле robots.txt, чтобы явно указывать, разрешено ли ИИ-краулерам индексировать контент для обучения или нет. Цель состоит в том, чтобы создать стандартизированный механизм для выражения предпочтений владельцев контента в отношении использования их данных ИИ-системами. Однако, несмотря на усилия Cloudflare, существует скептицизм относительно того, насколько широко эта инициатива будет принята. Крупные игроки в области ИИ, такие как Google и OpenAI, имеют свои собственные подходы к сбору и использованию данных и пока не демонстрировали активной поддержки сторонних стандартов, которые могут ограничить их доступ к информации. Это ставит под вопрос эффективность политики без широкого отраслевого консенсуса.