Как сообщает Techmeme, OpenAI, Google, Microsoft и Anthropic заявили, что примут новый стандарт, позволяющий издателям отказаться от сбора их данных ИИ-краулерами.
Краулеры — это программы, которые автоматически обходят веб-страницы и копируют их содержимое. ИИ-компании используют такие данные для обучения моделей и формирования ответов чат-ботов.
Главная особенность стандарта — единый механизм отказа, действующий сразу для множества краулеров, а не для каждого робота в отдельности.
Для издателей и других владельцев контента это потенциально более простой способ контролировать, как генеративные сервисы используют их материалы.
