Модели

AI-гиганты поддерживают новый стандарт, который останавливает AI-скрапинг

5 ноября 2026 г. · 1 мин чтения

Также опубликовано на Norsk, Polski, Nederlands

white and blue light on dark room
Denny Müller / Unsplash

Anthropic, Open AI, Google и Microsoft поддержали новый стандарт, который должен упростить веб-сайтам возможность предотвращать AI-компаниям использование их контента для обучения своих моделей. Решение включает в себя общую сигнализацию, которая помещается в файл robots.txt веб-сайта, используемый для управления тем, какие автоматизированные веб-сканеры могут посещать и индексировать сайт. В настоящее время владельцы сайтов должны указывать свои пожелания для каждой отдельной AI-компании.

Новый стандарт позволяет одновременно отклонять несколько участников. Anthropic уже внедрила поддержку, а Open AI планирует сделать это в ближайшие месяцы. Google и Microsoft ожидается, что сделают то же самое в 2027 году. Meta также выразила поддержку стандарту, но пока не обещала следовать ему.