AI-jednostki wspierają nową standardową metodę zatrzymywania AI-skrapowania

Anthropic, Open AI, Google oraz Microsoft przyjęli nową standardową metodę, która ma ułatwić stronie internetowej blokowanie AI-firmom dostępu do ich treści. Nowe rozwiązanie wprowadza wspólny sygnał umieszczany w pliku robots.txt strony, który służy do zarządzania tym, które zautomatyzowane wyszukiwarki mogą odwiedzać i indeksować witrynę.

Obecnie właściciele stron muszą wskazywać swoje preferencje dla każdej osobnej AI-firmy. Nowy standard umożliwia jednocześnie odrzucenie wielu podmiotów. Anthropic już wdrożył wsparcie, a Open AI planuje to zrobić w nadchodzących miesiącach. Google i Microsoft mają również wdrożyć ten standard w 2027 roku.