Mały wydawca, który chce określić, jak jego strony mogą być używane przez systemy AI, musi dziś myśleć o wielu crawlerach i regułach dostawców. Ogłoszenie OpenAI z 30 października wskazuje na wspólny sygnał w robots.txt, który mogłoby odczytywać wielu uczestników.
OpenAI opisuje tę inicjatywę jako dobrowolną i planuje wdrożenie w kolejnych miesiącach. Wspólny sygnał nie zastąpi istniejących kontroli crawlerów. Konwencja działa tylko wtedy, gdy strony zgadzają się co do jej znaczenia.
Trudniejszy jest kontrakt niż linia tekstu
Jasna preferencja może ograniczyć utrzymanie zasad i ułatwić opis polityki redakcyjnej. Nie odpowiada jednak, czy zgoda różni się według strony, zastosowania, etapu treningu lub kontekstu komercyjnego.
Wspólna preferencja to użyteczny interfejs. Nie zastępuje wspólnego kontraktu.
Wniosek dla twórcy: trzymaj robots.txt jednoznaczny, opisz stojącą za nim politykę i traktuj nowe sygnały jako warstwę interoperacyjności do sprawdzenia, nie gwarancję identycznego zachowania każdego dostawcy.
OpenAI zapowiada wdrożenie wspólnego sygnału w kolejnych miesiącach i utrzymanie dotychczasowych reguł crawlerów.
OpenAI · Making it easier for websites to express AI training preferences ↗
