OpenAI bejelentette, hogy elfogad egy közös jelölést a robots.txt fájlokban, amelynek célja, hogy a webhelytulajdonosok és kiadók egyszerre több AI-szolgáltatónak is kifejezhessék azon preferenciáikat, hogy a tartalmukat használhatják-e alapmodell jellegű, generatív mesterséges intelligencia képzéséhez. A vállalat szerint ez egy önkéntes kezdeményezés, amely csökkenti a webhelyüzemeltetők adminisztrációs terhét.
Korábban a webhelytulajdonosoknak egyenként kellett azonosítaniuk és engedélyezniük vagy tiltaniuk a különböző feltérképező botokat (crawlers) minden egyes szolgáltatóhoz. A közös jelzés lehetővé teszi, hogy ugyanazt a beállítást több részt vevő AI-szolgáltató is figyelembe vegye, így egyszerűsítve a szabályok karbantartását.
OpenAI azt közölte, hogy a jelzést a következő hónapokban kívánja bevezetni, és további részleteket oszt meg a megvalósításról, amikor azok elérhetőek lesznek. Egyúttal hangsúlyozták, hogy ez az új jelzés nem váltja fel a meglévő robots.txt alapú vezérlőket: a jelenlegi crawler-szabályok továbbra is érvényesek és tiszteletben tartandók lesznek.
A lépés részben az Internet Engineering Task Force (IETF) AI Preferences munkacsoportjának folyamatban lévő munkájára épül. OpenAI részt vesz a munkacsoportban, és a közös jelzést bevezető mai bejelentéssel együtt más résztvevőkkel osztozik az iránymutatáson. A vállalat jelezte, hogy tovább követi és alakítja gyakorlatát az IETF-ben zajló szabványosítási viták, valamint a szabályozási és technológiai környezet alakulása alapján, a megfelelő ellenőrzések és az igazságosság szem előtt tartásával.
OpenAI szerint ez a megközelítés gyakorlati lépés az nyílt web irányába: a felhasználók továbbra is közzétehetnek és megtalálhatnak információkat, miközben a webhelytulajdonosok egyszerűbb, egyértelműbb módon jelezhetik, hogyan kívánják engedélyezni vagy korlátozni tartalmaik felhasználását. A vállalat arra bátorít más AI-szolgáltatókat is, hogy tiszteljék és alkalmazzák ezt a közös jelzést.
