Roland Gavrilescu, az Introspection társalapítója és vezérigazgatója ma az AI Engineer World’s Fair rendezvényen tartott előadásában az autoresearch gyakorlati megvalósításáról beszélt. A kifejezés olyan „külső hurkot” jelöl, amelyben ügynökök (agents) figyelik, karbantartják és folyamatosan javítják a fő rendszert értékelési jelek, visszajelzések és emberi input alapján.
A vállalat és a háttér
Gavrilescu elmondta, hogy az Introspection alapötlete abból született, hogy korábban az xAI‑nál dolgozott ügynökinfrastruktúrán és felhőügynökökön, ahol találkozott társalapítójával, Julian Bright‑tal. Tapasztalatuk szerint volt egy új ügynökformátum, amelyet érdemes mélyebben feltárni, és ezt az irányt nem tudták teljes mértékben követni az xAI keretein belül. Az Introspection célja ennek a formátumnak és a szükséges üzemeltetési infrastruktúrának a termékesítése.
Három mintázat az „autoresearch” gyakorlatához
Gavrilescu három alapmintát foglalt össze, amely szerinte új tervezési alapkönyvtárként szolgálhat:
-
A hurok maga a termék: a hangsúly a modellekről a harness‑okra, majd a hurkokra tolódik. A kulcskérdés, hogy hogyan lehet olyan visszajelzési mechanizmusokat definiálni, amelyek lehetővé teszik az ügynökök számára a nagyobb munkavállalást anélkül, hogy zajt vagy pazarlást generálnának.
-
Ügynök‑recept (agent recipe): ez egy nagyobb konténer, amely összefogja a harness‑hoz, értékelésekhez (evals), bírákhoz (judges), jel‑feldolgozáshoz és visszacsatoláshoz szükséges összetevőket. A recept célja, hogy hordozható formátumban rögzítse a humán szakértelmet és a fejlődést — gyakorlatilag egy kutatólaboratóriumot ír le, szolgáltatófüggetlen módon.
-
Optimalizálás a jobb és olcsóbb felé: a rendszernek hosszabb távon javulnia és költséghatékonyabbá válni. Az iparági szereplők (például Cursor és Cognition) már igazolták, hogy ez működhet; a következő lépés a hozzáférhetőség, sebesség és költségek javítása, valamint a frontier modellek képességeinek fokozatos leképezése saját, testreszabott rendszerekbe.
Mi az az ügynök‑recept?
Gavrilescu szerint az agent recipe olyan, mint egy összetevőlista és fejlődési leírás: tartalmazza, hogy a harness hogyan dolgozik különböző modellekkel, mely eval‑eket használják, milyen bírákat hoztak létre, milyen emberi szakértelmet foglaltak le és mely sikertelenségek vezettek új eval‑ek kialakításához. A recept rögzíti a kiinduló állapotot és azt, hogy az egyes jelek miként vezetnek új komponensekhez vagy modellváltásokhoz.
Belső és külső hurkok
Az autoresearch két szintet különböztet meg: az inner loop a felhasználóval interakciózó, elsődleges munkavégző rendszer, míg az outer loop egy külön rendszer, amely tanulmányozza és karbantartja az elsődleges rendszert. A tervezési kihívás az, hogy az outer loop hatékonyan haladjon a helyes problémák felé anélkül, hogy aránytalanul sok token‑t vagy számítási költséget fogyasztana a döntéshozatal során.
Pi mint az ügynök‑harnessek „Linuxa” és a nyílt építőelemek
Gavrilescu a Pi keretrendszert a Linuxhoz hasonlította: Pi célja az agent harnessek alapjaként szolgálni, amire különböző kiterjesztéseket és konfigurációkat lehet építeni. Pi elválasztja a agentes hurkot a kiterjesztésektől, így hordozhatóvá teszi az ügynököket. Introspection ezt a kiterjeszthetőséget és a recept‑koncepciót kívánja kombinálni nyílt forrású építőelemekkel, hogy ügyfelek számára könnyen telepíthető, mégis testreszabható rendszert nyújtson.
Gyakorlatias megbízhatóság és menedzselt infrastruktúra
A vállalat termékét úgy alakították, hogy a hurkok éles (production) környezetben is működőképesek legyenek: biztosítani kell a szükséges infrastruktúrát, költségkontrollt és biztonságot. Introspection célja, hogy a frontier AI laborokban meglévő belső ügynöktechnológiákhoz hasonló képességeket tegyen elérhetővé más cégek számára menedzselt infrastruktúrán keresztül.
Ember a hurkon belül
Gavrilescu hangsúlyozta, hogy a kezdeti hurkok emberi szereplőket tartalmaznak: az emberek szolgálnak jelforrásként és eszközként. Az ügynökök „ask a human” típusú eszközökön keresztül kérdezhetnek, és az első hurkokban erősen támaszkodhatnak emberi válaszokra. Idővel azonban ezek a preferenciák rögzülnek, és az ügynökök fokozatosan autonómabbá válhatnak — hasonlóan egy új alkalmazotthoz, aki kezdetben sokat kérdez, majd önállósodik.
Vertikális piacokra fókuszálás és Git‑alapú munkafolyamatok
Introspection elsősorban vertikális ügynökökre koncentrál: a kódoló ügynökök már bizonyítottak, a kihívás a nem‑kódolási, iparági specifikus alkalmazások biztonságos és független telepítése. Ügyfeleik arra törekszenek, hogy megtartsák az adattulajdont és ne legyenek egyetlen szolgáltatóhoz kötve. A termék Git‑alapú környezetre épül: a kód és a munkatörténet a repository‑ban él, amely audit‑naplóként szolgál.
Hogyan kezdjenek hozzá az mérnökök?
Gavrilescu három gyakorlati tanácsot adott azoknak az mérnököknek, akik autoresearch kísérletekbe szeretnének kezdeni:
- Fektessenek be a jelrendszerekbe: határozzák meg, mely visszajelzésekre kell reagálni, és legyen mechanizmusuk a jelfilterezésre.
- Szorítsák kézben a költségeket: elkerülendő a váratlan nagy számlákat, szabályozni kell a hurkok költségét és hatékonyságát.
- Kövessék a kutatást: tanulmányozzák a használt harness‑mintákat és a data recipe‑koncepciót, és gondolják át, hogyan lehet ezeket a saját termékükbe átültetni.
Gavrilescu összegzése szerint az ideális cél, hogy a termék‑szervezet mini kutatólaborrá váljon, ahol az ügynökök apró kutatóként működnek, és a rendszerek emberi tudást gyűjtenek és automatizálnak fokozatosan, nem azonnal.
