Eszközök

Mesterséges intelligenciával generált szöveg

NVIDIA és Palantir Foundry: Nemotronnal kódolják a beszállítói lánc döntési szakértelmét

A főszereplők a NVIDIA és a Palantir együttműködése, amelyben Palantir Foundry lett a digitális ellátási lánc parancsnoki központja, és NVIDIA Nemotron modelleket használnak a döntési tudás kódolására.

NVIDIA és Palantir Foundry: Nemotronnal kódolják a beszállítói lánc döntési szakértelmét

NVIDIA az egyik legnagyobb és legösszetettebb ellátási lánccal rendelkezik a világon; cég teljesítményét a wafer‑kibocsátástól az első tokenig mérik. Ez az időintervallum két részre oszlik: a time‑to‑rack azzal foglalkozik, hogy a szilícium elhagyja a gyárat és egy összeépített rendszer megérkezik az adatközpont padlójára; a time‑to‑token pedig azutáni elemeket fedi le — energia, hűtés, hálózat és a szoftverréteg, amely nap egyen belül hasznosítja az infrastruktúrát.

A Grace Blackwell NVL72 platform több millió alkatrészre és több ezer beszállítóra támaszkodik világszerte; a végső rendszert több tucatnyi OEM és ODM építi össze. Egyetlen számítási tálca — a rack tizennyolc tálcájának egyike — két NVIDIA Grace CPU‑t, négy NVIDIA Blackwell GPU‑t és harminckettő HBM3e memóriastacket igényel. A Vera Rubin számára létrehozott ellátási lánc ennek a kétszerese volt. A CPU, GPU és memória mind kritikus komponens, és rendelkezésre állásuk hetente változik; ami egy héten hiánycikk, a következő héten szabadon elérhető lehet.

A szerelés a szerződéses gyártók számára nem kezdődhet el, amíg minden komponens meg nem érkezik valamelyik három forrásból: NVIDIA‑tól közvetlenül, NVIDIA által konszignációban tartott alkatrészek, vagy beszállítói készlet. Amikor a komponensek nem egyszerre érkeznek, a korábban érkezők várnak a későkre. NVIDIA a gyártóhely anyagátvételétől a szubösszeszerelés vagy termékként való kiszállításig számított időt Time of Ownership (TOO) néven méri.

A dinamikus készlethelyzet mellett NVIDIA‑nak heti szinten kell döntést hoznia arról, hogy mely anyagból mennyit osszanak ki egyes gyártóhelyeknek — ezt nevezik kritikus anyagkiosztási problémának, és jelenleg manuálisan újratervezik minden héten. A kiosztás a jelen negyedévtől a következőig terjed, a közeli hetek már elkötelezettek, ezért a heti friss adatok főként a távolabbi időszakok kimenetelét befolyásolják.

A time‑to‑rack rövidítése négy dologtól függ: valós idejű láthatóságtól a szűk keresztmetszetekre, redundanciától a single‑point‑failure helyzetekre, megbízhatóságtól az upstream gyártási kötelezettségekhez, valamint a humán szakértelem kodifikálásától, hogy a komplex kiosztási döntések mögötti ítélet maradandó, tanuló tudássá váljon.

Palantir Foundry alapú ellátási lánc parancs‑központ

Az NVIDIA ellátási lánc működtetési csapata Palantir‑rel együtt egy egységes nézetet alakított ki minden olyan bemenetről, amely a material allocation döntést befolyásolja. Ezt Digital Supply Chain Intelligence command centernek hívják; a rendszer kockázatokat, akadályokat és egyéb jeleket emel ki, amelyek korábban szétszórt adatforrásokban rejtve maradtak.

A háttérben Palantir Foundry szolgálja az operációs kontextust. Az Ontology összekapcsolja az anyagokat, gyártóhelyeket, elköteleződéseket, kapacitásokat, kiosztásokat, gyártási outputokat és nem‑strukturált, kvalitatív jeleket egy felügyelt adatrétegben. Az Ontology objektumokból és linkekből építkezik táblázatok helyett, ezáltal a működési valóság teljes reprezentációját adja.

Ez a reprezentáció lehetővé teszi, hogy a kiosztási tervezők sokféle forgatókönyvet szimuláljanak és elemezzenek, szélesebb hozzáférést adva a döntési térhez, és megalapozva egy AI „flywheel”-t, amely idővel felhalmozza és javítja a tudást.

Kvantitatív megoldás: NVIDIA cuOpt

Az anyagok több gyártóhely közötti kiosztása kezdetben kvantitatív optimalizációs probléma. A döntési változók azt taglalják: melyik korlátozott alkatrészből mennyit kapnak a gyártóhelyek és mikor. A korlátok közé tartozik minden gyártó, amely képes az adott Blackwell alösszeszerelés előállítására, valamint az egyes helyek átvételi kapacitása. Számításba kell venni a részegységek függőségi gráfját visszafelé, hogy a megoldó tudja: a compute tálcát a legszűkebb input korlátozza, nem az átlag.

A kötő korlátok hetente változhatnak — GPU, CPU vagy memória hiánya; beérkezési idők a három ellátási útvonalon; ügyfélkötelezettségek, amelyek meghatározzák egy adott hiány valós költségét. Több ezer változó és korlát egyetlen heti kiosztásba rendeződik.

Ezt a feladatot az open‑source, GPU‑gyorsított döntésoptimalizáló könyvtár, az NVIDIA cuOpt oldja meg. A cuOpt a Foundry Ontology‑ból veszi a bemenetet és oda írja vissza a kiosztási javaslatot. Az optimalizálás kevert egészértékű lineáris programként van felállítva, és a cél a TOO minimalizálása. A megoldó nemcsak a kiosztást adja vissza, hanem azt is jelzi, mely korlátok voltak kötők (binding), így a tervező láthatja például, hogy ebben a hétben Tajvan kapacitása, nem a memória ellátás volt a szűk keresztmetszet.

A gyors megoldás lehetővé teszi, hogy a tervezők érzékenységi vizsgálatokat futtassanak: mi történik 10%-kal kevesebb memóriával, vagy ha egy új gyártóhely áll rendelkezésre? A tervezők így nemcsak választ kérnek a megoldótól, hanem a trade‑offokról információt kapnak.

A matematikai megoldás határai és a humán szakértelem szerepe

A kvantitatív optimalizáció nem lát mindent. NVIDIA és Palantir visszatesztelte a történelmi kiosztási döntéseket és azt találták, hogy a tervezők olyan információkat használtak, amelyeket a solver nem látott: az adott héten partnerekkel váltott e‑mailek, súlyos időjárási előrejelzések egy kulcsfontosságú régióban, geopolitikai események, beszállítói megbeszélések jegyzőkönyvei és éveken át felhalmozott tapasztalat. Ezek az inputok ösztönös ítéletet tápláltak a kiosztáshoz, és ez az ösztön volt az, ami gyakran jobbá tette az emberi döntéseket a pusztán matematikai megoldásnál.

Ennek fényében NVIDIA és Palantir olyan munkafolyamatot épített, amely köré a humán szakértők szerveződnek: rögzítik a kiosztási döntést, a mögöttes indoklást, a várható eredményt és a tényleges kimenetet. Az intézményi tudás explicit, felülvizsgálható döntési logikává válik, és mivel ezek az adatok az Ontology‑ban élnek, alkalmasak egy LLM kiképzésére az emberi szakértelem utánzására.

Döntési intelligencia kodifikálása: Nemotron post‑training

Palantir és NVIDIA post‑tréningezett egy nyílt súlyú LLM‑t, hogy ugyanazt a gondolkodást alkalmazza és ajánlást tegyen. A választás a NVIDIA Nemotron 3.5 Lightning modellre esett, mert ez kifejezetten az agentikus munkafolyamatok végrehajtó rétegére készült. A Nemotron mixture‑of‑experts architektúrája hatékony inferenciát tesz lehetővé; maga a modell viszonylag „kicsi”: 30 milliárd paraméter körüli, és körülbelül 3 milliárd aktív paraméter működik egy előrecsatolás során, ami elég nagy egy fókuszált policy megtanulásához, de elég kicsi ahhoz, hogy a post‑tréning ciklus gyakorlatias legyen.

Mivel Nemotron nyílt, a post‑tréning az ügyfél saját számítási határain belül végezhető el, így az érzékeny ellátási láncadatok nem kerülnek ki a szervezetből. A modell a tervezők által ténylegesen használt jelekből tanul: mennyi korlátozott anyagot ajánlottak egy gyártóhelynek, mit vállalt a gyártó, mit állított elő végül, és a döntés pillanatában elérhető kvalitatív bizonyítékok.

A cél egy kiosztási policy kodifikálása: a modell képes legyen gyártási kockázatot értékelni, kiosztási javaslat‑tartományt ajánlani, az ajánlás mögötti tényezőket azonosítani és érthetően indokolni a supply‑chain csapat felé.

Tréning és értékelés a Foundry Ontology alapján

A tanítás folyamata az operatív történettel indul az Ontology‑ban, és a következő lépésekből áll:

  • Anonimizálás: NeMo Anonymizer távolítja el a személyes azonosító információkat és homályosítja az érzékeny mezőket.
  • Szinтетikus adatkészítés: NeMo Data Designer kiterjeszti és kiegyensúlyozza a példákat, hogy a modell ne csak rutin heteket, hanem kapacitáskorlátokat és zavarási forgatókönyveket is lásson.
  • Felügyelt finomhangolás: NeMo AutoModel egy kis LoRA adapter paraméterkészletet tanít a fagyasztott alap‑súlyok mellett, csökkentve a teljesítési időt és a memóriaigényt.
  • Értékelés: A point‑in‑time backtest ugyanazokat a történelmi döntéseket játssza le, elrejtve az eredményt, és összehasonlítja a modell javaslatát a tervező döntésével és a tényleges kimenettel.

A Palantir Autopilot kezeli a teljes életciklust: elindítja a munkákat Ontology adatokból, figyeli a telepített Nemotron modellt és megőrzi a vonalkövetést az adattól a modellverzión át az ajánlásig.

A telepített modell elolvassa a jelenlegi operatív kontextust és ajánlást ad kockázati indoklással. A tervező felülvizsgálja és hozza meg a végső döntést.

A visszacsatolás lezárása és jövőbeni fejlesztés

Minden elfogadás, szerkesztés, felülírás és gyártási kimenet visszakerül az Ontology‑ba, gyarapítva az adatbázist addig, amíg elegendő reprezentatív adat nem áll rendelkezésre egy új, felügyelt tréningfutáshoz. Később ezt a visszacsatolást megerősítéses tanulásra is fel lehet használni: elfogadott és felülírt ajánlások preferencia‑párokká alakulnának, jutalmakkal mérve a kiosztás helyességét, szabálykövetést és bizonyíték‑alaposságot. A modell nem retrenírozza magát élőben.

Az eredmény kettős: a tervezők kevesebb időt töltenek a rutin döntések rekonstruálásával, így több gyártóhelyet és terméket képesek lefedni; és a kiosztási szakértelem intézményi tudássá válik, rövidítve a betanulást és gyorsabban terjesztve a fontos tapasztalatokat a szervezeten belül.

Mit hozott a post‑training a gyakorlatban?

Az NVIDIA ellátási lánc csapata a Palantirrel meghatározta, mit kap a modell, mit ajánlhat és hogyan pontozzák az ajánlásokat. Ez a munkafolyamat lett az alkalmazás és az allocation decision‑intelligence benchmarkja.

Három modellt hasonlítottak össze ugyanazon feladaton és értékelési adaton: a base Nemotron 3.5 Lightning (BF16), Nemotron 3 Ultra (NVFP4) és a post‑trained Nemotron 3.5 Lightning (BF16). A fejlesztési benchmarkon a post‑trained Lightning modell 86,7% kiosztás‑döntési pontosságot ért el; Ultra 55,5%‑ot, a base Lightning pedig 17,5%‑ot. A post‑trained modell 31,2 százalékponttal múlta felül az Ultrát és 69,2 százalékponttal a saját alapváltozatát.

A kiegyensúlyozott metrikákon is vezetett: balanced accuracy 58,6% vs. Ultra 42,0%; macro‑F1 57,5% vs. 39,5%. Ezek fontosak, mert a korlátozott ellátás miatt a tervezők gyakrabban csökkentenek kiosztásokat, mint hogy növelnék, így az egyszerű pontosság torzítható lenne a többségi osztály előnyben részesítésével.

A levont tanulság: egy 30B paraméteres, szakterületre finomhangolt modell felülmúlhat egy nagyságrenddel nagyobb, általános célú modellt egy jól behatárolt kiosztási feladatban. Ez nem jelenti azt, hogy a kisebb modell általánosabb képességekben erősebb; javulása a post‑training domainre koncentrálódik. Néhány előrejelzési feladat — például jövőbeni gyártási kockázat pontos előrejelzése — továbbra is nehéz maradt.

A LoRA finomhangolási futás két NVIDIA B200 GPU‑n percek alatt lefutott, így a folyamat könnyen ismételhető a felhalmozódó visszacsatolás fényében. Mindez egyenesen példázza a szuverén AI megközelítést: tulajdonosi ellátási láncadatok, modell‑súlyok és inferencia egyetlen felügyelt környezeten belül maradnak, on‑premises vagy a felhőben is telepíthetően az operatív követelmények szerint.

Általánosíthatóság és következtetések

A bemutatott munkafolyamat nem kizárólag a félvezetőiparra korlátozódik. Bármely olyan művelet, ahol kritikus kapacitást tapasztalt szakértők osztanak szét töredezett jelek alapján, képes ugyanazt a flywheel‑t megvalósítani és domainre szabni.

Ehhez három feltétel szükséges: egy felügyelt operációs adatréteg, döntés‑rögzítés indoklással és kimenettel, valamint egy nyílt modell, amelyet helyben lehet post‑tréningezni. Az operatív adatok képezik a modellt, a modell javítja a döntést, és a döntés új adatot termel a következő felügyelt tréninghez. NVIDIA és Palantir ezzel csökkentik a wafer‑out és az első token közötti időt, és olyan ellátási láncot hoznak létre, amely tanul a növekedésnél gyorsabban.