MLOps érettségi szintek

Az MLOps a gépi tanulás fejlesztését szoftverszállítással és üzemeltetéssel ötvözi. Az érettségi modellek szakaszokba rendezik a képességeket, segítve a csapatokat a jelenlegi gyakorlatok és a következő fejlesztések megbeszélésében. A Google MLOps keretrendszere például megkülönbözteti a kézi folyamatokat, a folyamatautomatizálást és az automatizáltabb CI/CD/folyamatos képzési gyakorlatokat. Más szervezetek eltérő címkéket és méreteket használnak, ezért a szintszámot mindig a használt modellhez kell kötni. A korai szakaszban az adatok előkészítése, betanítása és üzembe helyezése a notebookokon és a kézi átadásokon múlhat. Ez működhet a feltárásnál, de megnehezíti az eredmények reprodukálását és következetes közzétételét. A következő lépés az ismételhető folyamatok, a verzió-bemenetek és -kimenetek létrehozása, a tesztek és a kiértékelés automatikus futtatása, valamint a modellnyilvántartás karbantartása. A későbbi lehetőségek automatizálhatják a CI-t a folyamatkódhoz, a CD-t az érvényesített modellműtermékekhez, és a CT-t a jelöltek létrehozásához, ha az adatok vagy ütemezések ezt indokolják. Az automatizálás nem öncél. Egy csapatnak lehetnek kifinomult csővezetékei, amelyek ismételten rossz adatokra oktatnak, vagy káros modellt szállítanak. Az érettség magában foglalja a felügyeletet, a tulajdonjogot, az irányítást, a reprodukálhatóságot, a visszaállítást, a biztonságot és az egyértelmű visszacsatolási útvonalakat. Határozza meg, melyik képesség oldja meg a jelenlegi szűk keresztmetszetet: egy kis csapat többet profitálhat a megbízható értékelési és telepítési dokumentációból, mint egy összetett irányítási platformból. Az értékeléseknek bizonyítékokon kell alapulniuk. Kérdezd meg, hogy rögzítésre kerülnek-e az adatok és a kódverziók, hogy a tesztek és a minőségi kapuk következetesen futnak-e, a kiadások visszafordíthatóak-e, és figyelik-e az élő teljesítményt. Ne adjon hozzá egyetlen pontszámot, amely elfedi a területek közötti különbségeket. Az érettségi modell irányíthatja a befektetést, de nem tanúsítja vagy bizonyítja, hogy egy rendszer biztonságos, tisztességes vagy hatékony. Értékelje újra, ahogy a csapat mérete, kockázata, modellhasználata és a szabályozási kötelezettségek megváltoznak. A cél a kontextusnak megfelelő, megbízható átadás, nem önmagáért a legmagasabb szint elérése.