Nini kilitokea
Watafiti kutoka DX (kampuni tanzu ya Atlassian), Capital One, GitHub, Google, na Chuo Kikuu cha Victoria wameanzisha mfumo wa CAFE(S), uliochapishwa katika Foleni ya ACM. Mfumo huu hutoa msamiati wa uchunguzi wa kutathmini ubora wa muktadha unaotolewa kwa mawakala wa usimbaji wa AI, kubainisha vipimo vitano mahususi vya ubora wa muktadha vinavyoathiri utendakazi wa wakala.
Mfumo wa CAFE(S) ulitengenezwa na timu ya taasisi nyingi ikijumuisha watafiti kutoka DX, Capital One, GitHub, Google, na Chuo Kikuu cha Victoria. Imeundwa ili kusaidia timu za jukwaa na wahandisi wa programu kutathmini mazingira ya habari ambayo hulisha mawakala wa usimbaji wa AI.
Kulingana na utafiti, kutofaulu kwa kazi katika usimbaji wa AI mara nyingi huhusishwa vibaya na mapungufu ya mfano au maswala ya upangaji, wakati mara nyingi husababishwa na ubora wa muktadha unaotolewa kwa mfano. Mfumo huu unaweka vipimo vitano vya ubora wa muktadha ili kusaidia timu kutambua na kurekebisha masuala haya.
Waandishi wanahoji kwamba AI huongeza gharama ya usimamizi duni wa maarifa, kwani mawakala wanaolazimishwa kufanya kazi kwenye data isiyoeleweka au ya zamani wana uwezekano mkubwa wa kutoa makosa ambayo lazima wanadamu wayarekebishe.
Maelezo ya chanzo: natlawreview.com ↗
Kwa nini ni muhimu
Mfumo wa CAFE(S) unashughulikia kikwazo muhimu katika uundaji wa programu zinazosaidiwa na AI: uharibifu wa utendaji wa muundo kutokana na data ya uingizaji yenye ubora duni. Kwa kuanzisha msamiati wa pamoja wa 'ubora wa muktadha,' mfumo huhamisha mwelekeo kutoka kwa uwezo wa kielelezo hadi uhandisi wa mazingira ya habari. Hili ni muhimu kwa sababu hata miundo ya hali ya juu mara nyingi hushindwa inapopewa data yenye utata, isiyo kamili au ya zamani, na hivyo kusababisha urekebishaji wa wasanidi programu na kuongezeka kwa gharama za tokeni. Mfumo huu unalenga kutibu ubora wa muktadha kama taaluma rasmi ya uhandisi, ikiruhusu timu kutambua kwa utaratibu ni kwa nini mawakala hushindwa na kuboresha utegemezi wa mtiririko wa kazi wa usimbaji unaoendeshwa na AI.
Mfumo huu unakusudiwa kufanya kazi kama 'kadi ya alama ya ubora' ambayo iko juu ya rafu zilizopo za ukuzaji programu. Kwa kusawazisha lugha inayotumiwa kujadili muktadha, waandishi wanatumai kuwezesha uundaji wa makusudi zaidi na matengenezo ya mabomba ya data ambayo yanaauni mawakala wa AI.
Maana ya vitendo kwa timu za wahandisi ni mabadiliko kuelekea kutibu mazingira ya habari kama wasiwasi wa uhandisi wa daraja la kwanza. Mbinu hii inalenga kupunguza 'upotevu wa ishara' na hatari za kutegemewa, uwezekano wa kuboresha mapato ya uwekezaji kwa mashirika yanayoongeza matumizi yao ya zana za usimbaji za AI.
Mbinu shirikishi: Jinsi Inavyofanya Kazi Kweli
Chunguza teknolojia msingi nyuma ya ukuzaji huu kwa maingiliano.
crm_get_transaction(id='4092').What most distinguishes an AI agent from a basic chatbot?
Nini cha kutazama baadaye
Mfumo huo kwa sasa unatumika kama msamiati wa uchunguzi badala ya mfumo wa upimaji wa kiasi. Maendeleo yajayo yatalenga kuunda vipimo vinavyotegemewa ili kutathmini vipimo hivi vitano kwa kiwango na kubainisha jinsi maboresho mahususi katika ubora wa muktadha yanavyohusiana na matokeo yanayoweza kupimika katika utoaji wa programu, tija ya wasanidi programu na ufanisi wa shirika.
Utafiti unabainisha kwa uwazi kuwa CAFE(S) ni mfumo wa ufafanuzi, si mfumo wa kipimo kiotomatiki. Sekta itahitaji kutazama utafiti au zana zinazofuata ambazo zinajaribu kukadiria vipimo hivi vitano.
Waangalizi wanapaswa kufuatilia ikiwa mfumo huu unakubaliwa na majukwaa makubwa ya maendeleo au kuunganishwa katika utiririshaji wa kazi wa wakala wa usimbaji wa AI ili kutoa ripoti sanifu za uchunguzi.