Utumiaji wa Zana na Zana ya Kujifundisha Mwenyewe
Toolformer ni mbinu ya 2023 Meta AI ambayo huruhusu muundo wa lugha kujifundisha wakati na jinsi ya kuita zana za nje kama vile vikokotoo, injini za utafutaji na watafsiri.
Muhtasari
Instead of humans labeling tool calls, the model generates and filters its own training examples, then fine-tunes on the ones that actually help.
Dive ya kina
Toolformer, kutoka Schick et al. katika Meta AI, inashughulikia kitendawili: miundo mikubwa ni nzuri katika lugha lakini ni mbaya katika hesabu, ukweli mpya, na uchunguzi sahihi. Kitanzi cha mafunzo kinajidhibiti. Muundo huu umepewa mifano michache iliyoandikwa na binadamu inayoonyesha sintaksia ya simu ya API, kisha inachochewa kuingiza simu za waombaji (zilizofungwa kwa ishara maalum) katika nafasi nyingi kwenye mkusanyiko mkubwa wa maandishi. Kila simu ya mgombea inatekelezwa, na matokeo yake yamegawanywa. Hatua muhimu ya kuchuja hudumisha simu ya zana ikiwa tu kuwa na matokeo ya API kunapunguza mkanganyiko wa muundo kwenye maandishi halisi yanayokuja kuliko kutopiga simu, au kupiga simu kwa njia tofauti. Kisha muundo huo hurekebishwa vizuri kwenye seti hii ya data iliyochujwa, iliyojizalisha yenyewe, na kujifunza kutumia zana tano: kikokotoo, mfumo wa QA, injini ya utafutaji, mfasiri na kalenda.
Ufahamu wa Kiufundi
Wazo la uamuzi ni lengo la uchujaji linalojidhibiti. Kwa kila nafasi ya mgombea, Toolformer inalinganisha hasara ya kutabiri tokeni zifuatazo na matokeo ya API yaliyoingizwa dhidi ya bila hayo. Simu zinazopunguza hasara kwa zaidi ya kizingiti huhifadhiwa; simu zisizo na maana au za kelele hutupwa. Hii inamaanisha kuwa hakuna ufafanuzi wa kibinadamu wa matumizi ya zana 'sahihi' unaohitajika, mtindo wenyewe huamua ni simu zipi zilikuwa za kuarifu kikweli, na hujifunza uwekaji na hoja kwa pamoja.
Athari za kimkakati
Cost and budget
Maamuzi ya usanifu huendesha utendaji na gharama ya uendeshaji kwa miaka.
Maamuzi ya wazi zaidi
Elimu ya kiufundi husaidia timu kuchagua safu sahihi, sio tu mpya zaidi.
Quality control
Chaguo bora za uhandisi hupunguza matukio ya kuaminika katika uzalishaji.
Mustakabali wa Zana na Matumizi ya Zana ya Kujifundisha
Kifaa cha zana kilipanda mawakala wa leo wa kutumia na kufanya kazi. Upande wa mpaka unasonga kutoka kwa zana kadhaa zisizobadilika hadi kadhaa au mamia zilizogunduliwa wakati wa utekelezaji, na miundo inayojadili kuhusu kifaa gani cha kupiga simu, kupiga simu kwa minyororo, na kushughulika na hitilafu. Tarajia muunganisho mkali zaidi na mafunzo ya uimarishaji na misururu ya mawakala, pamoja na kujifunza API mpya popote pale, ili utumiaji wa zana za kujifunzia uwe uwezo wa kawaida badala ya utunzi maalum maalum.
Utekelezaji wa Ulimwengu Halisi
Kupigia API kikokotoo cha sentensi ya kati ili kupata hesabu kamili badala ya kubahatisha jibu la nambari.
Kuuliza utafutaji au mfumo wa QA ili kupata taarifa za ukweli au zinazosasishwa mara chache sana.
Inaomba zana ya kutafsiri kwa mashine ili kutoa kifungu katika lugha nyingine ndani ya maandishi yaliyoundwa.
Kwa kutumia zana ya kalenda/tarehe kutatua marejeleo kama vile 'Ijumaa ijayo' hadi tarehe madhubuti.
Hatari & Walinzi
Kuboresha kiwango kimoja kunaweza kuficha udhaifu mkubwa wa mfumo.
Gharama za miundombinu na matengenezo mara nyingi hupunguzwa.
Mapengo ya usalama na uonekanaji yanaweza kukua kadiri mifumo inavyozidi kuwa ngumu.
Ramani ya Utekelezaji
Bainisha muda, ubora na malengo ya gharama kabla ya utekelezaji.
Benchmark chini ya mzigo halisi na hali ya data.
Ufuatiliaji wa ala kwa makosa, kuteleza, na athari za mtumiaji.
Tayarisha njia za urejeshaji na majibu ya matukio kabla ya kuongeza ukubwa.
Endelea Kuchunguza
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Toolformer and Self-Taught Tool Use quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Mwongozo unaofuata
Kujitafakari katika Mizunguko ya Wakala
Maswali yanayoulizwa mara kwa mara
What is Toolformer and Self-Taught Tool Use?
Toolformer ni mbinu ya 2023 Meta AI ambayo huruhusu muundo wa lugha kujifundisha wakati na jinsi ya kuita zana za nje kama vile vikokotoo, injini za utafutaji na watafsiri. Badala ya wanadamu kuandikia simu za zana, modeli hutengeneza na kuchuja mifano yake ya mafunzo, kisha kurekebisha ile ambayo inasaidia haswa.
Ni nini hufanya mbinu ya Toolformer ya kutumia zana ya kujifunzia kuwa tofauti?
Toolformer inajisimamia yenyewe: mtindo unapendekeza simu za API za mgombea, kuzitekeleza, na kuweka zile muhimu pekee, bila ufafanuzi wa kibinadamu wa matumizi sahihi.
Je, ni kigezo gani ambacho Toolformer hutumia kuamua ikiwa itashikilia simu ya API ya mgombea?
Simu hutubiwa tu ikiwa kuingiza matokeo yake kunapunguza utata/hasara ya modeli kwenye maandishi halisi yanayokuja zaidi ya kizingiti, kuashiria kuwa ilikuwa muhimu sana.
Je, ni seti gani ya zana ambayo Kifaa cha awali kilijifunza kutumia?
Toolformer ilifunzwa kutumia API tano: kikokotoo, mfumo wa kujibu maswali, injini ya utafutaji, kitafsiri cha mashine na kalenda.
Je, simu za zana zinawakilishwa vipi katika maandishi wakati wa mchakato wa Toolformer?
Simu za mtahiniwa na matokeo yake yaliyorejeshwa huwekwa ndani ya maandishi kwa kutumia ishara maalum, kwa hivyo modeli hujifunza uwekaji na hoja pamoja.
Ni udhaifu gani wa kimsingi wa miundo mikubwa ya lugha iliyohamasishwa na Zana?
Licha ya ustadi dhabiti wa lugha, LLM hupambana na hesabu kamili, ukweli uliosasishwa, na urejeshaji wa taarifa sahihi, ambao zana za nje zinaweza kutoa.