Jagoran Harshe AI

Juya La'anar a cikin LLMs

La'anar juye-juye yanayin gazawa ne mai ban mamaki inda samfurin harshe wanda ya koyi 'A shine B' ba zai iya amsawa 'B shine A.

Dubawa

La'anar juyawa ita ce yanayin gazawa mai ban mamaki inda samfurin harshe wanda ya koyi 'A shine B' ba zai iya amsawa 'B shine A' da aminci ba. Yana bayyana cewa LLMs suna adana bayanai azaman ƙungiyoyin jagora ɗaya, ba azaman ilimin ƙima ba.

Juya La'anar a cikin LLMs wani ɓangare ne na tarin harshe-AI da ake amfani da shi don karantawa, ƙirƙira, rarrabuwa, da canza rubutu da magana a sikeli.

Zurfafa nutsewa

An rubuta a cikin takarda na 2023 da Berglund da abokan aiki suka yi, la'anar da aka yi amfani da ita ta nuna cewa idan an horar da samfurin a kan 'mahaifiyar Tom Cruise ita ce Mary Lee Pfeiffer,' sau da yawa yakan kasa lokacin da aka tambaye shi 'Wane ne ɗan Mary Lee Pfeiffer?' duk da cewa amsar ita ce a hankali. Tasirin yana ci gaba a cikin girman samfuri har ma bayan daidaitawa akan ɗaruruwan abubuwan gaskiya. Ba ƙwaƙwalwar ƙwaƙwalwar ajiya ba ce: samfurin ya ga bayanin, amma a cikin tsari ɗaya kawai. Saboda horo yana inganta hasashe na gaba akan ainihin tsari na kalma a cikin bayanan, hanyar haɗin ƙididdiga daga A zuwa B ba ta haifar da hanyar haɗi kai tsaye daga B zuwa A. Binciken ƙalubalen zato wanda ma'auni kaɗai ke haifar da sassauƙa, tunani irin na ɗan adam akan gaskiya.

Fahimtar Fasaha

Masu canza canji suna koya ta hanyar tsinkayar alama ta gaba da aka bayar a baya, don haka sabuntawar gradient yana ƙarfafa taswirar shugabanci 'A sannan B' amma suna barin 'B sannan A' ba a taɓa su ba sai dai idan wannan tsari shima ya bayyana a cikin horo. Hanyoyi biyu suna rayuwa ne a cikin hanyoyin nauyi daban. Masu bincike sun tabbatar da hakan ta hanyar auna yuwuwar log: bayan koyon gaskiyar gaba, yuwuwar bayanin ta tsaya kusa da tushe, ba tare da nuna wata juyi na ma'ana ba da ta faru yayin horo.

Jagorar La'anar Juyawa a cikin LLMs

La'anar juyawa ita ce yanayin gazawa mai ban mamaki inda samfurin harshe wanda ya koyi 'A shine B' ba zai iya amsawa 'B shine A' da aminci ba. Yana bayyana cewa LLMs suna adana bayanai azaman ƙungiyoyin jagora ɗaya, ba azaman ilimin ƙima ba. Juya La'anar a cikin LLMs wani ɓangare ne na tarin harshe-AI da ake amfani da shi don karantawa, ƙirƙira, rarrabuwa, da canza rubutu da magana a sikeli. Don gina zurfin fahimta, bi da Reversal Curse a cikin LLMs azaman samfurin aiki, ba sifa ɗaya ba: ayyana sakamakon da ake so, fayyace zato, da raba abin da tsarin zai iya yi da dogaro daga abin da har yanzu yana buƙatar yanke hukunci na ƙwararru.

A aikace, ƙungiyoyi masu ƙarfi suna amfani da Reversal Curse a cikin ƙirar ƙira ta LLMs, maidowa, da sake duba madaukai azaman tsarin sadarwar haɗin gwiwa ɗaya. Suna rubuta ƙayyadaddun ƙa'idodin nasara, gwaji akan bayanan gaskiya da gudanawar aiki, da jujjuyawar bisa ga tsarin gazawar da aka lura maimakon cin nasara na lokaci ɗaya. Wannan shine inda fahimtar ka'idar ta juya zuwa iyawa mai dorewa a cikin samfura, manufofi, da ayyuka.

Gudun aikin harshe na iya tafiya da sauri ba tare da sadaukar da daidaito ba. A lokaci guda, abubuwan da ba a iya gani ba na iya shigar da rahotanni cikin nutsuwa, kwararar goyan baya, ko abubuwan bincike. Hanyar da ta fi dacewa ita ce haɗa saurin gwaji tare da horon gudanarwa: gudanar da matukin jirgi, kama shaida, buga rajistan ayyukan yanke shawara, da ci gaba da sabunta abubuwan tsaro kamar yadda halayen ƙira, tsammanin mai amfani, da buƙatun tsari ke tasowa.

Dabarun Tasiri

Gudun aikin harshe na iya tafiya da sauri ba tare da sadaukar da daidaito ba.

Gudun aikin harshe na iya tafiya da sauri ba tare da sadaukar da daidaito ba. A cikin ƙawance masu inganci, ana fassara wannan zuwa ƙa'idodin aiki waɗanda za a iya aunawa, iyakokin ikon mallaka, da kuma bita-da-kullin bita don ƙungiyoyi su iya haɓaka kwarin gwiwa a maimakon ɓata shakku.

Yana faɗaɗa damar shiga cikin harsuna da salon sadarwa.

Yana faɗaɗa damar shiga cikin harsuna da salon sadarwa. A cikin ƙawance masu inganci, ana fassara wannan zuwa ƙa'idodin aiki waɗanda za a iya aunawa, iyakokin ikon mallaka, da kuma bita-da-kullin bita don ƙungiyoyi su iya haɓaka kwarin gwiwa a maimakon ɓata shakku.

Ƙungiyoyi za su iya ciyar da ƙarin lokaci akan hukunci yayin da aiki da kai ke sarrafa maimaitawa.

Ƙungiyoyi za su iya ciyar da ƙarin lokaci akan hukunci yayin da aiki da kai ke sarrafa maimaitawa. A cikin ƙawance masu inganci, ana fassara wannan zuwa ƙa'idodin aiki waɗanda za a iya aunawa, iyakokin ikon mallaka, da kuma bita-da-kullin bita don ƙungiyoyi su iya haɓaka kwarin gwiwa a maimakon ɓata shakku.

Makomar La'anar Juyawa a cikin LLMs

Ragewar da ke ƙarƙashin binciken sun haɗa da haɓaka bayanai na bidirectional (ƙara juzu'i na jujjuya), makasudin horarwa waɗanda ke hasashen alamu a bangarorin biyu, da tsarin dawo da bayanai waɗanda ke kallon gaskiya daidai gwargwado maimakon dogaro da ma'aunin da aka haddace. Wasu sabbin gine-ginen gine-gine da gwaje-gwajen horo na baya-bayan nan suna rage gibin. Yi tsammanin la'anar za ta ragu amma ba za ta ɓace ba, saboda tana fallasa rashin daidaituwa mai zurfi tsakanin koyo na gaba da tsarin daidaitaccen tsarin dangantakar duniya.

Aiwatar da Gaskiyar Duniya

A chatbot daidai yana faɗin iyayen sananne amma ya kasa lokacin da aka tambaye shi sunan shahararren ɗan wannan iyayen.

Wani abin ƙira yana karanta 'shugaban tara shine William Henry Harrison' duk da haka ya yi tuntuɓe akan 'wanne shugaba ne William Henry Harrison'.

Mataimakin coding wanda ya koyi taswirar aiki-zuwa-bayani ba zai iya dawo da sunan aikin daga bayanin shi kaɗai ba.

Tsarin QA na likita wanda aka horar akan 'Drug X yana magance Yanayin Y' ya kasa lissafin Drug X lokacin da aka tambaye shi abin da ke kula da Yanayin Y.

Hanyoyin Aiwatarwa

Juya La'anar a cikin LLMs a aikace

A chatbot daidai yana faɗin iyayen sananne amma ya kasa lokacin da aka tambaye shi sunan shahararren ɗan wannan iyayen.

A chatbot daidai yana faɗin iyayen sananne amma ya kasa lokacin da aka tambaye shi suna cewa shahararrun rukunin yaran iyaye yawanci suna samun sakamako mafi kyau idan suka ayyana ma'auni masu inganci a gaba, kiyaye hanyar haɓakar ɗan adam don ƙararraki, da bin diddigin nasarorin samarwa da tsadar kuskure na tsawon lokaci.

Juya La'anar a cikin LLMs a aikace

Wani abin koyi yana karanta 'shugaban tara shine William Henry Harrison' duk da haka ya yi tuntuɓe akan 'wanne shugaba ne William Henry Harrison'.

Wani abin ƙira yana karanta 'shugaban tara shine William Henry Harrison' duk da haka ya yi tuntuɓe akan 'wanne shugaba ne William Henry Harrison'. Ƙungiyoyi yawanci suna samun sakamako mafi kyau lokacin da suka ayyana ma'auni masu inganci a gaba, kiyaye hanyar haɓakar ɗan adam don shari'o'in ƙira, da bin duk nasarorin samarwa da ƙimar kuskure akan lokaci.

Juya La'anar a cikin LLMs a aikace

Mataimakin coding wanda ya koyi taswirar aiki-zuwa-bayani ba zai iya dawo da sunan aikin daga bayanin shi kaɗai ba.

Mataimaki na coding wanda ya koyi taswirar aiki-zuwa-bayani ba zai iya dawo da sunan aikin daga bayanin shi kaɗai Ƙungiyoyi yawanci suna samun sakamako mafi kyau lokacin da suka ayyana ƙofofin inganci a gaba, kiyaye hanyar haɓakar ɗan adam don shari'o'in gefe, da bin duk nasarorin samarwa da ƙimar kuskure akan lokaci.

Juya La'anar a cikin LLMs a aikace

Tsarin QA na likita wanda aka horar akan 'Drug X yana magance Yanayin Y' ya kasa lissafin Drug X lokacin da aka tambaye shi abin da ke kula da Yanayin Y.

Tsarin QA na likita wanda aka horar akan 'Drug X yana magance Yanayin Y' ya kasa lissafin Drug X lokacin da aka tambaye shi abin da ke kula da Yanayin Y Ƙungiyoyi yawanci suna samun sakamako mafi kyau lokacin da suka ayyana ma'auni masu inganci a gaba, kiyaye hanyar haɓakar ɗan adam don shari'o'in gefe, da kuma bin diddigin abubuwan da ake samu da kuma kashe kuɗi a kan lokaci.

Hatsari & Tsare-tsare

!

Abubuwan da aka ruɗe suna iya shigar da rahotanni cikin nutsuwa, kwararar tallafi, ko abubuwan bincike.

!

Hankali na gaggawa na iya ƙirƙirar sakamako mara daidaituwa a cikin buƙatun iri ɗaya.

!

Za a iya fallasa bayanan rubutu mai ma'ana idan ikon samun dama yana da rauni.

Taswirar Hanya

1

Ƙayyade tsarin fitarwa, sautin, da ma'auni masu inganci kafin fitowa.

Ƙayyade tsarin fitarwa, sautin, da ma'auni masu inganci kafin fitowa. Ɗauki kowane mataki azaman ƙofar shaida: idan ba a cika sharuɗɗa ba, dakatar da fitar, rufe tazarar, sannan kawai faɗaɗa amfani.

2

Amsa a ƙasa tare da amintattun tushe a duk lokacin da daidaito ya shafi mahimmanci.

Amsa a ƙasa tare da amintattun tushe a duk lokacin da daidaito ya shafi mahimmanci. Ɗauki kowane mataki azaman ƙofar shaida: idan ba a cika sharuɗɗa ba, dakatar da fitar, rufe tazarar, sannan kawai faɗaɗa amfani.

3

Ajiye wurin binciken ɗan adam don abubuwan da ake samu masu girma.

Ajiye wurin binciken ɗan adam don abubuwan da ake samu masu girma. Ɗauki kowane mataki azaman ƙofar shaida: idan ba a cika sharuɗɗa ba, dakatar da fitar, rufe tazarar, sannan kawai faɗaɗa amfani.

4

Bibiyar tsarin gazawar kuma sake horar da tsokaci ko tafiyar aiki akai-akai.

Bibiyar tsarin gazawar kuma sake horar da tsokaci ko tafiyar aiki akai-akai. Ɗauki kowane mataki azaman ƙofar shaida: idan ba a cika sharuɗɗa ba, dakatar da fitar, rufe tazarar, sannan kawai faɗaɗa amfani.

Ci gaba da Bincike