Làkk AI GUIDE

LLMs

Bañ-bañ bi ñuy soppi dafay nuru lu yéeme ndax xeetu làkk wi jàng 'A mooy B' mënul tontu ci anam wu wóor 'B mooy A.

Résumé

Bañ bu ñu delloo ap anam bu yeeme la ndax xeetu lakk bu jang 'A moy B' munul tontu ci anam wu wóór 'B moy A.' Dafay wane ni LLM yi dañuy denc mbir yi ni kuréel yu am benn yoon, duñu ni xam-xam bu symétrique.

Reversal Curse ci LLMs bokk na ci lakk-IA stack bi ñuy jëfandikoo ngir jàng, defar, xaaj, ak soppi mbind ak wax ci eskaal.

Plongeur bu xóot

Berglund ak ay naataangoom bind nañu ko ci benn këyitu atum 2023, mbañeel bi defay wone ni su benn mannekin taggat ci 'Yaayu Tom Cruise moy Mary Lee Pfeiffer' defay faral di lajj su ñu ko laaje 'Kan mooy doomu Mary Lee Pfeiffer?' doonte tontu li dafay nuru. Efe bi dafay wéy ci tolluwaayu model yi ba ci ginaaw ñu defaree téemeeri mbir yu mel noonu. Du bërëb ci fàttaliku: model bi gis na xibaar bi, waaye ci benn yoon kese. Ndax tàggat yaram dafay gëna baaxal xam-xam bi ci topp ci njubluwaay baat yi ci done yi, lëkkalekaay biy tàmbalee ci A ba ci B du sos ci saasi lëkkalekaay bu bawoo ci B ba ci A. Gis-gis bi dafa werante xalaat yi ne escalier kese mooy defar xalaat yu yomb, yu niro ak nit ci kaw dëgg.

Gis-gis xarala

Transformers yi dañuy jàng ci wax luy waaja am ci token bi ci topp, kon coppite gradient yi dañuy gëna dooleel kartograafi 'A ginaaw B' waaye bàyyi 'B ginaaw A' te kenn laalu ko fileek yoon woowu feeñul ci tàggat bi. Ñaari yoon yooyu ñu ngi dundu ci yooni diisaay yu wuute. Gëstukat yi firndeel nañu ko ci natt log-probabilities: ginaaw bi ñu jàngee lu jëm kanam, probabilite bi ci wax ju dellu ginaaw des ci wetu baseline bi, di wane ni amul benn inversion logique bu nëbbu bu am ci diiru tàggat bi.

Mastering dellu ginaaw ci LLMs

Bañ bu ñu delloo ap anam bu yeeme la ndax xeetu lakk bu jang 'A moy B' munul tontu ci anam wu wóór 'B moy A.' Dafay wane ni LLM yi dañuy denc mbir yi ni kuréel yu am benn yoon, duñu ni xam-xam bu symétrique. Reversal Curse ci LLMs bokk na ci lakk-IA stack bi ñuy jëfandikoo ngir jàng, defar, xaaj, ak soppi mbind ak wax ci eskaal. Ngir tabax xam-xam bu xóot, jàppal Reversal Curse ci LLMs ni xeetu liggéey, du benn man-man: leeral njariñ yi nga bëgg, leeral xalaat yi, ak tàqale li sistem bi mëna def ci anam wu wóor ak li ba leegi soxla àtteb kàngam.

Ci jëf, ekip yu am doole yiy jëfandikoo Reversal Curse ci LLMs dañuy jëmmal, seet, ak xoolaat loop ni benn sistem jokkoo buñ boole. Dañuy bind kritër yu leer ngir am ndam, natt leen ci done yu dëggu ak def liggéey, ba noppi ñu baamtu ci anamu ñàkka mëna seetlu, du ci benn yoon benchmark wins. Mooy barab bi xam-xam theorie bi di soppiku nekk kàttan buy yàgg ci produit yi, ci politik yi ak ci liggéey yi.

Liggéeyukaay yi ci làkk yi mën nañu gëna gaaw te duñu yàq deggoo gi. Ci jamano jooju, mbiri Hallucinated mën nañu dugg ci rapoor yi, jàppale flow yi, wala gëstu yi génne. Xeetu jëf bi gëna dëgër mooy boole gaawaayu jàngat ak disipline nguur: doxal pilote, jàpp firnde, siiwal dogal yi, ak wéy di yeesal kaaraange gi ci anam wi ñuy doxalee, li jëfandikukat bi di xaar, ak sàrti sàrt yi di jëm kanam.

njeextalu pexe

Liggéeyukaay yi ci làkk yi mën nañu gëna gaaw te duñu yàq deggoo gi.

Liggéeyukaay yi ci làkk yi mën nañu gëna gaaw te duñu yàq deggoo gi. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.

Dafay yaatal jëfandikoo gi ci làkk yi ak ci anam yi ñuy jokkoo.

Dafay yaatal jëfandikoo gi ci làkk yi ak ci anam yi ñuy jokkoo. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.

Ekip yi mën nañu gëna yàgg ci àtte ci jamono ji otomatisation di liggéey ci baamtu.

Ekip yi mën nañu gëna yàgg ci àtte ci jamono ji otomatisation di liggéey ci baamtu. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.

Ëlëgu mbañeel ci LLMs

Mitigations yi ñuy jàngat bokkuna ci yokk done ci ñaari yoon (yokkum ay frase yuñ delloo), mébetu tàggat yiy wax luy waaja am ci ñaari yoon yi, ak sistem yuy seet mbir yi ci anam wu symétriquement moo gën ñuy wéeru ci diisaay yuñ xam. Yenn architecture yu bees ak jàngat yu ñuy njëkka def ngir wàññi bërëb bi. Xaarandil ni musiba bi dina wàññeeku waaye du ni mes, ndax dafay wane ñàkka méngoo bu xóot bi am ci digganté njàngum token bu ci topp ak structure symétrique ci diggante àdduna dëgg.

Doxal ci àdduna dëgg

Chatbot dafay wax waajur bu siiw ci anam wu jaar yoon, waaye suñu ko laajee tuddee doomu waajur bu siiw bi, du wax.

Benn xeetu nit neena ' jiroom ñeenteelu njiitu réew ma moy William Henry Harrison' waaye nak mungi fakkastalu ci ' ban njiit moo nekkoon William Henry Harrison.'

Assistant codage bi jàng mapping fonction-à-description mënul am tur fonction ci description bi kese.

Benn sistem QA medikaal buñu tàggat ci 'Drog X dafay faj feebar Y' mënul lim Drog X suñu ko laajee lan mooy faj feebar Y.

Modèlu jëfandikoo

Delloosi mbañeel ci LLMs ci jëf

Chatbot dafay wax waajur bu siiw ci anam wu jaar yoon, waaye suñu ko laajee tuddee doomu waajur bu siiw bi, du wax.

Chatbot dafay wax bu baax waajur bu siiw waaye daa lajj suñu ko laajee mu tuddee doom bu siiw bi ci waajur yi. Ekip yi dañuy faral di am njariñ yu gëna baax suñu joxee threshold yu baax ci kanam, tëye yoonu escalation nit ngir jafe-jafe yi, ba noppi topp njariñu produit ak njëgu njuumte ci diir bi.

Delloosi mbañeel ci LLMs ci jëf

Benn xeetu nit neena "jiroom ñeenteelu njiitu réew moy William Henry Harrison" waaye nak mungi fakkastalu ci " ban njiit moo nekkoon William Henry Harrison."

Benn xeetu nit neena ' jiroom ñeenteelu njiitu réew ma moy William Henry Harrison' waaye nak mungi fakkastalu ci ' ban njiit moo nekkoon William Henry Harrison.' Ekip yi dañuy faral di am njariñ yu gëna baax suñu tëralee ay threshold yu baax ci kanam, tëye yoonu escalation nit ngir jafe-jafe yi, ba noppi topp benefiis yi ak njëgu njuumte yi ci diir bi.

Delloosi mbañeel ci LLMs ci jëf

Assistant codage bi jàng mapping fonction-à-description mënul am tur fonction ci description bi kese.

Assistant codage bi jàng ab fonction-to-description mapping mënul jotaat tur fonction bi ci description bi kese. Ekip yi dañuy faral di am njariñ yu gëna baax suñu joxee threshold yu baax ci kanam, tëye yoonu escalation nit ngir jafe-jafe yi, ba noppi topp benefiis yi ak njuumte yi ci diir bi.

Delloosi mbañeel ci LLMs ci jëf

Benn sistem QA medikaal buñu tàggat ci 'Drog X dafay faj feebar Y' mënul lim Drog X suñu ko laajee lan mooy faj feebar Y.

Benn sistem QA medikaal buñu tàggat ci 'Drog X dafay faj Condition Y' mënul lim Drug X suñu ko laajee lan mooy faj Condition Y Teams yi dañuy faral di am njariñ yu gëna baax suñu leeralee kalite ci kanam, tëye yoon wi nit ñi di yokk ngir jafe-jafe yi, ba noppi topp njariñu produit yi ak njëgu njuumte yi ci diir bi.

Risk yi ak balustrade yi

!

Lépp lu jaarul yoon mën na dugg ci rapoor yi, jàppale ci liggéey bi, wala ci njariñu gëstu bi.

!

Sensibilite bu gaaw mën na jur njariñ yu wuute ci laajte yu noonu mel.

!

Done yu am solo mën nañu feeñ sudee seytu jëfandikoo gi néew doole.

Roadmap ngir samp gi

1

Mandargal formaa génne gi, melokaan bi, ak standard kalite yi laata ngay dugal ko.

Mandargal formaa génne gi, melokaan bi, ak standard kalite yi laata ngay dugal ko. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, ba noppi nga yaatal jëfandikoo gi.

2

Tontu yu am solo ak balluwaay yu wóor saa yu dëggu bi di am solo.

Tontu yu am solo ak balluwaay yu wóor saa yu dëggu bi di am solo. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, ba noppi nga yaatal jëfandikoo gi.

3

Fexeel am barabu xool nit ñi ngir am njariñ yu am solo.

Fexeel am barabu xool nit ñi ngir am njariñ yu am solo. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, ba noppi nga yaatal jëfandikoo gi.

4

Toppal anami gacce yi ak di faral di tàggataat ay laaj wala def-liggéey.

Toppal anami gacce yi ak di faral di tàggataat ay laaj wala def-liggéey. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, ba noppi nga yaatal jëfandikoo gi.

Weyal di banneexu