Ni-Context Learning
Ẹkọ inu-ọrọ jẹ agbara iyalẹnu ti awọn awoṣe ede nla lati gbe iṣẹ-ṣiṣe tuntun kan lati awọn apẹẹrẹ diẹ ti a gbe sinu itọsẹ, laisi atunṣe eyikeyi.
Akopọ
O jẹ idi ti o fi le 'kọ' awoṣe kan lori fifo nikan nipa fifihan ohun ti o fẹ.
Jin Dive
Ni deede, ikọni nẹtiwọọki nkankikan iṣẹ-ṣiṣe tuntun tumọ si imudojuiwọn awọn iwuwo rẹ nipasẹ ikẹkọ. Ẹkọ inu-ọrọ yatọ: o kọ awọn apẹẹrẹ diẹ taara ni itọsi ('ọrọ ọrọ'), ati awoṣe naa ṣe agbekalẹ ilana naa o si lo si titẹ sii tuntun kan. Ko si ohun ti inu awoṣe yipada; Awọn apẹẹrẹ kan darí asọtẹlẹ-ami-atẹle. Iwọ yoo gbọ 'odo-shot' (itọnisọna nikan), 'shot' (apẹẹrẹ kan), ati 'diẹ-shot' (awọn apẹẹrẹ pupọ). Ihuwasi yii jẹ olokiki nipasẹ GPT-3 ni ọdun 2020 ati pe o jẹ agbara pajawiri: awọn awoṣe kekere ko le ṣe, ṣugbọn o ti kọja iwọn iwọn 100-bilionu-paramita, deede lori awọn itusilẹ-diẹ ta awọn ga soke ni mimu. Awoṣe naa kọ ẹkọ ni imunadoko lati ṣe idanimọ ati tẹsiwaju awọn ilana lakoko ikẹkọ iṣaaju, nitorinaa o le tun lo ọgbọn yẹn ni akoko itọkasi.
Imọ-imọ-ẹrọ
Iwadi itumọ tumọ pupọ ti agbara yii si 'awọn ori fifa irọbi' - awọn iyika akiyesi ti o farahan lakoko ikẹkọ ati ṣe isọ-iṣaaju iruju: wọn ṣayẹwo pada fun ibiti ami ami kan ti han, lẹhinna daakọ ohun ti o tẹle. Nitorinaa nigbati itọka rẹ ba fihan 'apple -> eso, karọọti -> Ewebe’, awoṣe naa ba eto naa mu ati ṣe asọtẹlẹ aami ti o tọ fun ohun ti n bọ. Ni pataki, ko si awọn gradients ti nṣan ati pe ko si imudojuiwọn awọn iwuwo ni itọkasi. Awọn apẹẹrẹ nirọrun tun ṣe awọn iṣẹ ṣiṣe ti o jẹ ifunni pinpin iṣeeṣe ti ami atẹle.
Ipa Ilana
Iyara ati iwọn
Ṣiṣan iṣẹ ede le gbe ni iyara laisi irubọ aitasera.
Wiwọle ati arọwọto
O faagun iraye si kọja awọn ede ati awọn aza ibaraẹnisọrọ.
Awọn ipinnu diẹ sii
Awọn ẹgbẹ le lo akoko diẹ sii lori idajọ lakoko ti adaṣe n kapa atunwi.
Ọjọ iwaju ti Ẹkọ inu-ọrọ
Faagun awọn window ọrọ-ọrọ (ni bayi awọn ọgọọgọrun awọn ami-ami) Titari ikẹkọ inu-ọrọ si awọn ijọba 'ọpọlọpọ-shot', nibiti awọn dosinni tabi awọn ọgọọgọrun awọn apẹẹrẹ le dije atunwi itanran fun diẹ ninu awọn iṣẹ ṣiṣe, laisi idiyele ikẹkọ. Reti isọdọkan wiwọ pẹlu igbapada, nitorinaa awọn apẹẹrẹ ti o yẹ ni a mu ni adaṣe, ati imọran ti o dara julọ nigbati ẹkọ inu-ọrọ ba kuna tabi ti o ni idamu. Yoo wa ni iyara, ọna olowo poku lati ṣe adaṣe awoṣe kan, ni ibamu - kii ṣe rirọpo - atunṣe itanran fun iduroṣinṣin, awọn iṣẹ ṣiṣe iwọn-giga.
Real-World imuse
Fifun iwiregbebot apẹẹrẹ mẹta ti awọn ami atilẹyin ati awọn ẹka wọn, lẹhinna nini ṣe lẹtọ tikẹti tuntun ni ọna kanna
Ṣe afihan awoṣe meji ṣaaju/lẹhin awọn orisii ọrọ idoti ti tun ṣe atunṣe si JSON mimọ nitorina o yi iyoku pada
Lilọ awọn apejuwe ọja ayẹwo tọkọtaya kan ninu ohun orin ami iyasọtọ rẹ ki awọn tuntun ba ara wọn mu
Ṣafihan iṣoro ọrọ-ọrọ-iṣiro ti o ni ẹtan ṣiṣẹ ni igbese nipasẹ igbese nitorinaa awoṣe ṣe yanju awọn iṣoro ti o jọra pẹlu ọna kika ero kanna
Awọn ewu & Awọn ọna iṣọ
Awọn otitọ ti a sọ di mimọ le tẹ awọn ijabọ sii ni idakẹjẹ, awọn ṣiṣan atilẹyin, tabi awọn abajade iwadii.
Ifamọ kiakia le ṣẹda awọn abajade aisedede kọja awọn ibeere ti o jọra.
Awọn data ọrọ ifarabalẹ le farahan ti awọn idari wiwọle ko lagbara.
Ilana Ilana imuse
Ṣetumo ọna kika iṣẹjade, ohun orin, ati awọn iṣedede didara ṣaaju ṣiṣejade.
Awọn idahun ilẹ pẹlu awọn orisun ti o gbẹkẹle nigbakugba ti deede ba ṣe pataki.
Jeki aaye ayẹwo atunyẹwo eniyan fun awọn abajade ti o ga julọ.
Tọpinpin awọn ilana ikuna ati tunṣe awọn itọsi tabi ṣiṣan iṣẹ nigbagbogbo.
Tesiwaju Ṣiṣawari
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the In-Context Learning quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Itọsọna atẹle
Windows ọrọ
Awọn ibeere ti a beere nigbagbogbo
Kini Ẹkọ In-Context?
Ẹkọ inu-ọrọ jẹ agbara iyalẹnu ti awọn awoṣe ede nla lati gbe iṣẹ-ṣiṣe tuntun kan lati awọn apẹẹrẹ diẹ ti a gbe sinu itọsẹ, laisi atunṣe eyikeyi. O jẹ idi ti o le 'kọni' awoṣe kan lori fifo kan nipa fifihan ohun ti o fẹ.
Kini awọn ayipada ni ipilẹ inu awoṣe lakoko ikẹkọ inu-ọrọ?
Ẹkọ inu-ọrọ ṣẹlẹ patapata ni itọkasi. Awọn apẹẹrẹ ti o wa ni kiakia ṣe apẹrẹ awọn imuṣiṣẹ awoṣe ati awọn asọtẹlẹ ami atẹle, ṣugbọn ko si awọn iwuwo ti o ni imudojuiwọn.
Kini idi ti ẹkọ inu-ọrọ ṣe apejuwe bi agbara 'pajawiri'?
Agbara naa jẹ alailagbara tabi ko si ni awọn awoṣe kekere ati ki o gun oke ni kete ti awọn awoṣe ba de iwọn ti o tobi pupọ, eyiti o jẹ idi ti o fi pe ni pajawiri.
Ilana inu wo ni o ni nkan ṣe pẹlu ẹkọ inu-ọrọ ni awọn oluyipada?
Iṣẹ itumọ ti ṣe idanimọ awọn ori ifamọ - awọn iyika akiyesi ti o rii ibiti ami ami kan ti han ati daakọ ohun ti o tẹle — gẹgẹbi awakọ akọkọ ti ẹkọ inu-ọrọ.