Akopọ
Reflexion jẹ ilana kan nibiti aṣoju AI ṣe afihan ni kikọ lori awọn ikuna tirẹ ati ifunni awọn ẹkọ yẹn pada si igbiyanju atẹle rẹ. O ṣe pataki nitori pe o jẹ ki awọn aṣoju ni ilọsiwaju lori iṣẹ-ṣiṣe kan laisi atunṣe awoṣe ipilẹ.
Iṣatunṣe ati Awọn aṣoju Atunse Ara-ẹni fojusi lori imuṣiṣẹ ti o wulo: titan agbara awoṣe sinu ṣiṣan iṣẹ ojoojumọ ti o gbẹkẹle ti o fi iye iwọnwọn han.
Jin Dive
Reflexion, ti a ṣe sinu iwe 2023 nipasẹ Shinn ati awọn ẹlẹgbẹ, fun oluranlowo ni lupu kan: o gbiyanju iṣẹ-ṣiṣe kan, gba ifihan agbara kan nipa bi o ṣe ṣe (esi idanwo kan, ẹsan, tabi alariwisi), lẹhinna kọ kukuru kukuru-ede adayeba 'itumọ' ti n ṣalaye ohun ti ko tọ ati kini lati gbiyanju nigbamii. Iṣaro yẹn ti wa ni ipamọ sinu iranti ati ti tẹlẹ si itọsi igbiyanju atẹle. Ni pataki, awọn iwuwo awoṣe ko yipada; ẹkọ ṣẹlẹ patapata ni window ọrọ bi ọrọ. “Ẹ̀kọ́ ìmúgbòòrò ọ̀rọ̀ ẹnu” yìí jẹ́ kí àwọn aṣojú ṣe àtúnṣe lórí àwọn ìṣòro ìfídìmú, ìṣàwárí wẹ́ẹ̀bù, àti àwọn iṣẹ́ ìrònú. Lori aami ifaminsi HumanEval, Atunse ara-ara Reflexion ti ti awọn oṣuwọn iwọle ti o ga pupọ ju awọn igbiyanju shot ẹyọkan lọ, nirọrun nipa jijẹ ki oluranlowo yo awọn aṣiṣe tirẹ kọja awọn igbiyanju diẹ.
Imọ-imọ-ẹrọ
Isọdọtun ya awọn ipa mẹta: Oṣere ti o ṣe agbekalẹ awọn iṣe, Oluyẹwo ti o ṣe abajade abajade (awọn idanwo ẹyọkan, ayẹwo-ibaramu deede, tabi adajọ LLM), ati awoṣe Irora-ara ẹni ti o yi Dimegilio yẹn pada si ẹkọ kikọ. Ẹkọ naa de ni ibi ipamọ iranti episodic ti a tun lo lori idanwo ti nbọ. Nitori esi jẹ ede kuku ju awọn gradients, ko si ikẹkọ GPU ti o nilo, ṣugbọn o dale dale lori ifihan agbara igbelewọn igbẹkẹle lati yago fun imudara igboya ṣugbọn awọn iweyinpada ti ko tọ.
Mastering Reflexion ati Ara-atunse Aṣoju
Reflexion jẹ ilana kan nibiti aṣoju AI ṣe afihan ni kikọ lori awọn ikuna tirẹ ati ifunni awọn ẹkọ yẹn pada si igbiyanju atẹle rẹ. O ṣe pataki nitori pe o jẹ ki awọn aṣoju ni ilọsiwaju lori iṣẹ-ṣiṣe kan laisi atunṣe awoṣe ipilẹ. Iṣatunṣe ati Awọn aṣoju Atunse Ara-ẹni fojusi lori imuṣiṣẹ ti o wulo: titan agbara awoṣe sinu ṣiṣan iṣẹ ojoojumọ ti o gbẹkẹle ti o fi iye iwọnwọn han. Lati kọ oye ti o jinlẹ, ṣe itọju Reflexion ati Awọn aṣoju Atunse Ara-ẹni gẹgẹbi awoṣe iṣẹ, kii ṣe ẹya kan: ṣalaye awọn abajade ti o fẹ, ṣe alaye awọn arosọ, ati sọtọ ohun ti eto le ṣe ni igbẹkẹle lati ohun ti o tun nilo idajọ amoye.
Ni iṣe, awọn ẹgbẹ ti o lagbara ti o nlo Reflexion ati Awọn aṣoju Atunse-ara-ẹni ni idojukọ lori awọn abajade iṣan-iṣẹ, kii ṣe awọn demos awoṣe, ati ṣalaye awọn aaye ayẹwo eniyan ni kutukutu. Wọn ṣe akọsilẹ awọn ibeere aṣeyọri ti o fojuhan, idanwo lodi si data ojulowo ati ṣiṣan iṣẹ, ati atunbere ti o da lori awọn ilana ikuna ti a ṣakiyesi dipo awọn bori ala-akoko kan. Eyi ni ibiti oye imọ-jinlẹ yipada si agbara ti o tọ kọja ọja, eto imulo, ati awọn iṣẹ ṣiṣe.
Apẹrẹ ipele-ohun elo pinnu boya AI ṣe ilọsiwaju awọn abajade gidi. Ni akoko kanna, Ṣiṣe adaṣe ilana fifọ le ṣe alekun awọn iṣoro to wa tẹlẹ. Ọna resilient julọ julọ ni lati darapọ iyara idanwo pẹlu ibawi ijọba: ṣiṣe awọn awakọ awakọ, mu ẹri mu, ṣe atẹjade awọn iwe ipinnu, ati imudojuiwọn awọn aabo nigbagbogbo bi ihuwasi awoṣe, awọn ireti olumulo, ati awọn ibeere ilana ti dagbasoke.
Ipa Ilana
Apẹrẹ ipele-ohun elo pinnu boya AI ṣe ilọsiwaju awọn abajade gidi.
Apẹrẹ ipele-ohun elo pinnu boya AI ṣe ilọsiwaju awọn abajade gidi. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.
Ijọpọ iṣan-iṣẹ ti o dara ṣẹda awọn anfani iṣẹ-ṣiṣe ti awọn olumulo le gbẹkẹle.
Ijọpọ iṣan-iṣẹ ti o dara ṣẹda awọn anfani iṣẹ-ṣiṣe ti awọn olumulo le gbẹkẹle. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.
Awọn ọran lilo ti iwọn daradara dinku rirẹ iyipada ati eewu imuse.
Awọn ọran lilo ti iwọn daradara dinku rirẹ iyipada ati eewu imuse. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.
Real-World imuse
Aṣoju ifaminsi ti o nṣiṣẹ awọn idanwo ẹyọkan, ka alaye ti o kuna, kọ akọsilẹ kan lori bug, ti o tun ṣe koodu rẹ ṣaaju ṣiṣe suite naa.
Oluranlọwọ iwadii ti o mu itọka alakankan nigbati ayẹwo igbapada ba kuna, lẹhinna ṣe atunwo idahun lati lo awọn orisun ti o jẹrisi nikan.
Aṣoju lilọ kiri wẹẹbu kan (fun apẹẹrẹ, lori awọn ipilẹ AlfWorld tabi WebShop) ti o ṣe igbasilẹ 'Mo tẹ àlẹmọ ti ko tọ' ti o yago fun igbesẹ yẹn lori atunwo.
Olupin iṣoro-iṣiro ti o ṣayẹwo idahun ikẹhin rẹ lodi si idinamọ kan, ṣe akiyesi aṣiṣe ami kan, ti o tun ṣe igbesẹ ti o yẹ.
Awọn Ilana imuse
Reflexion ati Awọn aṣoju Atunse Ara-ẹni ni iṣe
Aṣoju ifaminsi ti o nṣiṣẹ awọn idanwo ẹyọkan, ka alaye ti o kuna, kọ akọsilẹ kan lori bug, ti o tun ṣe koodu rẹ ṣaaju ṣiṣe suite naa.
Aṣoju ifaminsi ti o nṣiṣẹ awọn idanwo ẹyọkan, ka asọye ti kuna, kọ akọsilẹ kan lori kokoro naa, ati ṣatunkọ koodu rẹ ṣaaju ṣiṣe awọn ẹgbẹ suite nigbagbogbo ni awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa mejeeji awọn anfani iṣelọpọ ati awọn idiyele aṣiṣe ni akoko pupọ.
Reflexion ati Awọn aṣoju Atunse Ara-ẹni ni iṣe
Oluranlọwọ iwadii ti o mu itọka alakankan nigbati ayẹwo igbapada ba kuna, lẹhinna ṣe atunwo idahun lati lo awọn orisun ti o jẹrisi nikan.
Oluranlọwọ iwadii kan ti o mu itọka ifọkanbalẹ nigbati ayẹwo igbapada ba kuna, lẹhinna ṣe atunyẹwo idahun lati lo awọn orisun ti o jẹrisi nikan Awọn ẹgbẹ nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa mejeeji awọn anfani iṣelọpọ ati awọn idiyele aṣiṣe ni akoko pupọ.
Reflexion ati Awọn aṣoju Atunse Ara-ẹni ni iṣe
Aṣoju lilọ kiri wẹẹbu kan (fun apẹẹrẹ, lori awọn ipilẹ AlfWorld tabi WebShop) ti o ṣe igbasilẹ 'Mo tẹ àlẹmọ ti ko tọ' ti o yago fun igbesẹ yẹn lori atunwo.
Aṣoju lilọ kiri wẹẹbu kan (fun apẹẹrẹ, lori awọn ipilẹ AlfWorld tabi WebShop) ti o ṣe igbasilẹ 'Mo tẹ àlẹmọ ti ko tọ’ ati yago fun ipasẹ yẹn lori atungbiyanju Awọn ẹgbẹ nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa awọn anfani iṣelọpọ mejeeji ati awọn idiyele aṣiṣe ni akoko pupọ.
Reflexion ati Awọn aṣoju Atunse Ara-ẹni ni iṣe
Olupin iṣoro-iṣiro ti o ṣayẹwo idahun ikẹhin rẹ lodi si idinamọ kan, ṣe akiyesi aṣiṣe ami kan, ti o tun ṣe igbesẹ ti o yẹ.
Olupin iṣoro-iṣiro kan ti o ṣayẹwo idahun ikẹhin rẹ lodi si idinamọ kan, ṣe akiyesi aṣiṣe ami kan, ati tun ṣe igbesẹ ti o yẹ Awọn ẹgbẹ nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa mejeeji awọn anfani iṣelọpọ ati awọn idiyele aṣiṣe lori akoko.
Awọn ewu & Awọn ọna iṣọ
Ṣiṣẹda ilana fifọ le ṣe alekun awọn iṣoro to wa tẹlẹ.
Awọn ẹgbẹ le ṣe adaṣe adaṣe ki o yọ idajọ eniyan ti o nilo kuro.
Didara le fò ti awọn abajade ko ba ni iṣiro nigbagbogbo.
Ilana Ilana imuse
Ṣe maapu iṣan-iṣẹ lọwọlọwọ ki o ṣe idanimọ igbesẹ ti o ga julọ.
Ṣe maapu iṣan-iṣẹ lọwọlọwọ ki o ṣe idanimọ igbesẹ ti o ga julọ. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.
Ṣetumo awọn aaye ayẹwo eniyan ṣaaju adaṣe kikun.
Ṣetumo awọn aaye ayẹwo eniyan ṣaaju adaṣe kikun. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.
Kọ awọn olumulo lori awọn itọsi, awọn ọna igbega, ati awọn iṣedede didara.
Kọ awọn olumulo lori awọn itọsi, awọn ọna igbega, ati awọn iṣedede didara. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.
Tọpinpin awọn abajade ipele-ṣiṣe lati jẹrisi iye idaduro.
Tọpinpin awọn abajade ipele-ṣiṣe lati jẹrisi iye idaduro. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.