SıradakiSonraki rehber
Etmen Döngülerinde Öz-Yansıma
Teknik
Uygulama KILAVUZU
Reflexion is a research framework in which language agents use task feedback to write textual reflections for later attempts.
Bu kılavuzu dinleyinAI tarafından anlatılan · ~1 min
It changes context, not model weights.
The Reflexion paper describes an Actor that attempts a task, an Evaluator that scores the result, and a Self-Reflection model that turns feedback into language stored in episodic memory. The next attempt can use that reflection as context; the framework does not update model weights. The paper reports improvements on selected tasks, including a HumanEval result for its particular setup. Benchmark results should not be generalized to every agent or deployment. In the Reflexion paper’s reported coding experiment, the framework achieved 91% pass@1 on HumanEval, compared with 80% for the GPT-4 baseline described in that paper. These are results for the paper’s particular setup and benchmark, not a general performance guarantee.
An agent receives unit-test feedback, writes a reflection, and retries a coding task.
A researcher compares Reflexion’s benchmark setup with its stated baseline.
An evaluator supplies task-specific feedback that the agent can inspect.
A developer stops iteration when a defined success condition is met.
Self-correction methods remain dependent on evaluation quality, task design, and iteration cost. Avoid claims of general improvement without testing; reflections can be mistaken or lead to loops.
Ücretsiz bülten
Hafta içi her sabah sade İngilizce yazılmış, doğrulanmış üç yapay zeka hikayesi. Sonsuza kadar ücretsiz, reklam yok.
Hafta içi her gün bir e-posta. Tek tıklamayla aboneliğinizi iptal edin. Adresinizi asla satmayız veya paylaşmayız.
Kendinizi test edin
Her yanıtla ilgili anında geri bildirim ve bir kursu geçtiğinizde doğrulanabilir bir kimliğe sahip paylaşılabilir bir sertifika.
Ücretsiz AI eğitimini destekleyin. AI Understanding, bir 501(c)(3) kâr amacı gütmeyen kuruluştur; hiçbir zaman reklam yoktur, ödeme duvarı yoktur. Bağış yap
Reflexion is a research framework in which language agents use task feedback to write textual reflections for later attempts. It changes context, not model weights.
Dersler, modelin parametrelerine kodlanmadan, bellekte doğal dil metni olarak saklandığı için yansıtmaya bazen 'sözel takviyeli öğrenme' adı verilir.
Değerlendirici (bir birim testi, tam eşleşme kontrolü veya LLM hakemi), Kendini Düşünme adımının metinsel bir derse dönüştüğünün sinyalini üretir.
Değerlendirici güvenilmezse, temsilci kötü geri bildirimlere dayanarak kendinden emin düşünceler yazabilir ve gelecekteki girişimleri yanlış yöne yönlendirebilir.
The paper reports 91% pass@1 on HumanEval for its Reflexion coding setup; the result is specific to that evaluation.
İyi bir durdurma kuralı olmadan, bir aracı doğru cevapları gözden geçirmeye devam edebilir, hesaplama israfına neden olabilir ve bazen iyi çıktıyı düşürebilir.
Öğrenmeye devam et
Bu konu için daha fazla rehber seçildi
SıradakiSonraki rehber
Etmen Döngülerinde Öz-Yansıma
Teknik