ΕπόμενοΕπόμενος οδηγός
Αυτο-στοχασμός σε βρόχους πράκτορα
Τεχνικά
ΟΔΗΓΟΣ Εφαρμογών
Reflexion is a research framework in which language agents use task feedback to write textual reflections for later attempts.
Ακούστε αυτόν τον οδηγόαφήγηση με AI · ~1 min
It changes context, not model weights.
The Reflexion paper describes an Actor that attempts a task, an Evaluator that scores the result, and a Self-Reflection model that turns feedback into language stored in episodic memory. The next attempt can use that reflection as context; the framework does not update model weights. The paper reports improvements on selected tasks, including a HumanEval result for its particular setup. Benchmark results should not be generalized to every agent or deployment. In the Reflexion paper’s reported coding experiment, the framework achieved 91% pass@1 on HumanEval, compared with 80% for the GPT-4 baseline described in that paper. These are results for the paper’s particular setup and benchmark, not a general performance guarantee.
An agent receives unit-test feedback, writes a reflection, and retries a coding task.
A researcher compares Reflexion’s benchmark setup with its stated baseline.
An evaluator supplies task-specific feedback that the agent can inspect.
A developer stops iteration when a defined success condition is met.
Self-correction methods remain dependent on evaluation quality, task design, and iteration cost. Avoid claims of general improvement without testing; reflections can be mistaken or lead to loops.
Δωρεάν ενημερωτικό δελτίο
Τρία επαληθευμένα νέα AI κάθε πρωί της εβδομάδας, γραμμένα σε απλή αγγλική. Δωρεάν για πάντα, χωρίς διαφημίσεις.
Ένα email κάθε εργάσιμη ημέρα. Κατάργηση συνδρομής με ένα κλικ. Δεν πουλάμε ή μοιραζόμαστε ποτέ τη διεύθυνσή σας.
Δοκιμάστε τον εαυτό σας
Άμεση ανάδραση σε κάθε απάντηση, και πιστοποιητικό με επαληθεύσιμο ID μόλις περάσετε το μάθημα.
Υποστηρίξτε τη δωρεάν εκπαίδευση AI. AI Understanding είναι μια μη κερδοσκοπική οργάνωση 501(c)(3) — χωρίς διαφημίσεις, χωρίς τοίχο πληρωμής, ποτέ. Κάντε μια δωρεά
Reflexion is a research framework in which language agents use task feedback to write textual reflections for later attempts. It changes context, not model weights.
Η αντανάκλαση αποκαλείται μερικές φορές «λεκτική μάθηση ενίσχυσης» επειδή τα μαθήματα αποθηκεύονται ως κείμενο φυσικής γλώσσας στη μνήμη και δεν κωδικοποιούνται στις παραμέτρους του μοντέλου.
Ο Αξιολογητής (μια δοκιμή μονάδας, έλεγχος ακριβούς αντιστοίχισης ή κριτής LLM) παράγει το σήμα ότι το βήμα Αυτο-στοχασμού μετατρέπεται σε μάθημα κειμένου.
Εάν ο αξιολογητής είναι αναξιόπιστος, ο πράκτορας μπορεί να γράψει σίγουρες σκέψεις με βάση την κακή ανάδραση, κατευθύνοντας μελλοντικές προσπάθειες προς τη λάθος κατεύθυνση.
The paper reports 91% pass@1 on HumanEval for its Reflexion coding setup; the result is specific to that evaluation.
Χωρίς έναν καλό κανόνα διακοπής, ένας πράκτορας μπορεί να συνεχίσει να αναθεωρεί τις σωστές απαντήσεις, να σπαταλά τον υπολογισμό και μερικές φορές να υποβαθμίζει την καλή απόδοση.
Συνέχισε να μαθαίνεις
Επιλέχθηκαν περισσότεροι οδηγοί για αυτό το θέμα
ΕπόμενοΕπόμενος οδηγός
Αυτο-στοχασμός σε βρόχους πράκτορα
Τεχνικά