VolgendeVolgende gids
Socratische aanwijzingen waardoor AI u iets leert
Taal AI
Taal AI-GIDS
Analoge en Step-Back-prompts leiden beide een model ertoe om eerst op een hoger niveau te redeneren: analoge prompting zorgt ervoor dat het gelijksoortige opgeloste problemen oproept, terwijl het met step-back het onderliggende principe afleidt voordat het de details aanpakt.
Luister naar deze gidsAI-verteld · ~2 min
They matter because abstraction often beats diving straight into details.
Dit zijn twee gerelateerde Google-onderzoekstechnieken uit 2023 om het redeneren te verbeteren. Analogische aanwijzingen, door Yasunaga en collega's, vragen het model om zelf een paar relevante voorbeelden te genereren, soortgelijke problemen die het effectief heeft gezien, en hun oplossingen voordat het doelprobleem wordt opgelost, waardoor de noodzaak voor handgeschreven voorbeelden wordt weggenomen. Step-Back-prompts, door Zheng en collega's, stellen in plaats daarvan eerst een abstractievraag ("welk algemeen principe of feit regeert dit?"), achterhalen of redeneren over dat principe, en passen het vervolgens toe op de concrete vraag. Beiden duwen het model weg van voortijdige details. Step-Back liet winst zien op natuur- en scheikundige vragen en op multi-hop redeneren, terwijl analoge aanwijzingen het genereren van wiskunde en code verbeterden door voorbeelden op maat te maken voor elk specifiek probleem.
Een natuurkundige vraag beantwoorden door eerst de relevante wet (bijvoorbeeld de tweede wet van Newton) te vermelden via een stap terug, en vervolgens getallen in te voeren
Een nieuw wiskundig probleem oplossen door het model een aantal soortgelijke opgeloste problemen te laten oproepen via analoge aanwijzingen
Een multi-hop trivia-vraag aanpakken door een stap terug te doen naar de bredere categorie of entiteit voordat feiten aan elkaar worden gekoppeld
Code genereren door zelf een analoog algoritme en de oplossing ervan te genereren, en deze vervolgens aan te passen aan de huidige taak
Verwacht dat deze op abstractie gerichte patronen zullen samensmelten met retrievalsystemen, waarbij het stap-terug-principe een precieze vraag in een kennisbank wordt, en met agentplanners die redeneren over strategie vóór tactiek. Onderzoek verfijnt wanneer zelfgegenereerde analogieën helpen versus wanneer ze irrelevante of verkeerde voorbeelden introduceren, en combineert stap terug met verificatie, zodat het gekozen principe wordt gecontroleerd voordat er een zware redenering op wordt gebouwd. Het zijn waarschijnlijk de standaarden in op redenering afgestemde modellen.
Gratis nieuwsbrief
Drie verifieerde AI-verhalen elke weekdagmorgen, geschreven in eenvoudig Engels. Gratis voor altijd, geen advertenties.
Eén e-mail elke weekdag. Afmelden met één klik. We verkopen of delen je adres nooit.
Test jezelf
Directe feedback op elke antwoord, en een deelbare certificaat met een verifieerbare ID zodra je een cursus hebt afgerond.
Ondersteun gratis AI-onderwijs. AI Understanding is een 501(c)(3) non-profit — geen advertenties, geen betaalmuur, nooit. Doe een donatie
Analoge en Step-Back-prompts leiden beide een model ertoe om eerst op een hoger niveau te redeneren: analoge prompting zorgt ervoor dat het gelijksoortige opgeloste problemen oproept, terwijl het met step-back het onderliggende principe afleidt voordat het de details aanpakt. Ze zijn belangrijk omdat abstractie vaak beter is dan direct in details duiken.
Analoge aansporing zorgt ervoor dat het model zijn eigen relevante voorbeelden en oplossingen genereert, afgestemd op het probleem.
Step-Back stelt eerst een abstractievraag om het principe of feit dat het probleem beheerst naar boven te halen.
Het benoemen van het leidende principe is leidend en beperkt de gedetailleerde stappen, waardoor de kans op fouten kleiner wordt.
Step-Back verbeterde de prestaties op wetenschappelijke vragen en multi-hop-redenering door eerst te abstraheren.
Omdat het model zijn eigen analogieën bedenkt, kunnen die voorbeelden soms irrelevant of onjuist zijn, wat het antwoord schaadt.
Blijf leren
Er zijn meer handleidingen voor dit onderwerp geselecteerd
VolgendeVolgende gids
Socratische aanwijzingen waardoor AI u iets leert
Taal AI