類比提示和後退提示
類比提示和後退提示都首先引導模型進行更高層次的推理:類比提示讓它回憶起類似的已解決問題,而後退提示則讓它在解決具體問題之前推導出基本原理。
概述
They matter because abstraction often beats diving straight into details.
深入探討
這是 2023 年用於改進推理的兩項相關的 Google 研究技術。 Yasunaga 及其同事的類比提示要求模型在解決目標問題之前自動產生一些相關的範例、它已經有效看到的類似問題及其解決方案,從而消除了手寫範例的需要。鄭和同事的後退提示首先提出一個抽象問題(「什麼一般原則或事實支配著這個?」),檢索或推理該原則,然後將其應用於具體問題。兩者都使模型遠離過早的細節。 Step-Back 顯示了在物理和化學問題以及多跳推理方面的進步,同時透過針對每個特定問題自訂範例,類比提示改進了數學和程式碼生成。
技術洞察
後退之所以有效,是因為將答案建立在既定原則(例如理想氣體定律或定義)的基礎上可以限制隨後的詳細推理並減少中間步驟的失誤。類比提示之所以有效,是因為自我生成的範例與當前的確切問題相匹配,通常比固定的少數示例更相關,並且它們啟動了適當的解決方案模式。兩者都將計算轉向首先檢索正確的抽象,然後進行紮實的詳細工作。
戰略影響
速度與規模
語言工作流程可以在不犧牲一致性的情況下更快地移動。
交通與覆蓋範圍
它擴展了跨語言和溝通方式的訪問。
更明確的決策
團隊可以花更多時間進行判斷,而自動化則可以處理重複。
類比提示和後退提示的未來
期望這些抽象優先的模式與檢索系統結合,在檢索系統中,後退原則成為對知識庫的精確查詢,並與在戰術之前推理策略的代理規劃器相結合。當自我產生的類比有幫助時,與引入不相關或錯誤的例子時相比,研究正在完善,並將後退與驗證相結合,以便在建立嚴格推理之前檢查所選擇的原則。它們很可能是推理調整模型中的預設值。
現實世界的實施
回答物理問題時,先透過後退一步陳述相關定律(例如牛頓第二定律),然後再代入數字
透過類比提示讓模型回憶幾個相似的已解決問題來解決新的數學問題
在連結事實之前,透過退回到更廣泛的類別或實體來解決多跳瑣事問題
透過自生成類似演算法及其解決方案來產生程式碼,然後使其適應當前任務
風險與防護欄
幻覺的事實可以悄悄地進入報告、支持流程或研究成果。
及時的敏感性可能會在類似的請求中產生不一致的結果。
如果存取控制薄弱,敏感文字資料可能會暴露。
實施路線圖
在推出之前定義輸出格式、語氣和品質標準。
當準確性很重要時,請使用可信任來源進行地面回應。
為高風險輸出保留人工審查檢查點。
追蹤故障模式並定期重新訓練提示或工作流程。
不斷探索
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Analogical and Step-Back Prompting quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
常見問題
What is Analogical and Step-Back Prompting?
類比提示和後退提示都首先引導模型進行更高層次的推理:類比提示讓它回憶起類似的已解決問題,而後退提示則讓它在解決具體問題之前推導出基本原理。它們很重要,因為抽象往往勝過直接深入細節。
在解決目標問題之前,類比提示要求模型做什麼?
類比提示使模型根據問題產生自己的相關範例和解決方案。
後退提示的第一步是什麼?
後退首先提出一個抽象問題,以揭示控制問題的原則或事實。
為什麼將答案建立在既定原則(後退)的基礎上會有幫助?
首先闡述指導原則,指導約束具體步驟,降低出錯的機會。
後退提示在哪些類型的任務上顯示出顯著的效果?
Step-Back 透過先進行抽象,提升了科學問題和多跳推理的表現。
類比提示的顯著風險是什麼?
由於模型發明了自己的類比,因此這些範例有時可能是無關緊要或不正確的,損害了答案。