引導式測驗 · 中等 等級

LLM 代理測驗設計工具

測試工具名稱和描述如何指導模型選擇,為什麼嚴格的模式和可操作的錯誤很重要,以及為什麼太多的工具會傷害代理。

相關引導路徑為LLM代理設計工具
問題 1 的 8

模型實際上是用什麼來決定如何呼叫工具?

預覽每個問題8 問題

當您參加測驗時,就會出現答案和解釋。

  1. 模型實際上是用什麼來決定如何呼叫工具?
    • 該工具的源代碼
    • 名稱、描述、架構和傳回的文本
    • 伺服器的延遲歷史記錄
    • 該工具所使用的程式語言
  2. 為什麼代理商可能使用 github_create_issue 和 jira_create_issue 等前綴?
    • 前綴使工具運行得更快
    • API 需要前綴
    • 他們將不同服務中的類似工具分開
    • 它們減少了 JSON 模式檔案的大小
  3. 哪一種參數設計最有可能產生正確的參數?
    • 列出允許值的列舉
    • 名為“value”的自由文字字串
    • 沒有描述的無類型字段
    • 名為“x”的參數
  4. 什麼樣的工具才是好的錯誤訊息?
    • 僅數字錯誤代碼
    • 通用的“出了點問題”
    • 什麼都沒有,所以沒有花任何代幣
    • 它解釋了問題所在並建議下一步嘗試什麼
  5. 為什麼增加許多工具會降低代理性能?
    • 模型每次對話只能呼叫一個工具
    • 每個定義都會佔用上下文,重疊的工具使選擇變得更加困難
    • 一旦超過五個,工具就會停止運作
    • 刀具計數沒有影響
  6. 與一對一鏡像每個 API 端點相比,指南有何建議?
    • 圍繞實際任務建立更少、更高層級的工具
    • 公開每個端點,以便代理完全覆蓋
    • 僅使用一種工具即可完成所有工作
    • 讓模型編寫自己的 HTTP 請求
  7. 為什麼工具應該預設分頁或截斷其輸出?
    • 對用戶隱藏數據
    • 因為模型無法讀取數字
    • 避免用低值資料填充上下文窗口
    • 因為 JSON Schema 需要它
  8. 為什麼要讓工具具有冪等性或賦予它們冪等金鑰?
    • 它使描述更短
    • 它讓模型跳過模式
    • 它加速模型推理
    • 重試的呼叫不會建立重複的記錄