AGI(通用人工智慧)
一個假設的人工智慧系統,可以在許多領域以人類層級執行大多數智力任務。
Plain-language definitions of the AI terms you keep hearing — for students, professionals, and anyone curious about how AI works.
一個假設的人工智慧系統,可以在許多領域以人類層級執行大多數智力任務。
無需進行詳盡比較即可找到接近查詢的向量的演算法,以準確性換取速度。
一種軟體系統向另一個系統發送請求並接收回應的結構化方式。
子詞標記化演算法,將最常見的字元對合併為可重複使用的標記。
一種直接在偏好對上微調模型的訓練方法,無需單獨的獎勵模型。
生成器和鑑別器相互訓練的生成設定。
小學數學應用題的基準,用於評估語言模型中的逐步推理。
儲存來自先前令牌的鍵和值張量,使 Transformer 可以產生新令牌而無需重新計算過去的注意力。
一種加入低秩適配器矩陣的參數高效率微調方法。
一種開放協議,允許人工智慧應用程式以標準方式連接到外部工具、資料來源和上下文提供者。
使用多項選擇題測試跨 57 個學術和專業科目的語言模型的基準測試。
將圖像或掃描中的文字轉換為機器可讀文字的技術。
語言模型指標,衡量模型對真正的下一個標記的驚訝程度。
設計提示以提高輸出品質、可靠性和可控性。
一種檢索方法,可產生多個查詢變體、檢索每個查詢變體的結果並融合排名。
一種檢索外部知識並在推理時輸入生成的方法。
一種位置編碼方法,可旋轉查詢向量和鍵向量以對相對標記位置進行編碼。
僅從 k 個最有可能的下一個標記中採樣的解碼策略。
一種解碼策略,從機率總和為 p 的最小標記集中進行取樣。
使人工智慧預測更加透明和易於理解的技術和實踐。
語言模型一次可以處理的輸入標記的最大數量。
模型的主張與可驗證的現實世界資訊的匹配程度如何。
人類審查、指導或涵蓋人工智慧輸出的工作流程。
建構執行需要模式識別、推理、語言或決策的任務的系統的廣泛領域。
一種可以觀察、推理並採取行動來實現目標的軟體系統,通常使用工具和記憶體。
該領域專注於減少人工智慧系統中的有害行為、故障和誤用風險。
讓人工智慧系統按照人類意圖、價值觀和安全約束行事的工作。
指導人工智慧如何在社會中發展和使用的政策、標準和監督機制。
歐盟針對人工智慧系統和提供者的基於風險的監管框架。
一個根據人類排名進行訓練的模型,用於預測使用者可能更喜歡哪些反應。
Python 程式設計問題的基準,用於透過單元測試衡量程式碼產生的正確性。
新增至標記嵌入的信息,以便轉換器可以區分序列順序。
將輸出代幣限制為有效結構或符合策略的選擇的生成策略。
刪除不太重要的模型權重或神經元以減少尺寸和計算量。
模型錯過真正的陽性案例的錯誤預測。
數據或模型行為中一致的錯誤或不公平模式。
一種解碼設置,可降低令牌出現的機率,從而鼓勵新主題。
產生觸發外部工具或 API 的結構化呼叫的模型功能。
一種學習文字和圖像之間共享表示的多模態模型架構。
一種針對處理影像等網格資料而最佳化的神經架構。
模型中學習到的權重會影響其輸出。
透過訓練一小部分添加參數來調整模型的方法。
一種攻擊模式,其中惡意指令被插入到模型輸入或檢索的內容中。
與語言無關的分詞器,可以直接從原始文本中學習子詞單元,而無需在空格上進行預分割。
模型正確辨識的實際陽性的比例。
模型的行為可以被解釋和解釋給人類的程度。
結合多個模型的預測以提高穩健性或準確性。
針對儲存和查詢高維嵌入向量而最佳化的資料庫。
識別人物、地點、日期或組織等實體的 NLP 任務。
一種微調技術,將 4 位元權重量化與 LoRA 適配器結合,以減少記憶體需求。
估計因果關係而不是簡單相關性的方法。
用於訓練或評估模型輸出的可信參考標籤。
描述模型的預期用途、指標、限制和風險的文件。
預訓練後應用的訓練步驟,例如指令調整、偏好最佳化和安全調整。
非常大且複雜的資料集,需要可擴展的儲存和處理技術。
在海量文本語料庫上訓練來產生和分析文本的語言模型。
訓練超參數控制每個更新步驟的參數變化量。
一種緊湊的語言模型,針對較低的延遲、成本或設備上的使用情況進行了最佳化。
僅從少量範例中學習或適應行為。
模型呼叫外部工具(例如搜尋、計算器或 API)的能力。
一種隱私技術,會增加統計噪聲,因此無法從輸出中可靠地推斷出單一記錄。
當模型產生流暢但錯誤或不受支援的資訊。
發送請求和接收模型輸出之間的時間。
模型回應中包含的來源段落或文件的引用,以支持其主張。
透過獎勵訊號進行訓練,代理學習能夠最大化長期回報的行動。
與生產流量並行運行模型,不會影響面向使用者的決策。
對特定領域的資料進行持續訓練,以使預先訓練的模型適應特定任務。
根據文字查詢預測使用者的目的以正確路由。
一種訓練和行為塑造方法,其中模型輸出由一組固定的書面原則指導。
讓模型不斷從新資料中學習而不忘記先驗知識的訓練方法。
微調指令-響應對的模型以改善任務追蹤。
人工智慧響應得到來源資料或檢索到的證據支持的程度。
量化訓練期間預測誤差的數學目標。
一種生成架構,可以學習反轉雜訊以合成影像、音訊或其他內容。
基於圖的索引結構,用於高維向量上的快速近似最近鄰搜尋。
模型的置信度分數與實際正確性機率的匹配程度。
一種使用人類偏好訊號來塑造模型行為的訓練方法。
一種向減少誤差的方向更新參數的最佳化方法。
模型在訓練集之外的新的、未見過的資料上的表現如何。
允許系統從數據中學習模式並隨著時間的推移進行改進的方法。
在人工智慧生成的文字或媒體中嵌入可偵測訊號,以便稍後將其識別為機器生成的。
在評估過程中使用語言模型對其他模型的輸出進行評分或比較。
一種解碼演算法,在每一步中保留前幾個候選序列以找到更高機率的輸出。
產生輸出時動態注意輸入的相關部分的模型組件。
機器學習的子集,使用多層神經網路進行表示學習。
具有專門子網路的架構,其中每個輸入僅運行選定的專家。
一種檢索方法,將關鍵字(詞彙)搜尋與向量(語義)搜尋相結合,以提高召回率和精確度。
在回應生成期間使用額外的推理計算來提高品質或推理。
控制生成輸出中的隨機性的取樣設定。
一種注意模式,其中每個令牌僅關注附近令牌的固定大小視窗以減少計算。
一個向量,顯示每個參數應改變多少以減少損失。
壓縮的表示空間,其中相似的概念作為向量彼此靠近。
從沒有明確目標輸出的未標記資料中學習模式。
一種檢索模式,搜尋小塊但返回其較大的父文檔以獲得更豐富的上下文。
一種根據偏好訊號對輸出進行評分的模型,通常用於 RLHF 管道。
產生文字、圖像、音訊、視訊或程式碼等新內容的人工智慧系統。
受生物神經元和突觸啟發的分層計算模型。
許多參數為零或不活動以減少計算的模型。
模型在雜訊、變化或對抗性輸入下保持性能的能力。
預處理、模型步驟和後處理階段的有序工作流程。
實際正確的預測陽性的比例。
為模型設定行為、策略和回應方式的高優先指令。
使用對抗性提示對人工智慧系統進行壓力測試,以揭示失敗和風險。
用於增強、模擬或保護敏感訓練資料的人工產生的資料。
將輸入轉換為潛在表示的模型組件。
一種經驗關係,顯示效能如何隨模型大小、資料或計算而提高。
透過預測屏蔽或變換的部分來學習未標記資料的表示。
一種可以在有限或沒有直接人類控制的情況下即時做出決策和採取行動的系統。
人工智慧的分支專注於理解和產生人類語言。
一種訓練設置,模型透過與自身副本的互動或競爭產生資料來改進。
聯合處理視覺和文字訊息的多模態模型。
訓練和運行模型所需的處理資源,通常以 FLOPS 或 GPU 小時來衡量。
AI 代理程式跨步驟或會話使用儲存的上下文來提高連續性。
人工智慧推理在用戶硬體上本地執行,而不是在遠端雲端服務中執行。
人工添加的標籤或元資料用於訓練或評估機器學習模型。
捕獲語義關係的單字的密集向量表示。
通常使用嵌入來匹配含義而不是精確關鍵字重疊的搜尋。
模型錯誤地將負面案例標記為正面的錯誤預測。
限制不安全或不必要的模型行為的規則、檢查和控制。
一種神經架構,利用注意力並行地對序列之間的關係進行建模。
訓練前設定的配置值,例如學習率、批次大小或深度。
一種旨在繞過模型安全約束的提示技術。
驗證模型輸出並將其轉換為強型別、機器可用結構的邏輯。
一種程式碼評估指標,用於衡量 k 個產生的樣本中至少有一個通過測試的機會。
當模型記住訓練資料並在未見過的輸入上表現不佳時。
應用在一項任務或領域中學到的知識來改進另一項任務。
將模型權重轉換為較低精確度的格式,例如 8 位元或 4 位元。
一種位置偏差方法,根據標記距離懲罰注意力分數,幫助模型推斷更長的上下文。
一種優化的注意力演算法,可減少記憶體使用並加速 Transformer 訓練和推理。
使用公共權重或程式碼發布的模型,用於檢查、調整和重複使用。
一種將查詢和文件編碼為單獨向量的模型,以便可以快速大規模地比較它們。
人工智慧的一個分支,從影像和影片中提取意義。
在下游適應之前對廣泛資料進行初步大規模模型訓練。
將在一個領域訓練的模型轉移到另一個領域以更好地執行的方法。
一種解碼設置,可根據令牌迄今為止出現的頻率成比例地降低令牌的機率。
開發過程中用於調整模型並防止過度擬合的資料集。
其內部推理難以由人類直接解釋的模型。