跳至內容
學習
新聞
工具
職缺
使命
搜尋
⌘K
English
捐款
選單
從這裡開始
開始學習
學習
前往 學習
課程
指南
AI 導師
提示庫
測驗
認證
術語表
新聞
前往 新聞
最新人工智慧新聞
主題追蹤器
研究和數據集
部落格
編輯準則
更正說明
工具
前往 工具
工具目錄
最佳名單
比較工具
成本計算器
快速精煉機
提交工具
職缺
前往 職缺
瀏覽人工智慧職位
發布職缺
贊助美亞保險
使命
前往 使命
使命
影響和統計
作者
Help center
有什麼新消息
支援
捐款
首頁
/
詞彙表
/
位置編碼
人工智慧術語
什麼是
位置編碼
?
定義
新增至標記嵌入的信息,以便轉換器可以區分序列順序。
相關術語
RoPE(旋轉位置嵌入)
一種位置編碼方法,可旋轉查詢向量和鍵向量以對相對標記位置進行編碼。
鋁鋰
一種位置偏差方法,根據標記距離懲罰注意力分數,幫助模型推斷更長的上下文。
參數高效率微調 (PEFT)
透過訓練一小部分添加參數來調整模型的方法。
AGI(通用人工智慧)
一個假設的人工智慧系統,可以在許多領域以人類層級執行大多數智力任務。
人工智慧代理
一種可以觀察、推理並採取行動來實現目標的軟體系統,通常使用工具和記憶體。
註解
人工添加的標籤或元資料用於訓練或評估機器學習模型。
在我們的免費指南中了解更多信息
Positional Interpolation for Long Context
Instant-NGP Hash Encoding
Byte-Pair Encoding
Tokenization and Byte Pair Encoding
參見
Multi-Head Attention
Flash Attention
QLoRA
Sliding Window Attention
DPO (Direct Preference Optimization)
BPE (Byte Pair Encoding)
Tree of Thoughts
SentencePiece
Previous
Multi-Head Attention
Next
RoPE (Rotary Positional Embeddings)
瀏覽完整的人工智慧術語表
探索所有免費的人工智慧指南