免费人工智能库

语言人工智能 指南永远免费。

155 简明英语指南、结构化学习路径和开放图书馆——由独立的 501(c)(3) 非营利组织构建,以便任何人都可以理解现代人工智能。

155免费指南
1主题曲目
~2 min根据指南
~5h阅读时间

从这里开始

成果导向课程

每门课程都包含明确的成果、能力规划、实践活动和应用毕业设计。

主题曲目

按曲目浏览

跳入您关心的领域。每条赛道都有多个简单的英文指南。

全库

所有指南

155 1019 显示指南。按曲目过滤或在上方搜索。

语言人工智能

重复惩罚和解码控制

解码控件是决定语言模型如何从其概率分布中选择下一个单词的旋钮。

2 最小阅读量阅读
语言人工智能

ALiBi 位置偏差

ALiBi(带有线性偏差的注意力)是一种巧妙的方法,可以为 Transformer 提供词序感,而无需传统的位置嵌入。

2 最小阅读量阅读
语言人工智能

多查询注意力

多查询注意力(MQA)是变压器注意力的一种节省内存的方式,它在所有注意力头之间共享一组键和值。

2 最小阅读量阅读
语言人工智能

句段标记化

SentencePiece 是一种与语言无关的分词器,它学习如何直接从数据将原始文本分割成子词片段,而不依赖于空格。

2 最小阅读量阅读
语言人工智能

词片标记化

WordPiece 是子词标记化算法,为 BERT 和许多 Google 模型提供支持,将单词分割成可重用的片段,以便模型可以处理任何......

2 最小阅读量阅读
语言人工智能

句子-BERT 嵌入

Sentence-BERT (SBERT) 采用 BERT 为整个句子生成单个固定长度向量,因此可以将含义与快速余弦相似度进行比较。

2 最小阅读量阅读
语言人工智能

T5 和文本到文本传输

T5(文本到文本传输转换器),来自 Google 于 2019 年,重新构建了每个 NLP 任务,翻译,摘要,分类,甚至回归,作为馈送......

2 最小阅读量阅读
语言人工智能

密集通道检索

密集段落检索 (DPR) 通过比较问题和段落的含义(作为数字向量,而不是匹配单词)来查找相关文本。

2 最小阅读量阅读
语言人工智能

BM25 和词汇检索

BM25 是经典的基于关键字的排名函数,它根据查询术语出现的频率对文档进行评分,并根据术语稀有度和文档长度进行调整。

2 最小阅读量阅读
语言人工智能

HyDE 假设文档嵌入

HyDE 通过首先要求语言模型想象一个虚假的答案文档,然后使用该文档的嵌入而不是原始文档进行搜索来改进检索......

2 最小阅读量阅读
语言人工智能

推测性解码草案模型

推测性解码使用小型、快速的“草稿”模型来猜测几个即将出现的标记,然后大型模型一次性验证这些标记。

2 最小阅读量阅读
语言人工智能

前瞻解码

Lookahead 解码通过使用 n-gram 并行猜测和验证多个未来令牌,无需任何额外的草稿模型即可加速 LLM 生成……

2 最小阅读量阅读

读完了吗?证明给我看。

Check what you learned with a topic quiz, then explore our structured courses or work toward a certificate. Every guide stays free to read.