AGI(通用人工智能)
一个假设的人工智能系统,可以在许多领域以人类水平执行大多数智力任务。
Plain-language definitions of the AI terms you keep hearing — for students, professionals, and anyone curious about how AI works.
一个假设的人工智能系统,可以在许多领域以人类水平执行大多数智力任务。
无需进行详尽比较即可找到接近查询的向量的算法,以准确性换取速度。
一种软件系统向另一个系统发送请求并接收响应的结构化方式。
一种子词标记化算法,将最常见的字符对合并为可重用的标记。
一种直接在偏好对上微调模型的训练方法,无需单独的奖励模型。
生成器和鉴别器相互训练的生成设置。
小学数学应用题的基准,用于评估语言模型中的逐步推理。
存储来自先前令牌的键和值张量,使 Transformer 可以生成新令牌而无需重新计算过去的注意力。
一种添加低秩适配器矩阵的参数高效微调方法。
一种开放协议,允许人工智能应用程序以标准方式连接到外部工具、数据源和上下文提供者。
使用多项选择题测试跨 57 个学术和专业科目的语言模型的基准测试。
将图像或扫描中的文本转换为机器可读文本的技术。
一种语言模型指标,衡量模型对真正的下一个标记的惊讶程度。
设计提示以提高输出质量、可靠性和可控性。
一种微调技术,将 4 位权重量化与 LoRA 适配器相结合,以减少内存需求。
一种检索方法,可生成多个查询变体、检索每个查询变体的结果并融合排名。
一种检索外部知识并在推理时将其输入生成的方法。
一种位置编码方法,可旋转查询向量和键向量以对相对标记位置进行编码。
仅从 k 个最有可能的下一个标记中采样的解码策略。
一种解码策略,从概率总和为 p 的最小标记集中进行采样。
使人工智能预测更加透明和易于理解的技术和实践。
语言模型一次可以处理的输入标记的最大数量。
模型的主张与可验证的现实世界信息的匹配程度如何。
人类审查、指导或覆盖人工智能输出的工作流程。
构建执行需要模式识别、推理、语言或决策的任务的系统的广泛领域。
一种可以观察、推理并采取行动来实现目标的软件系统,通常使用工具和内存。
该领域专注于减少人工智能系统中的有害行为、故障和误用风险。
让人工智能系统按照人类意图、价值观和安全约束行事的工作。
指导人工智能如何在社会中开发和使用的政策、标准和监督机制。
欧盟针对人工智能系统和提供商的基于风险的监管框架。
一个根据人类排名进行训练的模型,用于预测用户可能更喜欢哪些响应。
Python 编程问题的基准,用于通过单元测试衡量代码生成的正确性。
添加到标记嵌入的信息,以便转换器可以区分序列顺序。
将输出代币限制为有效结构或符合策略的选择的生成策略。
将用户对人工智能输出的信心与系统在每项任务中的实际可靠性结合起来。
删除不太重要的模型权重或神经元以减小尺寸和计算量。
模型错过真正的阳性案例的错误预测。
数据或模型行为中一致的错误或不公平模式。
AI 代理跨步骤或会话使用存储的上下文来提高连续性。
一种解码设置,可降低令牌出现的概率,从而鼓励新主题。
生成触发外部工具或 API 的结构化调用的模型功能。
一种学习文本和图像之间共享表示的多模态模型架构。
一种针对处理图像等网格数据而优化的神经架构。
模型中学习到的权重会影响其输出。
通过训练一小部分添加参数来调整模型的方法。
一种攻击模式,其中恶意指令被插入到模型输入或检索的内容中。
一种将查询和文档编码为单独向量的模型,以便可以快速大规模地比较它们。
一种神经架构,利用注意力并行地对序列之间的关系进行建模。
一种与语言无关的分词器,可以直接从原始文本中学习子词单元,而无需在空格上进行预分割。
模型正确识别的实际阳性的比例。
模型的行为可以被解释和解释给人类的程度。
结合多个模型的预测以提高鲁棒性或准确性。
识别人物、地点、日期或组织等实体的 NLP 任务。
估计因果关系而不是简单相关性的方法。
用于训练或评估模型输出的可信参考标签。
描述模型的预期用途、指标、限制和风险的文档。
预训练后应用的训练步骤,例如指令调整、偏好优化和安全调整。
非常大且复杂的数据集,需要可扩展的存储和处理技术。
在海量文本语料库上训练来生成和分析文本的语言模型。
一种根据偏好信号对输出进行评分的模型,通常用于 RLHF 管道。
训练超参数控制每个更新步骤的参数变化量。
一种训练和行为塑造方法,其中模型输出由一组固定的书面原则指导。
一种紧凑的语言模型,针对较低的延迟、成本或设备上的使用情况进行了优化。
仅从少量示例中学习或适应行为。
模型调用外部工具(例如搜索、计算器或 API)的能力。
一种隐私技术,会增加统计噪声,因此无法从输出中可靠地推断出单个记录。
当模型生成流畅但错误或不受支持的信息时。
发送请求和接收模型输出之间的时间。
使用公共权重或代码发布的模型,用于检查、调整和重用。
对模型响应中包含的源段落或文档的引用,以支持其主张。
通过奖励信号进行训练,代理学习能够最大化长期回报的行动。
与生产流量并行运行模型,不会影响面向用户的决策。
对特定领域的数据进行持续训练,以使预先训练的模型适应特定任务。
根据文本查询预测用户的目的以正确路由。
一种生成架构,可以学习反转噪声以合成图像、音频或其他内容。
限制不安全或不需要的模型行为的规则、检查和控制。
让模型不断从新数据中学习而不忘记先验知识的训练方法。
微调指令-响应对的模型以改善任务跟踪。
量化训练期间预测误差的数学目标。
人工智能响应得到源数据或检索到的证据支持的程度。
具有变量、格式规则和特定于任务的指令的可重用提示模式。
基于图的索引结构,用于高维向量上的快速近似最近邻搜索。
从没有明确目标输出的未标记数据中学习模式。
允许系统从数据中学习模式并随着时间的推移进行改进的方法。
模型的置信度得分与实际正确性概率的匹配程度。
一种使用人类偏好信号来塑造模型行为的训练方法。
一种向减少误差的方向更新参数的优化方法。
模型在训练集之外的新的、未见过的数据上的表现如何。
在人工智能生成的文本或媒体中嵌入可检测信号,以便稍后将其识别为机器生成的。
在评估过程中使用语言模型对其他模型的输出进行评分或比较。
一种解码算法,在每一步中保留前几个候选序列以找到更高概率的输出。
在响应生成期间使用额外的推理计算来提高质量或推理。
机器学习的一个子集,使用多层神经网络进行表示学习。
具有专门子网络的架构,其中每个输入仅运行选定的专家。
一种检索方法,将关键字(词汇)搜索与矢量(语义)搜索相结合,以提高召回率和精度。
一个向量,显示每个参数应改变多少以减少损失。
控制生成输出中的随机性的采样设置。
一种注意模式,其中每个令牌仅关注附近令牌的固定大小窗口以减少计算。
压缩的表示空间,其中相似的概念作为向量彼此靠近。
一种检索模式,搜索小块但返回其较大的父文档以获得更丰富的上下文。
生成文本、图像、音频、视频或代码等新内容的人工智能系统。
针对存储和查询高维嵌入向量而优化的数据库。
受生物神经元和突触启发的分层计算模型。
许多参数为零或不活动以减少计算的模型。
模型在噪声、变化或对抗性输入下保持性能的能力。
预处理、模型步骤和后处理阶段的有序工作流程。
实际正确的预测阳性的比例。
为模型设置行为、策略和响应方式的高优先级指令。
使用对抗性提示对人工智能系统进行压力测试,以揭示失败和风险。
用于增强、模拟或保护敏感训练数据的人工生成的数据。
将输入转换为潜在表示的模型组件。
一种经验关系,显示性能如何随模型大小、数据或计算而提高。
可能包含测量模型指标的真实值的统计范围。
通过预测屏蔽或变换的部分来学习未标记数据的表示。
一种可以在有限或没有直接人类控制的情况下实时做出决策和采取行动的系统。
人工智能的分支专注于理解和生成人类语言。
一种训练设置,模型通过与自身副本的交互或竞争生成数据来改进。
联合处理视觉和文本信息的多模态模型。
人工智能推理在用户硬件上本地执行,而不是在远程云服务中执行。
捕获语义关系的单词的密集向量表示。
通常使用嵌入来匹配含义而不是精确关键字重叠的搜索。
模型错误地将负面案例标记为正面的错误预测。
训练前设置的配置值,例如学习率、批量大小或深度。
一种旨在绕过模型安全约束的提示技术。
验证模型输出并将其转换为强类型、机器可用结构的逻辑。
应用在一项任务或领域中学到的知识来改进另一项任务。
提供给生成模型的输入指令和上下文。
当模型记住训练数据并在未见过的输入上表现不佳时。
一种代码评估指标,用于衡量 k 个生成的样本中至少有一个通过测试的机会。
将模型权重转换为较低精度的格式,例如 8 位或 4 位。
一种位置偏差方法,根据标记距离惩罚注意力分数,帮助模型推断更长的上下文。
一种优化的注意力算法,可减少内存使用并加速 Transformer 训练和推理。
在下游适应之前对广泛数据进行初始大规模模型训练。
将在一个领域训练的模型转移到另一个领域以更好地执行的方法。
一种解码设置,可根据令牌迄今为止出现的频率成比例地降低令牌的概率。
开发过程中用于调整模型并防止过度拟合的数据集。
其内部推理难以由人类直接解释的模型。