公司指南

雪花北极模型

Snowflake Arctic 是由数据云公司 Snowflake 构建的开放大型语言模型,针对 SQL 生成和编码等企业任务进行了调整。

阅读时间:2分钟最后更新

概述

It was designed to be unusually cheap to train and efficient to run.

深入探讨

Snowflake 以其云数据仓库而闻名,于 2024 年 4 月发布了 Arctic,作为开源 LLM(Apache 2.0 许可证),专门针对企业需求而不是聊天机器人。 Arctic 使用“Dense-MoE 混合”架构:它拥有 4800 亿个总参数,但每个代币仅激活约 170 亿个参数,因此它的运行成本比其规模所暗示的要便宜得多。 Snowflake 报告称,对其进行训练的计算成本约为 200 万美元,这只是同类模型的一小部分。 Arctic 的目标是“企业智能”:编写 SQL 查询、生成代码并遵循指令,它声称与更强大的通用模型具有同等水平。与此同时,Snowflake 还发布了用于搜索和检索的嵌入模型 (Arctic Embed),强化了其将人工智能直接置于客户数据旁边的战略。

技术洞察

Arctic 的效率来自于具有许多小型“专家”子网络的专家混合 (MoE) 设计。对于每个令牌,路由器仅选择少数专家来激活,因此该模型一次使用 480B 参数中的 17B。与密集基础相结合,这种“密集-MoE 混合”提供了高学习能力,同时保持企业的每个代币计算量较低,从而降低了推理成本。

战略影响

供应商策略

供应商路线图会影响您的团队接下来可以构建的功能。

成本与预算

商业条款和部署选项会影响长期成本和风险。

风险与安全

公司激励措施塑造了产品默认、安全态势和开放性。

雪花北极模型的未来

Arctic 标志着一种更便宜、开放、任务专用的企业模型的趋势,公司可以在自己的受管数据附近运行,而不是将其发送到外部 API。预计 Snowflake 将深化 Arctic 及其 Cortex AI 服务与其数据平台的集成,并持续发布高效的嵌入和检索模型。更广泛的方向是,企业更青睐可控、成本可预测、开放的模型来执行基于数据的任务,而不是一刀切的消费者聊天机器人。

现实世界的实施

通过公司数据仓库中的简单英语问题生成准确的 SQL 查询

在 Snowflake 的 Cortex 服务中为企业代码生成助手提供支持

使用 Arctic Embed 模型改进文档搜索和检索增强生成

在本地或私有云中运行开放的、Apache 许可的模型,以保持敏感数据受到管理

风险与防护栏

发布公告可能会超过实际生产工作流程的稳定性。

API 定价或政策转变可能会在一夜之间打破假设。

单一供应商依赖性增加了锁定和迁移成本。

实施路线图

1

使用您自己的任务和数据集评估提供商。

2

在集成之前查看隐私、安全和法律条款。

3

维护跨模型或供应商的后备计划。

4

监控发行说明,以便路线图的更改不会让团队感到意外。

不断探索

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Snowflake Arctic Models quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

开始测验

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

下一个指南

Skild 人工智能机器人基础模型

常见问题

What is Snowflake Arctic Models?

Snowflake Arctic 是由数据云公司 Snowflake 构建的开放大型语言模型,针对 SQL 生成和编码等企业任务进行了调整。它的设计目标是训练成本异常低廉,运行效率极高。

什么样的公司建造了北极模型?

Snowflake以其云数据仓库而闻名,它构建了Arctic,让人工智能更接近企业数据。

什么样的架构可以让 Arctic 在规模庞大的情况下保持高效?

Arctic 的 Dense-MoE Hybrid 仅激活每个代币 4800 亿个参数中的约 170 亿个参数,从而保持较低的计算量。

Arctic 与一般消费者聊天机器人的区别在于哪些任务重点?

Arctic 的目标是“企业智能”,例如 SQL、代码和指令跟踪,而不是开放式聊天。

Arctic 是根据什么许可证发布的?

Arctic 在宽松的 Apache 2.0 许可证下作为开源发布。

Arctic 的培训成本有哪些值得注意的地方?

Snowflake 报告称,训练 Arctic 的计算成本不到 200 万美元,远比同类模型便宜。