公司指南

Wayve LINGO 驾驶语言模型

Wayve 的 LINGO 模型将自动驾驶系统与自然语言推理相结合,因此汽车可以解释它所看到的内容以及它的行为原因。

阅读时间:2分钟最后更新

概述

It is a bet that language can make autonomous driving more interpretable, teachable, and safe.

深入探讨

Wayve 是一家总部位于伦敦的自动驾驶公司,它首创了“端到端”学习方法:神经网络无需手动编码规则,而是直接根据摄像头数据学习驾驶。 LINGO-1 (2023) 添加了一个视觉语言模型,可以用简单的英语叙述驾驶情况(“我正在减速,因为行人正在过马路”)。 LINGO-2 (2024) 更进一步,将语言和动作联系起来,因此模型既可以解释决策,又可以通过“靠边停车”等文本指令进行引导。这使得通常不透明的驾驶网络“黑匣子”变得可审计。 Wayve 更广泛的论文是“体现人工智能”——从数据而不是详细地图中学习通用驾驶技能,旨在在多种车辆类型和城市中进行部署,而无需针对每个位置进行工程设计。

技术洞察

LINGO 是一种视觉-语言-动作模型。相机帧被编码成令牌,并与文本一起输入到变压器中,该变压器经过与人类评论和问答数据配对的驾驶剪辑的训练。至关重要的是,产生语言的同一模型也可以输出转向和加速度,因此解释基于实际的驾驶策略,而不是单独的事后叙述者,从而减少了言语和行为出现分歧的风险。

战略影响

供应商策略

供应商路线图会影响您的团队接下来可以构建的功能。

成本与预算

商业条款和部署选项会影响长期成本和风险。

风险与安全

公司激励措施塑造了产品默认、安全态势和开放性。

Wayve LINGO 驱动语言模型的未来

预计语言驱动的界面将成为测试和验证自主性的标准:工程师会询问“你为什么刹车?”跨越数百万个场景。 Wayve 的目标是将其“AI Driver”基础模型授权给汽车制造商,而不是自己制造汽车。随着这些模型的扩展,悬而未决的问题是罕见“边缘情况”下的可靠性、如何验证口头解释是否真正反映了内部推理,以及监管机构对学习的、非基于规则的驾驶系统的接受度。

现实世界的实施

生成简单的英语评论,解释道路测试期间的每个驾驶决定

让工程师通过自然语言问题查询车队的行为,以调试罕见的场景

接受文本或语音指令(例如“红灯左转”)来驾驶车辆

通过将驾驶镜头与问答注释配对来生成训练和验证数据

风险与防护栏

发布公告可能会超过实际生产工作流程的稳定性。

API 定价或政策转变可能会在一夜之间打破假设。

单一供应商依赖性增加了锁定和迁移成本。

实施路线图

1

使用您自己的任务和数据集评估提供商。

2

在集成之前查看隐私、安全和法律条款。

3

维护跨模型或供应商的后备计划。

4

监控发行说明,以便路线图的更改不会让团队感到意外。

不断探索

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Wayve LINGO Driving Language Models quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

开始测验

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

下一个指南

Wayve 和端到端驾驶模型

常见问题

What is Wayve LINGO Driving Language Models?

Wayve 的 LINGO 模型将自动驾驶系统与自然语言推理相结合,因此汽车可以解释它所看到的内容以及它的行为原因。人们相信语言可以让自动驾驶变得更加可解释、可教学和安全。

Wayve驾驶系统中加入的LINGO-1核心能力是什么?

LINGO-1 引入了一种视觉语言模型,可以用简单的英语叙述驾驶决策,使系统更具可解释性。

LINGO-2 如何超越 LINGO-1?

LINGO-2 是一种视觉-语言-动作模型:它将文本与实际驾驶策略联系起来,因此可以通过指令进行引导并解释其行为。

Wayve 的“端到端”方法意味着什么?

Wayve 通过神经网络直接从数据中学习驾驶行为,而不是依赖大量的手工设计规则和详细地图。

为什么同一驱动模型中的接地解释很重要?

如果解释来自一个单独的叙述者,言语和行动可能会发生冲突;共享一个模型可以将解释与实际决策联系起来。

Wayve 为其 AI 驱动程序制定的业务战略是什么?

Wayve 的目标是向汽车制造商提供其学习驾驶基础模型,而不是制造自己的车辆。