公司指南

Wayve LINGO 駕駛語言模型

Wayve 的 LINGO 模型將自動駕駛系統與自然語言推理相結合,因此汽車可以解釋它所看到的內容以及它的行為原因。

閱讀時間約2分鐘最後更新

概述

It is a bet that language can make autonomous driving more interpretable, teachable, and safe.

深入探討

Wayve 是一家總部位於倫敦的自動駕駛公司,它首創了「端到端」學習方法:神經網路無需手動編碼規則,而是直接根據攝影機資料學習駕駛。 LINGO-1 (2023) 增加了一個視覺語言模型,可以用簡單的英語敘述駕駛情況(「我正在減速,因為行人正在過馬路」)。 LINGO-2 (2024) 更進一步,將語言和動作連結起來,因此模型既可以解釋決策,又可以透過「靠邊停車」等文字指令進行引導。這使得通常不透明的駕駛網路「黑盒子」變得可審計。 Wayve 更廣泛的論文是「體現人工智慧」——從數據而不是詳細地圖中學習通用駕駛技能,旨在在多種車輛類型和城市中進行部署,而無需針對每個位置進行工程設計。

技術洞察

LINGO 是一種視覺-語言-動作模型。相機幀被編碼成令牌,並與文字一起輸入到變壓器中,該變壓器經過與人類評論和問答資料配對的駕駛剪輯的訓練。至關重要的是,產生語言的相同模型也可以輸出轉向和加速度,因此解釋基於實際的駕駛策略,而不是單獨的事後敘述者,從而減少了言語和行為分歧的風險。

戰略影響

供應商策略

供應商路線圖會影響您的團隊接下來可以建立的功能。

成本與預算

商業條款和部署選項會影響長期成本和風險。

風險與安全

公司激勵措施塑造了產品預設、安全態勢和開放性。

Wayve LINGO 驅動語言模式的未來

預計語言驅動的介面將成為測試和驗證自主性的標準:工程師會詢問「你為什麼煞車?」跨越數百萬個場景。 Wayve 的目標是將其「AI Driver」基礎模式授權給汽車製造商,而不是自己製造汽車。隨著這些模型的擴展,懸而未決的問題是罕見「邊緣情況」下的可靠性、如何驗證口頭解釋是否真正反映了內部推理,以及監管機構對學習的、非基於規則的駕駛系統的接受度。

現實世界的實施

產生簡單的英語評論,解釋道路測試期間的每個駕駛決定

讓工程師透過自然語言問題查詢車隊的行為,以調試罕見的場景

接受文字或語音指令(例如“紅燈左轉”)來駕駛車輛

透過將駕駛鏡頭與問答註釋配對來產生訓練和驗證數據

風險與防護欄

發佈公告可能會超過實際生產工作流程的穩定性。

API 定價或政策轉變可能會在一夜之間打破假設。

單一供應商依賴性增加了鎖定和遷移成本。

實施路線圖

1

使用您自己的任務和資料集評估提供者。

2

在整合之前查看隱私、安全和法律條款。

3

維護跨模型或供應商的後備計劃。

4

監控發行說明,以便路線圖的變更不會讓團隊感到意外。

不斷探索

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Wayve LINGO Driving Language Models quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

開始測驗

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

下一步指南

Wayve 和端到端駕駛模式

常見問題

What is Wayve LINGO Driving Language Models?

Wayve 的 LINGO 模型將自動駕駛系統與自然語言推理相結合,因此汽車可以解釋它所看到的內容以及它的行為原因。人們相信語言可以讓自動駕駛變得更可解釋、可教學和安全。

Wayve駕駛系統中加入的LINGO-1核心能力是什麼?

LINGO-1 引入了一種視覺語言模型,可以用簡單的英語敘述駕駛決策,使系統更具可解釋性。

LINGO-2 如何超越 LINGO-1?

LINGO-2 是一種視覺-語言-動作模型:它將文字與實際駕駛策略連結起來,因此可以透過指令進行引導並解釋其行為。

Wayve 的「端對端」方法意味著什麼?

Wayve 透過神經網路直接從數據中學習駕駛行為,而不是依賴大量的手工設計規則和詳細地圖。

為什麼同一驅動機型中的接地解釋很重要?

如果解釋來自一個單獨的敘述者,言語和行動可能會發生衝突;共享一個模型可以將解釋與實際決策聯繫起來。

Wayve 為其 AI 驅動程式所製定的商業策略是什麼?

Wayve 的目標是向汽車製造商提供其學習駕駛基礎模型,而不是製造自己的車輛。