引導式測驗 · 中等 等級

機器人測驗的視覺-語言-動作模型

了解視覺-語言-動作模型如何將相機輸入和指令與機器人命令結合起來,以及它們的證據來自哪裡。

問題 1 的 8

哪三種類型的輸入/輸出定義了視覺-語言-動作 (VLA) 模型?

預覽每個問題8 問題

當您參加測驗時,就會出現答案和解釋。

  1. 哪三種類型的輸入/輸出定義了視覺-語言-動作 (VLA) 模型?
    • 相機影像、語言指令和機器人動作
    • 音訊、文字和圖像
    • 感測器日誌、GPS 和電池狀態
    • 程式碼、編譯器輸出和測試結果
  2. Google DeepMind 的 RT-2 如何表示機器人動作,以便變壓器可以產生它們?
    • 僅作為連續浮點向量
    • 作為離散化的動作標記,類似於文字標記
    • 作為 ROS 訊息 XML
    • 作為強化學習的獎勵值
  3. 在 VLA 中,「緊急轉移」是什麼意思?
    • 機器人過熱並關閉
    • 兩個機器人交換軟體
    • 預訓練中的網路規模知識可協助機器人處理新物件和指令
    • 無需任何神經網路即可計算動作
  4. 與單一離散動作令牌相比,pi-0 的擴散/流量匹配動作頭的主要優勢是什麼?
    • 它消除了對任何相機的需要
    • 它只適用於模擬
    • 它消除了語言教學
    • 它產生平滑、高頻的動作塊,以實現更靈巧的控制
  5. 為什麼 Open X-Embodiment 資料集對 VLA 很重要?
    • 它匯集多種機器人類型的機器人數據,以實現跨實體泛化
    • 它只是圖像字幕的基準
    • 它只儲存一個機器人的數據
    • 這是一個純語言文字語料庫
  6. Which data sources did DeepMind combine when co-fine-tuning RT-2?
    • Only a fixed list of hand-written joint commands
    • Robot demonstration data and web data with a pretrained vision-language model
    • Only audio recordings without robot observations
    • Only random action tokens with no examples
  7. What kinds of commands can an RT-2-style action representation encode?
    • Only natural-language explanations with no robot controls
    • A fixed video caption for each camera frame
    • Discretized robot motion and gripper commands represented as tokens
    • A robot’s hardware serial number
  8. How broad was the RT-2 evaluation of emergent capabilities reported by Google DeepMind?
    • Exactly 12 trials
    • One trial for every robot type worldwide
    • No physical robot trials
    • More than 6,000 robotic trials