PANDUAN AI Visual

Dasar Penyebaran untuk Kawalan Robot

Dasar Resapan menggunakan idea denoising yang sama di sebalik penjana imej seperti Resapan Stabil kepada kawalan robot: bukannya meramalkan satu tindakan seterusnya, ia menjana keseluruhan urutan pendek tindakan masa hadapan dengan menapis bunyi secara berulang.

2 min dibacaKemas kini terakhir

Gambaran keseluruhan

It matters because it handles the messy, multi-modal nature of real manipulation far better than older methods.

Menyelam dalam

Diperkenalkan pada tahun 2023 oleh penyelidik di Columbia, MIT dan Institut Penyelidikan Toyota, Dasar Penyebaran merangka semula pembelajaran visuomotor sebagai penolakan bersyarat. Memandangkan imej kamera dan keadaan robot baru-baru ini, ia bermula daripada hingar rawak dan menjalankan beberapa langkah denoising untuk menghasilkan 'ketulan tindakan' — katakan 8 hingga 16 langkah masa seterusnya pose kesan akhir. Kemenangan besar ialah multimodaliti: apabila tugas mempunyai beberapa penyelesaian yang sah (anda boleh mengambil cawan dari kiri atau kanan), regresi tradisional meratakannya menjadi tindakan tengah yang buruk, manakala model resapan boleh melakukan secara bersih kepada satu mod. Ia juga belajar secara stabil daripada demonstrasi manusia (pengklonan tingkah laku) dan mengatasi dengan baik ruang tindakan berdimensi tinggi, menjadikannya pilihan lalai dalam banyak sistem manipulasi moden.

Wawasan Teknikal

Latihan menambah hingar Gaussian pada urutan tindakan yang ditunjukkan dan mengajar rangkaian (selalunya U-Net atau transformer) untuk meramalkan bunyi itu, dikondisikan pada pemerhatian visual dan proprioseptif. Pada masa larian ia denoise daripada sampel rawak melalui beberapa langkah (DDPM/DDIM) untuk menghasilkan trajektori tindakan. Meramalkan ketulan serta perancangan semula 'ufuk surut' memberikan ketekalan temporal sambil kekal reaktif kepada pemerhatian baharu.

Kesan Strategik

Kelajuan dan skala

Visual AI boleh mengautomasikan tugas pemeriksaan, pengesanan dan penandaan pada skala.

Pilihan binaan

Pasukan kreatif boleh membuat prototaip konsep dengan lebih pantas dengan lebih sedikit semakan manual.

Pasukan dan aliran kerja

Operasi boleh menggunakan isyarat imej dan video yang sebelum ini sukar diproses.

Dasar Penyebaran Masa Depan untuk Kawalan Robot

Kerja sedang mengurangkan bilangan langkah denoising (melalui model konsisten dan padanan aliran) jadi dasar berjalan pada kadar kawalan yang tinggi pada perkakasan sebenar. Ketua tindakan resapan sedang disambungkan pada tulang belakang bahasa penglihatan yang besar untuk membentuk VLA, dan varian sedar dan setara 3D meningkatkan kecekapan sampel. Jangkakan kawalan berasaskan resapan untuk kekal sebagai bahan teras dalam 'otak' robot generalis yang menjanakan tugasan yang cekap dan bimanual.

Pelaksanaan Dunia Sebenar

Lengan robot yang menolak bongkah berbentuk T ke dalam pose sasaran, penanda aras di mana Dasar Penyebaran menonjolkan prestasi kaedah pengklonan tingkah laku sebelumnya

Robot bimanual mempelajari tugas dapur yang rumit seperti membalik makanan atau memasang bahagian daripada tunjuk cara teleoperasi manusia

Memilih tong sampah yang bersepah-sepah di mana wujud berbilang genggaman yang sah dan dasar mematuhi satu dan bukannya purata

Modul kepala tindakan di dalam sistem tindakan bahasa penglihatan menjana gerakan frekuensi tinggi yang lancar untuk tangan yang cekap

Risiko & Pengawal

Hak imej dan persetujuan boleh menjadi risiko undang-undang jika asalnya tidak jelas.

Prestasi model boleh berbeza mengikut pencahayaan, demografi dan persekitaran.

Positif palsu mungkin tidak disedari melainkan ambang keyakinan dipantau.

Hala Tuju Pelaksanaan

1

Tentukan kriteria penerimaan untuk ketepatan, ingatan semula dan kos ralat.

2

Uji dengan data yang sepadan dengan keadaan pengeluaran sebenar.

3

Tambahkan semakan manusia untuk ramalan keyakinan rendah atau berimpak tinggi.

4

Jejaki hanyut model dan sahkan semula selepas perubahan kamera atau set data.

Teruskan Meneroka

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Diffusion Policy for Robot Control quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

Mulakan kuiz

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

Panduan seterusnya

Stable Diffusion

Soalan lazim

What is Diffusion Policy for Robot Control?

Dasar Resapan menggunakan idea denoising yang sama di sebalik penjana imej seperti Resapan Stabil kepada kawalan robot: bukannya meramalkan satu tindakan seterusnya, ia menjana keseluruhan urutan pendek tindakan masa hadapan dengan menapis bunyi secara berulang. Ia penting kerana ia mengendalikan sifat manipulasi sebenar yang kucar-kacir dan pelbagai modal jauh lebih baik daripada kaedah lama.

Apakah yang dijana oleh Dasar Penyebaran pada setiap titik keputusan?

Dasar Penyebaran menghasilkan bahagian tindakan — beberapa langkah masa depan tindakan — dengan menafikan, bukannya satu arahan terpencil.

Teknik generatif manakah yang dipinjam oleh Dasar Penyebaran daripada AI imej?

Seperti model resapan imej, ia bermula daripada hingar dan denoise berulang, tetapi di sini output adalah trajektori tindakan yang dikondisikan pada pemerhatian.

Apakah masalah tugas berbilang modal yang diselesaikan oleh Dasar Penyebaran lebih baik daripada regresi mudah?

Apabila beberapa tindakan adalah sah (cth., genggam kiri atau kanan), regresi meratakannya menjadi pilihan tengah yang lemah; penyebaran boleh melakukan dengan bersih kepada satu mod.

Semasa latihan, apakah rangkaian dalam Dasar Penyebaran yang diajar untuk diramalkan?

Kebisingan Gaussian ditambah pada tindakan yang ditunjukkan dan rangkaian belajar untuk meramalkan bunyi bising itu (dikondisikan pada pemerhatian), objektif denoising standard.

Apakah perancangan semula 'ufuk surut' dalam Dasar Penyebaran?

Dasar ini meramalkan sebahagian daripada tindakan tetapi merancang semula secara berkala menggunakan pemerhatian baharu, mengimbangi ketekalan temporal dengan kereaktifan.