PANDUAN Asas

Model Dunia dan Simulator Terpelajar

Model dunia ialah rangkaian saraf yang belajar untuk meramalkan bagaimana persekitaran berubah dari semasa ke semasa, membenarkan AI 'membayangkan' hasil masa depan sebelum bertindak.

2 min dibacaKemas kini terakhir

Gambaran keseluruhan

Learned simulators take this further, generating interactive, playable environments from data instead of being hand-coded by engineers.

Menyelam dalam

Daripada menghafal apa yang perlu dilakukan, model dunia menangkap dinamik persekitaran: memandangkan keadaan semasa dan tindakan yang dicadangkan, model dunia meramalkan pemerhatian seterusnya. Kertas klasik 'Model Dunia' 2018 oleh Ha dan Schmidhuber memampatkan bingkai permainan dengan pengekod automatik, memodelkan dinamiknya dengan rangkaian berulang dan melatih pengawal hampir keseluruhannya di dalam 'impian' yang dipelajari ini. Barisan Dreamer DeepMind mempelajari dinamik dan rancangan terpendam dengan melancarkan trajektori yang dibayangkan, dan DreamerV3 menguasai pelbagai tugas — malah mengumpul berlian dalam Minecraft dari awal. Baru-baru ini, Genie Google menjana dunia 2D yang boleh dikawal daripada imej dan video tidak berlabel, dan GameNGen menghasilkan semula DOOM permainan dalam masa nyata hanya menggunakan model penyebaran. Rayuan: ejen boleh belajar atau diuji dalam imaginasi yang murah dan pantas dan bukannya realiti yang berisiko dan perlahan.

Wawasan Teknikal

Model dunia biasanya mengekodkan pemerhatian berdimensi tinggi ke dalam keadaan terpendam padat, kemudian mempelajari fungsi peralihan yang meramalkan keadaan terpendam seterusnya dan ganjaran daripada tindakan. Perancangan menggunakan 'pelancaran': membayangkan banyak urutan tindakan ke hadapan dan memilih yang terbaik, atau melatih dasar mengenai data yang dibayangkan. Versi moden menggunakan pengubah atau penyebaran video untuk meramalkan bingkai secara langsung, berkondisi pada tindakan pengguna, mencapai penjanaan bingkai demi bingkai interaktif.

Kesan Strategik

Keputusan yang lebih jelas

Ia membantu anda memisahkan tuntutan teknikal yang jelas daripada bahasa pemasaran.

Kos dan bajet

Anda boleh bertanya soalan pelaksanaan yang lebih baik sebelum menghabiskan wang atau masa.

Pasukan dan aliran kerja

Pasukan yang berkongsi pemahaman membuat keputusan produk, dasar dan pembelajaran yang lebih baik.

Masa Depan Model Dunia dan Simulator Terpelajar

Model dunia menjadi pusat kepada penjanaan robotik dan permainan: mereka menjanjikan pembelajaran cekap data di mana interaksi sebenar memerlukan kos yang tinggi, dan persekitaran yang boleh dimainkan dengan cepat. Jangkakan kesetiaan yang lebih tinggi, ufuk yang lebih panjang, model video berhawa dingin, integrasi yang lebih ketat dengan ejen perancangan dan gunakan sebagai 'simulator saraf' untuk melatih dasar manipulasi dan pemanduan sendiri. Cabaran terbuka termasuk konsistensi jangka panjang, mengelakkan fizik halusinasi, dan menskalakan ingatan.

Pelaksanaan Dunia Sebenar

Ha dan Schmidhuber melatih ejen lumba kereta hampir keseluruhannya di dalam impiannya yang dipelajari tentang alam sekitar

DreamerV3 DeepMind mengumpul berlian di Minecraft dari awal dengan merancang dalam imaginasi

Genie Google menjana dunia platformer 2D yang boleh dimainkan daripada satu imej segera

GameNGen menjalankan versi DOOM yang boleh dimainkan dalam masa nyata, dengan bingkai yang dihasilkan oleh model resapan

Risiko & Pengawal

Pasukan yang berbeza mungkin menggunakan istilah yang sama secara berbeza, jadi tentukan skop lebih awal.

Penanda aras boleh kelihatan kukuh manakala prestasi dunia sebenar tidak sekata.

Mengabaikan kualiti data dan rancangan penilaian sering menghasilkan hasil yang rapuh.

Hala Tuju Pelaksanaan

1

Mulakan dengan definisi bahasa biasa hasil yang anda perlukan.

2

Pilih satu metrik kejayaan dan satu keadaan kegagalan sebelum ujian.

3

Jalankan juruterbang kecil dengan data perwakilan, bukan set demo yang digilap.

4

Dokumen di mana Model Dunia dan Simulator Belajar membantu dan kaedah yang lebih mudah adalah lebih baik.

Teruskan Meneroka

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the World Models and Learned Simulators quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

Mulakan kuiz

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

Panduan seterusnya

Model Yayasan Dunia NVIDIA Cosmos

Soalan lazim

What is World Models and Learned Simulators?

Model dunia ialah rangkaian saraf yang belajar untuk meramalkan bagaimana persekitaran berubah dari semasa ke semasa, membenarkan AI 'membayangkan' hasil masa depan sebelum bertindak. Simulator yang dipelajari mengambil langkah ini lebih jauh, menjana persekitaran interaktif yang boleh dimainkan daripada data dan bukannya dikod tangan oleh jurutera.

Apakah tugas teras model dunia?

Model dunia mempelajari dinamik persekitaran: daripada keadaan semasa dan tindakan yang meramalkan pemerhatian seterusnya (dan selalunya memberi ganjaran), membolehkan pelancaran yang dibayangkan.

Dalam kertas kerja 'Model Dunia' 2018 oleh Ha dan Schmidhuber, di manakah pengawal itu dilatih sebahagian besarnya?

Ejen belajar untuk bertindak hampir sepenuhnya dalam dinamik terpendam yang dipelajari ('mimpi'), kemudian dipindahkan ke persekitaran sebenar.

Apakah pencapaian ketara yang dicapai oleh DreamerV3 DeepMind?

DreamerV3 mempelajari dinamik terpendam dan menggunakan pelancaran yang dibayangkan untuk menguasai banyak tugas, termasuk mendapatkan berlian dalam Minecraft tanpa data manusia atau kurikulum.

Apakah yang dilakukan oleh Jin Google?

Genie ialah persekitaran interaktif generatif yang belajar daripada video tidak berlabel untuk menghasilkan dunia 2D yang boleh dikawal tindakan.

Bagaimanakah banyak model dunia memastikan masalah ramalan dapat dikendalikan untuk input berdimensi tinggi seperti imej?

Pemerhatian dikodkan ke dalam keadaan pendam dimensi rendah, dan fungsi peralihan meramalkan keadaan pendam seterusnya, menjadikan pelancaran cekap.