PANDUAN AI Visual

360 dan Penjanaan Imej Panoramik

AI 360 dan penjanaan imej panoramik mencipta imej sampul penuh, biasanya dalam format segi empat tepat, yang boleh dilihat dari dalam sebagai sfera dalam set kepala VR, pemapar web atau kotak langit enjin permainan.

Dengar panduan iniAI-diceritakan · ~3 min

Pada halaman ini4 minit membaca
  1. Gambaran keseluruhan
  2. Menyelam dalam
  3. Pelaksanaan Dunia Sebenar
  4. Masa Depan 360 dan Penjanaan Imej Panoramik
  5. Mempraktikkannya
  6. Teruskan Meneroka
  7. Soalan lazim

Gambaran keseluruhan

Ia penting kerana ia membolehkan pasukan kecil menghasilkan latar belakang yang mengasyikkan dan konsep persekitaran dalam beberapa minit. Itu hanya berfungsi apabila penjana mengendalikan jahitan sampul dan tiang yang diregangkan dengan betul.

Menyelam dalam

Panorama 360 darjah ialah gambar setiap arah yang dilihat dari satu titik. Ia biasanya disimpan dalam unjuran segi empat tepat. Itu ialah segi empat tepat dengan nisbah bidang 2:1: paksi mendatar meliputi 360 darjah longitud dan paksi menegak meliputi 180 darjah latitud, seperti peta dunia rata. Perisian pemapar membalut segi empat tepat kembali ke sfera di sekeliling kamera. Format ini menyebabkan dua masalah yang model imej biasa tidak dilatih untuk mengendalikan. Yang pertama ialah jahitan. Tepi kiri dan kanan segi empat tepat adalah tempat yang sama di dunia, jadi kandungan perlu diteruskan dengan sempurna merentasinya. Penjana biasa menganggap kedua-dua tepi sebagai sempadan yang tidak berkaitan, dan apabila panorama dibalut, garis menegak menunjukkan tempat ia bertemu. Masalah kedua ialah herotan. Berhampiran baris atas dan bawah, kawasan kecil di sekeliling setiap tiang diregangkan merentasi lebar penuh imej. Garis lurus melengkung di sana, dan objek berhampiran langit atau lantai meleleh atau mencubit. Jika model melukis apa yang kelihatan seperti siling biasa di rantau itu, ia akan bertukar menjadi kucar-kacir meledingkan apabila ditayangkan ke sfera. Alat khusus, seperti Blockade Labs' Skybox AI, dan aliran kerja tersuai yang dibina pada model terbuka menangani kedua-dua masalah. Mereka memperhalusi model pada imej sama segi empat tepat dan menggunakan helah penjanaan yang menjadikan imej melilit secara mendatar. Keputusan masih sering memerlukan peningkatan dan sentuhan manual di tiang. Salah tanggapan yang biasa ialah imej 360 ialah dunia 3D. Ia tidak. Ia menangkap satu sudut pandangan, jadi tiada paralaks apabila anda menggerakkan kepala anda dan anda tidak boleh melaluinya. Dalam VR, panorama berfungsi paling baik sebagai latar belakang yang jauh atau untuk pengalaman duduk. Satu lagi tanggapan salah ialah mana-mana imej yang sangat luas adalah panorama. Tanaman landskap lebar tidak akan membalut dengan betul melainkan ia dibuat untuk menyambung tepi ke tepi.

Pelaksanaan Dunia Sebenar

Pembangun permainan indie menjana skybox padang pasir matahari terbenam, menukarnya kepada peta kubus dan menggunakannya sebagai latar belakang jauh dalam enjin permainan, manakala geometri 3D sebenar meliputi segala-galanya yang pemain boleh berjalan berhampiran.

Sebuah studio seni bina menghasilkan pandangan konsep 360 lobi hotel yang dicadangkan supaya pelanggan boleh melihat sekelilingnya dalam set kepala sebelum sesiapa membina model 3D terperinci.

Seorang guru sejarah membina penonton lawatan lapangan maya forum Rom kuno yang bergaya dan memberitahu pelajar dengan jelas bahawa ia adalah ilustrasi, bukan pembinaan semula arkeologi yang tepat.

Pereka apl meditasi VR menjana beberapa persekitaran yang tenang dan memeriksa setiap satu dengan mengalihkan imej separuh lebarnya dalam editor, yang mendedahkan sebarang jahitan yang boleh dilihat sebelum adegan dihantar.

Masa Depan 360 dan Penjanaan Imej Panoramik

Penyelidikan bergerak melepasi panorama tunggal ke arah penjanaan pemandangan 3D penuh, di mana model menghasilkan geometri atau percikan Gaussian yang membolehkan anda bergerak dan bukannya melihat dari satu titik tetap. Kebanyakan sistem tersebut menggunakan panorama sebagai langkah perantaraan dan mengangkatnya ke dalam 3D dengan anggaran kedalaman. Kemungkinan bidang kemajuan adalah tiang yang lebih bersih, resolusi yang cukup tinggi untuk set kepala dan output HDR yang lebih baik untuk pencahayaan. Soalan praktikal masih terbuka: sejauh mana adegan yang dihasilkan dapat bertahan secara dekat, cara studio mengendalikan pelesenan untuk persekitaran yang dijana dan sama ada satu gaya boleh kekal konsisten merentas banyak adegan yang dipautkan. Buat masa ini, panorama yang dijana paling berguna sebagai seni konsep, latar belakang dan prototaip, bukan sebagai persekitaran wira akhir.

Mempraktikkannya

Mengapa ia penting

  • Kelajuan dan skala. Visual AI boleh mengautomasikan tugas pemeriksaan, pengesanan dan penandaan pada skala.
  • Pilihan binaan. Pasukan kreatif boleh membuat prototaip konsep dengan lebih pantas dengan lebih sedikit semakan manual.
  • Pasukan dan aliran kerja. Operasi boleh menggunakan isyarat imej dan video yang sebelum ini sukar diproses.

Berhati-hati untuk

  • Hak imej dan persetujuan boleh menjadi risiko undang-undang jika asalnya tidak jelas.
  • Prestasi model boleh berbeza mengikut pencahayaan, demografi dan persekitaran.
  • Positif palsu mungkin tidak disedari melainkan ambang keyakinan dipantau.

Langkah seterusnya

  1. Tentukan kriteria penerimaan untuk ketepatan, ingatan semula dan kos ralat.
  2. Uji dengan data yang sepadan dengan keadaan pengeluaran sebenar.
  3. Tambahkan semakan manusia untuk ramalan keyakinan rendah atau berimpak tinggi.
  4. Jejaki hanyut model dan sahkan semula selepas perubahan kamera atau set data.

Teruskan Meneroka

Newsletter percuma

Dapatkan taklimat AI harian

Tiga cerita AI yang disahkan setiap pagi hari bekerja, ditulis dalam Bahasa Inggeris biasa. Percuma selamanya, tiada iklan.

Satu e-mel setiap hari bekerja. Berhenti melanggan dalam satu klik. Kami tidak pernah menjual atau berkongsi alamat anda.

Uji diri anda

Take the 360 and Panoramic Image Generation quiz

Maklum balas segera pada setiap jawapan, dan sijil yang boleh dikongsi dengan ID yang boleh disahkan sebaik sahaja anda lulus kursus.

Mulakan kuiz

Sokong pendidikan AI percuma. AI Understanding ialah pertubuhan bukan keuntungan 501(c)(3) — tiada iklan, tiada bayaran dinding, selamanya. Buat derma

Soalan lazim

Apakah itu 360 dan Penjanaan Imej Panoramik?

AI 360 dan penjanaan imej panoramik mencipta imej sampul penuh, biasanya dalam format segi empat tepat, yang boleh dilihat dari dalam sebagai sfera dalam set kepala VR, pemapar web atau kotak langit enjin permainan. Ia penting kerana ia membolehkan pasukan kecil menghasilkan latar belakang yang mengasyikkan dan konsep persekitaran dalam beberapa minit. Itu hanya berfungsi apabila penjana mengendalikan jahitan sampul dan tiang yang diregangkan dengan betul.

Apakah nisbah aspek yang digunakan oleh panorama sama segi empat tepat?

Imej segi empat sama adalah dua kali lebih lebar daripada tinggi. Lebar meliputi 360 darjah longitud dan ketinggian meliputi 180 darjah latitud.

Mengapakah penjana imej biasa sering meninggalkan jahitan yang kelihatan dalam panorama?

Setelah imej dibalut pada sfera, tepi kiri dan kanan bersentuhan. Model yang tidak tahu mereka menyambung cat kandungan yang gagal untuk berbaris di tempat mereka bertemu.

Di manakah herotan paling kuat dalam imej segi empat sama?

Berhampiran kutub, kawasan sfera yang sangat kecil diregangkan merentasi lebar penuh imej. Garisan melengkung di sana dan objek mencalit atau mencubit.

Mengapa panorama 360 tidak berasa 3D sepenuhnya dalam set kepala VR?

Panorama merekodkan setiap arah dari satu titik sahaja. Menggerakkan kepala anda tidak mengalihkan objek berhampiran dengan objek yang jauh, dan anda tidak boleh berjalan melalui tempat kejadian.

Apakah yang dilakukan pelapik bulat (lilitan) dalam model resapan?

Mengisi padding dengan piksel dari tepi bertentangan membolehkan lilitan melihat kandungan berterusan merentasi sempadan, jadi tepi dijana untuk dipadankan.