PANDUAN AI Visual

Struktur daripada Gerakan

Structure from Motion (SfM) membina semula geometri pemandangan 3D dan kedudukan kamera daripada set foto 2D bertindih yang diambil dari sudut pandangan berbeza.

Dengar panduan iniAI-diceritakan · ~2 min

Pada halaman ini2 min dibaca
  1. Gambaran keseluruhan
  2. Menyelam dalam
  3. Pelaksanaan Dunia Sebenar
  4. Masa Depan Struktur daripada Gerakan
  5. Mempraktikkannya
  6. Teruskan Meneroka
  7. Soalan lazim

Gambaran keseluruhan

Ia adalah tulang belakang pemetaan 3D, fotogrametri dan saluran paip pembinaan semula moden.

Menyelam dalam

SfM menyelesaikan dua gandingan yang tidak diketahui serentak: di mana setiap kamera berada semasa mengambil foto dan lokasi titik 3D di dunia. Ia bermula dengan mengesan titik ciri tersendiri (menggunakan pengesan seperti SIFT) dalam setiap imej, kemudian memadankan titik fizikal yang sama merentas berbilang foto. Dengan menggunakan surat-menyurat ini dan geometri cara mata 3D diproyeksikan pada imej 2D, sistem menganggarkan pose kamera relatif melalui geometri epipolar. Titik disegitiga menjadi awan 3D yang jarang, dan pengoptimuman global yang dipanggil pelarasan berkas memperhalusi semua kamera dan mata bersama-sama untuk meminimumkan ralat unjuran semula. Hasilnya ialah awan titik jarang ditambah kedudukan kamera yang ditentukur - perancah penting yang dibina oleh kaedah pembinaan semula yang lebih padat.

Pelaksanaan Dunia Sebenar

Fotogrametri dron yang menukar set foto udara kepada rupa bumi 3D dan model bangunan untuk tinjauan

Memulihkan pose kamera untuk membina semula pemandangan NeRF dan Gaussian Splatting

Memelihara tapak dan patung warisan budaya secara digital sebagai model 3D daripada koleksi foto pelancong

Membina semula adegan jenayah atau kemalangan dalam 3D daripada gambar penyiasat untuk analisis forensik

Masa Depan Struktur daripada Gerakan

SfM semakin digabungkan dengan pembelajaran mendalam: pengesan dan pemadanan ciri yang dipelajari (seperti SuperPoint dan SuperGlue) mengendalikan adegan tanpa tekstur atau berulang yang bergelut dengan SIFT klasik. Ia juga menyalurkan perwakilan adegan saraf seperti NeRF dan Gaussian Splatting, yang memerlukan pose kamera yang disediakan oleh SfM. Jangkakan saluran paip hujung ke hujung yang lebih pantas, lebih mantap, SfM masa nyata pada telefon untuk AR, dan gandingan yang lebih ketat dengan SLAM untuk pemetaan langsung dalam robotik dan navigasi autonomi.

Mempraktikkannya

Mengapa ia penting

  • Kelajuan dan skala. Visual AI boleh mengautomasikan tugas pemeriksaan, pengesanan dan penandaan pada skala.
  • Pilihan binaan. Pasukan kreatif boleh membuat prototaip konsep dengan lebih pantas dengan lebih sedikit semakan manual.
  • Pasukan dan aliran kerja. Operasi boleh menggunakan isyarat imej dan video yang sebelum ini sukar diproses.

Berhati-hati untuk

  • Hak imej dan persetujuan boleh menjadi risiko undang-undang jika asalnya tidak jelas.
  • Prestasi model boleh berbeza mengikut pencahayaan, demografi dan persekitaran.
  • Positif palsu mungkin tidak disedari melainkan ambang keyakinan dipantau.

Langkah seterusnya

  1. Tentukan kriteria penerimaan untuk ketepatan, ingatan semula dan kos ralat.
  2. Uji dengan data yang sepadan dengan keadaan pengeluaran sebenar.
  3. Tambahkan semakan manusia untuk ramalan keyakinan rendah atau berimpak tinggi.
  4. Jejaki hanyut model dan sahkan semula selepas perubahan kamera atau set data.

Teruskan Meneroka

Newsletter percuma

Dapatkan taklimat AI harian

Tiga cerita AI yang disahkan setiap pagi hari bekerja, ditulis dalam Bahasa Inggeris biasa. Percuma selamanya, tiada iklan.

Satu e-mel setiap hari bekerja. Berhenti melanggan dalam satu klik. Kami tidak pernah menjual atau berkongsi alamat anda.

Uji diri anda

Take the Structure from Motion quiz

Maklum balas segera pada setiap jawapan, dan sijil yang boleh dikongsi dengan ID yang boleh disahkan sebaik sahaja anda lulus kursus.

Mulakan kuiz

Sokong pendidikan AI percuma. AI Understanding ialah pertubuhan bukan keuntungan 501(c)(3) — tiada iklan, tiada bayaran dinding, selamanya. Buat derma

Soalan lazim

Apakah Struktur daripada Gerakan?

Structure from Motion (SfM) membina semula geometri pemandangan 3D dan kedudukan kamera daripada set foto 2D bertindih yang diambil dari sudut pandangan berbeza. Ia adalah tulang belakang pemetaan 3D, fotogrametri dan saluran paip pembinaan semula moden.

Apakah dua perkara yang dianggarkan oleh Struktur daripada Gerakan secara serentak?

SfM bersama-sama menyelesaikan geometri 3D tempat kejadian dan lokasi setiap kamera semasa ia menangkap setiap imej.

Apakah peranan pemadanan ciri dalam SfM?

Memadankan ciri yang dikesan (mis., titik kekunci SIFT) merentas foto memberikan surat-menyurat yang diperlukan untuk membuat kesimpulan geometri.

Apakah yang dioptimumkan oleh pelarasan berkas?

Pelarasan himpunan ialah penghalusan petak terkecil tak linear global yang meminimumkan jurang piksel antara titik yang diperhatikan dan unjuran.

Apakah jenis output 3D yang biasanya SfM hasilkan secara langsung?

SfM menghasilkan set jarang titik triangulasi dan kedudukan kamera; kaedah yang lebih padat diperlukan untuk permukaan penuh.

Konsep geometri yang manakah mengaitkan titik sepadan antara dua pandangan kamera?

Geometri epipolar mengekang tempat titik yang dilihat dalam satu imej boleh muncul dalam imej lain, membolehkan anggaran pose.