SeterusnyaPanduan seterusnya
Anggaran Kedalaman Monokular
AI Visual
PANDUAN AI Visual
DepthAnything ialah model asas yang menganggarkan jarak setiap piksel daripada satu foto biasa, tanpa perkakasan khas.
Dengar panduan iniAI-diceritakan · ~2 min
It made robust, general-purpose depth sensing cheap and accessible for anything from phones to robots.
DepthAnything (2024, dikeluarkan oleh penyelidik termasuk di TikTok/ByteDance dan HKU) menangani anggaran kedalaman monokular: meramalkan peta kedalaman daripada satu imej RGB. Kejayaannya adalah berskala: daripada hanya bergantung pada data kedalaman berlabel terhad yang tersedia, pasukan itu membina enjin yang melabel secara automatik kira-kira 62 juta foto tidak berlabel menggunakan model guru, kemudian melatih seorang pelajar mengenai korpus besar ini. Ini memberikan generalisasi tangkapan sifar yang kuat merentas adegan dalam, luar dan luar biasa. Keluaran asal menghasilkan kedalaman relatif (yang mana piksel lebih dekat atau lebih jauh, bukan meter tepat). DepthAnything V2 (pertengahan 2024) menajamkan butiran halus dengan melatih guru tentang data sintetik dengan kebenaran asas yang sempurna, kemudian menyuling kepada imej sebenar, membetulkan tepi kabur dan ralat objek lutsinar.
Menjana peta kedalaman untuk memacu kabur latar belakang yang realistik (bokeh) dalam foto potret telefon pintar kanta tunggal.
Menyediakan persepsi halangan 3D untuk dron dan robot kos rendah yang tidak mempunyai kamera LiDAR atau stereo.
Mencipta peta pelaziman kedalaman untuk ControlNet supaya penjana imej mengekalkan geometri pemandangan.
Menukar foto dan filem 2D kepada kesan 3D atau paralaks untuk paparan VR dan stereoskopik.
Jangkakan penyepaduan yang lebih ketat ke dalam cermin mata AR, kamera telefon pintar dan robotik yang LiDAR berdedikasi terlalu mahal atau besar. Varian metrik yang mengeluarkan meter sebenar, serta model video dengan kedalaman sementara yang stabil (tiada kerlipan antara bingkai), semakin pantas. Memandangkan model ini mengecil untuk dijalankan pada peranti dalam masa nyata, persepsi 3D kamera tunggal akan menjadi keupayaan lalai, memberi makan pengkomputeran spatial, navigasi autonomi dan pembinaan semula pemandangan 3D generatif.
Newsletter percuma
Tiga cerita AI yang disahkan setiap pagi hari bekerja, ditulis dalam Bahasa Inggeris biasa. Percuma selamanya, tiada iklan.
Satu e-mel setiap hari bekerja. Berhenti melanggan dalam satu klik. Kami tidak pernah menjual atau berkongsi alamat anda.
Uji diri anda
Maklum balas segera pada setiap jawapan, dan sijil yang boleh dikongsi dengan ID yang boleh disahkan sebaik sahaja anda lulus kursus.
Sokong pendidikan AI percuma. AI Understanding ialah pertubuhan bukan keuntungan 501(c)(3) — tiada iklan, tiada bayaran dinding, selamanya. Buat derma
DepthAnything ialah model asas yang menganggarkan jarak setiap piksel daripada satu foto biasa, tanpa perkakasan khas. Ia menjadikan penderiaan kedalaman tujuan am yang mantap dan murah dan boleh diakses untuk apa sahaja daripada telefon hingga robot.
Monokular bermaksud kedalaman disimpulkan daripada satu (mono) imej kamera, tanpa pasangan stereo atau penderia aktif.
Pasukan itu membina enjin data yang melabelkan pseudo berpuluh-puluh juta foto tidak berlabel, mengembangkan skala latihan secara dramatik.
DepthAnything menggunakan pengekod DINOv2 ViT yang dipasangkan dengan kepala ramalan padat gaya DPT.
Model asas meramalkan susunan kedalaman relatif dan bukannya jarak metrik mutlak.
V2 melatih guru mengenai imej sintetik dengan kedalaman yang tepat, kemudian disuling kepada foto sebenar untuk sempadan yang lebih tajam.
Teruskan belajar
Lebih banyak panduan dipilih untuk topik ini
SeterusnyaPanduan seterusnya
Anggaran Kedalaman Monokular
AI Visual