À suivreGuide suivant
Estimation de la profondeur de diffusion des soucis
IA visuelle
GUIDE DE L'IA Visuelle
L'estimation stéréo de la profondeur permet de déterminer la distance qui sépare les objets en comparant deux vues de caméra légèrement décalées, tout comme le font vos deux yeux.
Écoutez ce guideNarré par l'IA · ~2 min
Il transforme des images plates en cartes de distance 3D sur lesquelles les robots, les voitures et les téléphones s'appuient pour comprendre l'espace.
L’estimation stéréo de la profondeur utilise deux caméras distantes d’une distance fixe (la ligne de base). Le même point du monde atterrit à des positions horizontales légèrement différentes dans les images de gauche et de droite, et ce décalage est appelé disparité. Les objets proches bougent beaucoup ; les lointains bougent à peine. La profondeur est calculée comme (distance focale x ligne de base) / disparité, donc la profondeur et la disparité sont inversement liées. La partie la plus difficile consiste à faire correspondre les pixels entre les deux images, en particulier sur des murs unis, des motifs répétitifs ou des surfaces réfléchissantes où de nombreux pixels semblent identiques. Les méthodes classiques telles que Semi-Global Matching analysent le long des lignes de balayage, tandis que les réseaux profonds modernes tels que PSMNet et RAFT-Stereo apprennent des fonctionnalités riches et affinent les disparités de manière itérative, produisant une profondeur dense et précise même dans les régions difficiles.
Les systèmes de conduite autonome et d'aide à la conduite utilisent des caméras stéréo pour évaluer la distance par rapport aux voitures, aux piétons et aux trottoirs pour le freinage et le maintien de la voie.
Les robots d'entrepôt et agricoles créent des cartes 3D pour saisir des objets, éviter les obstacles et cueillir des fruits à la bonne profondeur.
Les casques AR/VR comme les appareils passthrough estiment la géométrie de la pièce afin que les objets virtuels soient correctement placés sur les surfaces réelles.
Les rovers martiens (par exemple Perseverance) utilisent des caméras de navigation stéréo pour planifier des chemins sûrs sur des terrains rocheux sans GPS.
Attendez-vous à une fusion plus étroite de la stéréo avec les signaux LiDAR, radar et monoculaires afin que les systèmes se dégradent gracieusement lorsqu'un capteur tombe en panne. La correspondance basée sur un transformateur et la formation auto-supervisée (apprentissage à partir d'une vidéo brute sans profondeur de vérité terrain) réduisent le besoin de données étiquetées coûteuses. L'efficacité sur les appareils s'améliore rapidement, en mettant la stéréo en temps réel sur les drones, les lunettes AR et les robots bon marché. Les caméras événementielles et les modèles actifs appris promettent une profondeur fiable même dans des scènes de faible luminosité, de flou de mouvement et sans texture qui vont à l'encontre des méthodes actuelles.
Newsletter gratuite
Trois histoires d'IA vérifiées chaque matin de la semaine, écrites dans un anglais simple. Gratuit pour toujours, sans publicité.
Un e-mail chaque jour de la semaine. Désabonnez-vous en un clic. Nous ne vendons ni ne partageons jamais votre adresse.
Testez-vous
Commentaires instantanés sur chaque réponse et un certificat partageable avec une pièce d'identité vérifiable une fois que vous avez réussi un cours.
Soutenez l’enseignement gratuit de l’IA. AI Understanding est une organisation à but non lucratif 501(c)(3) : pas de publicité, pas de paywall, jamais. Faire un don
L'estimation stéréo de la profondeur permet de déterminer la distance qui sépare les objets en comparant deux vues de caméra légèrement décalées, tout comme le font vos deux yeux. Il transforme des images plates en cartes de distance 3D sur lesquelles les robots, les voitures et les téléphones s'appuient pour comprendre l'espace.
La disparité est la distance dans laquelle un point correspondant se déplace horizontalement entre les deux vues rectifiées ; une plus grande disparité signifie que l’objet est plus proche.
Profondeur = (distance focale x ligne de base) / disparité, de sorte que à mesure que la disparité diminue, la profondeur estimée augmente. Les objets lointains ont une infime disparité.
La rectification déforme les deux images afin que les correspondances soient confinées à une seule ligne horizontale, transformant ainsi une recherche 2D en une recherche 1D rapide.
Les surfaces sans texture ou répétitives donnent à de nombreux pixels une apparence identique, de sorte que l'algorithme ne peut pas trouver la correspondance correcte avec certitude.
La ligne de base est la séparation entre les deux centres de la caméra ; une ligne de base plus large améliore la précision des objets distants.
Continuez à apprendre
Plus de guides sélectionnés pour ce sujet
À suivreGuide suivant
Estimation de la profondeur de diffusion des soucis
IA visuelle