A seguirPróximo guia
Geração de movimento AnimateDiff
IA visual
GUIA visual de IA
Structure from Motion (SfM) reconstrói a geometria da cena 3D e as posições da câmera a partir de um conjunto de fotos 2D sobrepostas tiradas de diferentes pontos de vista.
Ouça este guiaNarrado por IA · ~2 min
It is the backbone of 3D mapping, photogrammetry, and modern reconstruction pipelines.
O SfM resolve duas incógnitas acopladas ao mesmo tempo: onde cada câmera estava quando tirou uma foto e onde estão localizados os pontos 3D no mundo. Ele começa detectando pontos característicos distintos (usando detectores como SIFT) em cada imagem e, em seguida, combinando o mesmo ponto físico em várias fotos. Usando essas correspondências e a geometria de como os pontos 3D são projetados em imagens 2D, o sistema estima as poses relativas da câmera por meio da geometria epipolar. Os pontos são triangulados em uma nuvem 3D esparsa, e uma otimização global chamada ajuste de pacote refina todas as câmeras e pontos juntos para minimizar erros de reprojeção. O resultado é uma nuvem de pontos esparsa e posições de câmera calibradas – a estrutura essencial sobre a qual os métodos de reconstrução mais densos se baseiam.
Fotogrametria de drone que transforma conjuntos de fotos aéreas em terrenos 3D e modelos de construção para topografia
Recuperando poses de câmera para inicializar reconstruções de cena NeRF e Gaussian Splatting
Preservação digital de locais e estátuas do patrimônio cultural como modelos 3D de coleções de fotos turísticas
Reconstrução de cenas de crimes ou acidentes em 3D a partir de fotografias de investigadores para análise forense
SfM está cada vez mais fundido com aprendizado profundo: detectores e matchers de recursos aprendidos (como SuperPoint e SuperGlue) lidam com cenas sem textura ou repetitivas com as quais o SIFT clássico tem dificuldade. Ele também alimenta representações de cenas neurais, como NeRF e Gaussian Splatting, que precisam das poses de câmera fornecidas pelo SfM. Espere pipelines ponta a ponta mais rápidos e robustos, SfM em tempo real em telefones para AR e acoplamento mais estreito com SLAM para mapeamento ao vivo em robótica e navegação autônoma.
Boletim informativo gratuito
Três histórias verificadas de IA a cada manhã de dia útil, escritas em linguagem simples. Gratuito para sempre, sem anúncios.
Um e-mail a cada dia útil. Cancele a inscrição com um clique. Nunca vendemos ou compartilhamos seu endereço.
Teste você mesmo
Feedback instantâneo sobre cada resposta e um certificado compartilhável com um ID verificável assim que você concluir um curso.
Apoie a educação gratuita em IA. O AI Understanding é uma organização sem fins lucrativos 501(c)(3) — sem anúncios, sem paywall, nunca. Faça uma doação
Structure from Motion (SfM) reconstrói a geometria da cena 3D e as posições da câmera a partir de um conjunto de fotos 2D sobrepostas tiradas de diferentes pontos de vista. É a espinha dorsal do mapeamento 3D, da fotogrametria e dos modernos pipelines de reconstrução.
O SfM resolve em conjunto a geometria 3D da cena e onde cada câmera estava quando capturou cada imagem.
A correspondência de recursos detectados (por exemplo, pontos-chave SIFT) nas fotos fornece as correspondências necessárias para inferir a geometria.
O ajuste do pacote é um refinamento global não linear de mínimos quadrados que minimiza a lacuna de pixels entre os pontos observados e projetados.
SfM produz um conjunto esparso de pontos triangulados e posições de câmera; métodos mais densos são necessários para superfícies completas.
A geometria epipolar restringe onde um ponto visto em uma imagem pode aparecer em outra, permitindo a estimativa de pose.
Continue aprendendo
Mais guias escolhidos para este tópico
A seguirPróximo guia
Geração de movimento AnimateDiff
IA visual