A seguirPróximo guia
Estimativa de profundidade monocular
IA visual
GUIA visual de IA
DepthAnything é um modelo básico que estima a distância de cada pixel de uma única foto comum, sem nenhum hardware especial.
Ouça este guiaNarrado por IA · ~2 min
It made robust, general-purpose depth sensing cheap and accessible for anything from phones to robots.
DepthAnything (2024, lançado por pesquisadores, incluindo os da TikTok/ByteDance e HKU) aborda a estimativa de profundidade monocular: prever um mapa de profundidade a partir de uma imagem RGB. A sua inovação foi a escala: em vez de confiar apenas nos limitados dados de profundidade rotulados disponíveis, a equipa construiu um motor que rotulou automaticamente cerca de 62 milhões de fotos não rotuladas utilizando um modelo de professor e depois treinou um aluno neste enorme corpus. Isso proporciona uma forte generalização de disparo zero em cenas internas, externas e incomuns. O original gera profundidade relativa (quais pixels estão mais próximos ou mais distantes, não em metros exatos). O DepthAnything V2 (meados de 2024) aprimorou detalhes finos treinando o professor em dados sintéticos com verdade absoluta e, em seguida, destilando em imagens reais, corrigindo bordas borradas e erros de objetos transparentes.
Geração de mapas de profundidade para gerar desfoque de fundo realista (bokeh) em fotos de retratos de smartphones com lente única.
Fornece percepção de obstáculos 3D para drones e robôs de baixo custo que não possuem LiDAR ou câmeras estéreo.
Criação de mapas de condicionamento de profundidade para ControlNet para que os geradores de imagens preservem a geometria da cena.
Convertendo fotos e filmes 2D em efeitos 3D ou de paralaxe para VR e exibições estereoscópicas.
Espere uma integração mais estreita com óculos AR, câmeras de smartphones e robótica, onde o LiDAR dedicado é muito caro ou volumoso. Variantes métricas que produzem medidores reais, além de modelos de vídeo com profundidade temporalmente estável (sem oscilação entre os quadros), estão avançando rapidamente. À medida que esses modelos diminuem para serem executados no dispositivo em tempo real, a percepção 3D de câmera única se tornará um recurso padrão, alimentando a computação espacial, a navegação autônoma e a reconstrução generativa de cenas 3D.
Boletim informativo gratuito
Três histórias verificadas de IA a cada manhã de dia útil, escritas em linguagem simples. Gratuito para sempre, sem anúncios.
Um e-mail a cada dia útil. Cancele a inscrição com um clique. Nunca vendemos ou compartilhamos seu endereço.
Teste você mesmo
Feedback instantâneo sobre cada resposta e um certificado compartilhável com um ID verificável assim que você concluir um curso.
Apoie a educação gratuita em IA. O AI Understanding é uma organização sem fins lucrativos 501(c)(3) — sem anúncios, sem paywall, nunca. Faça uma doação
DepthAnything é um modelo básico que estima a distância de cada pixel de uma única foto comum, sem nenhum hardware especial. Tornou a detecção de profundidade robusta e de uso geral barata e acessível para qualquer coisa, desde telefones até robôs.
Monocular significa que a profundidade é inferida a partir de uma imagem de câmera (mono), sem par estéreo ou sensor ativo.
A equipe construiu um mecanismo de dados que pseudo-rotulou dezenas de milhões de fotos não rotuladas, expandindo drasticamente a escala de treinamento.
DepthAnything usa um codificador DINOv2 ViT emparelhado com um cabeçote de previsão denso estilo DPT.
O modelo básico prevê ordenação de profundidade relativa em vez de distâncias métricas absolutas.
V2 treinou o professor em imagens sintéticas com profundidade exata e depois destilou em fotos reais para obter limites mais nítidos.
Continue aprendendo
Mais guias escolhidos para este tópico
A seguirPróximo guia
Estimativa de profundidade monocular
IA visual