視覺人工智慧指南

攝影測量

攝影測量將普通的重疊照片轉變為精確的 3D 模型、地圖和測量結果。

概述

攝影測量將普通的重疊照片轉變為精確的 3D 模型、地圖和測量結果。这很重要,因为它可以让任何人仅使用相机就可以大规模重建现实世界的几何形状,从无人机勘测到数字化博物馆文物。

攝影測量屬於電腦視覺工作流程,它解釋或產生視覺媒體以進行分析、操作和創造力。

深入探討

攝影測量透過分析同一場景點如何在從不同角度拍攝的許多重疊 2D 照片中出現來恢復 3D 結構。管道首先檢測顯著特徵(使用 SIFT 等檢測器),然後在影像之間進行匹配。运动结构 (SfM) 联合求解每个摄像机的位置和方向以及稀疏的 3D 点云,通过捆绑调整(一种巨大的最小二乘优化)来细化所有内容。然後,多視圖立體 (MVS) 將其密集化為數百萬個點,並對這些點進行網格化和紋理化。由于摄影测量从图像中导出公制几何,因此它支持测绘、测量、文化遗产保护、视觉效果和游戏资产创建,通常通过校准相机和地面控制点实现亚厘米精度。

技術洞察

數學支柱是共線性條件:3D 點、相機的光學中心及其在影像平面上的投影位於單一射線上。透過足夠的重疊光線,三角測量可以確定 3D 座標。捆绑调整可最大程度地减少总重投影误差,即观察到的像素与估计的 3D 点之间的间隙,同时在所有摄像机和点上重新投影,共同细化内在特征、姿势和结构。

掌握攝影測量

攝影測量將普通的重疊照片轉變為精確的 3D 模型、地圖和測量結果。这很重要,因为它可以让任何人仅使用相机就可以大规模重建现实世界的几何形状,从无人机勘测到数字化博物馆文物。攝影測量屬於電腦視覺工作流程,它解釋或產生視覺媒體以進行分析、操作和創造力。为了建立深入的理解,请将摄影测量视为一种操作模型,而不是单一功能:定义所需的结果,澄清假设,并将系统可以可靠地完成的任务与仍需要专家判断的任务分开。

在實踐中,使用攝影測量的強大團隊會平衡準確性與數據品質、照明變化和標籤一致性等操作現實。他們記錄明確的成功標準,根據實際數據和工作流程進行測試,並根據觀察到的失敗模式而不是一次性基準測試勝利進行迭代。這就是理論理解轉變為跨產品、政策和營運的持久能力的地方。

視覺人工智慧可以大規模自動化檢查、檢測和標記任務。同時,如果出處不明,肖像權和同意可能會成為法律風險。最具彈性的方法是將實驗速度與治理規則結合:運行試點、捕獲證據、發布決策日誌,並隨著模型行為、使用者期望和監管要求的發展不斷更新保障措施。

戰略影響

視覺人工智慧可以大規模自動化檢查、檢測和標記任務。

視覺人工智慧可以大規模自動化檢查、檢測和標記任務。在高品質部署中,這會轉化為可衡量的操作規則、所有權邊界和定期審查儀式,以便團隊可以增強信心,而不是擴大模糊性。

創意團隊可以透過更少的手動修改來更快地建立概念原型。

創意團隊可以透過更少的手動修改來更快地建立概念原型。在高品質部署中,這會轉化為可衡量的操作規則、所有權邊界和定期審查儀式,以便團隊可以增強信心,而不是擴大模糊性。

操作可以使用以前難以處理的影像和視訊訊號。

操作可以使用以前難以處理的影像和視訊訊號。在高品質部署中,這會轉化為可衡量的操作規則、所有權邊界和定期審查儀式,以便團隊可以增強信心,而不是擴大模糊性。

攝影測量的未來

攝影測量越來越多地與神經方法融合。 SuperPoint 和 SuperGlue 等学习特征匹配器在硬场景上的性能优于经典检测器,神经渲染(NeRF、高斯泼溅)正在与摄影测量相结合,以填补空白并生成逼真、可重新照明的资产。期待更严格的实时移动捕捉、自动 LiDAR 相机融合以及消除移动物体和反射的 AI 清理,从而在消费类手机上实现可靠的 3D 重建例程。

現實世界的實施

基於無人機的航空勘測產生建築和採礦場地的地形圖和體積估計

將考古遺址和博物館文物數位化為高保真 3D 模型以供保存和研究

為電玩遊戲和電影視覺效果創建逼真的 3D 掃描資產(岩石、牆壁、道具)

法醫犯罪現場和事故重建,從照片中捕獲精確可測量的 3D 記錄

實施模式

攝影測量實踐

基於無人機的航空勘測產生建築和採礦場地的地形圖和體積估計。

基于无人机的航空勘测为建筑和采矿场生成地形图和体积估计当团队预先定义质量阈值、为边缘情况保留人工升级路径并跟踪一段时间内的生产力增益和错误成本时,通常会得到更好的结果。

攝影測量實踐

將考古遺址和博物館文物數位化為高保真 3D 模型,以供保存和研究。

将考古遗址和博物馆文物数字化为高保真 3D 模型以进行保存和研究当团队预先定义质量阈值、为边缘情况保留人工升级路径并跟踪一段时间内的生产力增益和错误成本时,通常会获得更好的结果。

攝影測量實踐

為電玩遊戲和電影視覺效果創建逼真的 3D 掃描資產(岩石、牆壁、道具)。

为视频游戏和电影视觉效果创建逼真的 3D 扫描资产(岩石、墙壁、道具) 当团队预先定义质量阈值、为边缘情况保留人工升级路径并跟踪一段时间内的生产力提升和错误成本时,通常会获得更好的结果。

攝影測量實踐

法醫犯罪現場和事故重建,從照片中捕獲精確的可測量 3D 記錄。

法医犯罪现场和事故重建,从照片中捕获精确的可测量 3D 记录当团队预先定义质量阈值、为边缘情况保留人工升级路径并跟踪一段时间内的生产力增益和错误成本时,通常会获得更好的结果。

風險與防護欄

!

如果出處不明,肖像權和同意可能會成為法律風險。

!

模型表現可能因光照、人口統計和環境的不同而有所不同。

!

除非監控置信閾值,否則誤報可能會被忽略。

實施路線圖

1

定義精確度、召回率和錯誤成本的接受標準。

定義精確度、召回率和錯誤成本的接受標準。將每個步驟視為證據門:如果不符合標準,則暫停推出,縮小差距,然後再擴大使用。

2

使用符合實際生產條件的數據進行測試。

使用符合實際生產條件的數據進行測試。將每個步驟視為證據門:如果不符合標準,則暫停推出,縮小差距,然後再擴大使用。

3

為低置信度或高影響力的預測添加人工審核。

為低置信度或高影響力的預測添加人工審核。將每個步驟視為證據門:如果不符合標準,則暫停推出,縮小差距,然後再擴大使用。

4

追蹤模型漂移並在相機或資料集變更後重新驗證。

追蹤模型漂移並在相機或資料集變更後重新驗證。將每個步驟視為證據門:如果不符合標準,則暫停推出,縮小差距,然後再擴大使用。

不斷探索