3D視覺重建技術DUSt3R:輕鬆基於2D圖片生成3D模型
DUSt3R是一款革命性軟件,致力於在沒有任何相機參數信息的情況下,僅通過圖片生成三維模型。它採用“點圖迴歸”的策略,能有效處理單張及多張圖片的任意數量,用類似拼圖的邏輯,將視覺圖像高效重組爲3D場景。此技術獨特之處在於應用了Transformer網絡,使得圖像處理更爲高效精準。DUSt3R還能提供深度信息,展現物體遠近,同時恢復像素匹配及相機信息,達到前所未有的視覺體驗。在多種視覺任務評估中,DUSt3R均表現出亮眼成績,特別是在對單張圖片深度估計及多張圖片相對位置估計上,均創下了最優異記錄。