科幻照進現實?Open-TeleVision支持遠程操控機器人
加州大學聖地亞哥分校與麻省理工學院的合作項目“Open-TeleVision”致力於打造遠程操作機人的新型開源操作系統。該系統利用V.R頭顯,如Vision Pro、Quest等,實現了從遙遠距離精準操控機器人及物體的能力,其沉浸式體驗和順滑操控直追電影《阿凡達》中的先進科技。其優化的適配性,無需額外設備,通過頭顯直接感知空間深度與立體視覺,確保精細控制。藉助前瞻性的技術亮點——視覺中心區域處理、活動頸部模擬聚焦方式,操作人彷彿掌控一切。通過逆運動學算法與Web平臺接入模式,簡化高效率遠程交互。解決自由度匹配挑戰與通過數據採集實現機器人自學習的解決方案,提升系統跨場景應用的可靠性和泛化能力。這一創新爲遠程操作與人工智能交互探討提供了新的見解與應用場景。更多詳細信息可訪問 GitHub 地址:[https://github.com/Improbable-AI/VisionProTeleop](https://github.com/Improbable-AI/VisionProTeleop)。