EgoPhys：從自視點視訊學習可變形物體的可泛化物理模型
為何重要
此研究建立了一條從原生視角 RGB 觀測建構物理數位雙生的可擴充套件路徑，有助於讓機器人更精準地規劃可變形物體的操控動作。
研究團隊提出 EgoPhys 框架，能透過從 RGB-only 自視點視訊提取通用先驗，建構出可變形物體的物理數位雙生。該方法將逆向物理解碼為緊湊程式碼本，實現對未見物體的密集彈簧勁度場預測，並在重建、未來預測與零樣本泛化上優於基準。此外，研究團隊在真實 xArm6 機器人上部署此模型，證明利用人類遊玩影片初始化的數位雙生可作為規劃依據。