Researchers create 3D interactive digital room from simple video
10 months ago
- #AI
- #Robotics
- #3D Modeling
- 康奈尔大学研究人员开发出AI驱动的技术流程，可通过简单视频创建交互式3D数字孪生体
- 这项名为DRAWER的技术支持用户在数字空间与物体互动，适用于电子游戏开发和机器人训练
- DRAWER融合多种AI模型，能将iPhone拍摄的日常视频转化为逼真可交互的3D场景
- 该框架整合了渲染精美图像、精确尺寸测量以及确定场景可动部件的多重技术方法
- 研究人员通过创建游戏和在厨房数字孪生体中训练机械臂，展示了DRAWER的应用潜力
- 未来目标包括扩展DRAWER处理柔性物体、完整建筑物及户外空间的能力，用于城市设计和农业领域
- 该项目获得英特尔、Meta、DARPA等多家科技公司和政府机构的资金支持