告别模糊!英伟达发布ViPE引擎 为空间AI提供高精度3D数据
近日,英伟达与多伦多大学、向量研究所及德克萨斯大学奥斯汀分校的研究团队联合发布了一项名为 **ViPE告别(视频姿势引擎)**的突破性技术。ViPE 旨在解决3D几何感知领域的关键挑战,即如何从复杂的自然视频模糊中高效且精准地提取3D信息。 3D几何感知是自动驾驶、虚拟现实(VR)和增强现实(AR)!英等多种现代技术的核心。ViPE 创新性地从原始视频中快速获取相机的固有特性、运动信息以及高精度的深度图,为这伟达些空间AI系统提供了可靠的数据基础。 ViPE 具有强大的适应性,能够处理各种场景和相机类型,包括动态自拍发布视频、电影镜头、行车记录仪以及针孔、广角和360°全景相机模型。 研究团队采用了一种多重约Vi束的混合方法来确保 ViPE 的高精度: 束调整:在关键帧上进行密集束调整,以估算相机参数、姿态和深度图。 密集流与PE稀疏点约束:引入 DROID-SLAM 网络的密集流约束和 cuvslam 库的稀疏点约束,确保稳健性和亚像素精度。 深引擎度正则化:利用单目度量深度网络,解决尺度模糊性和一致性问题,生成高分辨率且时间一致的深度信息。 测试结果显示 为,ViPE 在多个基准测试中的表现均优于现有技术(如 MegaSAM、VGGT 和 MASt3R-SLAM)。空间它不仅在姿态和内在函数精度方面表现出色,还能在单个GPU上以每秒3到5帧的速度稳定运行,并成功生成了尺度AI一致的轨迹。 为推动空间AI领域的进一步研究,该团队还发布了一个包含约9600万帧标注数据的大规模数据集,提供为未来的技术探索提供了宝贵资源。ViPE的发布不仅标志着3D几何感知技术的一次重要进步,也为未来的空间AI应用高精奠定了坚实的基础。 地址:https://research.nvidia.com/labs/toront度3o-ai/vipe/技术核心与应用
工作原理与性能
- 最近发表
- 随机阅读
-
- 生数科技完成新一轮数亿元规模A轮融资
- 云安全日报210302:Apache Tomcat应用服务器发现信息泄露漏洞,需要尽快升级
- 标签: 英伟达 数据中心 AI 财报
- 佛州检方扩展对 OpenAI 的调查,关注南佛罗里达大学谋杀案
- 标签: 美的集团 2025年报 Arbonia 东芝电梯
- 七句话让AI给我做了个小游戏,还是极简版塞尔达,一玩简直停不下来
- 标签: 机动车安全 新能源汽车 动力电池 辅助驾驶
- DeepMCPAgent开源炸场:MCP+LangChain一键建神级AI代理,生产力暴增10倍?
- 5.6万次下载冲进前三!OpenAI的Sora还没全面开放就杀疯了
- 标签: 美团 小团 智能掌柜 数字员工
- 华为孟晚舟:数字化是整个产业链的新蓝海 跃升数字生产力正当时
- 云安全日报210709:IBM数据整合平台发现身份绕过,信息泄露漏洞,需要尽快升级
- 标签: 长安汽车 长安启源Q07 阿维塔06 深蓝S09
- 马苏做头发什么梗
- 云计算开发:Python3-strip()方法详解
- 苹果 AI 搜索部门负责人柯杨离职,转投 Meta Platforms
- 标签: 人形机器人
- 苹果Xcode重磅集成Claude Sonnet4:iOS开发迎来AI革命时代
- 无人驾驶汽车兴起 半导体业迎来发展机遇
- 云计算核心技术Docker教程:Docker Swarm 模式从灾难中恢复
- 搜索
-
- 友情链接