告别模糊!英伟达发布ViPE引擎 为空间AI提供高精度3D数据

  发布时间:2026-11-16   作者:玩站小弟   我要评论
谷歌霸屏推广业务【tg:seogoogle987】。

近日,英伟达与多伦多大学、向量研究所及德克萨斯大学奥斯汀分校的研究团队联合发布了一项名为 **ViPE告别(视频姿势引擎)**的突破性技术。ViPE 旨在解决3D几何感知领域的关键挑战,即如何从复杂的自然视频中高模糊效且精准地提取3D信息。

技术核心与应用

3D几何感知是自动驾驶、虚拟现实(VR)和增强现实(AR)等多种现代技术!英的核心。ViPE 创新性地从原始视频中快速获取相机的固有特性、运动信息以及高精度的深度图,为这些空间AI系伟达统提供了可靠的数据基础。

ViPE 具有强大的适应性,能够处理各种场景和相机类型,包括动态自拍视频、电影镜头、发布行车记录仪以及针孔、广角和360°全景相机模型。

工作原理与性能

研究团队采用了一种多重约束的混合方法来确Vi保 ViPE 的高精度:

  • 束调整:在关键帧上进行密集束调整,以估算相机参数、姿态和深度图。

  • 密集流与稀疏点约PE束:引入 DROID-SLAM 网络的密集流约束和 cuvslam 库的稀疏点约束,确保稳健性和亚像素精度。

  • 深度正引擎则化:利用单目度量深度网络,解决尺度模糊性和一致性问题,生成高分辨率且时间一致的深度信息。

测试结果显示,Vi 为PE 在多个基准测试中的表现均优于现有技术(如 MegaSAM、VGGT 和 MASt3R-SLAM)。它不仅在姿空间态和内在函数精度方面表现出色,还能在单个GPU上以每秒3到5帧的速度稳定运行,并成功生成了尺度一致的轨AI迹。

为推动空间AI领域的进一步研究,该团队还发布了一个包含约9600万帧标注数据的大规模数据集,为未来的技提供术探索提供了宝贵资源。ViPE的发布不仅标志着3D几何感知技术的一次重要进步,也为未来的空间AI应用高精奠定了坚实的基础。

地址:https://research.nvidia.com/labs/toronto-a度3i/vipe/

  • Tag:

相关文章

  • 标签: 演语科技 LiblibAI 星流 LibTV

    云梦级6月18日云梦级消息,近日,演语科技(Evoken)宣布近半年内完成近3亿美元B+轮融资,投后估值超过20亿美元。本轮融资由Granite Asia、顺为资本等联合领投,HT Investmen
    2026-11-16
  • 标签: 中国移动

    5月8日,在2026移动云大会主论坛上,中国移动发布移动模型服务平台MoMA。平台接入超300款业界主流AI模型,模型丰富度行业领先,首创Token集约化运营模式,推动AI像水和电一样“随时可得、随处
    2026-11-16
  • 标签: 国家金融监督管理总局 个人贷款业务明示综合融资成本规定 助贷机构 网贷利率监管

    国家金融监督管理总局、中国人民银行公告《个人贷款业务明示综合融资成本规定》(以下简称《规定》)于3 月 15 日正式发布,2026 年 8 月 1 日起施行。 据中国新闻周刊报道,还有多家知名助贷机构
    2026-11-16
  • 谷歌和高通宣布将为Android手机提供4年软件更新支持

    北京时间12月17日凌晨消息,谷歌和高通周三宣布,从配备骁龙888芯片的Android手机开始,这两家公司将为Android操作系统版本和安全更新提供为期4年的支持。 谷歌此前推出Project Tr
    2026-11-16
  • 从视频片段中推断楼层平面图 新AI研究令人大开眼界

    平面布置图对于可视化空间、规划路线和沟通建筑设计非常有用。例如,一个进入新建筑的机器人可以使用平面图快速感知总体布局。创建平面图通常需要一个完整的布局,这样3D传感器和摄像机就可以捕捉到整个空间。 1
    2026-11-16
  • 标签: 豪威集团 港交所上市 基石投资者 半导体设计

    云梦级1月1日云梦级消息,豪威集成电路(集团)股份有限公司(简称:“豪威集团”,股票代码:“00501”)日前开启招股,准备2026年1月12日在港交所上市。豪威集团基石投资者分别为Wildlife
    2026-11-16

最新评论