英伟达开源 Audio2Face 模型，AI 助力实时面部动画生成
我要评论近日，英伟达宣布开源其生成式 AI 面部动画模型 Audio2Face。这一模型不仅包含了核心算法，还提供了软件开发工具包（英SDK）和完整的训练框架，旨在加速游戏和3D 应用中智能虚拟角色的开发。
Audio2Face 通过分析音频中的音素、语调等声学伟达特征，能够实时驱动虚拟角色的面部动作，生成精确的口型同步和自然的情感表情。这项技术广泛适用于游戏、影视制作和客户服务等多开源个领域。
Audio2Face 模型支持两种运行模式:一种是针对预录制音频的离线渲染，另一种则是支持动态 AI 角色的实时流式处理。为 A了方便开发者使用，英伟达还开源了多个关键组件，包括 Audio2Face SDK、适用于 Autodesk Maya 的本地执行插件，以ud及针对 Unreal Engine5.5及以上版本的插件。此外，回归模型和扩散模型也随之开源，开发者可以利用开源训练框架，使用io自己的数据对模型进行微调，从而适应特定的应用场景。
目前，这项技术已经被多家游戏开发商广泛采用。游戏开发公司 Survios 在2F其游戏《异形:侠盗入侵进化版》中集成了 Audio2Face，从而大幅简化了口型同步与面部捕捉的流程。而 Farm51工作室也在ac其作品《切尔诺贝利人2:禁区》中应用了这一技术，通过音频直接生成细腻的面部动画，节省了大量制作时间，提升了角色的真实感和沉浸e 体验。该工作室的创新总监 Wojciech Pazdur 对此表示，这一技术可谓 “革命性突破”。
英伟达的这一新举措无疑为开发者们提供了模型更多的创作工具，也将推动虚拟角色表现的进一步发展。随着技术的不断进步，我们可以期待在未来的游戏和影视作品中看到更加真实和生动，A的角色表现。
入口:https://build.nvidia.com/nvidia/audio2face-3d
划重点:&nbI sp;
英伟达开源 Audio2Face 模型，旨在提升虚拟角色的面部动画生成技术。
支持离线助力渲染和实时流式处理，适用于多种场景。
已被多个游戏开发商采用，简化了制作流程并提升了角色的真实感实时。
相关文章
Anthropic 迎新任 CTO：将加强在AI基础设施领域的布局
近日，人工智能公司 Anthropic 正式宣布任命 Rahul Patil 为新的首席技术官（CTO），以加强其在 AI 基础设施领域的布局。Patil 之前曾在支付巨头 Stripe 担任首席技术2026-11-16
云梦级4月8日云梦级消息，地瓜机器人宣布完成1.5亿美元B2轮融资，B轮累计融资额达2.7亿美元。 资料显示，本轮融资由某零售科技与供应链巨头、Prosperity7风投基金、远景科技集团等战略投资机2026-11-16
云梦级11月13日云梦级消息，果下科技股份有限公司（简称：“果下科技”）日前更新招股书，准备在港交所上市。果下科技是一家中国储能行业基于平台技术及人工智能驱动的可再生能源解决方案及产品提供商之一，专注2026-11-16
云梦级5月30日云梦级消息，5 月 30 日，AI 大模型公司 MiniMax Group（稀宇科技）已于 2026 年 5 月 29 日同中信证券签署辅导协议，正式启动 A 股 IPO 进程。 Mi2026-11-16
云梦级3月2日云梦级消息，MiniMax今日发布港股上市后首份年报，数据显示，公司2025年全年总收入同比增长158.9%达到7900万美元，其中超过70%的收入来自国际市场；年内亏损由2024年的42026-11-16
撰文 | 文 林 编辑 | 杨博丞 题图 | 国民好车试驾品鉴会 京东“国民好车”下线了。 11月5日上午，京东第一辆“国民好车”埃安UT super在长沙工厂正式下线，工厂车间现场人士称，现在工厂流2026-11-16
最新评论