NVIDIA开源Audio2Face模型及SDK

发布时间:2026-02-21 04:00:03

9月25日,NVIDIA将开源Audio2Face模型与SDK,让所有游戏和3D应用开发者都可以构建并部署带有先进动画的高精度角色。NVIDIA将开源Audio2Face的训练框架,任何人都可以针对特定用例对现有模型进行微调与定制。

NVIDIA Audio2Face通过生成式AI驱动的实时面部动画与嘴形同步,加速写实数字角色的创作流程。Audio2Face利用AI根据音频输入生成逼真的面部动画。这项技术通过分析音素、语调等声学特征,创建动画数据流,并映射至角色的面部表情。这些动画数据既可用于离线渲染预设的资产,也可实时传输到动态的、由AI驱动的角色,实现准确的嘴形同步与情感表达。

Audio2Face模型已广泛应用于游戏、媒体娱乐以及客户服务等行业。众多独立软件厂商ISV与游戏开发商都在其应用中采用了Audio2Face。游戏开发者包括Codemasters、GSC Game World、网易、完美世界。ISV包括Convai、Inworld AI、Reallusion、Streamlabs和UneeQ。

以下是开源工具的完整列表,更多详情请查看面向游戏开发的 NVIDIA ACE。

NVIDIA开源Audio2Face模型及SDK

关于NVIDIA

NVIDIA(NASDAQ: NVDA)是加速计算领域的全球领导者。

相关热点资讯

Xbox宣布参加科隆游戏展!Xbox Fan Fest同步回归

夏季发布会结束之后,Xbox现在正展望将于8月20日至24日在德国科隆举行的科隆游戏展。并且除了确认参展外,它还透露Xbox Fan Fest将于8月20日回归。目前为止,Xbox已确认《战争机器:重

2026-02-21 05:30:03

《蓝色协议:星痕共鸣》亮相TGS 独特风格打造精致都市

在2025年东京电玩展上,基于万代南梦宫“PROJECT SKY BLUE”IP世界观下,由上海宝可拉所开发、腾讯发行的《蓝色协议:星痕共鸣》展示了最新试玩版本。据Fami通现场报道,这款沿用《蓝色协

2026-02-21 03:30:03

开发者回应《马车:世界》牛牛吃汉堡质疑 原材料是机密

包括游戏在内,媒介都不该传扬违背人伦道德的东西,这点早已经成为世界性的共识,日前包括PETA组织(维护动物权益组织)在内,有不少网友质疑任天堂《马车:世界》中新可爱牛牛角色吃汉堡是一种令人作呕的“食用

2026-02-21 03:15:03

外媒吐槽《密特罗德究极4》同伴马尔斯:讨厌到爆

《密特罗德究极4:穿越未知》中,有数名联邦兵也被传送到该行星。玩家可根据求救信号去营救他们,并在必要的时候一同作战。近日多家外媒发布本作的预览评测,对其质量给予很高评价,但都吐槽了萨姆斯的同伴马尔斯・

2026-02-21 01:45:03

《明末:渊虚之羽》玩家精美截图 性感女主唯美风景

《明末:渊虚之羽》玩家口碑正在回暖。目前该作在Steam上好评率达到49%,总评为“褒贬不一”。国内外不少玩家将自己拍摄的游戏照片在网上分享,一起来欣赏下吧!女主无常真美如画。

2026-02-21 01:15:03

前R星元老新作《MindsEye》理念:15小时重温线性电影体验

由Rockstar前核心成员组建的BARB工作室新作《MindsEye》定档2025年6月6日。本作试图以精炼的15小时电影化叙事重塑玩家体验。现其助理游戏总监Adam Whiting透露,他们希望为

2026-02-21 00:00:03