NVIDIA开源Audio2Face模型及SDK

发布时间:2026-02-08 01:30:02

9月25日,NVIDIA将开源Audio2Face模型与SDK,让所有游戏和3D应用开发者都可以构建并部署带有先进动画的高精度角色。NVIDIA将开源Audio2Face的训练框架,任何人都可以针对特定用例对现有模型进行微调与定制。

NVIDIA Audio2Face通过生成式AI驱动的实时面部动画与嘴形同步,加速写实数字角色的创作流程。Audio2Face利用AI根据音频输入生成逼真的面部动画。这项技术通过分析音素、语调等声学特征,创建动画数据流,并映射至角色的面部表情。这些动画数据既可用于离线渲染预设的资产,也可实时传输到动态的、由AI驱动的角色,实现准确的嘴形同步与情感表达。

Audio2Face模型已广泛应用于游戏、媒体娱乐以及客户服务等行业。众多独立软件厂商ISV与游戏开发商都在其应用中采用了Audio2Face。游戏开发者包括Codemasters、GSC Game World、网易、完美世界。ISV包括Convai、Inworld AI、Reallusion、Streamlabs和UneeQ。

以下是开源工具的完整列表,更多详情请查看面向游戏开发的 NVIDIA ACE。

NVIDIA开源Audio2Face模型及SDK

关于NVIDIA

NVIDIA(NASDAQ: NVDA)是加速计算领域的全球领导者。

相关信息栏目

《明末:渊虚之羽》新截图 女主头戴毛绒头套手持战斧

今日(7月11日)《明末:渊虚之羽》官方分享游戏新截图,展示了女主头戴毛绒头套的形象。并附文:“从沉重战斧到灵巧双刃,每种武器都会改变你的战斗风格。《《明末》哪些武器最吸引你?”《明末:渊虚之羽》将于

2026-02-08 06:30:02

《百日战纪 -最终防卫学园-》让厂商成功度过破产危机

在Too Kyo Games推出《百日战纪 -最终防卫学园-》之前,联合创意总监小高和刚曾坦言,工作室急需这款游戏取得成功——否则,为推进项目而背负的巨额贷款可能导致公司破产。如今,经过两个半月的热

2026-02-08 05:45:02

你选谁?《羊蹄山之魂》英配日配引热议

近日,游戏博主LearningTheLaw在社交媒体上发了一张对比图,引发玩家热议。图中分别是《羊蹄山之魂》的英配和日配声优。LearningTheLaw在推文中表示:“《羊蹄山之魂》的日语配音声优是

2026-02-08 02:45:02

Embracer Group旗下工作室Eidos-Montréal进一步裁员 最多达75人

Eidos-Montréal是Embracer旗下的工作室(曾在SE旗下负责开发《漫威银河护卫队》等游戏),目前正在为微软的《神鬼寓言》重启版提供支持工作。近日该工作室宣布由于“没有能力将他们(工作室

2026-02-08 02:15:02

《新世界》停更后 亚马逊又砍掉了《指环王》网游

据本周一名被裁掉的亚马逊前员工的履历,,亚马逊计划的《指环王》网游已经被取消。先前已有报道称亚马逊已经停更了网游《新世界》后续的内容开发。这些都是该公司本周重大裁员的一部分。这名员工在领英上写道:“今

2026-02-08 01:15:02

大阪环球影城《生化危机》真人表演即将举行

近日大阪环球影城官方宣布,将于9月5日-11月3日期间举行“生化危机:英雄之夜”真人表演秀。“生化危机:英雄之夜”曾在去年举办过,现在该活动将正式回归,主要聚焦于浣熊市的场景。玩家们可以体验由里昂、吉

2026-02-07 23:45:02