NVIDIA开源Audio2Face模型SDK，打造个性化游戏角色语音体验

9月25日，NVIDIA将发布Audio2Face模型与SDK，开放给所有游戏和3D应用开发者，以构建和部署高精度角色，这些角色将具备先进的动画效果。Audio2Face的训练框架也将开源，允许开发者根据特定需求对模型进行微调和定制。 借助生成式AI，Audio2Face能够实现实时面部动画与嘴形同步，极大地提升了写实数字角色的创作效率。该技术通过分析音素、语调等声学特征，生成逼真的面部动画，并将其映射到角色的表情上。这些动画数据既适用于离线渲染，也能实时传输到由AI驱动的角色，确保嘴形同步和情感表达的准确性。 Audio2Face模型已在游戏、媒体娱乐和客户服务等多个行业得到广泛应用。众多独立软件厂商和游戏开发商，如Codemasters、GSC Game World、网易、完美世界等，以及Convai、Inworld AI、Reallusion、Streamlabs和UneeQ等ISV，都在其产品中采用了Audio2Face。 以下是开源工具的详细列表，更多关于NVIDIA ACE的信息，请访问NVIDIA官网。 关于NVIDIA NVIDIA（纳斯达克：NVDA）是全球加速计算领域的领军企业。