NVIDIA开源Audio2Face动画模型 为游戏和应用打造更逼真的3D角色
英伟达现已开源Audio2Face,这是一款能根据音频输入为3D虚拟人生成面部动画的AI工具。此举意味着开发者现可使用该工具及其底层框架,来为游戏和应用打造更逼真的3D角色。
Audio2Face的工作原理是分析语音的“声学特征”,从而生成动画数据,并映射至3D虚拟人的表情和唇部动作。英伟达表示,开发者除了能用该工具为预设内容制作3D角色,还可为直播场景生成动画。
目前,已有开发者在游戏如《切尔诺贝利人2:禁区》和《异形:外来入侵进化版》中应用Audio2Face技术。
除了开放模型和软件开发工具包,英伟达还公布了训练框架,允许用户根据不同应用场景进一步调整和训练模型。
了解更多:
https://developer.nvidia.com/blog/nvidia-open-sources-audio2face-animation-model/