品玩

科技创新者的每日必读

打开APP
关闭

Meta 公布 audio2photoreal AI 框架,输入配音文件即可生成人物对话场景

2024年1月11日

品玩1月10日讯,据AI at Meta 官方消息,Meta公布了一项名为 audio2photoreal 的 AI 框架,该框架能够生成一系列逼真的 NPC 人物模型,并借助现有配音文件自动为人物模型“对口型”“摆动作”。

官方研究报告指出,Audio2photoreal 框架在接收到配音文件后,首先会生成一系列 NPC 模型,之后利用量化技术及扩散算法生成模型用动作,其中量化技术为框架提供动作样本参考、扩散算法用于改善框架生成的人物动作效果。

对照实验中有 43% 的评估者对框架生成的人物对话场景感到“强烈满意”,因此研究人员认为Audio2photoreal 框架相对于业界竞品能够生成“更具动态和表现力”的动作。据悉,研究团队目前已经在 GitHub 公开了相关代码和数据集。

取消 发布

下载品玩App,比99.9%的人更先知道关于「AI 框架」的新故事

下载品玩App

比99.9%的人更先知道关于「AI 框架」的新故事

iOS版本 Android版本
立即下载
AI阅读助手
以下有两点提示,请您注意:
1. 请避免输入违反公序良俗、不安全或敏感的内容,模型可能无法回答不合适的问题。
2. 我们致力于提供高质量的大模型问答服务,但无法保证回答的准确性、时效性、全面性或适用性。在使用本服务时,您需要自行判断并承担风险;
感谢您的理解与配合
该功能目前正处于内测阶段,尚未对所有用户开放。如果您想快人一步体验产品的新功能,欢迎点击下面的按钮申请参与内测 申请内测