品玩

科技创新者的每日必读

打开APP
关闭

腾讯元宝发布PrismAudio模型,高效实现视频与环境音的精准同步生成

5小时前

品玩3月24日讯,腾讯元宝推出创新框架PrismAudio,致力于解决视频生成高保真环境音的难题。该框架要求生成的声音在语义、时序、美学和空间四个维度上与视频内容严格对齐,代表了该领域的最新研究进展。

PrismAudio的核心在于融合“思维链”与强化学习,首创“先规划,后执行”的生成范式。模型首先为四个维度分别生成详细的音频“行动指南”,再基于综合规划生成音频。生成后,由四个独立的打分器进行多维度评估,并通过创新的Fast-GRPO算法进行高效强化学习优化,其训练效率约为传统方法的三倍。

实验表明,在VGGSound与AudioCanvas等权威测试集上,PrismAudio在多项关键指标上均超越了MMAudi与ThinkSound等现有最佳模型。该模型参数量为5.18亿,生成9秒音频仅需0.63秒,兼具高性能与高效率。此项工作已被ICLR 2026接收。

取消 发布

下载品玩App,比99.9%的人更先知道关于「腾讯」的新故事

下载品玩App

比99.9%的人更先知道关于「腾讯」的新故事

iOS版本 Android版本
立即下载
AI阅读助手
以下有两点提示,请您注意:
1. 请避免输入违反公序良俗、不安全或敏感的内容,模型可能无法回答不合适的问题。
2. 我们致力于提供高质量的大模型问答服务,但无法保证回答的准确性、时效性、全面性或适用性。在使用本服务时,您需要自行判断并承担风险;
感谢您的理解与配合
该功能目前正处于内测阶段,尚未对所有用户开放。如果您想快人一步体验产品的新功能,欢迎点击下面的按钮申请参与内测 申请内测