品玩

科技创新者的每日必读

打开APP
关闭

Meta 推出 V-JEPA 模型,利用 AI 高效补充视频受遮蔽部分

4月10日

品玩2月18日讯,据 Meta 官网显示,Meta 推出了一款名为“V-JEPA”的视频预测模型。Meta 首席 AI 科学家 Yann LeCun 在 2022 年就推出了 JEPA(Joint Embedding Predictive Architectures)模型架构。

据介绍,相关 JEPA 架构及 I-JEPA / V-JPA 模型主打“预测能力”,号称可以以“人类理解”的方式,利用抽象性高效预测生成图片 / 视频中被遮蔽的部分。

研究人员使用一系列经过遮蔽处理的特定视频训练 I-JEPA / V-JEPA 模型,要求模型利用“抽象方式”填充视频中缺失的内容,从而让模型在填充间学习场景,进一步预测未来的事件或动作,进而达到对世界更深层次的理解。

研究人员表示,这种训练方法能够让模型专注于影片的高层次概念,而“不会钻牛角尖处理下游任务不重要的细节”,研究人员举例“人类观看内含树木的影片时,不会特别关心树叶的运动方式”,因此采用这种抽象概念的模型,相对于业界竞品效率更佳。

研究人员同时提到,V-JEPA 采用一种名为“Frozen Evaluations”的设计结构,即“模型在预训练之后,核心部分不会再改变”,因此只需要在模型之上添加小型专门层即可适应新任务,具有更高普适性。

取消 发布

下载品玩App,比99.9%的人更先知道关于「META」的新故事

下载品玩App

比99.9%的人更先知道关于「META」的新故事

iOS版本 Android版本
立即下载
AI阅读助手
以下有两点提示,请您注意:
1. 请避免输入违反公序良俗、不安全或敏感的内容,模型可能无法回答不合适的问题。
2. 我们致力于提供高质量的大模型问答服务,但无法保证回答的准确性、时效性、全面性或适用性。在使用本服务时,您需要自行判断并承担风险;
感谢您的理解与配合
该功能目前正处于内测阶段,尚未对所有用户开放。如果您想快人一步体验产品的新功能,欢迎点击下面的按钮申请参与内测 申请内测