品玩

科技创新者的每日必读

打开APP
关闭

Meta 联手 Huggingface 等机构,推出 AI 基准测试 GAIA

2023年12月8日

品玩12月8日讯,据 Arxiv 面显示,Meta近日联手 Huggingface和 AutoGPT等机构,推出了一款名为 GAIA 的基准测试,可用于对通用 AI 助手性能进行测试。

作者表示,GAIA测试涵盖了一系列现实世界的问题,需要AI助手具备推理、多模态处理、网络浏览和一般工具使用能力等基本技能。GAIA 的问题对人类来说很简单,但对大多数先进的 AI 来说具有挑战性。

研究显示,人类受访者的回答正确率为 92%,而先进的 AI 助手回答正确率只有 15%。

取消 发布

下载品玩App,比99.9%的人更先知道关于「META」的新故事

下载品玩App

比99.9%的人更先知道关于「META」的新故事

iOS版本 Android版本
立即下载
AI阅读助手
以下有两点提示,请您注意:
1. 请避免输入违反公序良俗、不安全或敏感的内容,模型可能无法回答不合适的问题。
2. 我们致力于提供高质量的大模型问答服务,但无法保证回答的准确性、时效性、全面性或适用性。在使用本服务时,您需要自行判断并承担风险;
感谢您的理解与配合
该功能目前正处于内测阶段,尚未对所有用户开放。如果您想快人一步体验产品的新功能,欢迎点击下面的按钮申请参与内测 申请内测