品玩

科技创新者的每日必读

打开APP
关闭

MiniMax开源代码智能体评测基准OctoCodingBench

21小时前

品玩1月15日讯,人工智能公司MiniMax正式宣布开源其研发的代码智能体系统性评测集——OctoCodingBench。该评测集是业内首个专门面向Coding Agent(代码智能体)设计的综合性评估基准。

根据评测结果,在关键指标"过程合规"方面,部分开源模型表现突出,已快速逼近甚至在某些场景下超越了部分闭源模型的水平。这一现象表明,在人工智能向Agent(智能体)时代演进的过程中,"数据与评测范式"正逐渐取代单一模型性能,成为行业竞争的新焦点。

此次开源举措将为学术界和产业界提供统一的评估标准,有望进一步推动代码智能体技术的透明化发展与性能优化。

取消 发布

下载品玩App,比99.9%的人更先知道关于「MiniMax」的新故事

下载品玩App

比99.9%的人更先知道关于「MiniMax」的新故事

iOS版本 Android版本
立即下载
AI阅读助手
以下有两点提示,请您注意:
1. 请避免输入违反公序良俗、不安全或敏感的内容,模型可能无法回答不合适的问题。
2. 我们致力于提供高质量的大模型问答服务,但无法保证回答的准确性、时效性、全面性或适用性。在使用本服务时,您需要自行判断并承担风险;
感谢您的理解与配合
该功能目前正处于内测阶段,尚未对所有用户开放。如果您想快人一步体验产品的新功能,欢迎点击下面的按钮申请参与内测 申请内测