资讯
中国信通院启动“方升”智能体基准测试任务征集工作
📋总体概括
中国信通院宣布启动「方升」智能体基准测试任务的社会公开征集工作。「方升」基准采用分层测试框架,覆盖基础能力、典型场景和复杂综合任务三个层面,推动智能体评测从单一能力测量向综合能力评估、过程分析和问题诊断方向拓展。信通院希望通过公开征集持续汇聚高质量任务资源,完善测试任务、测试环境和评价方法,提升基准的专业性与产业适用性,为国内智能体产业建立统一的评测标尺。
⚡关键信息
- ▸中国信通院启动「方升」智能体基准测试任务公开征集,面向全社会征集高质量任务资源
- ▸「方升」采用分层测试框架,覆盖基础能力、典型场景和复杂综合任务三个层级
- ▸评测方向从单纯能力测量拓展至综合能力测量、过程分析和问题诊断
- ▸征集目的在于完善测试任务、测试环境和评价方法,增强基准专业性与产业适用性
🔥犀利点评
大模型跑分卷到头之后,评测的主战场正转向智能体,信通院此时补位,本质是想抢国内智能体评测的话语权。但评测体系的老问题依然没解:任务由谁出、环境是否可信、结果能否复现,征集任务容易,立起公信力难。若只是堆任务清单而无透明机制,方升大概率沦为又一个可被刷的榜单。
📰 相关资讯(与本文相关的其他资讯)
本文由本站自动聚合,以下为原始来源:前往 36氪快讯 阅读全文 →