MIT Technology Review · AI· Grace Huckins·· 2 小时前
AI 领域最易被误解的图表迎来重大更新:METR 发布新版 time horizon 报告
The most misunderstood graph in AI just got a major update
AI 导读
评测机构 METR 更新了其广受关注也常被误读的 time horizon 图表,新增更长耗时和更开放式的任务。旧版显示前沿模型可完成的任务时长每 4 个月翻倍,但新任务中模型表现不佳:在为 METR 设计 AI 评测的任务里,没有任何模型的成果被认为可用于研究,在为哲学论证打分的任务上也低于人类水平。
来源:MIT Technology Review · AI · technologyreview.com