AI数学的最后一道高墙,塌了!GPT-6 Astra刷穿FrontierMath Tier 4 FrontierMath Tier 4,饱和了 henry 发自 凹非寺 量子位 | 公众号 QbitAI 刚刚,最后一道FrontierMath Tier 4难题,被GPT-6 Astra攻破了。 至此,这套曾经被视作大模型数学噩梦的研究级测试,所有题目都已经至少被AI成功解出过一次。 Epoch AI也正式给它下了结论,FrontierMath Tier 4,饱和了。 虽然从上面的图里看,Astra还没有直接干到100%,OpenAI自己公布的成绩也是97.6%。 但按照Epoch的算法,“全部解出”指的是把不同模型、不同时间的尝试累积起来以后,Tier 4里的每一道题都已经有过成功解答。 而Astra干掉的,正是此前唯一还没有被AI攻破的那一道。 (简单理解就是Astra可能在某次测试中出错了,但它对的那道题是此前没被解出来的)
相关动态
沿时间看主要节点
GPT-6 Astra解出FrontierMath Tier 4最后一题, Epoch AI宣布该层饱和
李飞飞参与团队发布 ESI-Bench: 前沿AI在3D空间中暴露“动作盲视”
斯坦福大学主导、李飞飞参与的研究团队发布基准 ESI-Bench,记录所有受测前沿多模态AI模型的一项具体可测失败:当模型必须在3D环境中主动移动,而非解读预先构好的图像时,最先进系统会持续选错动作、跳过能纠正错误的视角,并以高置信度坚持错误答案;论文称之为“动作盲视”。该基准含10个任务类别、29个子类别、约3000项任务,构建在 OmniGibson 模拟器和斯坦福 BEHAVIOR-1K 数据集上,并围绕哈佛发展心理学家 Elizabeth Spelke 提出的核心知识系统组织。它取消以往基准的“神谕观测”假设,要求智能体先决定调用感知、移动还是操作及其顺序,以主动揭示遮挡结构、动力学、容纳关系与功能等静态图像无法呈现的信息;每项任务的正确答案若不先选择动作便结构上不可得。