返回 返回
模型邮件每日6条一手
新基准测试FrontierPhysics包含42位物理学家根据自身研究编写的56项端到端研究任务,在其测试的22个AI模型、26种配置中, 没有任何配置在其168次研究尝试中通过超过46次
Bingran You 和其他 71 位作者于 2026 年 11 月 4 日提交的论文 arXiv:2611.06910,“FrontierPhysics:评估用于端到端物理研究的代理”,测量了 FrontierPhysics 基准上 26 种配置中 22 个模型的成功运行次数。该论文指出,没有一种配置在其 168 次运行中通过超过 46 次。
已核实 2026-11-12
知情者可追踪为何重要
AI模型掌握大量物理知识,但在可靠地开展真实研究方面仍然困难重重,因此关于AI独立进行科学研究的说法仍然超前于证据。
更多模型
- AI模型如今已能在国际数学奥林匹克竞赛中夺金,但斯坦福《2026年AI指数报告》发现,它们在一项大多数孩子很早就掌握的任务上仍会出错。在ClockBench的180种表盘设计、720道题目测试中,表现最好的模型 GPT-5.4 High正确读出模拟时钟时间的比例仅为50.6%,而人类为90.1%
- 闭源与开源AI模型的性能差距在2024年一度几乎抹平后再度拉开。截至2026年3月,斯坦福《2026年AI指数》显示,Arena排行榜上顶尖闭源模型相对顶尖开源模型领先3.3%,高于2024年8月的0.5%
- 斯坦福大学2026年AI指数报告追踪AI模型在GPQA Diamond基准上的表现——这是一套专为抵抗谷歌搜索而设计的博士级化学和物理题。2025年,模型在该基准上的平均准确率达到93%,而专家人类验证者的基线为81.2%——AI模型现已在GPQA Diamond上超越博士级专家12个百分点