跳到正文
热点事件持续更新

AItonomy发布SLE科研智能体基准,最强配置仅37.5分

3 篇报道3 个报道来源23 小时前更新

先了解这件事

AI 综述

AItonomy Foundation 发布 Science's Last Exam(SLE)基准,用来自 9 个科学领域的真实研究任务考察智能体能否提出假设、规划实验流程、运行科学代码与软件并解读实验视频。任务由 30 多家机构的研究者编写和评审。 初始榜单上,最强配置(Claude Code 中的 Claude Opus 5)综合得分 37.5/100,端到端研究赛道所有模型均为 0 分。 Aran Komatsuzaki 转述称,该基准包含 9 个学科的 91 个任务,Claude Opus 5 得 67.0、GPT-6.1 Sol 得 64.25、Kimi K3.1 Pro 得 58.25;他认为这是对前沿 LLM 评测的有益补充,但 SOTA 模型已达 60 分以上,需要更难的题目。

AI 根据报道生成 · 23 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月6日
  1. Rohan Paul (X)
    AItonomy Foundation 发布 Science's Last Exam 科研智能体基准

    美国非营利机构 AItonomy Foundation 发布 Science's Last Exam(SLE)基准,用隐藏的专家检查项评估科研智能体完成真实研究任务的表现。

  2. Aran Komatsuzaki (X)
    AItonomy Foundation 发布 Science's Last Exam 科研智能体基准

    AItonomy Foundation 发布 Science's Last Exam(SLE)基准,用真实研究目标和实验室数据、软件等工具评估智能体的端到端科研能力,并由隐藏的专家检查评分。Aran Komatsuzaki 转述称,该基准包含 9 个学科的 91 个任务,Claude Opus 5 得 67.0、GPT-6.1 Sol 得 64.25、Kimi K3.1 Pro 得 58.25,评估范围覆盖端到端实验方案规划、实验观察、科学计算和软件操作。他认为这是对前沿 LLM 评测的有益补充,但 SOTA 模型已达 60 分以上,需要更难的题目。

  3. elvis (X)
    Science's Last Exam 基准发布:最强智能体配置仅得 37.5 分,端到端研究全部为 0

    AItonomy Foundation 发布 Science's Last Exam 基准,用来自 9 个科学领域的真实研究任务考察智能体能否提出假设、规划实验流程、运行科学代码与软件并解读实验视频。任务由 30 多家机构的研究者编写和评审,初始榜单上最强配置(Claude Code 中的 Claude Opus 5)综合得分 37.5/100,端到端研究赛道所有模型均为 0 分。

本事件热度走势

可比范围当前
16
可比范围峰值
2811月6日 04:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。