跳到正文
热点事件观察中

FrontierCS 2 智能体基准发布

1 篇报道1 个报道来源2 天前更新

先了解这件事

AI 综述

FrontierCS 2 作者团队发布了一个面向计算机科学研发的智能体基准,包含 48 个开放式任务,另有 100 多个私有任务待公布。任务取自论文及其公开代码,删去论文的贡献部分后作为人类参考标准;智能体在可提交补丁的仓库环境中工作,评测套件和参考实现保持私有。 团队用该基准评测了 12 个智能体,表现最好的 Claude Opus 5.5 通过了 58% 的运行,另有 16 个任务没有任何一次运行通过。

AI 根据报道生成 · 57 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月21日
  1. Hugging Face Daily Papers精选
    FrontierCS 2 发布:面向计算机科学研发的智能体基准

    FrontierCS 2 是一个包含 48 个开放式任务的基准,用于评测 LLM 智能体在计算机科学研发中的表现,另有 100 多个私有任务待公布。任务取自论文及其公开代码,删除论文贡献部分后作为人类参考标准,智能体在可提交补丁的仓库环境中工作,评测套件和参考实现保持私有。评测 12 个智能体,表现最好的 Claude Opus 5.5 通过 58% 的运行,有 16 个任务无任何运行通过。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。