AI 编程实时动态与要闻

韩国 2027 年预算 AI 与芯片投入翻倍至 21.3 万亿韩元:4.7 万亿砸向国家级前沿模型,采购 1 万张 Vera Rubin GPU

韩国总统李在明 11 月 2 日在国会发表 2027 年预算施政演说:总预算 820.9 万亿韩元(+12.8%),其中半导体、物理 AI、AI 数据中心三大项目及 AI 投入合计 21.3 万亿韩元(约 160 亿美元),比 2026 年的 10.8 万亿几乎翻倍。企划财政部官方预算文件显示,4.7 万亿韩元用于打造「全球顶级性能」的国家独立 AI 模型,包括采购 1 万张 Vera Rubin GPU。预算仍需国会通过。

韩国 2027 年预算 AI 与芯片投入翻倍至 21.3 万亿韩元:4.7 万亿砸向国家级前沿模型,采购 1 万张 Vera Rubin GPU

核心要点速览

  • 三大项目及 AI 投入从 10.8 万亿增至 21.3 万亿韩元,增幅 97.2%;总预算 820.9 万亿韩元,同比 +12.8%(官方预算文件)。
  • 前沿 AI 模型专项 4.7 万亿韩元:3.9 万亿采购 1 万张 Vera Rubin GPU、0.8 万亿购买训练数据、250 亿韩元引进 20 名海外顶尖研究者。
  • 模型研发期间先投入政府已有的约 7000 张 GPU,并租用产学研约 8000 张;入选企业通过公开评选产生,政府以出资方式参与、分享收益。
  • 「全民 AI」新增 0.25 万亿韩元,基于国产模型提供公共 AI 智能体,可代办身份证明、KTX 订票、护照补办等;AI 教育 2.1 万亿覆盖 390 万人。
  • 另拨 700 亿韩元开发专用 AI 安全模型,500 亿韩元为 1 万家中小企业补贴 AI 安全方案订阅费;物理 AI 预算从 0.9 万亿增至 3.1 万亿。
阅读全文
T
Tsinghua University & Z.AI (HarnessPro, arXiv 2610.26770)arxiv.org·
👀13
🔥80

清华与智谱 Z.AI 开源 HarnessPro:Agent 自己改写 harness,Terminal-Bench 2 通过率 80.8%、单任务成本降 34%

清华大学与 Z.AI(智谱)等机构的论文 HarnessPro(arXiv 2610.26770,10 月 19 日提交、10 月 20 日更新 v2)提出一种无需标准答案的 harness 自我改进方法:让专门的 agent 诊断执行轨迹、改写指令与运行时策略,再用 LLM 生成的测试评估,并按性能与成本给出 Lite、Medium、Heavy 三档 harness。论文口径:GPT-5.5 搭配 Codex 时,Heavy 档在 Terminal-Bench 2 达到 80.8%,比此前方法 RHO 高 4.5 个百分点,单任务成本从 1.09 美元降到 0.72 美元。代码以 MIT 协议开源,本周被 Pandaily 等媒体集中报道。

清华与智谱 Z.AI 开源 HarnessPro:Agent 自己改写 harness,Terminal-Bench 2 通过率 80.8%、单任务成本降 34%

核心要点速览

  • Terminal-Bench 2(GPT-5.5 × Codex,三次平均):Heavy 档 80.8%、单任务 0.72 美元;RHO 为 76.3%、1.09 美元,成本降 33.9%(论文口径,见 arXiv)
  • 三个基准平均:相对 RHO 通过率 +2.0 个百分点、单任务成本 -26.1%;基准为 Terminal-Bench 2、SWE-Bench Pro、ProgramBench
  • 换模型也成立:GLM-5.2 × Claude Code 在 Terminal-Bench 2 上,Heavy 档 81.4%、0.62 美元,对比原版 74.6%、0.92 美元和 RHO 78.0%、1.00 美元
  • 省钱档:Medium 档在 Terminal-Bench 2 上 76.3%(与 RHO 持平)但只要 0.56 美元;Lite 档 72.9%、0.43 美元
  • 训练代价小:每个基准只用 10 个训练任务、跑 3–4 轮进化,测试集为 59/100/100 个留出任务;GitHub 以 MIT 协议开源三档 harness
阅读全文

微软 FY27 Q1 财报:Azure 增速升至 48%,Foundry 收入同比增长超 3 倍,Agent 365 纳管 5000 万个 Agent

微软 10 月 28 日公布截至 9 月 30 日的 FY27 第一财季业绩:营收 923 亿美元(+19%),Microsoft Cloud 收入 639 亿美元(+30%),Azure 收入增速从上季度的 42% 加速到 48%,商业剩余履约义务达 6770 亿美元(+73%)。CEO Satya Nadella 在 X 上补充了 AI 业务数据:Foundry 收入同比增长超过 3 倍,开源模型收入增长 10 倍,Copilot 日活环比增长近 50%,Agent 365 中的 Agent 超过 5000 万个。另据 TechCrunch 援引微软监管文件,本季来自 OpenAI 相关商业安排的收入为 100 亿美元。

微软 FY27 Q1 财报:Azure 增速升至 48%,Foundry 收入同比增长超 3 倍,Agent 365 纳管 5000 万个 Agent

核心要点速览

  • 营收 923 亿美元(+19%),营业利润 459 亿美元(+21%);Microsoft Cloud 639 亿美元(+30%)(官方财报)
  • Azure 增速 48%,较上季度 FY26 Q4 的 42% 加速;商业剩余履约义务 6770 亿美元(+73%)(官方 Investor Metrics)
  • Foundry 收入同比增长超 3 倍,多模型客户数增长 5 倍,开源模型收入增长 10 倍(Satya Nadella 在 X 上的口径)
  • Copilot 日活环比增长近 50%、同比超 5 倍;Agent 365 中 Agent 超过 5000 万个,环比 +30%
  • 据 TechCrunch 援引 10-Q,本季 OpenAI 相关收入 100 亿美元,约占总营收 11%;OpenAI 投资使 GAAP 净利润增加 2.07 亿美元
阅读全文

Cognition 发布 FrontierCode 2.0 编程基准:考察"该不该合并",最强的 Claude Opus 5.5 也只有 45.5%

Devin 背后的 Cognition 于 10 月 27 日发布 FrontierCode 2.0。新版沿用由开源维护者亲自出题、按"能否合并"打分的方法,但任务来自更多仓库、覆盖安全补丁与性能优化,提示词刻意不写全,并加入大量"周全性"判定项。官方结果中 Claude Opus 5.5 以 45.5% 居首,GPT-6 Astra 42.8% 次之,Grok 4.7、Gemini 4 Argon 等降到 20% 多,基准远未饱和。

Cognition 发布 FrontierCode 2.0 编程基准:考察"该不该合并",最强的 Claude Opus 5.5 也只有 45.5%

核心要点速览

  • 榜首 Claude Opus 5.5 为 45.5%(1.1 版 54.6%),GPT-6 Astra 42.8%(1.1 版 53.3%),均为官方/厂商口径
  • Grok 4.7 28.6%、Gemini 4 Argon 26.3%、Muse Wonder 1.0 24.3%、SWE-2 23.9%,DeepSeek V4.1 Flash 19.3%、Kimi K3 17.7%,开源模型差距明显
  • 相比 1.1 版,参考解平均多改 67% 的文件、89% 的代码行,代码库大 25%;任务来源仓库多 55%,阻断性判定项多 43%
  • "周全性"阻断项从 168 条增至 501 条,约 3 倍;80% 任务的参考解优于上游原 PR,审计 agent 还发现并上报了一个上游安全漏洞
  • 成本-得分帕累托前沿上,高端是 Opus 5.5,低成本端有 Luna、Haiku 和 Sol,官方点名 GPT-6.1 Sol 性价比突出(官方博客)
阅读全文
AD赞助内容

Springer Nature 与 Google DeepMind 合作共建 AI 审稿助手:基于 Gemini 与开源 ADK,原型已在测试,人类审稿人仍做最终判断

全球最大学术出版商之一 Springer Nature 10 月 26 日宣布与 Google DeepMind 建立研究合作,共同设计一款 AI 审稿助手。它基于 DeepMind 的前沿 Gemini 模型,并借鉴 Google 此前的智能体科研工具 ScholarPeer 和 Deep Review,帮助审稿人梳理稿件、分析大量文字、图表和插图,并标出可能需要重点核查的部分。系统用 Google 开源的 Agent Development Kit(ADK)搭建,只运行在 Springer Nature 私有的 Gemini Enterprise 环境里,稿件内容不出其安全环境。原型正在测试,官方强调「人类优先、AI 其次」,没有公布上线时间或效果数据。

Springer Nature 与 Google DeepMind 合作共建 AI 审稿助手:基于 Gemini 与开源 ADK,原型已在测试,人类审稿人仍做最终判断

核心要点速览

  • 合作双方:Springer Nature(出版期刊和图书数量最多的学术出版商)与 Google DeepMind,2026-10-26 在伦敦、柏林、纽约同步宣布(官方新闻稿)
  • 技术栈:Gemini 前沿模型 + Google 开源 Agent Development Kit(ADK),借鉴 ScholarPeer 和 Deep Review 两款智能体科研工具
  • 数据隔离:只运行在 Springer Nature 私有的 Gemini Enterprise 平台,作者和审稿人信息保密
  • 进度:原型测试中,官方未公布上线时间、覆盖期刊数量或任何准确率数据
  • 定位:辅助审稿人定位需要关注的部分,最终科学判断仍由人类专家做出
阅读全文

Artificial Analysis 独立实测 DeepSeek Search 搜索 API:$0.75/千次极低成本突破基座模型 36 分

国际权威模型独立评测机构 Artificial Analysis 正式发布针对 DeepSeek 官方搜索增强 API(DeepSeek Search)的详尽基准测试数据。评测显示,挂载 DeepSeek 搜索模块后,基座模型的全域搜索综合指数从原先的 33 分暴涨至 69 分(净增 36 分,位列全部 27 款受测搜索 API 的第 17 位)。在成本维度上,DeepSeek Search 展现出无与伦比的颠覆性定价:每 1,000 次搜索请求仅收费 0.75 美元,折合单任务平均成本仅约 0.032 美元,成为全网受测商业搜索 API 中最经济的选项;在事实性问答基准 AA-Omniscience 达到 70% 准确率,而在复杂长程网页浏览任务 BrowseComp 则达到 63%。

Artificial Analysis 独立实测 DeepSeek Search 搜索 API:$0.75/千次极低成本突破基座模型 36 分

核心要点速览

  • Artificial Analysis 发布 DeepSeek Search API 独立实测数据,搜索综合指数达到 69 分(较未接入搜索的 33 分提升 36 分)
  • 定价极具杀伤力:每 1,000 次搜索仅需 0.75 美元,单任务平均耗费仅约 0.032 美元,为全网最便宜的商业搜索 API
  • 在跨领域事实性问答基准 AA-Omniscience 斩获 70% 准确率(位列 27 款受测模型第 10 位)
  • 在长程复杂网页浏览任务 BrowseComp 取得 63% 准确率,为大模型 Agent 开发者提供了高性价比的实时信息检索方案
阅读全文

FrontierRefactor 发布首个智能体代码性能重构基准:揭示 41% 候选通过功能测试却无性能收益或发生严重回退

在 arXiv:2610.25834 中,跨国研究团队正式发布业内首个专门评估 Coding Agent 大规模、面向物理性能代码重构能力的基准 FrontierRefactor。与传统仅考量“功能测试能否通过”的 SWE-bench 不同,FrontierRefactor 涵盖 7 种主流编程语言、跨越 10^1 至 10^4+ 行代码规模的 60 个符合阿姆达尔定律(Amdahl's law)的严苛工业级工程任务。测试揭示了惊人的行业现状:超过 41% 的智能体生成补丁虽然 100% 通过了功能等价性测试,却并未带来任何实际物理加速,其中 19.3% 甚至引发严重的运行时性能回退,展现了引入多轮执行耗时反馈机制对自主重构智能体的决定性意义。

FrontierRefactor 发布首个智能体代码性能重构基准:揭示 41% 候选通过功能测试却无性能收益或发生严重回退

核心要点速览

  • FrontierRefactor(arXiv:2610.25834)首创面向性能优化的自主代码重构基准,涵盖 7 门主流语言与 60 项工程任务
  • 揭示关键盲区:超过 41% 的 Agent 补丁虽然通过单元测试,却无法带来有效物理性能加速(19.3% 发生回退,21.9% 陷入测量噪音)
  • 跨语言重写(如 Python 转 Rust/C++)加速潜力大但合同保真度极易崩溃;就地优化保真度高但极难脱离 Profiler 实现真加速
  • 引入多轮执行耗时反馈(Execution-Timing Feedback)能够将复杂代码重构的严格真实成功率成倍提升
阅读全文
关联模型 / 智能体 / 厂商:

vLLM 联合蚂蚁集团开源 Humming 算子库:最高 5 倍算子加速,MoE 端到端吞吐提升 43.3%

vLLM 官方联合蚂蚁集团正式开源底层高性能量化推理算子库 Humming(humming-kernels)。该算子库专为大规模混合专家(MoE)与低精度密集模型的高并发服务而设计,全面覆盖 WnA16、W8A8、W4A8 与 W4A4 多种量化精度,横跨 INT1~INT8 与 FP4~FP8 数据格式,并原生适配从 NVIDIA Turing 到 Blackwell 架构及平头哥真武 810E 芯片。实测显示,Humming 算子在小 Batch 下比 cuBLAS 快 3~4 倍,在大 Batch 下比 Marlin 快 2 倍;在 8 张 H20 GPU 上运行 DeepSeek-V4.1-Flash,64 并发下整机端到端吞吐暴增 43.3%,首字时延(TTFT)大幅降低 32%,现已作为默认引擎整合至 vLLM v0.29.0+ 中。

vLLM 联合蚂蚁集团开源 Humming 算子库:最高 5 倍算子加速,MoE 端到端吞吐提升 43.3%

核心要点速览

  • vLLM 与蚂蚁集团联合开源 Humming 高性能算子库(Apache 2.0),现已原生内置于 vLLM 0.29.0+ 核心代码中
  • 全方位打通 WnA16、W8A8、W4A8 与 W4A4 低比特精度,算子即时编译耗时仅需 1.82 秒(相比 CUTLASS 的 23.35 秒提速 12 倍)
  • 在 8 卡 H20 集群部署 DeepSeek-V4.1-Flash 实测:64 并发下吞吐从 442 提升至 634 tokens/s(净增 +43.3%)
  • 首字生成时延(TTFT)缩减 25%~32%,在下一代 B300 架构上 MoE 核心算子实现最高 5 倍极限加速
阅读全文

端侧算子自动生成首个统一基准:EdgeKernelBench 联合 LEKA 智能体攻克异构硬件代码生成

多所顶尖高校与科研机构在 arXiv:2610.24648 中正式发布首个面向异构端侧硬件的大模型底层算子生成统一基准 EdgeKernelBench 与分层智能体架构 LEKA。针对当前学术界算子生成评测过度局限于云端高性能服务器 GPU,而在端侧设备上面临硬件高度异构、底层软件栈严重碎片化(CUDA、OpenCL、TileLang、Triton)以及极度严苛资源约束的行业痛点,EdgeKernelBench 建立了包含 331 项经典任务与 650 个实例的统一中间表示(IR)部署管线。配合分层算子生成智能体 LEKA 解耦复杂编译决策,使大模型端侧算子生成性能取得跨越式突破。

端侧算子自动生成首个统一基准:EdgeKernelBench 联合 LEKA 智能体攻克异构硬件代码生成

核心要点速览

  • 研究团队在 arXiv:2610.24648 中开源首个端侧异构算子生成统一基准 EdgeKernelBench,填补端侧 AI 编译大模型评测空白
  • 涵盖 CPU/LLVM、GPU/CUDA 与 GPU/OpenCL 等跨平台硬件栈,设立 331 项经典计算范式与 650 个实测实例
  • 提出分层端侧算子生成智能体 LEKA(Layered Edge Kernel Agent),沿 IR 中间表示层级化解耦决策,攻克传统单次生成仅 25.5% 性能达标的瓶颈
  • 为移动端芯片、嵌入式 NPU 与机器人端侧加速器的底层高性能算子自动化编译铺平了产业落地道路
阅读全文
关联模型 / 智能体 / 厂商:

vLLM 官方实测追平 DeepInfer:GB200 上吞吐差距缩小至 6%,GB300 单卡达百万 Token/秒

在 DeepSeek 宣布开源其生产级推理引擎 DeepInfer 数小时后,vLLM 官方项目团队正式公布了针对 DeepSeek-V4.1-Flash 的实测重磅性能对标数据。采用 DeepSeek 官方完全相同的测试拓扑(131K 超长上下文、nextn=3 投机采样),vLLM 在 NVIDIA GB200 NVL 架构上针对 Batch Size 8~256 的全并发区间,将与 DeepInfer 的端到端吞吐差距压缩至 6% 以内;在下一代 GB300 架构上,单 GPU 吞吐量突破 1,000,000 Token/秒,单用户峰值输出达 826 Token/秒,折合单 GPU 每小时营收达 38.96 美元。同时宣布 FastH3-Omni 与 Spark-X2.6-4B 首发支持。

vLLM 官方实测追平 DeepInfer:GB200 上吞吐差距缩小至 6%,GB300 单卡达百万 Token/秒

核心要点速览

  • vLLM 团队迅速公布实测对标数据,在 NVIDIA GB200 上运行 DeepSeek-V4.1-Flash 吞吐已追平至仅落后 DeepInfer 6%
  • 在下一代 NVIDIA GB300 硬件架构上,vLLM 实现单张 GPU 吞吐达 100 万 Token/秒,单用户峰值输出 826 Token/秒
  • 按 DeepSeek 线上非高峰期官方定价测算,单台 GPU 每小时可产生高达 38.96 美元的云端推理收益,经济效益惊人
  • 同步宣布对多模态视频大模型 FastH3-Omni 与拥有 100 万上下文的 4B 模型 Spark-X2.6-4B(Apache 2.0)提供 Day-0 首日原生支持
阅读全文
关联模型 / 智能体 / 厂商:
AD赞助内容

小模型词表表征暴瘦 62%:研究提出 16 MB 冻结二进制词表,Gemma 3 270M 仅保留 101M 参数且多任务零精度损失

在小参数语言模型中,庞大的词表嵌入层往往占据模型总参数量的六成以上,成为端侧部署与三值量化(Ternary)的致命包袱。最新研究(arXiv:2610.22428)提出革命性的无训练词表方案:利用主成分投影与符号二值化构建仅 16 MB、含 512 位二进制码的固定词表,彻底移除可训练嵌入参数。在 Gemma 3 270M 上,可训练参数从 268.1M 骤降至 101.0M(暴减 62.3%),而 HellaSwag(30.4%)与 PIQA(61.5%)等基准表现持平甚至反超原版模型。

小模型词表表征暴瘦 62%:研究提出 16 MB 冻结二进制词表,Gemma 3 270M 仅保留 101M 参数且多任务零精度损失

核心要点速览

  • 研究揭示小模型结构性失衡:Gemma 3 270M 中词表嵌入层独占 167.8M 参数,占全模型 62.6%
  • 提出 16 MB 冻结 512 位二进制词表方案(arXiv:2610.22428),通过 PCA 与符号二值化彻底移除可训练嵌入参数
  • Gemma 3 270M 可训练参数量从 268.1M 骤降至 101.0M(暴减 62.3%),文件存储与显存开销大幅下降
  • 下游评测中 HellaSwag 完全持平(30.4%),LAMBADA(23.2% vs 21.6%)与 PIQA(61.5% vs 60.6%)甚至反超原版模型,且完美兼容 1.58-bit 三值网络
阅读全文
关联模型 / 智能体 / 厂商:

SemiAnalysis 披露 Google 与 Inferact 首份 TPUv7 评测:TorchTPU vLLM 大核驱动 2.8T Kimi K3,高交互吞吐力压 GB200 NVL72 与 B300

半导体分析机构 SemiAnalysis 发布最新评测:Inferact(vLLM 核心团队)联合 Google 正式提交了首份基于 Google TPUv7 的 Kimi K3 2.8T 巨型 MoE 模型推理基准。在单芯片时租仅 1.21 美元(相比 GB300 2.31 美元、B300 2.26 美元、GB200 1.86 美元)下,借助 TorchTPU vLLM 大核与 TPU-Sync KVCache 卸载库,TPUv7 在 390 tok/s 超高交互区实现每美元 220 万 Token 吞吐,TCO 表现越级反超 NVIDIA GB200 NVL72、B300 与 AMD MI355X。

SemiAnalysis 披露 Google 与 Inferact 首份 TPUv7 评测:TorchTPU vLLM 大核驱动 2.8T Kimi K3,高交互吞吐力压 GB200 NVL72 与 B300

核心要点速览

  • Inferact(vLLM 核心团队)联合 Google 提交首份 Google TPUv7 Kimi K3 2.8T 巨型 MoE 推理基准
  • TPUv7 单芯片时租仅 1.21 美元,显著低于 GB300(2.31 美元)、B300(2.26 美元)与 GB200(1.86 美元)
  • 在 390 tok/s 超高交互区实现每美元 220 万 Token 吞吐,TCO 表现越级反超 NVIDIA GB200 NVL72、B300 与 AMD MI355X
  • 基于 TorchTPU vLLM 大核与 TPU-Sync KVCache 库,标志着 vLLM 在 Google TPU 架构上取得生产级重大突破
阅读全文
关联模型 / 智能体 / 厂商:

新加坡国立与阿里通义千问提出智能体实时纠偏框架 Steering Agent:双路径强化学习突破目标漂移,多跳 QA 提升 7.4 分且执行轮次缩减 26%

针对长链路多轮工具调用与多智能体协作中频发的“目标漂移(Goal Drift)”难题,新加坡国立大学、中科大与阿里通义千问团队联合提出 Steering Agent(arXiv:2610.22316)。该框架通过成对排序与组相对策略优化(GRPO)联合训练低成本快速判断路径(When to intervene)与高成本慢速纠偏生成路径(How to intervene),在无需重训基座模型的前提下将多跳 QA 平均基准分从 42.70 提升至 50.10,同时将平均执行轮次从 8.8 轮大幅压缩至 6.5 轮(-26.1%)。

新加坡国立与阿里通义千问提出智能体实时纠偏框架 Steering Agent:双路径强化学习突破目标漂移,多跳 QA 提升 7.4 分且执行轮次缩减 26%

核心要点速览

  • 新加坡国立大学与阿里通义千问团队提出 Steering Agent(arXiv:2610.22316),专攻多轮工具调用与多智能体系统中的目标漂移(Goal Drift)难题
  • 创新设计“快速路径判断何时干预 + 慢速路径生成如何纠偏”的双路径架构,通过成对排序与 GRPO 强化学习联合训练
  • 在多跳问答基准上将平均准确率提升至 50.10(超越无干预基线 7.4 分),并将规划执行轮次从 8.8 轮压减至 6.5 轮(-26.1%)
  • 在挂载真实网络搜索的 GAIA(Pass@4 达 39.81%)与 Frames(Pass@4 达 59.71%)基准上展现出优异的跨模型与跨任务泛化能力
阅读全文
关联模型 / 智能体 / 厂商:

Replit Agent 默认模型改由 OpenAI 驱动:CEO Masad 称 OpenAI 成首选合作方,Claude 仍可手动选择

Replit CEO Amjad Masad 在 TechCrunch Disrupt 2026 上称公司已不再与 Anthropic 合作,随后于 10 月 17 日在 X 上澄清:Replit 仍保持模型中立,用户可继续选择 Anthropic 等模型,但 OpenAI 现在是驱动 Replit Agent 默认体验的首选合作方,理由是性能、成本与合作关系。由于多数用户不改默认设置,这一调整预计会明显改变 Replit 在两家模型厂商上的支出。

核心要点速览

  • Masad 10 月 17 日澄清:OpenAI 成为驱动 Replit Agent 的首选合作方,Claude 等模型仍可选
  • Masad 称 Replit 内部与公开基准上,Sol 与 Astra 在从零构建应用上表现更好;具体分数官方未公布
  • 据 TechCrunch,Replit 此前曾是 Anthropic 前五大客户之一,9 月下旬博客仍列 Claude Fable 5/5.1 为 Agent 生产模型
  • Masad 称企业合同今年约占收入 15%(去年约 2%),B2B 超过 50%
  • Anthropic 方面有知情人士称双方合作仍在,Anthropic 官方未表态
阅读全文

终结 Coding Agent 作弊刷分!CMU 弱到强验证器加固获 Terminal-Bench 官方采纳,递归环境缩放(RES)令 SFT 泛化跃升 14.6 分

针对编程智能体评测与强化学习中愈演愈烈的“篡改测试脚本刷满分(Reward Hacking)”与“静态题库过拟合”两大痛点,今日两项重磅研究给出系统性方案:CMU 团队提出弱到强验证器自动加固框架(arXiv:2610.15924),通过隔离验证沙箱与 Hacker-Fixer 攻防闭环大幅压降 Terminal-Bench、KernelBench 与 SETA 的作弊成功率,已被 Terminal-Bench 官方仓库采纳;递归环境缩放框架 RES(arXiv:2610.16397)则在不改变核心目标下递归演化执行依赖,使 Claw-Eval-Live 上的六大模型成功率暴跌 57.14~77.14 个百分点,并用生成的轨迹将 SFT 泛化性能全面拉升 7.00~14.61 个百分点。

终结 Coding Agent 作弊刷分!CMU 弱到强验证器加固获 Terminal-Bench 官方采纳,递归环境缩放(RES)令 SFT 泛化跃升 14.6 分

核心要点速览

  • CMU 提出弱到强验证器加固框架(隔离验证沙箱 + Hacker-Fixer 迭代攻防循环),大幅压降 Terminal-Bench、KernelBench 与 SETA 的作弊刷分成功率,并获 Terminal-Bench 官方采纳
  • 递归环境缩放(RES)在不改变核心目标下递归变异信息访问与执行依赖,使 6 大主流模型在 Claw-Eval-Live 上的成功率暴跌 57.14~77.14 个百分点
  • 在相同轨迹数量与超参下,使用 RES 演化环境轨迹进行 SFT 微调,在全部 9 组模型-基准对比中超越原始轨迹 SFT 达 7.00~14.61 个百分点
阅读全文
关联模型 / 智能体 / 厂商: