AI 编程实时动态与要闻

SolarRenderer 突破结构化视频生成:4 步去噪极速渲染灰模与深度图,768p 实时流式合成高保真世界

来自新加坡国立大学(NUS)、香港中文大学(深圳)等机构的研究团队在 arXiv:2610.28630 正式发布视频生成渲染框架 SolarRenderer。针对当前 3D 游戏引擎灰模、姿态骨骼、深度图与点云难以极速转化为高保真视觉视频的难题,SolarRenderer 基于冻结的 MiniMax-H3 33B 基础视频模型,引入轻量化控制 LoRA 与 4 步生成 LoRA。利用结构引导分布匹配算法,仅需 4 步去噪即可完成高质量渲染(比传统 50 步采样提速 12.3 倍),并提出块因果(Block-Causal)变体,成功实现 768p 高清视频的毫秒级实时流式生成,为下一代神经游戏引擎与虚拟制片树立了全新标杆。

SolarRenderer 突破结构化视频生成:4 步去噪极速渲染灰模与深度图,768p 实时流式合成高保真世界

核心要点速览

  • SolarRenderer(arXiv:2610.28630)发布,实现基于粗糙 3D 几何(灰模、骨骼、深度、网格)的高保真视频极速渲染
  • 冻结 MiniMax-H3 33B 视频底座,仅微调轻量 Control LoRA 与 4-step LoRA,保持基座生成能力的同时强化几何控制
  • 仅需 4 步去噪采样即可完成高保真视频渲染,生成速度较传统 50 步扩散采样提速惊人的 12.3 倍
  • 研发块因果(Block-Causal)注意力流式架构,在工业级 GPU 上实现 768p 分辨率视频实时连续生成
阅读全文
关联模型 / 智能体 / 厂商:
⚡ MiniMax-H3⚡ SolarRenderer

上海人工智能实验室发布 Sage-A1.5:35B MoE 长程执行与科学探索智能体模型全面开源

上海人工智能实验室正式在 arXiv:2610.28578 发布开源智能体基础模型 Sage-A1.5 技术报告。该模型采用 350 亿总参数量(35B)的混合专家(MoE)架构,延续了“扩展智能体执行视界(Agent Horizon)而非盲目扩大参数量”的设计哲学。Sage-A1.5 创新引入了自适应能力组合机制,重点针对长程仓库级软件工程问题修复(SWE)与多步骤假说驱动的科学探索进行了端到端对齐。评测显示,该模型在超长执行步数下展现出超越 70B+ 稠密大模型的稳定推理能力,并同步公开了本地微调与部署权重。

上海人工智能实验室发布 Sage-A1.5:35B MoE 长程执行与科学探索智能体模型全面开源

核心要点速览

  • 上海 AI 实验室正式发布 Sage-A1.5 技术报告(arXiv:2610.28578),全量开源 35B MoE 架构智能体专用模型
  • 确立“扩展智能体执行视界(Horizon Scaling)优于无脑扩充参数量”的新范式,单任务持续自适应推演超百步不散焦
  • 深度攻克仓库级代码问题修复,在包含真实 Git 依赖与复杂调用链路的软件工程评测中展现出媲美 70B+ 模型的解决率
  • 内生具备假设生成、实验验证与科学发现能力,全面适配本地单机多卡与私有化科研集群的轻量级部署
阅读全文
关联模型 / 智能体 / 厂商:

NVIDIA 开源机器人数据引擎 Flora:三款模型给机器人视频自动打标签和奖励,官方称成本约为 GPT-6 Astra 的 1/125

10 月 20 日,NVIDIA GEAR 实验室(Jim Fan 团队)开源 Flora 模型套件,把人类和机器人操作视频转成带时间戳的动作描述、过程奖励、结果奖励和评分细则。套件含 Flora-Captioner 27B、Flora-Rewarder 27B(均基于 Qwen3.5-27B)和 Flora-TempSeg 9B(Qwen3.5-9B 上的 LoRA),权重已上 Hugging Face,采用 NVIDIA 非商用许可。官方称它是训练 GR00T 的内部数据引擎,每天在 512 张 GB300 上标注 20 万小时视频,标注质量与 GPT-6 Astra 相当,成本约低 125 倍。

NVIDIA 开源机器人数据引擎 Flora:三款模型给机器人视频自动打标签和奖励,官方称成本约为 GPT-6 Astra 的 1/125

核心要点速览

  • 三款模型分工:TempSeg 9B 切分动作片段,Captioner 27B 为每段写一句动作指令,Rewarder 27B 输出逐步过程奖励和整段成功分
  • 成本(官方估算):8 卡 GB300、按每 GPU 小时 10 美元计,每小时源视频标注约 0.72 美元;GPT-6 Astra 最高推理档约 88.49 美元,约 122–125 倍差距
  • 质量(官方 50 段内部评测):Flora 57.1%,GPT-6 Astra 53.7%;DenseRewardBench 失败召回 53.3%,前沿 API 模型多在 1% 以下
  • 规模:官方称每天在 512 张 GB300 上标注 20 万小时视频,用于训练 GR00T-2
  • 许可:NVIDIA OneWay Noncommercial,仅限非商用研究,官方明确不支持商用或生产部署
阅读全文
关联模型 / 智能体 / 厂商:
⚡ Flora-Captioner 27B⚡ Flora-Rewarder 27B⚡ Flora-TempSeg 9B⚡ Qwen3.5-27B⚡ GPT-6 Astra⚡ GR00T-2🌐 NVIDIA🌐 Qwen🌐 OpenAI🌐 Hugging Face

UCSD 开源 3D 具身探索智能体 ACT3D:纯单目第一人称交互学习,超越 Gemini 3.6 Flash

加利福尼亚大学圣迭戈分校(UCSD)研究团队在 arXiv:2610.21783 中推出 3D 空间主动探索与推理智能体 ACT3D。针对传统 3D 具身模型依赖昂贵稠密多视角图像、多模态视频流或重型点云编码的痛点,该研究完整保留单目视觉语言模型(VLM)的原生单帧第一人称编码,将 3D 环境作为动作与交互观测场。经结果驱动强化学习(RL)优化后,在六大 3D 评测基准上取得 53.2% 的平均准确率(较基座 Qwen 跃升 22.0%),一举超越商业旗舰 Gemini 3.6 Flash,且输入帧数节省 50%~70%。

UCSD 开源 3D 具身探索智能体 ACT3D:纯单目第一人称交互学习,超越 Gemini 3.6 Flash

核心要点速览

  • UCSD 联合佐治亚理工发布 3D 主动交互智能体 ACT3D(arXiv:2610.21783),纯单目第一人称图像输入打破传统多视角堆砌
  • 以结果驱动强化学习(RL)优化视角探索,在无路径先验监督下自主习得问题条件化寻路与遮挡消除策略
  • 在六大 3D 基准上取得 53.2% 平均准确率,较基座模型提升 22.0%,超越商业旗舰 Gemini 3.6 Flash 且输入帧数节省 50%~70%
  • 在严重遮挡的复杂 3D 推理任务中增益高达 16.3%,未见场景泛化提升 5.9%,为低成本具身导航提供高效算法架构
阅读全文
关联模型 / 智能体 / 厂商:
AD赞助内容

苏黎世联邦理工与港大破解 MoE 路由探索困境 MirrorMoE:自适应专家剪枝化解共享专家抑制效应,全尺度 PPL 显著下降

现代混合专家(MoE)普遍结合“细粒度专家切分”与“共享专家”设计,但二者在底层产生致命冲突:共享专家均质化了 Token 表征,抑制了路由探索,导致组合膨胀的专家空间无法被充分利用。苏黎世联邦理工学院(ETH Zurich)与香港大学团队发表 MirrorMoE(arXiv:2610.22353,GitHub: BingcongLi/MirrorMoE),通过 Token 自适应抑制冗余专家收缩探索空间,在从 100M 到 2.4B 全尺度上实现显著的 PPL 下降与下游基准全线涨点。

苏黎世联邦理工与港大破解 MoE 路由探索困境 MirrorMoE:自适应专家剪枝化解共享专家抑制效应,全尺度 PPL 显著下降

核心要点速览

  • 苏黎世联邦理工学院与香港大学团队发表 MirrorMoE(arXiv:2610.22353),揭示现代 MoE 中共享专家导致表征均质化、抑制细粒度路由探索的根本困境
  • 提出 Token 自适应专家抑制算法,在保持零额外计算与训练时间开销的前提下动态收缩探索空间
  • 在 100M 至 2.4B 参数全尺度上全面降低预训练困惑度(2.4B 模型 PPL 从 21.17 降至 20.50)
  • 在六大下游基准平均得分提升 1.64 个百分点,其中 BoolQ 准确率大幅提升 4.03 个百分点(58.53% vs 54.50%)
阅读全文
关联模型 / 智能体 / 厂商:

规则世界建模三大突破:OmniVerifier-C1 解耦分级验证器赋能迷宫/数独生成,美团 WorldCast 揭露开源仅 20.1 分代差,国大 RPO 扩散 RL 提速 4 倍

针对多模态生成模型向“严守物理与逻辑规则的世界模型”演进中的验证、评测与强化学习对齐难题,今日三项重磅研究给出系统答案:OmniVerifier-C1(arXiv:2610.22355,HF 32 赞)通过解耦强化学习(DAPO)将提示词拆解为子问题二元判断与全局连续打分,在 ViVerBench 上提至 0.684 并将 FLUX.1-dev 的 GenEval 推至 0.79;美团开源 320 例多步世界状态预测基准 WorldCast(arXiv:2610.20731,HF 30 赞),揭示 GPT-Image-2.5 System 达 72.8 分而最强开源模型仅 20.1 分;新加坡国立大学提出路由策略优化 RPO(arXiv:2610.22282),将注意力块路由作为随机探索动作,以仅 24.1 GPU 小时(较 Flow-GRPO 与 DanceGRPO 分别快 3.1 倍和 4.2 倍)大幅提升视频生成语义对齐。

规则世界建模三大突破:OmniVerifier-C1 解耦分级验证器赋能迷宫/数独生成,美团 WorldCast 揭露开源仅 20.1 分代差,国大 RPO 扩散 RL 提速 4 倍

核心要点速览

  • OmniVerifier-C1 采用解耦强化学习(DAPO)联合优化子问题二元判断与全局连续打分,在 ViVerBench 达 0.684 并将 FLUX.1-dev 的 GenEval 总分从 0.68 拉升至 0.79
  • 美团开源 320 例多步世界状态预测基准 WorldCast:评测 12 款模型发现 GPT-Image-2.5 System 斩获 72.8 分,Nano Banana Pro 为 42.8 分,而最强开源模型仅得 20.1 分
  • 新加坡国大提出路由策略优化(RPO):在注意力块路由内部进行双轨迹随机探索且推理期零改动恢复稠密注意力,在 Wan2.2-TI2V-5B 上仅需 24.1 GPU 小时(较 Flow-GRPO 与 DanceGRPO 分别快 3.1 倍和 4.2 倍)
阅读全文
关联模型 / 智能体 / 厂商:

破解 GRPO 同质化坍缩!SERO 可执行先知续写使 ALFWorld 泛化暴涨 11.2 分,EDEN 锚定嵌入噪声令 AIME 2025 飙升 13.3 分

无 Critic 群组强化学习(GRPO 等)在长程 Agent 与高难数学推理中极易陷入“采样轨迹高度同质化、全组零奖励无梯度信号”的探索死局。今日两篇前沿论文从轨迹续写与输入嵌入两端破局:SERO(arXiv:2610.19397)从策略真实到达的状态恢复环境并执行多步 Oracle 续写,使 7B 模型在 ALFWorld 分布外泛化暴涨 11.20 个百分点;UNSW 提出的 EDEN(arXiv:2610.16105)在输入末尾追加单个锚定高斯噪声嵌入位,在同等采样预算下令 Qwen2.5-Math-7B 的 AIME 2025 Pass@256 飙升 13.33 个百分点(达 66.67%)。

破解 GRPO 同质化坍缩!SERO 可执行先知续写使 ALFWorld 泛化暴涨 11.2 分,EDEN 锚定嵌入噪声令 AIME 2025 飙升 13.3 分

核心要点速览

  • SERO 从当前策略真实到达的状态恢复环境并执行多步 Oracle 可执行续写,使 7B 模型在 ALFWorld 分布外泛化成功率暴涨 11.20 个百分点(达 87.50%,分布内达 95.57%)
  • UNSW 提出的 EDEN 在不增加采样预算的前提下,通过追加单个锚定高斯噪声嵌入位,在 16 条采样预算下全面击败 32 条采样预算的标准 GRPO
  • 在奥赛级基准 AIME 2025 上,EDEN 将 Qwen2.5-Math-7B 的 Pass@256 从 53.33% 飙升至 66.67%(净增 +13.33 分),显著拓宽多路径推导覆盖率
阅读全文
关联模型 / 智能体 / 厂商:

GUI-Decisions 开源:用「槽位读概率」替代坐标 JSON 解码,Computer-Use 单步提速约 3×(31B / 2B)

作者 Logesh Kumar Umapathi 于 2026-10-10 在 Hugging Face 博客发布 GUI-Decisions:把 computer-use 的 action/坐标写成固定槽位,从下一 token 分布一次性读出,而不是自回归解码 JSON。基于 Gemma 4 31B 的 LoRA/合并权重在 RTX PRO 6000 + vLLM 上,槽位读中位约 146–158 ms/步,相对原生生 JSON 约 472–546 ms 约 3.5×;相对带思考解码可快约 20–25×。ScreenSpot 点击命中约 0.87;开源 31B/2B 权重、GitHub 与 Spaces Demo。

GUI-Decisions 开源:用「槽位读概率」替代坐标 JSON 解码,Computer-Use 单步提速约 3×(31B / 2B)

核心要点速览

  • 官方:HF Blog(2026-10-10);代码 infinitylogesh/gui-decisions;Demo Spaces
  • 延迟(厂商口径,RTX PRO 6000,冷截图):槽位读 ~146 ms vs 原生 JSON 472–546 ms(约 3.5×);带 thinking 2.6–3.1 s(约 20–25×)
  • 精度:ScreenSpot 点击命中约 0.869(合并 31B);held-out AGUVIS computer-use 约 0.65;RefCOCO val 框 IoU 0.770
  • 机制:256 bin「字节」标签读坐标;动作决定后再读所需槽;type/answer 仍需基座解码——槽位只加速 grounding
  • 开箱:vllm serve infinitylogesh/GUI-Decisions-31B --max-logprobs 300 --api-server-count 8 + SlotModel.decide(img, instruction)
阅读全文
关联模型 / 智能体 / 厂商:
⚡ GUI-Decisions-31B⚡ GUI-Decisions-2B⚡ Gemma-4-31B🤖 computer-use🤖 GUI agent🌐 Hugging Face🌐 Google

攻克终端智能长程盲区!自动化数据合成引擎 TerminalHorizon 发布:27B 模型在 Terminal-Bench 2.0 斩获 55.8%

随着自主软件工程智能体与命令行运维 Agent 从执行单条命令走向长程自主交付,缺乏高质量、真实多轮交互的终端训练数据成为了制约基座模型进化的首要瓶颈。中国科学技术大学、高德地图(阿里巴巴集团)与南方科技大学联合研究团队在最新成果(arXiv:2610.13166)中正式推出了全自动终端数据合成引擎 TerminalHorizon。针对传统短程轨迹过度简化工程上下文、预设环境提前解题等致命缺陷,TerminalHorizon 始于真实专业工作流,通过独立执行闭环自动捕获被遗漏的核心操作步,基于探索证据动态重建环境,并沿统一长程目标将任务逐级扩展为多阶段有机需求。团队以此构建了 1.5K 个复杂任务环境与 2,852 条平均交互轮次达 52.8 步的高质量长程轨迹。基于 Qwen3.5-27B 监督微调得到的 TerminalHorizon-27B 模型在权威基准 Terminal-Bench 2.0 上斩获 55.8% 的高分,较原基座暴涨 14.2 个百分点,以极小训练规模击败此前主流模型,横扫涉及 Coding Agent、生产级运维及通用推理的 12 项评测,项目代码与数据集已全面公开。

攻克终端智能长程盲区!自动化数据合成引擎 TerminalHorizon 发布:27B 模型在 Terminal-Bench 2.0 斩获 55.8%

核心要点速览

  • 自动化终端数据合成引擎 TerminalHorizon 发布,构建 1.5K 真实任务环境与 2,852 条平均 52.8 步的高质量长程轨迹
  • 基于 Qwen3.5-27B 微调的 TerminalHorizon-27B 在 Terminal-Bench 2.0 斩获 55.8%,较原基座激增 14.2 个百分点
  • 以极小数据规模超越十万级样本竞品,横扫 Coding Agent、生产级运维及通用推理等 12 项评测,数据集全面开源
阅读全文
关联模型 / 智能体 / 厂商:

告别视频幻觉累积!AgentGarten 开源:物理仿真与神经渲染解耦,首创对抗性强制自进化代码世界

让通用 AI 智能体在交互式虚拟世界中自主探索与进化,是通往高阶通用人工智能(AGI)的核心路径。然而,构建兼具‘物理确定性(Faithful)’与‘照片级逼真度(Realistic)’的训练环境长期受制于技术瓶颈:纯物理引擎画面简陋缺乏真实视觉分布,而纯生成式视频世界模型则会在长程交互中不可避免地出现几何崩溃与‘幻觉累积’。MirroS 实验室与学术研究团队在最新研究(arXiv:2610.12374)中推出了 AgentGarten 开源框架(代码:github.com/MirroS-Lab/AgentGarten,主页:mirros-lab.github.io/agent-garten)。AgentGarten 首创将物理仿真引擎与共享神经渲染器深度解耦:仿真引擎作为确定性底座维护持久的世界状态与代码交互规则,不直接消费生成视频帧,从而从根本上消除了幻觉反馈回路;神经渲染器则根据导出的结构化几何条件以超过 30 FPS 实时渲染逼真观测画面。配合团队创新的‘对抗性强制(Adversarial Forcing)’训练,实现了历史预填充的可微回放与真实对抗监督。智能体在 AgentGarten 中探索试错,能将经验自动提炼为标准化‘战术手册(Playbooks)’供后代智能体继承。在经典的捉迷藏等复杂交互任务中,智能体仅需 4 轮探索即可自发涌现利用掩体与斜坡协同的高阶行为,效率比传统强化学习数千万轮交互提升数十万倍,官方代码与环境现已开源。

告别视频幻觉累积!AgentGarten 开源:物理仿真与神经渲染解耦,首创对抗性强制自进化代码世界

核心要点速览

  • MirroS 实验室开源 AgentGarten,首创物理仿真与神经渲染解耦架构,从根本上杜绝长程交互视频幻觉累积
  • 提出对抗性强制(Adversarial Forcing)可微回放技术,在单卡 H100 上实现 37.4 FPS 实时高清交互渲染
  • 智能体仅需 4 轮交互即涌现高阶协作策略,相较经典强化学习数千万轮交互实现数万倍效率跃迁
阅读全文
关联模型 / 智能体 / 厂商:
AD赞助内容

让静止三维世界无限灵动!OuroWorld 发布:免掩码 4DGS 实现任意视角无缝循环 3D 动态画

随着 3D 高斯泼溅(3D Gaussian Splatting, 3DGS)的成熟,从多视角照片重构具有逼真照片级质感的静态虚拟三维场景已变得极为成熟。然而,当前所有的 3D 资产与探索场景在时间维度上依然被‘永久冻结’;现有动态化方案要么仅能模拟简单的流体扩散,要么生成有头有尾的短视频,无法在任意漫游视角下实现自然、无缝循环的视觉运动(3D Cinemagraphs)。来自中国台湾阳明交通大学与研究团队在最新重磅研究(arXiv:2610.12461)中推出了 OuroWorld(项目主页:ouroworld.userwei.com)。OuroWorld 是首个免掩码(Mask-Free)的通用 3D 动态画生成框架,能将任意静态 3DGS 场景点化为鲜活灵动且在时间上无休止无缝循环的 4D 动态世界。框架采用‘VLM 物理先验推理 -> 视频大模型生成参考视频 -> 多视角提升与补全’的两阶段流;针对多视角视频生成极易出现的时空不一致问题,团队创新性地提出了‘抗不一致性周期性 4DGS(Periodic 4DGS)’:基于傅里叶级数(Fourier-Series)构建变形场以从数学底层保证时序闭环无缝连接,并引入以参考视角为锚点的‘接地漂移场(Grounded Drift Field)’吸收跨视角生成噪点。在 39 个真实与生成场景评测中,OuroWorld 在生动度与无缝性上全面超越所有基线,并在人类双盲评测中赢得了 70.8% 至 99.0% 的压倒性胜率。

核心要点速览

  • OuroWorld 发布首个免掩码通用 3D 动态画框架,将静态 3D 高斯泼溅转化为任意视角无缝循环 4D 动态世界
  • 首创傅里叶级数周期性 4DGS 变形场,数学底层保证闭环循环,双盲人类评测斩获 70.8%~99.0% 压倒性胜率
  • 结合接地漂移场吸收多视角视频生成噪点,彻底解决 360 度视角漫游下的几何融化与跳帧闪烁
阅读全文
关联模型 / 智能体 / 厂商:
⚡ OuroWorld⚡ 3DGS⚡ Periodic-4DGS⚡ Fourier-Field🤖 Spatial-3D-Agent🤖 Cinemagraph-Animator🌐 NYCU🌐 Hugging Face

AI 能否做出真正颠覆性的科学发现?Station 仿真生态交出答卷:多智能体再现 62.7% 顶会原创新结论

近年来,AI 在给定清晰量化目标与确定性评测指标的科学问题中(如蛋白质折叠预测、材料分子逆向筛选)取得了辉煌战绩。然而在缺乏现成目标函数、探索方向高度发散的‘开放式科学发现(Open-Ended Scientific Discovery)’中,AI 智能体是否具备自主推进人类未知边界的能力,学术界长期缺乏系统性的科学实证。独立研究团队在最新重磅研究(arXiv:2610.08927)中给出了极其振奋的实证答案。团队打造了模拟真实科研学术生态的多智能体开放世界环境 Station。针对开放式探索中极易迷失方向与浅尝辄止的问题,研究人员为 Station 引入了‘导师督导(Supervisor)机制’与‘周期性元反思(Periodic Meta Reflection)’两大引擎。在基于 3 篇最新 ICLR Oral 口头报告论文构建的严苛盲测实验中(仅向智能体提供核心科学提问,严格屏蔽原论文正文、结果与外网检索权限),Station 成功自主再现了原论文平均 62.7% 的关键科学发现标准,而对比的 Codex Multiagent-v2 仅达 15.4%,AI Scientist-v2 仅达 14.4%~20.6%!在无标准答案的全新探索命题中,智能体甚至独立推演出了与现实人类科学家在模型知识截止日期之后发表成果高度吻合的新规律。

核心要点速览

  • Station 构建科研生态仿真环境,首次证实多智能体系统在无联网与无目标函数下具备自主开放式科学发现能力
  • 在 3 篇 ICLR Oral 成果盲测中独立再现 62.7% 的关键科学发现,碾压 AI Scientist-v2(14.4%~20.6%)
  • 首创导师督导(Supervisor)与周期性元反思机制,成功预测人类在模型知识截止日期之后发表的顶会科学结论
阅读全文

代码智能体有了“严师”随访!Rutgers 等开源 Opera:首创持久诊断笔迹,SWE-Bench 解题率跃升 15%

面向长程复杂软件工程(Long-Horizon Software Engineering)的代码智能体在排查深层 Bug 时极度依赖外部反馈,但传统的批评家(Critic)往往存在严重的“健忘症”与“误诊”:要么过早打断智能体正在进行的探索,要么给出一句模糊建议后便不再追踪,导致智能体表面上敷衍修改、深层问题依旧未解。罗格斯大学(Rutgers University)与利哈伊大学团队最新开源了突破性口头批评家框架 Opera(arXiv:2609.33987)。Opera 颠覆了单次打分范式,将每次纠错诊断定义为一份“持久随访便签(Persistent Note)”,持续跟踪智能体的后续动作直到问题彻底解决。系统结合周期性与事件驱动触发器,在下发建议前对比可见证据进行审计,并能敏锐区分智能体是“机械顺从”还是“真正修复”。在 Terminal-Bench 2.1、SWE-Bench Pro 子集和 DeepSWE v1.1 上,Opera 使非批评家智能体的任务解决率分别大幅提升 12.4、15.0 和 8.9 个百分点;更为关键的是,利用 Opera 引导的 Rollout 轨迹微调 Qwen3.5-9B,在不外挂 Critic 的纯推理模式下也能在跨仓库测试中取得 10.2% 的净增长,且彻底解决了跨 Harness(如从 OpenHands 切换到 Terminus-2)时的灾难性性能劣化。

核心要点速览

  • Rutgers 与 Lehigh 开源 Opera 框架,首创持久诊断便签(Persistent Notes)追踪机制,彻底治愈 Coding Agent 批评家健忘症
  • 在 Terminal-Bench 2.1 与 SWE-Bench Pro 上解题率分别暴涨 12.4% 与 15.0%,全维度刷新 Critic 基线记录
  • 引导轨迹微调 Qwen3.5-9B 获得 10.2% 离线净增益,攻克 OpenHands 到 Terminus-2 的跨 Harness 迁移劣化难题
阅读全文
关联模型 / 智能体 / 厂商:

超越语义相似度!NVIDIA 揭秘 Agentic 检索真相:nDCG@10 跃升 8.7 分,量化单次查询 107 秒与 76 万 Token 真实开销

在现代大模型应用与自动化工作流中,稠密向量检索(Dense Retrieval)已成为探索非结构化企业数据的标准骨干。然而,传统向量检索高度依赖文本表层的“语义相似度(Semantic Similarity)”,在遭遇跨多源信息合成、深层逻辑推理与多跳探索性查询时屡屡折戟。NVIDIA NeMo-Retriever 研究团队发表了关于“智能体式检索(Agentic Retrieval)”的里程碑式实证报告(arXiv:2610.05750)。研究将大语言模型的 ReAct 推理规划能力与底层检索器深度整合,在不改变底层向量嵌入模型的前提下,使复杂多模态检索基准上的 nDCG@10 综合指标直接飙升 8.7 个百分点,并在 ViDoRe v3 与 BRIGHT 两大极端长程榜单上取得顶尖战绩。更为关键的是,NVIDIA 团队首次公布了工业界长期秘而不宣的“智能体检索代价清单”:相比传统检索的 0.67 秒与微量开销,Agentic 检索单次查询平均耗时高达 107.4 秒,平均单次交互消耗 764.1K 输入 Token 与 5.8K 输出 Token。这一基准为企业在 RAG 架构选型与成本效益平衡上提供了极其严谨的度量锚点。代码已在 NeMo-Retriever 仓库开源。

核心要点速览

  • NVIDIA NeMo-Retriever 系统性揭秘 Agentic 检索机制,将大模型 ReAct 规划与底层向量检索器深度耦合
  • 在保持相同嵌入模型下将复杂任务 nDCG@10 强力提升 8.7 分,在 ViDoRe v3 与 BRIGHT 榜单上展现出卓越泛化力
  • 首次透明公开工业级成本账单:单次查询平均耗时 107.4 秒(传统仅 0.67 秒),单次消耗 76.4 万输入 Token 与 5.8K 输出 Token
阅读全文
关联模型 / 智能体 / 厂商:

告别盲盒式终态测试!NVIDIA 推出 OSWorld-Pro:首创桌面智能体全流程评测,Claude Opus 5 仅获 75.7%

随着 Anthropic Computer Use 与各类桌面自动化智能体(Computer-Use Agents, CUAs)加速接管操作系统操作,如何科学评估多步骤 GUI 交互的真实能力成为业界最急迫的命题。现有的代表性基准(如 OSWorld)主要依赖最终结果判定(Outcome-based Verification),即在 Agent 执行了数百步鼠标键盘操作后,仅检测最终文件或系统状态是否发生改变。这种“黑盒终态评估”完全掩盖了智能体在中间步骤中“如何犯错”与“为何失败”——例如因键盘输入打字错误失败,与因视觉定位不准导致鼠标误点失败,所需要的工程修复路径完全风马牛不相及。NVIDIA 研究团队推出了首个基于全流程过程解构的桌面智能体评测系统 OSWorld-Pro(arXiv:2609.24890):包含 300 多个真实系统级生产任务,将其细粒度拆解为 2,800 多个连续依赖的子目标(Subgoals),并依托 67,000 多条高质量人类专家操作注释作为基准。通过人类对齐的 LLM-Judge 对各阶段子目标达成度展开逐层量化,评测揭示即便是业界最前沿模型如 Claude Opus 5 在 OSWorld-Pro 上的得分也仅为 75.7%(低于标准 OSWorld 的 83.4%),并精准捕获了无效漫游动作与点击像素级偏移两大核心故障模式。

告别盲盒式终态测试!NVIDIA 推出 OSWorld-Pro:首创桌面智能体全流程评测,Claude Opus 5 仅获 75.7%

核心要点速览

  • NVIDIA 推出首个基于全流程解构的桌面智能体评测系统 OSWorld-Pro,拆解 300+ 任务为 2,800+ 细粒度子目标
  • 依托 67,000+ 人类专家密集注释,揭露顶尖模型 Claude Opus 5 得分仅 75.7%(低于标准 OSWorld 的 83.4%)
  • 精确定位无效漫游与鼠标像素级点击偏移两大核心死穴,彻底终结桌面智能体盲盒式终态测试
阅读全文