AI 编程实时动态与要闻

多智能体世界模型突破:OverSeer 提出辅助流联合预测,破解群体视界盲区与长程一致性

多所顶尖研究机构在 arXiv:2610.28554 中正式发布革命性多智能体世界模型架构 OverSeer。针对现存视频世界模型在扩展至多智能体协同场景时,各 Agent 视界受限(局部可观察性)、传统方案过度依赖外部地图拼接输入,导致多视角画面严重冲突与空间位置漂移的行业痛点,OverSeer 提出“将全局空间辅助流与多智能体第一人称流进行联合预测”的全新机制。在经典开放世界测试环境 Minecraft 的严格基准评测中,OverSeer 在空间定位(Grounding)、长程空间记忆(Memory)与多视角一致性(Consistency)指标上全面超越现有顶级基线,彻底消除了群体智能体在空间盲区下的物理幻觉。

多智能体世界模型突破:OverSeer 提出辅助流联合预测,破解群体视界盲区与长程一致性

核心要点速览

  • 研究团队在 arXiv:2610.28554 中发布 OverSeer 架构,首创面向群体协同交互的多智能体视频世界模型
  • 彻底摒弃依赖外部静态地图输入的落后做法,创新性引入与智能体第一人称流联合端到端预测的辅助空间表征流
  • 在开放世界沙盒 Minecraft 的严密多视角基准实测中,在物理定位、跨视野记忆与全局几何一致性上全面领跑
  • 为分布式多机器人协同作业、多人游戏 NPC 动态推演与复杂具身多智能体集群提供了高保真虚拟演练世界底座
阅读全文
关联模型 / 智能体 / 厂商:

NVIDIA 集中发布 Nemotron 3.5 开源模型矩阵:涵盖超强检索、物理世界大模型与 13 倍速蛋白质设计

在 GTC Berlin 开幕主题演讲中,NVIDIA 官方集中发布了横跨多个专业垂直领域的全新开源模型矩阵。核心亮点包括:支持长文本视觉推理的 Nemotron 3.5 Super VL 与即开即用的 Bolt 系列语言模型;专为高精度 RAG 打造的 Nemotron Retriever 嵌入、重排与文档解析全套套件;面向实体工业的 Cosmos 物理世界模型;面向自动驾驶的 Alpamayo 2 Edge;以及与华盛顿大学 Baker 实验室联合开发的蛋白质生成大模型 BioNeMo RFD4-Proteina。官方实测显示,RFD4-Proteina 在 10 项以上蛋白质设计基准中斩获全球第一,在 200 个氨基酸的靶点设计上比 RFdiffusion3 提速惊人的 13 倍。

NVIDIA 集中发布 Nemotron 3.5 开源模型矩阵:涵盖超强检索、物理世界大模型与 13 倍速蛋白质设计

核心要点速览

  • NVIDIA 在 GTC Berlin 集中开源全栈垂直基础模型:包含 Nemotron 3.5 Super VL、Bolt 4GB 端侧版与 Cosmos 物理世界模型
  • 发布 Nemotron Retriever 全套套件,将企业级 RAG 检索、跨模态重排与复杂 PDF 版面解析的准确率推至行业前列
  • 与顶尖 Baker 实验室联合开源 BioNeMo RFD4-Proteina,在 10 余项蛋白质靶向结合任务中登顶全球性能榜首
  • RFD4-Proteina 生成 200 氨基酸蛋白质结构的设计速度比前代标杆 RFdiffusion3 提速整整 13 倍,大幅缩短原研药发现周期
阅读全文
关联模型 / 智能体 / 厂商:
⚡ Nemotron 3.5 Super VL⚡ Nemotron 3.5 Bolt⚡ BioNeMo RFD4-Proteina⚡ Cosmos🌐 NVIDIA🌐 Baker Lab

可玩游戏世界模型新架构:Matrix-Game 4.0 解耦可执行游戏状态与视觉生成,破解长程一致性与规则执行

研究团队在 arXiv:2610.27999 中正式发布第四代交互式游戏世界模型系统 Matrix-Game 4.0。针对当前基于视频扩散模型的生成式世界普遍停留在“仅视觉受控”、缺乏持久游戏状态(World State)、无法严密执行游戏规则(如碰撞检测、计分、死亡判定)以及超高交互延迟的根本缺陷,Matrix-Game 4.0 提出了“游戏执行与视觉生成彻底解耦”的创新架构。通过轻量级可执行游戏脚手架维护物理与规则,驱动高帧率自回归视频生成骨干网络,在 100% 保障游戏可玩性与状态持久一致的同时,实现了真正实时的沉浸式游戏世界交互体验。

可玩游戏世界模型新架构:Matrix-Game 4.0 解耦可执行游戏状态与视觉生成,破解长程一致性与规则执行

核心要点速览

  • Matrix-Game 4.0 正式发布(arXiv:2610.27999),提出将游戏可执行逻辑与视觉生成解耦的世界模型全新技术路线图
  • 构建轻量可执行游戏脚手架(Game Harness),由确定性引擎负责持久状态与规则演算,彻底终结视频世界模型物理幻觉
  • 实现了从单纯“受控视频播放”到“真正具备可玩性与规则约束的交互世界”的质的飞跃,长程场景与状态一致性达成 100%
  • 在动作到画面的超低延迟交互渲染下稳定维持高帧率,为次世代 AI 驱动的无代码游戏创作与数字孪生提供核心基础设施
阅读全文
关联模型 / 智能体 / 厂商:

游戏世界模型空间一致性突破:ActionRoPE 将控制转化为世界坐标,重访漂移大幅降低 66%

来自多所高校的研究团队在 arXiv:2610.25861 中提出突破性世界模型动作接口 ActionRoPE 与坐标条件噪声调度算法(CNS)。针对俯视角与等距视角游戏世界模型中,传统将动作作为特征条件注入容易导致空间混淆、无法对齐世界坐标以及玩家返回旧场景时产生严重画面漂移(Revisit Drift)的行业痛点,ActionRoPE 创新性将动作驱动的相机位移直接转换为世界坐标旋转位置编码(RoPE),赋予相同空间物理位置恒定的位置地址。实测显示,该方法在保持动作遵循精度的同时,将重访漂移大幅削减 66%,并无缝泛化至 1.3B 到 33B 参数量的各大视频生成底座。

游戏世界模型空间一致性突破:ActionRoPE 将控制转化为世界坐标,重访漂移大幅降低 66%

核心要点速览

  • 研究团队推出 ActionRoPE 接口与 CNS 调度机制(arXiv:2610.25861),攻克俯视角与等距游戏世界模型空间不一致痼疾
  • 创新提出参数无关动作接口,将玩家运动相机位移直接映射为世界坐标 RoPE,确保同一物理坐标跨时间步持有唯一空间地址
  • 提出坐标条件噪声调度(CNS),区分已知观察区域与待合成区域,使重访漂移(Revisit Drift)相较最强基线大幅削减 66%
  • 具备极佳跨模型泛化性,在从 1.3B 到 33B 参数的多款主流视频扩散骨干网络上均实现即插即用
阅读全文
关联模型 / 智能体 / 厂商:
AD赞助内容

慕尼黑工大开创关系型数据库世界模型 TabWM:推演业务动态演化,开启企业数据库智能体强化学习

慕尼黑工业大学(TUM)研究团队在 arXiv:2610.16763 中开创性提出将关系型数据库交互建模为环境世界模型的 TabWM(Tabular World Model)框架与 WorldRel 生成器。针对现有关系型机器学习仅能静态预测表格属性、无法推演特定业务操作对数据库状态演化后果的根本缺陷,TabWM 将操作数据库视作离散“关系世界”,通过离线执行日志推演动态状态转移,为企业自主决策智能体与数据库离线强化学习铺平道路。

慕尼黑工大开创关系型数据库世界模型 TabWM:推演业务动态演化,开启企业数据库智能体强化学习

核心要点速览

  • 慕尼黑工业大学开创性提出将关系型数据库建模为世界模型的 TabWM 框架与 WorldRel 基准(arXiv:2610.16763)
  • 打破传统机器学习对表格的静态预测局限,推演业务动作引发的跨表级联状态差分演化
  • 在完全未见的动态世界中仅凭 10~20 条历史轨迹即可达成 0.84 以上的状态预测相关度,决策回报提升 28.4%
  • 为企业在生产数据库外部构建高保真离线业务沙盒、落地自主 Agent 强化学习提供了开创性基础
阅读全文
关联模型 / 智能体 / 厂商:

马里兰大学与 Google 提出 BeliefWeaver:隐式世界模型驱动长程 Agent 故障修复,9B 学生模型开销骤降 54.8%

马里兰大学与 Google、MBZUAI 研究人员在 arXiv:2610.18082 中提出长程智能体故障自愈框架 BeliefWeaver。针对自主 Agent 在复杂任务中因数步之前的隐蔽错误导致后期崩溃、传统局部反思或简易回滚无法定位根因的痛点,该框架维护跨尝试周期的关系型全局信念状态(Relational Belief State),引入隐式世界模型(IWM)预测修复收益并门控执行。经在策略蒸馏(OPD)微调后,9B 轻量学生模型在终端基准上超越基线 9.8 个百分点,且 API 成本大幅缩减 54.8%。

马里兰大学与 Google 提出 BeliefWeaver:隐式世界模型驱动长程 Agent 故障修复,9B 学生模型开销骤降 54.8%

核心要点速览

  • 马里兰大学、Google 与 MBZUAI 联合发布长程智能体自愈框架 BeliefWeaver(arXiv:2610.18082),攻克多步隐藏根因定位难题
  • 维护跨尝试周期的关系型全局信念状态图,引入隐式世界模型(IWM)前瞻推演修复假说并实施证据门控执行
  • 在三大终端基准测试中得分提升 5.1 个百分点,经在策略蒸馏的 9B 学生模型跑分反超基线 9.8 个百分点
  • 将庞大 Teacher 模型的单任务推理 API 成本大幅降低 54.8%,为工业级自主 DevOps 与智能体自愈提供高性价比解法
阅读全文
关联模型 / 智能体 / 厂商:

港大与清华揭示视频世界模型记忆假象 MIST:前序动作执行失败占比超 70%,误判为记忆遗忘

现有视频世界模型评测通常将场景记忆与动作执行揉合为单一最终得分,导致模型因未能生成动作而产生的状态缺失被错误归咎于记忆遗忘。香港大学与清华大学团队发表 MIST(arXiv:2610.23542,HF 12 赞,开源代码与主页上线)。该基准首次将“前置动作是否执行”与“后续场景是否记忆”彻底解耦,实测表明在主流视频世界模型中,高达 70% 的表面记忆失败本质上是动作执行失败;引入 M3 执行感知提示与多阶段分离评测后,世界模型真实长程记忆准确率提升 11.8 至 29.6 个百分点。

港大与清华揭示视频世界模型记忆假象 MIST:前序动作执行失败占比超 70%,误判为记忆遗忘

核心要点速览

  • 港大多媒体实验室与清华大学联合发布 MIST(arXiv:2610.23542),获 Hugging Face 热门论文 12 赞
  • 首次揭露现有视频世界模型评测中超过 70% 的“记忆遗忘失败”本质上是中间帧未能成功执行动作,而非真实记忆丢失
  • 构建动作执行与环境记忆解耦的三阶段因果验证基准,为世界模型诊断出根本性的故障归因
  • 在 WRBench 与 MBench 基准上,修正执行误差后世界模型的真实长程场景记忆得分显著提升 11.8 至 29.6 个百分点
阅读全文
关联模型 / 智能体 / 厂商:

同济与腾讯提出 3D 世界模型视角解耦表征 GeoState:分离相机畸变与场景演变,Waymo 跨帧预测零尺度漂移

现有 3D 世界模型多直接采用几何基础模型(GFM)特征作为状态,但视角依赖性导致相机运动与场景演变相互纠缠,长链路外推极易发生尺度漂移崩溃。同济大学与腾讯团队发表 GeoState(arXiv:2610.22343,项目主页上线)。该框架利用场景 Tokenizer 将多视角几何特征聚合为视角解耦的世界状态,自回归模型仅推演绝对场景状态,在 Waymo 自动驾驶长程深度预测中全程保持单一上下文尺度,且零样本泛化至 KITTI 与 nuScenes。

同济与腾讯提出 3D 世界模型视角解耦表征 GeoState:分离相机畸变与场景演变,Waymo 跨帧预测零尺度漂移

核心要点速览

  • 同济大学与腾讯团队提出 3D 世界模型视角解耦表征 GeoState(arXiv:2610.22343),根本性解决 GFM 特征视点依赖造成的长程尺度漂移
  • 通过场景 Tokenizer 将环视几何特征聚合为视角解耦状态,自回归模型推演物理演化,几何解码器按需响应目标相机光线查询
  • 在 Waymo 自动驾驶长程深度预测(t+0.2s 至 t+2.0s)中全程维持单一上下文尺度,全面超越 DINO-Foresight 与 VGGT-World
  • 展现出强大的跨传感器泛化能力,零样本无缝迁移至 KITTI 与 nuScenes 复杂路况
阅读全文
关联模型 / 智能体 / 厂商:

斯坦福与 CMU 联合提出具身世界模型测试时优化 T2-z:单次交互优化紧凑隐变量,真机操作成功率从 33.7% 跃升至 73.0%

机器人世界模型在面对未直接可视的环境物理特性(摩擦力、质量、重力、接触刚度)时往往预测失准。斯坦福大学与卡内基梅隆大学(CMU)携手丰田研究院(TRI)发表 T2-z(arXiv:2610.22364,GitHub: T2-z-latent-optimization/T2-z)。该方法在冻结预训练世界模型的前提下,在测试时仅需单次交互轨迹即可自适应优化紧凑的环境隐变量 z_e,在 7 项仿真与 4 项真机任务中将物理预测误差减半,真机动作成功率从 33.73% 暴涨至 72.96%。

斯坦福与 CMU 联合提出具身世界模型测试时优化 T2-z:单次交互优化紧凑隐变量,真机操作成功率从 33.7% 跃升至 73.0%

核心要点速览

  • 斯坦福大学与 CMU 联合提出具身世界模型测试时优化方案 T2-z(arXiv:2610.22364),专攻视觉不可直接观测的环境物理隐变量对齐
  • 在冻结世界模型的前提下,通过仅需单次交互轨迹优化紧凑隐变量 z_e,避免权重污染与过度拟合
  • 在 7 项仿真基准中将物理预测误差从 15.20 压减至 7.00,动作成功率从 33.73% 跃升至 72.96%
  • 在关门、球体摩擦与平衡杆等 4 项真实机器人任务中实现从 0~22% 到 55~62% 的翻倍级操控突破
阅读全文
关联模型 / 智能体 / 厂商:

具身 VLA 感知-动作解耦突破:PINT 共享预测意图令牌在 RoboTwin 2.0-Hard 飙升至 15.5%,PAIR 零推理开销提升真机成功率 13.6 个百分点

针对视觉-语言-动作(VLA)模型中高层语义特征、世界模型视频预测与底层高频动作控制相互割裂的难题,中关村学院与清华团队提出共享预测意图模型 PINT(arXiv:2610.16355),在无需具身预训练下将 RoboTwin 2.0-Hard 成功率从 StarVLA 的 3.2% 提升至 15.5%(4.8倍);同日发表的 PAIR(arXiv:2610.09016)与北大 SimForcing(arXiv:2610.06598)分别通过训练期掩码动作自编码器桥接令牌与仿真运动先验蒸馏,实现零额外推理延迟下的真机操控跃升。

具身 VLA 感知-动作解耦突破:PINT 共享预测意图令牌在 RoboTwin 2.0-Hard 飙升至 15.5%,PAIR 零推理开销提升真机成功率 13.6 个百分点

核心要点速览

  • PINT(arXiv:2610.16355)引入共享块级预测意图令牌协同 VLM、视频生成世界模型与动作专家,无需具身预训练即可在 RoboTwin 2.0-Hard 取得 15.5% 成功率(为 StarVLA 3.2% 的 4.8 倍、Fast-WAM 1.8% 的 8.6 倍)
  • 在 LIBERO-Plus 鲁棒性评测中 PINT 达到 79.5% 平均成功率,并在 5 项真机双臂任务上实现 68% ID / 24% OOD 成功率,大幅超越预训练模型 Motus(35% / 9%)
  • PAIR(arXiv:2610.09016)通过训练期掩码动作自编码器与 Bridge Tokens 弥合感知-动作鸿沟,推理期零额外开销,将 OpenVLA-OFT 在 7 项真机任务上的成功率从 51.4% 提升至 65.0%(+13.6 pts)
  • 北大 SimForcing(arXiv:2610.06598)将仿真器运动先验蒸馏至真实域机器人世界模型,在 Bridge 与 InternData-A1 上刷新 FVD/PSNR 并直接提升下游 LIBERO 策略表现
阅读全文
关联模型 / 智能体 / 厂商:
AD赞助内容

规则世界建模三大突破:OmniVerifier-C1 解耦分级验证器赋能迷宫/数独生成,美团 WorldCast 揭露开源仅 20.1 分代差,国大 RPO 扩散 RL 提速 4 倍

针对多模态生成模型向“严守物理与逻辑规则的世界模型”演进中的验证、评测与强化学习对齐难题,今日三项重磅研究给出系统答案:OmniVerifier-C1(arXiv:2610.22355,HF 32 赞)通过解耦强化学习(DAPO)将提示词拆解为子问题二元判断与全局连续打分,在 ViVerBench 上提至 0.684 并将 FLUX.1-dev 的 GenEval 推至 0.79;美团开源 320 例多步世界状态预测基准 WorldCast(arXiv:2610.20731,HF 30 赞),揭示 GPT-Image-2.5 System 达 72.8 分而最强开源模型仅 20.1 分;新加坡国立大学提出路由策略优化 RPO(arXiv:2610.22282),将注意力块路由作为随机探索动作,以仅 24.1 GPU 小时(较 Flow-GRPO 与 DanceGRPO 分别快 3.1 倍和 4.2 倍)大幅提升视频生成语义对齐。

规则世界建模三大突破:OmniVerifier-C1 解耦分级验证器赋能迷宫/数独生成,美团 WorldCast 揭露开源仅 20.1 分代差,国大 RPO 扩散 RL 提速 4 倍

核心要点速览

  • OmniVerifier-C1 采用解耦强化学习(DAPO)联合优化子问题二元判断与全局连续打分,在 ViVerBench 达 0.684 并将 FLUX.1-dev 的 GenEval 总分从 0.68 拉升至 0.79
  • 美团开源 320 例多步世界状态预测基准 WorldCast:评测 12 款模型发现 GPT-Image-2.5 System 斩获 72.8 分,Nano Banana Pro 为 42.8 分,而最强开源模型仅得 20.1 分
  • 新加坡国大提出路由策略优化(RPO):在注意力块路由内部进行双轨迹随机探索且推理期零改动恢复稠密注意力,在 Wan2.2-TI2V-5B 上仅需 24.1 GPU 小时(较 Flow-GRPO 与 DanceGRPO 分别快 3.1 倍和 4.2 倍)
阅读全文
关联模型 / 智能体 / 厂商:

零训练注意力提速 4.36 倍!新加坡国大 Velox 视锥空间记忆加速视频世界模型,南开 DeltaStreamer 与理大 CoWorld 刷新流式推理

围绕交互式视频世界模型(Video World Models)与流式视觉智能体的“历史 KV 缓存膨胀、记忆衰退与工具调用僵化”三大难题,今日四项重磅成果集体亮相:新加坡国立大学王鑫超团队推出免训练 3D 视锥切片注意力路由器 Velox(arXiv:2610.22311),在 H200 上将第 48 块长序列注意力加速 4.36 倍、去噪整体加速 2.43 倍;南开大学侯淇彬团队开源流式视频智能体 DeltaStreamer(arXiv:2610.19849,HF 39 赞),通过变化感知记忆与定向回放斩获 OVO-Bench 66.07%;香港理工大学开源 CoWorld Reasoner(arXiv:2610.21910),通过自演化 VLM-VWM Harness 在 ERQA 上相对提分 13.0%;浙大则推出包含 260 个多回访用例的世界记忆基准 WorldMemBench(arXiv:2610.19063)。

零训练注意力提速 4.36 倍!新加坡国大 Velox 视锥空间记忆加速视频世界模型,南开 DeltaStreamer 与理大 CoWorld 刷新流式推理

核心要点速览

  • 新加坡国立大学提出免训练 3D 视锥切片注意力路由器 Velox:在 H200 上将第 48 块长序列注意力加速 4.36 倍、扩散去噪加速 2.43 倍,WBench 158 例导航得分与全注意力仅差 0.15 分
  • 南开大学开源流式视频智能体 DeltaStreamer:结合变化感知结构化记忆与按需历史原帧回放,在 OVO-Bench 与 StreamingBench 上分别斩获 66.07% 与 59.53%
  • 香港理工大学开源 CoWorld Reasoner 自演化 VLM-VWM Harness,在 MMSI 与 ERQA 上分别取得 11.8% 与 13.0% 相对准确率跃升;浙大同步开源 260 例世界记忆基准 WorldMemBench
阅读全文
关联模型 / 智能体 / 厂商:

机器人世界基座模型登场!GreenWAM 统一 20 类机器人解剖结构:直控真机人形,零样本击败 Cosmos

长期以来,机器人的世界模型(预测场景演化)与控制策略(决策执行动作)各自为战,且不同形态机器人动作格式千差万别。研究团队发布机器人通用世界基座模型 GreenWAM:首次构建涵盖 20 类机器人家族(从双臂机械臂到高自由度人形机器人)的共享解剖动作空间(Shared Anatomical Action Space),支持视觉、动作条件与世界动作三大模式的联合预训练,并采用动作专家分离架构。实测显示,GreenWAM 在 WorldArena 1.0 的 3D 轨迹与深度精度排名榜首,在 RoboTwin 2.0 与 LIBERO-plus 上刷新 SOTA,并在实体人形机器人真机上实现高成功率连续控制,越级超越 Cosmos 3 Edge 与 π0.5。

机器人世界基座模型登场!GreenWAM 统一 20 类机器人解剖结构:直控真机人形,零样本击败 Cosmos

核心要点速览

  • 统一 20 类机器人解剖空间:首次在单一世界基座模型中融合双臂机械臂、轮足机器人与高自由度人形机器人的关节坐标,消除跨本体动作孤岛
  • 世界模型与控制策略二合一:通过联合多模态预训练与动作专家分离架构,既能生成高精度 3D 物理场景推演,又能直接输出低延迟闭环控制动作
  • 人形真机控制超越 π0.5:在 WorldArena 1.0 取得榜首精度,并在真实物理人形机器人操控上取得相比 Cosmos 3 Edge 与 π0.5 更高的部署成功率
阅读全文
关联模型 / 智能体 / 厂商:

告别像素重构幻觉!首个隐空间 GUI 世界动作模型发布:延迟暴降 98.9%,在线任务成功率狂飙 40.6%

近期兴起的像素级世界模型(Pixel-space World Models)试图通过预测执行后的未来屏幕画面再反向选动作,但在 GUI 环境中面临双重困境:全屏像素重构计算成本极高,且极易触发“恒等捷径”(Identity Shortcut,即预测画面倾向于维持原样而非体现动作引发的变化)。KAIST 等团队提出首个专为 GUI 智能体打造的隐空间世界动作模型(Latent World Action Model):将预测目标从全屏像素渲染转移至动作引发的隐空间动态转移,引入动作选择与预测转移双头架构及动作感知对比学习。实验显示,在线任务成功率暴增 40.6%,同时将推理延迟大幅压缩了 98.9%。

告别像素重构幻觉!首个隐空间 GUI 世界动作模型发布:延迟暴降 98.9%,在线任务成功率狂飙 40.6%

核心要点速览

  • 破除全屏重构开销与恒等捷径:将未来状态建模从高成本、易抄袭前帧的像素图像生成,重构为轻量级隐空间动态转移预测
  • 解耦双头与动作对比学习:利用多模态大模型基座支撑动作选择与未来转移双预测头,引入对比损失强迫模型捕获动作诱发的细粒度变化
  • 速度与成功率双重飞跃:离线与在线 GUI 任务成功率分别提升 31.9% 与 40.6%,推理延迟断崖式缩减 98.9%,满足实时操作需求
阅读全文
关联模型 / 智能体 / 厂商:
⚡ Latent-WAM⚡ Pixel-World-Model⚡ Claude 3.5 Computer Use🤖 GUI Agents🤖 Desktop OS Agents🌐 KAIST🌐 Yonsei University

破解智能体自我进化瓶颈!通用递归自我提升框架 RSI-Anything 开源:代码修复率升至 31.2%

让人工智能智能体在与环境的持续交互中实现‘递归自我提升(Recursive Self-Improvement, RSI)’是实现通用人工智能的核心圣杯。然而,传统的智能体自演化范式长期受困于两大致命死穴:外部真实环境的反馈(Ground-Truth Feedback)通常极度稀缺且获取成本高昂;同时,伴随策略权重的持续迭代演化,充当模拟器的世界模型(World Models)极易因数据分布漂移而发生预测崩溃,引发灾难性的策略畸变。香港科技大学、上海人工智能实验室、北京大学与香港中文大学联合科研团队在最新力作(arXiv:2610.13912)中正式开源了领域通用的递归自我提升框架 RSI-Anything(代码仓库:github.com/Gen-Verse/RSI-Anything)。基于前沿联合嵌入预测架构 JEPA-Anything 构建,RSI-Anything 确立了‘提议 -> 预测 -> 筛选 -> 评估 -> 学习 -> 保留(Propose-Predict-Select-Evaluate-Learn-Retain)’的六阶段自我演进闭环。系统引入严格的组件与兼容性校验门禁,实现了策略模型与世界模型的动态协同适应。在跨越代码修复、GUI 桌面导航、实验室实验规划以及复杂化学反应优化的广泛实验中,RSI-Anything 展现出惊人的跨领域进化力:自动化代码修复成功率从静态验证器基线的 26.3% 跨越式跃升至 31.2%(提升近 5 个百分点);GUI 任务完成所需操作步数大幅缩减 39.4%;实验室规划得分经 5 轮迭代从 21.80% 暴增至 46.01%(翻倍以上);化学反应产率高达 96.15%,全面碾压传统贝叶斯优化,代码与训练管线已全量开源。

破解智能体自我进化瓶颈!通用递归自我提升框架 RSI-Anything 开源:代码修复率升至 31.2%

核心要点速览

  • 通用递归自我提升框架 RSI-Anything 正式开源,破解大模型智能体真实反馈匮乏与世界模型漂移瓶颈
  • 确立六阶段自演化闭环(P-P-S-E-L-R),代码修复率从 26.3% 跨越至 31.2%,GUI 操作步数精简 39.4%
  • 经 5 轮自迭代实验规划得分翻倍(21.80% 飙升至 46.01%),化学反应产率达 96.15% 碾压贝叶斯优化
阅读全文