AI 编程实时动态与要闻

规则世界建模三大突破:OmniVerifier-C1 解耦分级验证器赋能迷宫/数独生成,美团 WorldCast 揭露开源仅 20.1 分代差,国大 RPO 扩散 RL 提速 4 倍

针对多模态生成模型向“严守物理与逻辑规则的世界模型”演进中的验证、评测与强化学习对齐难题,今日三项重磅研究给出系统答案:OmniVerifier-C1(arXiv:2610.22355,HF 32 赞)通过解耦强化学习(DAPO)将提示词拆解为子问题二元判断与全局连续打分,在 ViVerBench 上提至 0.684 并将 FLUX.1-dev 的 GenEval 推至 0.79;美团开源 320 例多步世界状态预测基准 WorldCast(arXiv:2610.20731,HF 30 赞),揭示 GPT-Image-2.5 System 达 72.8 分而最强开源模型仅 20.1 分;新加坡国立大学提出路由策略优化 RPO(arXiv:2610.22282),将注意力块路由作为随机探索动作,以仅 24.1 GPU 小时(较 Flow-GRPO 与 DanceGRPO 分别快 3.1 倍和 4.2 倍)大幅提升视频生成语义对齐。

规则世界建模三大突破:OmniVerifier-C1 解耦分级验证器赋能迷宫/数独生成,美团 WorldCast 揭露开源仅 20.1 分代差,国大 RPO 扩散 RL 提速 4 倍

核心要点速览

  • OmniVerifier-C1 采用解耦强化学习(DAPO)联合优化子问题二元判断与全局连续打分,在 ViVerBench 达 0.684 并将 FLUX.1-dev 的 GenEval 总分从 0.68 拉升至 0.79
  • 美团开源 320 例多步世界状态预测基准 WorldCast:评测 12 款模型发现 GPT-Image-2.5 System 斩获 72.8 分,Nano Banana Pro 为 42.8 分,而最强开源模型仅得 20.1 分
  • 新加坡国大提出路由策略优化(RPO):在注意力块路由内部进行双轨迹随机探索且推理期零改动恢复稠密注意力,在 Wan2.2-TI2V-5B 上仅需 24.1 GPU 小时(较 Flow-GRPO 与 DanceGRPO 分别快 3.1 倍和 4.2 倍)
阅读全文
关联模型 / 智能体 / 厂商:

扩散语言模型后训练突破!KAIST 等发布 Pivot-SD:信息增益定位关键决策,仅需 200 题超越全量 SFT 与强化学习

以 LLaDA 为代表的掩码扩散语言模型(dLMs)因其高度可并行解码与非自回归推理特性,被视为突破传统自回归大模型(AR-LLM)串行推理速度与长程规划瓶颈的关键方向。然而,扩散语言模型在去噪生成过程中面临极其严峻的“信用分配(Credit-Assignment)”难题:在全序列逐步去噪的过程中,往往只有极少数关键决策(Pivots)能够剧烈降低未掩码未知区域的不确定性,并决定整段回答的正确性;而现存的扩散模型微调通常简单粗暴地在最终文本上做全量 SFT,或给整步去噪施加统一标量奖励,导致梯度严重稀释并破坏扩散采样流。来自韩国科学技术院(KAIST)与多伦多大学/Vector 研究所的研究团队推出了高效离线自蒸馏框架 Pivot-SD(arXiv:2610.03665):基于信息增益(Information Gain)指标自动定量筛选出决定去噪走向的关键决策点(Pivots),对成功轨迹中的 Pivot 执行交叉熵奖励,对失败轨迹中的 Pivot 进行靶向逆似然惩罚(Targeted Unlikelihood),同时完全保留失败轨迹中的其他无害 token。在 LLaDA-8B-Instruct 上的实验表明,Pivot-SD 仅需 200 道题目(每题仅采样 4 条轨迹,总计 800 条 rollout),就在数学推理与代码基准上全面击败了算力预算对齐的全序列 SFT 与扩散 RL 基线。

扩散语言模型后训练突破!KAIST 等发布 Pivot-SD:信息增益定位关键决策,仅需 200 题超越全量 SFT 与强化学习

核心要点速览

  • 提出首个针对掩码扩散语言模型(dLMs)的 Pivot-SD 离线自蒸馏框架,破解扩散去噪多步信用分配困境
  • 利用信息增益定量筛选关键决策 Token(Pivots),在正样本上施加交叉熵,在负样本上实施靶向逆似然惩罚
  • 仅需 200 道题目与 800 条离线轨迹,在 LLaDA-8B-Instruct 上全面超越全序列 SFT 与同算力 Diffusion RL
阅读全文
关联模型 / 智能体 / 厂商:

上海 AI Lab 开源 AV-GRPO:首创模态锚定解耦扩散强化学习,攻克音视频联合生成对齐与同步难题

上海人工智能实验室(Shanghai AI Laboratory,@huggingface)联合高校正式开源了面向音视频联合生成的多模态强化学习框架 AV-GRPO(arXiv: 2609.29816,GitHub: zhiyuxu03/AV-GRPO)。针对当前主流多模态生成模型在声画同步、跨模态因果对齐上的严重脱节,以及音视频双塔模型直接联合训练时算力开销激增、奖励信用分配模糊等瓶颈,AV-GRPO 首创了“模态锚定采样(Modality-Anchored Rollouts)”与“轨迹锁定冻结塔优化机制”,将复杂的跨模态偏好对齐转化为单模态解耦子问题,并在多项权威音视频生成基准上全面击败 LTX-2.3 达到业界 SOTA。

上海 AI Lab 开源 AV-GRPO:首创模态锚定解耦扩散强化学习,攻克音视频联合生成对齐与同步难题

核心要点速览

  • 首次将 DeepSeek GRPO 强化学习框架成功拓展至声画联合生成的连续扩散模型(Diffusion RL)领域。
  • 提出模态锚定解耦机制,交替冻结单模态塔进行轨迹锁定,彻底理清异构奖励信号的精准信用分配。
  • 开源业界首个五维解耦、难度可控的音视频强化学习训练数据集 5DAV。
  • 在 JavisBench 与 VABench 权威评测中,声画同步率与文本语义对齐度较 LTX-2.3 基线分别提升 28.4% 与 19.6%。
  • 全量推理与训练代码、LoRA 权重与 5DAV 数据集已在 GitHub 和 Hugging Face 全面开源。
阅读全文
关联模型 / 智能体 / 厂商:
⚡ Av Grpo⚡ Ltx Video⚡ Hunyuan Video🤖 multimodal-agent🌐 shanghai-ai-lab🌐 huggingface