AI 编程实时动态与要闻

零生成 Token 提速 5.6 倍!MJev-Spatial 原生注意力匹配登顶 HuggingFace 热榜,港中大 CarryOn 双环具身框架将违规率砍至 6.1%

针对视觉语言模型(VLM)在空间感知中依赖自回归文本生成导致的高延迟,以及具身 VLA 模型缺乏个性化与物理安全兜底的难题,今日两项重磅开源成果给出解法:MJev-Spatial(arXiv:2610.22276,HF 350 赞登顶)复用骨干 Q/K 投影将空间判断转化为单次前向分类,零新增参数提速 5.6 倍并在 12 项基准斩获 65.64% 第一;港中大贾佳亚团队 CarryOn(arXiv:2610.21453)以规划-执行双环 Harness 将机器人安全违规率从 52.6% 降至 6.1%,故障恢复成功率从 13% 飙至 80%。

零生成 Token 提速 5.6 倍!MJev-Spatial 原生注意力匹配登顶 HuggingFace 热榜,港中大 CarryOn 双环具身框架将违规率砍至 6.1%

核心要点速览

  • MJev-Spatial 复用 VLM 原生 Q/K 投影将三类空间感知任务统一为单次前向分类,生成 0 个 Token,推理较 Qwen3.5-4B 基座提速 5.6 倍,12 项空间基准均分达 65.64%
  • 联合粗到细 Teacher Forcing 监督与长度感知全局批处理,使 MJev-Spatial 在 1,230 万空间问答对上的训练吞吐提升 30.8%
  • 港中大贾佳亚团队 CarryOn 双环具身 Harness 将安全微调后 VLA 的违规率从 52.6% 压降至 6.1%,物理失败自主恢复成功率从 13% 提升至 80%
阅读全文
关联模型 / 智能体 / 厂商:

免工具内化三维空间智能!SpatialOPSD 开源:特权 Coding Agent 轨迹自蒸馏打造独立端到端 MLLM

在多模态大语言模型(MLLMs)中,赋予其精确理解三维物理空间、位姿几何与物体遮挡关系的能力,是迈向物理世界 Agent 与具身机器人的先决条件。当前前沿系统普遍依赖‘空间编码智能体(Spatial Coding Agents)’:通过在推理阶段动态编写并执行 Python 视觉几何代码(如调用 OpenCV、点云分割库与相机投影函数)来辅助空间推理。然而,这种依赖外部解释器与工具链的架构在真实生产中带来了不可接受的推理延迟暴增、复杂沙箱依赖以及频繁的工具调用环境崩溃。在最新发表的研究成果(arXiv:2610.11366)中,研究团队发布了端到端在线自蒸馏框架 SpatialOPSD(开源仓库:github.com/vermouth599/Spatial-OPSD)。SpatialOPSD 创造性地将验证过的空间 Coding Agent 执行轨迹作为‘特权信息(Privileged Information)’,通过策略内自蒸馏(On-Policy Self-Distillation)技术,将高维空间计算能力无损内化进独立的单体 MLLM 中。为了彻底根除自蒸馏过程中特权信息泄露引发的模型重复生成与幻觉,团队设计了‘重复感知蒸馏(Repetition-Aware Distillation)’机制,结合重复掩码与非似然正则化。实测表明,纯端到端免工具的 SpatialOPSD 模型在各类空间理解与几何推理基准上全面超越原生基座,在推理时延降低数倍的同时彻底摆脱了外部代码执行沙箱,代码已开源。

免工具内化三维空间智能!SpatialOPSD 开源:特权 Coding Agent 轨迹自蒸馏打造独立端到端 MLLM

核心要点速览

  • SpatialOPSD 框架开源,首创特权 Coding Agent 轨迹自蒸馏,将空间几何工具能力内化至单体 MLLM
  • 提出重复感知蒸馏机制(Repetition-Aware Distillation),有效杜绝特权信息泄露引发的模型重复退化与幻觉
  • 完全剔除外部代码沙箱与工具依赖,推理时延缩减 75% 以上,三维空间推理准确率大幅超越同类无工具基线
阅读全文
关联模型 / 智能体 / 厂商:

高德发布“千舆”空间智能开放平台:首创全空间无人体系,开放 56 项 MCP 与 23 项 Skill 接口

在 2026 杭州云栖大会上,高德地图(@Alibaba_Cloud / Amap)正式发布“千舆”空间智能开放平台与全空间无人体系解决方案。该平台将覆盖 8000 万+ POI、500 万公里高精道路与 7500 平方公里 3D 城市模型的时空底座封装为标准化的 Agent 工具集,全面开放 56 项 MCP(Model Context Protocol)能力与 23 项核心 Skill,赋能具身智能机器人、低空无人机与自主物流系统开箱即用。

高德发布“千舆”空间智能开放平台:首创全空间无人体系,开放 56 项 MCP 与 23 项 Skill 接口

核心要点速览

  • 将大模型从离散语言理解推进至物理世界时空决策,提出“语言理解世界,空间智能改变世界”定位。
  • 首批开放 56 项 MCP 协议工具与 23 项标准化技能,支持与 Claude、Qwen、DeepSeek 等各类 Agent 无缝插拔。
  • 提供交通、物流、商业、低空与具身五大领域专属智能体,空间决策求解效率提升 8.4 倍。
  • 国内开发者可直接通过高德开放平台申请接入,享有无代码与 SDK 双重开发模式。
阅读全文
关联模型 / 智能体 / 厂商:

World Labs 发布 Atlas:原生处理文本/图像/视频/3D 的全向世界模型

Fei-Fei Li 联合创立的 World Labs 于 9 月 1 日推出 Atlas,从零预训练的多模态自回归扩散 Transformer,把文本、图像、视频与 3D 纳入共享空间上下文。可生成最长约 1 分钟、最高 1440p 的相机可控视频,支持稀疏图像三维重建、点云/高斯泼溅输出,以及面向机器人的 Real-to-Sim。现已对选定合作伙伴开放早期访问,并将驱动未来 Marble 产品。

核心要点速览

  • 原生相机几何输入,支持最长约 1 分钟、最高 1440p 的相机可控生成
  • 稀疏视图三维重建可输出点云与高斯泼溅,并服务机器人 Real-to-Sim
  • 现对选定合作伙伴早期访问,将驱动后续 Marble 等产品
阅读全文
关联模型 / 智能体 / 厂商:
⚡ Atlas⚡ Marble🌐 World Labs
AD赞助内容