浙江大学与腾讯开源深搜智能体对齐算法 KnowGPO:原子知识状态分组强化学习,8B 模型跨级超越 32B 开源系统并在 GAIA 斩获 40.2 分
深度搜索智能体在长链路多轮检索中面临严重的信贷分配(Credit Assignment)难题。浙江大学与腾讯联合开源 KnowGPO(arXiv:2610.22331,GitHub: ZJU-REAL/KnowGPO)。该算法将复杂问答拆解为原子知识条件集合,以知识状态对齐代替杂乱的表面文本对齐,并在同状态组内计算增量知识过程奖励。微调后的 Qwen3-8B 在 BrowseComp-ZH(38.8%)与 GAIA(40.2%)上全面超越 GRPO 与 GiGPO,越级战胜 32B 级开源深搜基线并逼近闭源模型。

核心要点速览
- 浙江大学与腾讯联合开源 KnowGPO(arXiv:2610.22331),解决长程深搜智能体中网页噪声大、过程信贷分配失效的核心痛点
- 以原子知识条件替代表面文本状态,通过同知识状态组内相对优势与增量知识过程奖励实现鲁棒对齐
- Qwen3-8B 接入 KnowGPO 后在 BrowseComp-ZH 达到 38.8%、GAIA 达到 40.2%,较标准 GRPO 绝对提升 5.9 / 5.2 个百分点
- 8B 模型性能跨级超越 WebSailor-32B、ASearcher-Web-32B 等开源 32B 系统,逼近 DeepMiner-32B 与商业闭源模型