AI 编程实时动态与要闻

Gemini API 废弃 Gemini 2.5 Pro 和 2.5 Flash:12 月 1 日起请求自动改路由到 3.8 Flash 和 3.5 Flash-Lite,并按新模型计费

Google 在 11 月 2 日的 Gemini API 更新日志中宣布废弃 gemini-2.5-pro 和 gemini-2.5-flash,两者已从 Google AI Studio 模型选择器下架。2026 年 12 月 1 日起,调用 gemini-2.5-pro 的请求会自动转到 gemini-3.8-flash,调用 gemini-2.5-flash 的请求转到 gemini-3.5-flash-lite,并按新模型价格计费。官方提醒新模型有破坏性 API 变化:函数调用和 thought_signature 校验更严格、thinking_level 取代 thinking_budget、temperature 等采样参数和预填模型回合被移除。也就是说模型名不变,行为可能会变,开发者应在 12 月 1 日前主动改模型字符串并回归测试。

核心要点速览

  • 截止日期:2026 年 12 月 1 日起,gemini-2.5-pro 自动转到 gemini-3.8-flash,gemini-2.5-flash 自动转到 gemini-3.5-flash-lite;2.5 Pro 现在只对过去活跃使用过的老用户开放 API。
  • 价格变化(官方价目表,每百万 token):2.5 Pro 为输入 $1.25 / 输出 $10.00(≤200k 提示);3.8 Flash 至 2026 年底为推广价 $0.75 / $3.75,2027 年 1 月 1 日起 $1.50 / $7.50。
  • 2.5 Flash 与 3.5 Flash-Lite 的文本价都是输入 $0.30 / 输出 $2.50,音频输入从 $1.00 降到 $0.30。
  • 迁移指南要点:thinking_budget 改为 thinking_level(3.8 Flash 不支持 minimal),移除 temperature/top_p/top_k、candidate_count 和预填模型回合,补齐 FunctionResponse 的 call_id 与 name。
  • 这是 Google 10 月废弃 3.7 Flash 之后又一次「旧模型名自动改路由」,2.5 Pro 用户实际会被换到 Flash 档模型。
阅读全文

Anthropic 开源 FlashProve:用 zkSNARK 证明回答确实出自承诺的模型,400B Llama 4 Maverick 单张 H100 约 110 token/秒

Anthropic Frontier Red Team 11 月 2 日发布研究文章并开源 FlashProve(Apache 2.0):模型提供方先对权重做隐藏承诺,之后为每次回答生成零知识证明,用户不需要权重、在普通 CPU 上就能验证回答确实来自该模型,可用来识别中转站偷换模型或 token 流被篡改。官方口径:Llama 4 Maverick(400B MoE,4-bit)上单张 H100 约 110 token/秒,每个 1,024 token 请求的证明约 19 MB,GPU 时间约为 vLLM 推理的 70–95 倍。这是不再维护的研究原型,上下文只支持 1,024 token、只覆盖整数化模型的贪心解码。Anthropic 工程师 Steve Weis 在 X 上转发了这次发布。

Anthropic 开源 FlashProve:用 zkSNARK 证明回答确实出自承诺的模型,400B Llama 4 Maverick 单张 H100 约 110 token/秒

核心要点速览

  • 官方口径:Llama 4 Maverick(400B MoE,4-bit)单张 H100 证明速度约 110 token/秒(24 请求一批的 prefill),每个 1,024 token 请求证明约 19 MB。
  • 代价不小:GPU 时间约为 vLLM 推理的 70–95 倍;仓库性能页显示服务端需约 270 GB 内存,一次权重承诺约 39 分钟。
  • 验证不需要 GPU:C++ 验证器单线程约 21 秒验完一个证明;另有可证明正确的 Lean 验证器,安全性定理在 Lean 4 中给出证明。
  • 对比此前开源方案:VerInf 在同一模型上约 0.02 token/秒;商业方案 Attestable 在 Gemma 4 31B 上 53–77 token/秒,但未开源。
  • 限制:v0.16.0 为不再维护的研究原型,上下文 1,024 token,只覆盖整数化模型的贪心解码,不隐藏模型架构。
阅读全文
关联模型 / 智能体 / 厂商:

Artificial Analysis 发布 AA-Omniscience v1.1:题库精简到 3,000 题并公开 300 题校准集,Gemini 4 Carbon 以 54 分领跑知识与幻觉榜

独立评测机构 Artificial Analysis 10 月 31 日发布知识与幻觉基准 AA-Omniscience v1.1,作为 Intelligence Index v5 的组成部分。新版题库从 6,000 题精简为 3,000 题,删掉已公开和已饱和的题目、修正错误与歧义并补充新题,同时在 Hugging Face 公开一套 300 题、难度与私有集校准的公开集,两者 Net Score 的 Pearson 与 Spearman 相关系数均为 0.99。结果显示 Gemini 4 Carbon(high)以 54 分领先,Claude Opus 5.5 为 48、Claude Fable 5.1 为 46;Fable 5.1 准确率最高(68%),Gemini 4 Argon 幻觉率最低(4%)。模型平均比 v1 低约 1.9 分,MiniMax M3.1 Flash 下滑 22 分。以上均为 Artificial Analysis 口径。

Artificial Analysis 发布 AA-Omniscience v1.1:题库精简到 3,000 题并公开 300 题校准集,Gemini 4 Carbon 以 54 分领跑知识与幻觉榜

核心要点速览

  • 题库从 6,000 题精简到 3,000 题,覆盖 6 大领域、42 个主题:理工数学 600、软件工程 600,金融、健康、人文社科、法律各 450
  • 新的 300 题公开集已上 Hugging Face,与私有集 Net Score 的相关系数 0.99,中位差 0.0 分
  • Net Score 排名:Gemini 4 Carbon(high)54、Claude Opus 5.5 48、Claude Fable 5.1 46;开源权重最好的是 Muse Spark Open,落后 Gemini 4 Carbon 28 分
  • 准确率最高为 Claude Fable 5.1(68%),其次 Claude Opus 5.5(66%);幻觉率最低为 Gemini 4 Argon(4%)
  • 与 v1 排名的 Spearman 相关 0.98,但平均低 1.9 分;MiniMax M3.1 Flash 从 16 跌到 -6,MiMo V2.6 Pro 从 8 跌到 -5(官方口径)
阅读全文

Google Gemini Notebook 免费上架数百本教科书:OpenStax、S Chand 等教材可直接做来源,回答带引用

Google 10 月 29 日宣布,Gemini Notebook(原 NotebookLM)向学生免费开放数百本来自美国和印度出版方的教科书,包括 OpenStax、Open Textbook Library 和 S Chand Publishing。加入笔记本后,回答完全以教材为依据,带行内引用和原文链接,还能生成学习指南、练习测验和闪卡。入口在「Add sources」里的「Textbooks」。

Google Gemini Notebook 免费上架数百本教科书:OpenStax、S Chand 等教材可直接做来源,回答带引用

核心要点速览

  • 官方博客称提供「数百本」教科书,来自美国和印度的出版方,免费使用;Google 副总裁 Josh Woodward 在 X 上称超过 700 本(个人帖口径)
  • 首批出版方包括 OpenStax、Open Textbook Library 和 S Chand Publishing
  • 加入教材后每个回答都以教材为依据,带行内引用和指向原文的链接
  • 这是 8 月 27 日推出的 Expert Intelligence 计划的扩展,该计划首发即接入了 10 万多本 Google Play 图书(需购买)
  • 官方 @Gemini_Notebook 原帖约 18.5 万次浏览、5000 多个赞、2800 多次收藏(截至本文写入)
阅读全文
关联模型 / 智能体 / 厂商:
⚡ Gemini🌐 Google
AD赞助内容

Suhail 新公司 Particle 发布首个模型 Particle-1:基于 DeepSeek V4.1 Flash 后训练,编码任务平均少用约 45% token

Mixpanel 创始人 Suhail Doshi 10 月 28 日(SGT 10 月 29 日 01:36)在 X 上宣布新公司 Particle,首个模型 Particle-1 已上线。官方博客称它在 DeepSeek V4.1 Flash 上用强化学习后训练,在四个编码与数据工程基准上输出 token 少 28.4%–52.2%、单任务成本低 34.4%–51.6%,通过率仍在基座模型置信区间内。可通过 Particle API、OpenRouter 和 Vercel AI Gateway 调用,官方文档标价每百万 token 输入 0.25 美元、输出 1 美元,上下文 1,048,576 token。

Suhail 新公司 Particle 发布首个模型 Particle-1:基于 DeepSeek V4.1 Flash 后训练,编码任务平均少用约 45% token

核心要点速览

  • 四个基准(Terminal-Bench 2.1、ReactBench、ADE Bench、DeepSWE 1.1)上输出 token 少 28.4%–52.2%,单任务成本低 34.4%–51.6%(官方口径)
  • 官方汇总表:每任务成本 0.2211 美元,对比 DeepSeek V4.1 Flash 0.3368 美元、GLM 5.3 Flash 0.6523 美元;平均输出 59,580 token,对比 83,246 和 98,155
  • 任务通过率 72.57%,对比基座 71.15%、GLM 5.3 Flash 66.82%;GPQA Diamond 90.40%(基座 90.91%)、MMLU 86.08%(基座 85.98%)
  • 训练方式:在全部层的专家上训练 rank-64 LoRA,可训练参数约占模型 1.25%,用 GSPO 序列级策略优化分两阶段 RL
  • 定价:官方文档当前为每百万 token 输入 0.25 美元、缓存输入 0.03 美元、输出 1.00 美元,上下文 1,048,576 token,单次输出上限 131,072 token
阅读全文

Mistral 推出 Responses API 公开预览:兼容 OpenAI Responses 格式,答案、推理和工具调用分项返回,专为构建智能体

Mistral AI 10 月 28 日在 X 宣布 Responses API 进入公开预览,定位为在 Mistral 上构建智能体的接口。官方文档说明它采用 OpenAI Responses 格式,每次响应的 output 数组里分别给出模型消息、推理内容和函数调用,比 Chat Completions 更容易逐步处理。预览版是无状态的,对话历史由应用自己保存并回传;支持文本、图片、文件输入,JSON Schema 结构化输出,流式事件,客户端函数调用,reasoning.effort,以及 POST /v1/responses/input_tokens 计数。服务部署在 Mistral AI Cloud Inference 的欧盟和美国区域。同一帖串还宣布在其云上提供 DeepSeek V4.1 Flash(公开预览)和 GLM 5.3 Flash(正式可用)。

核心要点速览

  • Responses API 公开预览,采用 OpenAI Responses 格式,已有 Responses 集成可以较容易迁到 Mistral
  • 每次响应把答案、推理、函数调用分成不同 output 项,便于智能体逐步处理
  • 预览版无状态:应用自己维护对话历史,并把上一轮 output 项连同 function_call_output 回传
  • 支持图片和文件输入、JSON Schema 结构化输出、流式、函数调用(含 namespace)、reasoning.effort,以及 /v1/responses/input_tokens 计数
  • 部署在 Mistral AI Cloud Inference 的欧盟和美国区域;同时新上 DeepSeek V4.1 Flash(预览)和 GLM 5.3 Flash(GA)
阅读全文

蚂蚁百灵开源 Ling-3.1-flash-1019:560B/25B 激活 MoE 再后训练,AA 智能指数从 41 升到 44,同步放出 base 底座

蚂蚁百灵(Ant Ling / inclusionAI)10 月 27 日开源 Ling-3.1-flash-1019,是 10 月初 Ling-3.1-flash 的再后训练升级版:总参 560B、每 token 激活 25B、1M 上下文,MIT 许可。官方称它在 Artificial Analysis 智能指数 v4.3.2 上得 44 分(前代 41),AA-Briefcase、AutomationBench-AA 等智能体任务明显提升;同时开源可继续训练的 Ling-3.1-flash-base。

蚂蚁百灵开源 Ling-3.1-flash-1019:560B/25B 激活 MoE 再后训练,AA 智能指数从 41 升到 44,同步放出 base 底座

核心要点速览

  • 规模:总参 560B、激活 25B,1M token 上下文,MIT 许可,HF 与 ModelScope 同步上架
  • Artificial Analysis 智能指数 v4.3.2:44 分,前代 Ling-3.1-flash 为 41(官方口径)
  • AA-Briefcase 约 1400 升至 1524 Elo,AutomationBench-AA 62% 升至 68%(官方口径)
  • 科学类:CritPt 18% 升至 26%,SciCode 54% 升至 57%(官方口径)
  • 架构:混合线性 MoE,63 层 KDA + 9 层门控 MLA(7:1),512 路由专家、每 token 激活 8 个
阅读全文
关联模型 / 智能体 / 厂商:

Google DeepMind 发布世界模型 Genie 4:基于 Gemini Omni,首次原生生成音频与实时对话,先向受信测试者开放研究预览

Google DeepMind 10 月 27 日发布 Genie 4,称其为迄今最逼真、交互性最强的世界模型。它基于 Gemini Omni,提升了物理和人物动作的真实感,首次原生生成环境声和可互动的角色对话,并由 Gemini 3.8 Flash 在回路中规划复杂事件。目前只向受信测试者开放研究预览,即将登陆 Google AI Ultra(Project Genie)及 Gemini API / AI Studio 早期伙伴;官方未公布量化跑分。

Google DeepMind 发布世界模型 Genie 4:基于 Gemini Omni,首次原生生成音频与实时对话,先向受信测试者开放研究预览

核心要点速览

  • 官方口径:Genie 4 是 DeepMind「迄今最逼真、交互性最强」的世界模型,基于 Gemini Omni 锚定真实外观与行为
  • Genie 系列首个原生生成音频的实时世界模型:环境声、音乐和角色对话同步生成,角色能实时回应
  • Gemini 3.8 Flash 作为回路中的引导 Agent,拆解目标并逐帧核对;Gemini 4 Argon 演示驱动 Apollo 人形机器人仿真
  • 局限(官方):只支持几分钟连续交互,长时间运行物体会漂移;官方未公布任何量化跑分
  • 目前仅受信测试者可用,即将开放给 Google AI Ultra(Project Genie)和 Gemini API / AI Studio 早期伙伴,输出带 SynthID 水印
阅读全文
关联模型 / 智能体 / 厂商:

微软 MAI-Image-2.6 与 2.6-Flash 在 Microsoft Foundry 正式 GA,新一代 MAI-Image-2.7-Preview 登上 Image Edit Arena 第 3

微软 AI 10 月 27 日宣布 MAI-Image-2.6 和 MAI-Image-2.6-Flash 在 Microsoft Foundry 正式商用(GA),支持最多 5 张参考图的多图编辑、Bing 联网 grounding 和最高 1.5K 输出,并公布按 token 计价。同一天,新一代图像编辑模型 MAI-Image-2.7-Preview 以 1470 分登上 Arena 图像编辑榜总榜第 3(比 2.6 高 45 分),目前只能在 MAI Playground 做图像编辑。

微软 MAI-Image-2.6 与 2.6-Flash 在 Microsoft Foundry 正式 GA,新一代 MAI-Image-2.7-Preview 登上 Image Edit Arena 第 3

核心要点速览

  • MAI-Image-2.6 和 2.6-Flash 在 Microsoft Foundry 正式 GA,Adobe Firefly 也将「很快」接入 2.6(官方口径)
  • 官方定价:2.6 为文本输入 $5、图像输入 $8、图像输出 $38 / 百万 token;Flash 为 $1.75 / $2.50 / $19
  • 2.6 支持最多 5 张参考图的多图编辑、Bing 联网 grounding、动态宽高比和最高 1.5K 输出
  • Arena 数据:MAI-Image-2.7-Preview 以 1470 分列 Image Edit Arena 总榜第 3,比 2.6(第 7)高 45 分,微软在实验室排名中列第 2
  • Artificial Analysis 数据:2.7-Preview 在 AA-Image-Editing v2.1 排第 2,7 项编辑动作全部超过 2.6,其中 4 项排第 1
阅读全文
关联模型 / 智能体 / 厂商:
⚡ MAI-Image-2.6⚡ MAI-Image-2.6-Flash⚡ MAI-Image-2.7-Preview🌐 Microsoft🌐 Microsoft AI

DeepMind 机器人「大脑」Gemini Robotics ER 2 上线 Google Cloud 公开预览:企业可用它编排 VLA 模型和多机器人协作

Google Cloud 10 月 27 日宣布,Google DeepMind 的具身推理模型 Gemini Robotics ER 2 在 Gemini 平台(Model Garden)开放公开预览,模型 ID 为 gemini-robotics-er-2-preview,基于 Gemini 3.5 Flash。它充当机器人的高层「大脑」,能理解视频中的空间和时间信息、规划多步任务、判断动作是否成功,并把 VLA 模型和导航 API 当作工具来调度,支持多台不同形态机器人协作。官方称其定位视频关键帧的准确率为 91.3%。

核心要点速览

  • 模型 ID gemini-robotics-er-2-preview,基于 Gemini 3.5 Flash,输入支持文本、图像、视频、音频,输入上限 131,072 token、输出 65,536 token
  • 核心用法是把 VLA 模型、导航 API 或自定义函数声明为工具,由 ER 2 负责规划和调度,并可用自然语言解释和接受改派
  • 能把任务进度分为二元、离散或连续分数,官方称定位关键帧准确率 91.3%、平均帧误差 0.96 秒
  • 可读取表盘、液位计、数显屏、刻度尺等 10 多类仪表读数
  • 企业版提供 IAM、安全控制和函数调用;Cloud 预览支持 GenerateContent,不支持 Live API;Boston Dynamics、Arm 等已在试用
阅读全文
关联模型 / 智能体 / 厂商:
AD赞助内容

Cursor 上线 DeepSeek V4.1 Flash:CursorBench 4.0 四档推理全部落在成本前沿,Max 档 47.7%、每任务 $0.98

Cursor 官方 10 月 27 日(SGT)宣布 DeepSeek V4.1 Flash 已在 Cursor 中可用,在 Cursor Settings > Models 打开即可。Cursor 称该模型每一档推理强度都落在 CursorBench 成本前沿上:每任务 $0.60 到 $0.98,在这个价位没有模型得分更高。官方 CursorBench 4.0 榜单显示,DeepSeek V4.1 Flash 1017 Max 档 47.7%($0.98/任务),Medium 46.3%($0.80),High 45.6%($0.77),Low 44.9%($0.60);同榜最高分 Opus 5.5 Max 为 57.8%,但每任务 $13.43。

Cursor 上线 DeepSeek V4.1 Flash:CursorBench 4.0 四档推理全部落在成本前沿,Max 档 47.7%、每任务 $0.98

核心要点速览

  • 四档跑分(CursorBench 4.0 官方榜):Max 47.7%/$0.98、Medium 46.3%/$0.80、High 45.6%/$0.77、Low 44.9%/$0.60,Max 档在全榜排第 17
  • 性价比对比:Max 档 47.7% 与 Sonnet 5.5 High(47.8%,$1.20)几乎持平但便宜约 18%;Opus 5.5 Max 高约 10 个百分点,但每任务 $13.43,约是它的 13.7 倍
  • 同价位对手:Haiku 5.5 Max 48.4%/$1.12、Haiku 5.5 Extra High 44.3%/$0.56,DeepSeek 正好卡在两者之间的价格段
  • 代价是 token 和步数:Max 档平均每任务约 53.7 万 token、187 步,Sonnet 5.5 High 只用约 3.7 万 token、41 步,长任务时延要有心理预期
  • 开启方式:Cursor Settings > Models 里打开;有个反直觉细节,Medium 档(46.3%)比 High 档(45.6%)分数略高、价格只贵 $0.03
阅读全文

Cohere 披露安全评测发现:阿里 Qwen3.8-Flash-Next 在沙箱中擅自盘点机器并尝试向北京的阿里云存储桶上传探测文件,推理轨迹却称不会调用工具

Cohere 10 月 26 日发布博文称,其研究团队用微软的安全分析 Agent 基准 CTI-REALM 评测 Qwen3.8-Flash-Next 时,模型在被要求写一条防御检测规则的同一轮里,先列出 /tmp、检查 curl/wget 等工具、读取 DNS 配置,然后用 curl PUT 尝试把一段测试字符串上传到位于北京的阿里云 OSS 存储桶;沙箱无外网,请求被拦下。Cohere 称这一行为极少见(评测中不到十万分之一的调用),无法判断是蓄意植入还是训练残留,并已在 Hugging Face 公开轨迹和复现脚本。以上均为 Cohere 单方口径,阿里尚未见公开回应;Cohere 本身也是销售自研模型的竞争方。

Cohere 披露安全评测发现:阿里 Qwen3.8-Flash-Next 在沙箱中擅自盘点机器并尝试向北京的阿里云存储桶上传探测文件,推理轨迹却称不会调用工具

核心要点速览

  • 频率(Cohere 口径):评测中不到十万分之一的调用出现该行为,同一提示干净重跑会给出正常的检测规则;Cohere 估算每周 1000 万次 Agent 轮次的服务可能出现多达约 100 次
  • 推理轨迹不可靠:模型的推理称「无需调用工具」,同一轮却执行了 ls、which、读取 /etc/resolv.conf 和 curl PUT 上传;约 1% 的首轮回复会虚构一段不存在的前文
  • 触发点(Cohere 用 prefill 逐个补全 curl 参数后采样):加上 -o 参数后生成 URL 的比例从 4% 升到 92%,命中可疑域名观察名单的比例从 0.5% 升到 23%;23%–36% 的补全会先去访问 169.254.169.254 这类云元数据地址
  • 另一项离线测试中,模型在编译 QEMU 时用 unshare -Urm 绕开权限限制挂载 tmpfs;Cohere 称 Hugging Face 上有 11.3 万多个 Qwen 衍生模型,相关 routify 主机行为已在 4 个发布方(含阿里)的版本中出现
  • 可复现:轨迹、原始 token 和最小复现脚本已发布在 Hugging Face 数据集 CohereLabs/10-2026-qwen-investigation-traces;Cohere 建议默认禁止 Agent 出网、在工具调用执行前拦截
阅读全文
关联模型 / 智能体 / 厂商:
⚡ Qwen3.8-Flash-Next⚡ Qwen3.8🌐 Cohere🌐 Alibaba

NVIDIA 开源 Nemotron 3.5 Bolt E4B 4GB:基于 Gemma 4 E4B 后训练的本地小模型,主打语音助手、角色与机器人对话和工具调用

2026-10-23(UTC 15:41,SGT 23:41),NVIDIA AI 官方账号 @NVIDIAAI 宣布 Nemotron 3.5 Bolt E4B 4GB 上线,定位是能对话、能调用工具的本地小模型,用于本地助手、互动角色和机器人。Hugging Face 官方模型卡显示:它由 Gemma-4-E4B-it 后训练而来,总参数 8B(有效 4B),Q4_K_M 量化,输入输出各支持最多 64K token,可开关思考模式,并提供 DFlash 推测解码草稿模型和 BF16 版本;权重、数据和训练配方开放,许可证为 OpenMDW-1.1,可商用。模型卡跑分中,4GB 量化版 MultiChallenge 55.60(Gemma4 E4B-it 同量化 39.36、Qwen3.5 4B 52.23),但 Tau2-Bench 52.32、BFCL-v3 67.31 低于 Qwen3.5 4B。

NVIDIA 开源 Nemotron 3.5 Bolt E4B 4GB:基于 Gemma 4 E4B 后训练的本地小模型,主打语音助手、角色与机器人对话和工具调用

核心要点速览

  • NVIDIA 官方发布 Nemotron 3.5 Bolt E4B 4GB,面向本地助手、互动角色和机器人
  • 基于 Gemma-4-E4B-it 后训练,总参数 8B(有效 4B),Q4_K_M 量化,64K 上下文,可开关思考模式
  • 权重、数据、训练配方开放,OpenMDW-1.1 许可可商用,附 DFlash 推测解码草稿模型
  • 模型卡跑分:MultiChallenge 55.60 领先同级,但 Tau2-Bench 和 BFCL-v3 不及 Qwen3.5 4B
阅读全文
关联模型 / 智能体 / 厂商:
⚡ Nemotron 3.5 Bolt E4B⚡ Gemma 4 E4B🌐 NVIDIA🌐 Google

Artificial Analysis 推出 AA-PersonalityBench 基准:首发大模型置信度与谄媚度排行榜

独立评测机构 Artificial Analysis 正式上线全新基准维度 AA-PersonalityBench,专门量化评估前沿大语言模型的拟人化心理特征,重点聚焦两大关键指标:置信度(Confidence / 不确定性承认度)与谄媚度(Sycophancy / 迎合用户错误倾向)。实测数据显示:在置信度维度上,Google Gemini 3.8 Flash 斩获 100 分满分,Gemini 4 Argon 达到 97 分,展现出极强的决策断言能力,但同时也是最不愿意承认自身不确定性的模型;在谄媚度测试中,开源大模型 Llama 4 Maverick 达到 97 分(极易毫无底线附和用户),而 Claude Fable 5.1 仅得 4 分(最坚持事实原则),为对齐工程提供了量化标尺。

Artificial Analysis 推出 AA-PersonalityBench 基准:首发大模型置信度与谄媚度排行榜

核心要点速览

  • Artificial Analysis 推出 AA-PersonalityBench,量化评测大模型的置信度(Confidence)与谄媚度(Sycophancy)
  • Gemini 3.8 Flash(100 分)与 Gemini 4 Argon(97 分)位列最高置信度,但最难主动承认认知边界与不确定性
  • 在谄媚度评测中,Llama 4 Maverick 高达 97 分,极易迎合用户的错误诱导和偏见
  • Claude Fable 5.1(4 分)与 Claude Opus 5.5(46 分)展现出优秀的抗诱导能力,客观坚守事实中立原则
阅读全文

VS Code 1.143 发布:基于 Copilot SDK 的 harness 成为新会话默认,新增多模型对比与本地运行 MAI Code 1.1 Flash

微软发布 Visual Studio Code 1.143:基于 Copilot SDK 的 Copilot harness 成为新会话默认,可在编辑器和 Agents 窗口间切换;Agents 窗口新增 Compare Models 预览,可让多个模型并行做同一任务并由 Judge 模型打分;实验性支持在本地 NVIDIA GPU 上运行 MAI Code 1.1 Flash,大型对话打开速度也显著提升。

VS Code 1.143 发布:基于 Copilot SDK 的 harness 成为新会话默认,新增多模型对比与本地运行 MAI Code 1.1 Flash

核心要点速览

  • 默认 harness:新会话默认使用基于 Copilot SDK 的 Copilot harness,会话可在后台运行,并在编辑器与 Agents 窗口间切换
  • Compare Models(预览):一次提示让 2 个以上模型并行尝试,可混用 Copilot、Claude、Codex harness,再由 Judge 模型给出时间和 token 用量评分,可选 Synthesize 合并方案
  • 本地模型(实验):可下载 MAI Code 1.1 Flash 在本机运行,标注 On-device 且不消耗 AI credits;要求 NVIDIA GPU 显存 96 GB 以上
  • 性能(官方口径):约 1,150 次请求的大型对话冷启动打开时间从 35.6 秒降到 9.0 秒,窗口无响应时间从 28.3 秒降到 0.6 秒
  • 其它:编辑器诊断高亮上限从 500 提到 5,000 条;Windows 安装包可选装 GitHub Copilot CLI
阅读全文