AI 编程实时动态与要闻

Vercel Labs 发布 agent-desktop:给任意编码 Agent 的桌面 Computer Use,基于系统无障碍树而非截图像素,支持 macOS/Windows/Linux

10 月 31 日,Vercel Labs 的 Chris Tate(agent-browser 作者)在 X 上发布 agent-desktop,称其为「整台电脑版的 agent-browser」。它是一个 Rust 编写、Apache-2.0 开源的 CLI 和 C 库:读取桌面应用的系统无障碍树,以 JSON 返回每个可操作元素的 ref,Agent 按 ref 点击、输入后再快照核对,不做像素匹配,默认在后台无头运行。1.0.0 已于 10 月 27 日发布并首次加入 Linux 支持,目前 npm 最新版为 1.0.2。

Vercel Labs 发布 agent-desktop:给任意编码 Agent 的桌面 Computer Use,基于系统无障碍树而非截图像素,支持 macOS/Windows/Linux

核心要点速览

  • 安装:npm install -g agent-desktop,一个包自带 x64/ARM64 原生二进制;1.0.0(10-27)加入 Linux(glibc 2.35+,经 AT-SPI),npm 最新 1.0.2(10-30)
  • 工作方式:snapshot 输出带 ref 的 JSON 树,click @<snapshot_id>:eN 操作,再 snapshot 核对;UI 变化时返回 STALE_REF,错误里带 retry 是否安全的标记
  • 规模:README 称共 60 个命令名、56 个可用命令,覆盖窗口、键鼠、通知、剪贴板、等待与会话追踪
  • 默认无头:按 ref 的操作走无障碍 API,不移动鼠标、不抢焦点,需要真实输入时加 --headed;Chris Tate 称多个 Agent 可各带一个光标并行使用电脑
  • 跑分:官方未公布任何成功率或速度基准;它只是工具,不内置模型,网页自动化仍交给 agent-browser
阅读全文

Amp 推出 macOS Satellites(beta):智能体约 30 秒拉起云端 Mac,自动构建、测试、运行 iOS/Mac 应用,$2/小时起

Amp 10 月 29 日上线 macOS Satellites:线程仍跑在 Linux orb 上,需要 macOS 时自动启动一台预装 Xcode 与模拟器的云端 Mac,只在上面构建、运行和测试,截图、日志和录屏回传线程。mac.medium $2/小时、mac.large $4/小时,beta 需排队。CEO Quinn Slack 称智能体做 macOS 开发时只有约 35% 的时间需要 Mac。

Amp 推出 macOS Satellites(beta):智能体约 30 秒拉起云端 Mac,自动构建、测试、运行 iOS/Mac 应用,$2/小时起

核心要点速览

  • 官方称云端 Mac 约 30 秒就绪,预装 Xcode、iOS 模拟器和 Homebrew
  • 两档规格:mac.medium 6 核 14 GB $2/小时,mac.large 12 核 28 GB $4/小时,先扣套餐内 orb 用量,再扣 Amp credits
  • Mac 用完后保留 20 分钟复用构建缓存,之后删除,不保存任何数据
  • CEO Quinn Slack 在 X 上称:即使是重 macOS 的开发,智能体也只有约 35% 的时间需要 Mac(团队口径)
  • 目前为 beta,需在 Settings → Experimental Features 加入等候名单
阅读全文
关联模型 / 智能体 / 厂商:

Apple 推送 27.2 系统更新:Siri AI 新增法语、日语、韩语、葡萄牙语和西班牙语,并能记住过去的对话

Apple 10 月 26 日发布 iOS、iPadOS、macOS、watchOS 和 visionOS 27.2,基于 Apple Intelligence 重做的 Siri AI(Beta)在英语之外新增法语、日语、韩语、葡萄牙语和西班牙语。官方称繁体中文、挪威语、土耳其语和越南语将在年底前上线。按 iOS 27.2 发布说明,Siri AI 现在可以回忆过去的对话,并能从信息里的照片、日历参与者、语音留言等更多来源取材。Siri AI 仍不在欧盟(iOS、iPadOS、watchOS)和中国大陆提供,依赖服务器端模型的功能有每日用量上限,Apple 称未来将推出付费的扩展额度。

Apple 推送 27.2 系统更新:Siri AI 新增法语、日语、韩语、葡萄牙语和西班牙语,并能记住过去的对话

核心要点速览

  • 语言:Siri AI 从仅英语扩展到 6 种语言,新增法语、日语、韩语、葡萄牙语、西班牙语;繁体中文、挪威语、土耳其语、越南语官方称年底前上线
  • 覆盖 5 个平台:iOS、iPadOS、macOS、watchOS、visionOS 27.2 同日推送,Siri AI 仍标注为 Beta
  • 新能力(据 iOS 27.2 发布说明):可回忆过去的对话,新增信息内照片、日历参与者、语音留言等取材来源,并可在一个设置里排除指定 App
  • 限制:iOS/iPadOS/watchOS 在欧盟不可用,中国大陆账号不可用,13 岁以下不可用;服务器端模型功能有每日上限,Apple 称将来提供付费扩展额度
  • 机型:iPhone 15 Pro 及之后机型、M1 及以上 iPad 和 Mac 等 Apple Intelligence 设备,设备语言与 Siri 语言需一致
阅读全文
关联模型 / 智能体 / 厂商:
⚡ Apple Intelligence⚡ AFM 3🤖 Siri AI🌐 Apple

Google 发布 Gemini API CLI(gemini-api)实验预览:零依赖 Go 二进制,让 Claude Code、Codex、Cursor 等编码 Agent 直接出图、出视频、转写并调度托管 Agent

Google AI Studio 团队发布 Gemini API CLI(命令名 gemini-api)实验预览版。它是一个无状态、零依赖的 Go 单文件,支持 macOS、Linux、Windows,Apache 2.0 开源。任何有 shell 权限的编码 Agent 配好 GEMINI_API_KEY 后,就能用一条命令调用文本推理、图像/视频/音乐/语音生成、文件与 YouTube 分析、音视频转写,以及 Deep Research 等托管 Agent。媒体结果直接写到磁盘、只把文件路径打印到 stdout,避免把 base64 塞进上下文。官方说明它是实验项目,不属于受支持的 Google 产品。

Google 发布 Gemini API CLI(gemini-api)实验预览:零依赖 Go 二进制,让 Claude Code、Codex、Cursor 等编码 Agent 直接出图、出视频、转写并调度托管 Agent

核心要点速览

  • 默认模型(官方 README):generate/analyze/transcribe 用 gemini-3.8-flash,image 用 gemini-nano-banana-2.1,video 用 gemini-omni-1.1-flash,music 用 lyria-3.5,tts 用 gemini-3.8-flash-tts
  • 安装:macOS/Linux 一行 curl 脚本、Windows 用 PowerShell 脚本,或 go install;GitHub 最新版本为 v0.4.3(2026-10-19 发布)
  • 面向 Agent 的机器接口:--usage 输出 KDL 命令树、--schema 输出 JSON Schema、--dry-run 离线校验且隐去凭据、--output-format json/toon、内置 --jq
  • 退出码区分 4 种情况:0 成功、1 运行/API 失败、2 用法或校验错误、3 鉴权失败;--agent-mode 输出结构化 JSON 错误
  • 还能管理托管 Agent 的沙箱环境、服务端凭据、Webhook 和 cron 触发器;Files API 上传文件保留 48 小时
阅读全文
关联模型 / 智能体 / 厂商:
⚡ Gemini 3.8 Flash⚡ Gemini Nano Banana 2.1⚡ Gemini Omni 1.1 Flash⚡ Lyria 3.5⚡ Gemini 3.8 Flash TTS🤖 Gemini API CLI🤖 Claude Code🤖 Codex🤖 Cursor🤖 Antigravity🤖 Deep Research🌐 Google
AD赞助内容

阿里通义实验室开源 OpenGCUA:通用计算机控制智能体全开源技术栈,OSWorld 步数锐减 53%

阿里巴巴通义实验室(Tongyi-MAI)在 arXiv:2610.22200 正式发布并全面开源 OpenGCUA(Open Generalist Computer-Use Agent)通用计算机控制智能体技术栈。针对当前 GUI 智能体过度依赖逐帧截图与单点点击、无法执行高效批处理操作的行业痛点,OpenGCUA 首创“代码执行即行动(Code-Execution-as-Action)”范式,将视觉感知、可访问性树(Accessibility Tree)、Bash 脚本与 Playwright API 深度融合。在权威 OSWorld-v2 基准测试中,OpenGCUA 推动各大主流前沿模型平均得分大幅提升 19.6 分,同时将任务完成平均步数削减 53.0%,并配套开源了 macOS 实体机状态栏应用与跨设备 SDK。

阿里通义实验室开源 OpenGCUA:通用计算机控制智能体全开源技术栈,OSWorld 步数锐减 53%

核心要点速览

  • 阿里通义开源 OpenGCUA 全技术栈,收录于 arXiv:2610.22200,代码采用 Apache 2.0 协议全面开源
  • 提出“代码执行即行动”机制,将多轮循环点击转化为包含条件分支、循环与 API 调用的聚合 Python/Bash 脚本
  • 在权威 OSWorld-v2 基准测试中,推动跨 8 大前沿模型平均基准分提升 +19.6 分,平均执行步数削减 53.0%
  • 开源发布 macOS 物理设备状态栏调度 Harness 及连接 PC、浏览器与移动端的 Cross-Device SDK
阅读全文

Perplexity 官宣 Perplexity Computer 登陆 macOS:本地大模型与端侧 Agent 深度整合,实现 100% 离线 Mac 控制

Perplexity 官方正式宣布将 Perplexity Computer 功能原生集成至 macOS 客户端应用中。与此前高度依赖云端传输屏幕截图并接收键盘鼠标动作指令的传统 Computer-Use 方案不同,Perplexity Computer 实现了模型与智能体执行回路的全本地化运行(The model and the agent both run on your Mac)。通过深度调用 macOS 原生辅助功能(Accessibility API)与本地端侧轻量多模态模型,该功能消除了云端网络延迟,并在彻底保护用户屏幕隐私的前提下,赋能智能体在用户桌面上全自主操作本地应用、整理文件与执行跨软件复杂工作流。

Perplexity 官宣 Perplexity Computer 登陆 macOS:本地大模型与端侧 Agent 深度整合,实现 100% 离线 Mac 控制

核心要点速览

  • Perplexity 官方正式在 macOS 客户端推出 Perplexity Computer,实现模型推理与智能体循环全本地运行
  • 彻底打破传统云端 GUI Agent 的隐私隐患,屏幕画面与按键事件无需上传服务器,100% 杜绝敏感数据外泄
  • 零云端往返时延(Zero Cloud RTT),利用 Apple Silicon 统一内存与硬件神经引擎,实现极速桌面响应
  • 深度结合 macOS 原生无障碍体系与应用沙盒,支持跨终端、浏览器与本地开发套件的端到端自动化编排
阅读全文
关联模型 / 智能体 / 厂商:

腾讯混元开源 Hy Memory 2.0:3B 激活的记忆写入模型跨 4 套框架均分 55.49(官方口径略超 Opus 5),MemHub 打通 Claude Code/Cursor/Codex 本地记忆

腾讯混元 10 月 16 日开源 Hy Memory 2.0,三层齐发:Apache-2.0 的专用记忆写入模型 Hy-Memory-30B-A3B(约 3B 激活,HF + arXiv 技术报告)、覆盖 Chat/Working/Coding 三种场景的 Python SDK(PyPI hy-memory 2.0.x),以及本地优先的 MemHub(CLI + macOS,preview)。官方口径下,该模型替换 Mem0、MemOS、Hy-Memory 与留出的 EverMemOS 中的写入 LLM 后四框架均分 55.49,Claude Opus 5 为 54.62;评测基于固定 20% 子样本,部分单项仍落后 Opus 5。

腾讯混元开源 Hy Memory 2.0:3B 激活的记忆写入模型跨 4 套框架均分 55.49(官方口径略超 Opus 5),MemHub 打通 Claude Code/Cursor/Codex 本地记忆

核心要点速览

  • 官方口径:四框架均分 55.49,Claude Opus 5 为 54.62,DeepSeek V4.1 Flash 53.64
  • 留出框架 EverMemOS 上 56.89 vs Opus 5 的 54.04;Mem0 的 LoCoMo 单项仍落后(59.54 vs 69.47)
  • 约 3B 激活、Apache-2.0,vLLM v0.31.0 实测可部署,OpenAI 兼容接口
  • SDK 一行 pip install hy-memory,Chat/Working/Coding 三场景自动路由
  • MemHub 支持 Linux 与 macOS(preview),不支持 Windows
阅读全文

Antigravity CLI 1.3.5:新增 Auto 模式自动批准安全编辑与命令,越出沙箱先经独立 agent 审核,并加入 /compact

Google Antigravity CLI 于 2026-10-14(UTC)发布 1.3.5。Release Notes 新增 Auto 模式:自动批准文件编辑与安全命令,不可逆操作仍会询问;将离开终端沙箱的命令先交独立 agent 审核。可用 --mode auto、/config 的 Agent Mode,或 Shift+Tab 切换;目前支持 Linux 与 macOS,Windows 稍后。同版加入按需 /compact,并为 /diff 增加语法高亮、折叠与大文件虚拟滚动。公开文档的 modes 页抓取时仍只列 default / accept-edits / plan,以 GitHub Release 为准。

Antigravity CLI 1.3.5:新增 Auto 模式自动批准安全编辑与命令,越出沙箱先经独立 agent 审核,并加入 /compact

核心要点速览

  • 版本:Antigravity CLI 1.3.5(89081f7,2026-10-14T03:16:53Z)首条即 Auto 模式
  • Auto:自动批准文件编辑与安全命令;不可逆操作仍确认;越出终端沙箱的命令先经独立 agent 审核(官方 Release 口径)
  • 入口:--mode auto、/config → Agent Mode,或 Shift+Tab 循环;Linux/macOS 可用,Windows 后续
  • /compact:按需压缩对话;单独用则摘要并结束本轮,带参数则摘要后再答;可 Esc 取消,结束时显示压缩步数与上下文缩减
  • /diff:语法高亮、hunk 折叠(Ctrl+O / f)、大文件只渲染可视行;超 10 万行或 10 MB 关闭展开整文件
阅读全文
S
Strands Agents (AWS)strands-agents·
👀91
🔥85

AWS 开源 Strands Box:OS 级隔离 + Dogwood 时序策略,给 YOLO 模式的编码 Agent 套上确定性缰绳

AWS 于 10 月 7 日发布开源 Agent 沙箱 Strands Box v0.1.0(Rust,Apache 2.0)。它把操作系统级隔离与 Dogwood 策略语言结合:Shell、Python、出站网关和 MCP 调用都先经过同一个默认拒绝的策略引擎,并共享事件历史,规则可以依据“之前做过什么、过了多久”来放行或拒绝。凭证由网关注入,Agent 拿不到明文密钥。目前仅支持 Apple 芯片 macOS,Linux 开发中。

AWS 开源 Strands Box:OS 级隔离 + Dogwood 时序策略,给 YOLO 模式的编码 Agent 套上确定性缰绳

核心要点速览

  • 版本与许可:v0.1.0 于 2026-10-07 17:24 UTC 发布,Rust 编写,Apache 2.0(GitHub)
  • 默认拒绝:经策略引擎检查的操作必须命中 permit 才放行,forbid 优先级更高(Dogwood)
  • 时序规则示例:允许 Agent 发 Slack 状态,但每 10 分钟最多 3 次;也可限制 git push 时机或给 API 调用设上限(The Register)
  • 平台:目前仅 Apple 芯片 macOS 15+;Linux 开发中,Windows 在规划,AgentCore / ECS / Kubernetes 部署计划中
  • 跑分:AWS 未公布性能或安全基准数据
阅读全文
关联模型 / 智能体 / 厂商:

DeepSeek Harness v0.2.1:桌面端就绪,并实验性接入 Claude Code Mods 兼容层

GitHub Release dsh-v0.2.1-alpha.1(2026-10-03T06:42:19Z)为 MIT 开源 Agent 运行时 DeepSeek Harness(约 243k star)增加实验性 Claude Code Mods 兼容层(验证 Mods API ≈ dsh 插件子集,不承诺完整兼容),并延续 v0.2 的 macOS/Windows 桌面端与「一切皆插件」架构。下载:deepseek.com/harness 或 npx @deepseek-ai/dsh web。

核心要点速览

  • 官源:Release dsh-v0.2.1-alpha.1(2026-10-03)+ 仓库 deepseek-ai/deepseek-harness(~243k★)+ deepseek.com/harness
  • 亮点:实验性 Claude Code Mods 兼容层——验证子集关系,非完整互操作承诺
  • 产品面:v0.2 起 macOS Apple silicon / Windows x64 桌面端可捆绑 dsh 命令
  • 架构:Everything is a Plugin(Cordis);Standard/Creator/PTC/Minimal;可接 OpenAI 兼容端点
  • 风险:开发者预览 + 破坏性变更(如移除 invariant);生产前先沙箱
阅读全文
AD赞助内容

苹果官宣收紧 macOS Full Disk Access:点名 AI Agent 风险,授权须「非常明确的用户操作」

Apple 于 2026-10-02 在 Developer News 宣布:将为 macOS Full Disk Access(完整磁盘访问) 引入额外控制,确保只有经「非常明确的用户操作」才能授予该权限。官方原文直接点名 AI agents——随着代理能力与自主性上升,这一权限的风险会「substantially」放大。尚未公布具体 OS 版本或生效日。

苹果官宣收紧 macOS Full Disk Access:点名 AI Agent 风险,授权须「非常明确的用户操作」

核心要点速览

  • 官宣:Apple Developer News — Updates to Full Disk Access in macOS(2026-10-02)
  • 动机原文:AI agents 日益 capable / autonomous,FDA 级别访问的风险会 substantially 增长;备份类 App 才是 FDA 的历史用途
  • 管控方向:用户若确实要授权「extraordinary level of access」,只能通过 very explicit user action;未公布 API / UI / 生效版本
  • 背景(第三方):TechCrunch 将该公告与 Meta Muse 桌面权限争议及 ChatGPT Mac 敏感数据风险报道并置——非 Apple 官方结论
  • 开发者动作:盘点 Claude Code / Cursor / Muse / Copilot 等对 FDA 的依赖;优先改用用户选定目录 + security-scoped bookmark,勿把 FDA 当默认能力
阅读全文
L
Louis Raillé@Louis-CFM·
👀143
🔥97

Coucou 开源 Notch 编码 Agent 伴侣冲上 ★3146:Claude Code/Codex 审批进刘海,Linux beta 同步出炉

开源项目 Louis-CFM/coucou(MIT)把 Claude Code、Codex、Cursor、Gemini CLI、Antigravity 等会话塞进 Mac 刘海(Windows/Linux 顶栏),可在岛上 Allow / Deny / Always 审批,并支持拖文件、看 live diff、GitHub/Vercel 等集成。2026-10-03 已发 v0.1.3;Linux 0.1.1 beta(AppImage/deb/rpm)可用,Windows 安装包因 Defender 误报暂时下架需自行编译。

Coucou 开源 Notch 编码 Agent 伴侣冲上 ★3146:Claude Code/Codex 审批进刘海,Linux beta 同步出炉

核心要点速览

  • 仓库:Louis-CFM/coucou MIT;截至抓取 ★3146 / forks 494;官网 louis-cfm.github.io/coucou
  • 覆盖:Claude Code、Codex、Cursor、Gemini CLI、Antigravity;第三方可用 coucou_agent 字段挂自有 pill(见 docs/AGENTS.md)
  • 审批:Claude Code 在岛上 Allow / Deny / Always + AskUserQuestion;Coucou 未运行时 hook 立即退出,不阻塞 Claude Code
  • 版本:macOS v0.1.3(2026-10-03);Linux linux-v0.1.1 beta;Windows 安装包暂不可用(Defender 误报,可源码 npm run pack)
  • 隐私:无遥测/无账号;密钥进 Keychain / Credential Manager / Secret Service
阅读全文

GitHub Copilot Computer Use 公测:CLI 与桌面 App 可操控 macOS/Windows 本地 GUI 应用

GitHub 于 2026-10-01 Changelog 宣布 Computer Use 进入公测:Copilot CLI 与 Copilot App 可在本机读写无障碍树/截图、点击、键入、滚动与跨应用工作流,覆盖无 API/CLI/MCP 的遗留 GUI。默认关闭,需 /computer on 或设置开关;企业策略可强制禁用。

GitHub Copilot Computer Use 公测:CLI 与桌面 App 可操控 macOS/Windows 本地 GUI 应用

核心要点速览

  • 官宣:Changelog 2026-10-01;概念文档 About computer use
  • 表面:仅 本地会话 的 Copilot CLI + Copilot App;平台 macOS / Windows(Linux 桌面未列)
  • 能力:读无障碍树或截图 → 点击/键入/快捷键/滚动/拖拽/跨应用导航;适合无 API·CLI·MCP 的遗留 GUI
  • 开关:默认关;CLI /computer on|show|off;App Settings → Computer Use;macOS 需 Accessibility + Screen Recording
  • 治理:跟随时表面 Tool Permissions;Always allow 本机 CLI/App 共享;企业 managed settings 可禁用且本地无法覆盖
阅读全文

OpenCode 1.18.34:模型请求携带命名空间 session 身份头;macOS CLI 用 Developer ID 签名

anomalyco 于 2026-09-30 发布 OpenCode v1.18.34(npm [email protected] 约 2026-09-30T22:38Z;相对 v1.18.33...v1.18.34 ahead_by 30)。核心修复:模型请求发送 namespaced session / parent-session identity headers,便于网关与计费归因;本地编译与发行的 macOS 二进制改用 Developer ID 签名,面向 macOS 27+ 更稳。同期树内还有 Go Plus 套餐展示与日榜模型排行等 console 改动。

OpenCode 1.18.34:模型请求携带命名空间 session 身份头;macOS CLI 用 Developer ID 签名

核心要点速览

  • 发版:v1.18.34(2026-09-30T22:39:45Z);npm [email protected];compare ahead_by 30
  • 网关归因:#52370 模型请求附带 namespaced session 与 parent-session 身份头
  • macOS:Developer ID 签名发行 CLI;本地 compile 后 ad-hoc 再签名(#52183),面向 macOS 27+
  • 产品侧:compare 含 Go Plus plans/limits UI、daily model rankings(stats)等 console 提交
  • 升级:按 opencode.ai/docs 更新 CLI/桌面;或 npm i -g [email protected]
阅读全文

OpenAI Codex 0.159.0:opt-in instant_interrupt 中途改指令;警告一键清除;Mermaid/历史分页增强

OpenAI Codex CLI/app-server 于 2026-09-29 发布 rust-v0.159.0(npm @openai/[email protected]):新增可开关的 instant_interrupt,在模型响应或长时 code-mode 调用中途用新输入改道;欢迎页与会话头更紧凑;警告查看器关闭即清除已阅项(按 k 保留);计划确认时仍可滚动 transcript;原生 Mermaid 支持更多边/标签/节点组;app-server 可从指定 item 分页拉取线程历史。相对 v0.158.0 约 89 commits / 300 files。Windows MCP/code-mode 抑制多余控制台窗、.aws 默认可写根下受保护、macOS 沙箱 TLS/代理修复。

OpenAI Codex 0.159.0:opt-in instant_interrupt 中途改指令;警告一键清除;Mermaid/历史分页增强

核心要点速览

  • 发版:rust-v0.159.0(2026-09-29);对比 v0.158.0...v0.159.0 ≈89 commits / 300 files
  • 新能力:opt-in instant_interrupt(#48135/#48141)可在响应/code-mode 中途注入新指令改道
  • UX:紧凑欢迎页与会话头、警告关闭即清除(k 保留)、计划确认时可滚 transcript、Mermaid 边/标签/节点组增强
  • app-server:thread/items/list 支持按 item 锚点分页(#48151)
  • 安装:npm i -g @openai/[email protected] 或官方 release 资源;升级自 0.158.0 注意已移除 tui.prompt_suggestions 与捆绑 plugin-creator skill
阅读全文
关联模型 / 智能体 / 厂商: