Gemini API 更新日志显示,Computer Use 工具已于 10 月 30 日在 Interactions 与 GenerateContent 两套 API 上正式 GA;@GoogleAIStudio 11 月 4 日官宣称与预览版相比没有破坏性变更,可用于生产级浏览器、移动端与桌面控制智能体。官方文档列出支持模型:Gemini 4 Argon、推荐的 Gemini 3.8 Flash、Gemini 3.5 Flash-Lite 及 Gemini 3 Flash Preview;动作附带 intent 推理说明,并提供 safety_decision 确认机制和可选的截图提示注入检测。
核心要点速览
- ✓10 月 30 日起 Computer Use 在 Interactions 与 GenerateContent API 同时 GA
- ✓官方称与预览版无破坏性变更,已有代码可直接沿用
- ✓支持浏览器、移动端、桌面三种环境;推荐模型为 Gemini 3.8 Flash
- ✓每个动作带 intent 字段;safety_decision 可要求用户确认或直接拦截
- ✓可选开启截图提示注入检测(Gemini 3.5 Flash-Lite 及以上,默认关闭)
开发者 3 秒速决决策指标
把技术选型换算成你的开发预算
40 款主流编程套餐横向比价,支持输入/输出 Token 真实账单模拟
相关资源与官方项目出处
免代理直达深度技术解析与实战评估
核心背景与行业痛点
让模型看截图、点按钮的“电脑操作”能力此前多处于预览阶段,企业顾虑接口变动和稳定性,难以放进生产流程。Gemini API 更新日志显示,Computer Use 工具已于 10 月 30 日正式 GA;@GoogleAIStudio 在 11 月 4 日官宣,强调与预览版没有破坏性变更。
架构亮点与底层机制
它类似函数调用:应用发送任务、截图和环境配置,模型返回点击、输入、拖拽等动作,坐标为 0–999 归一化值,由客户端用 Playwright 等工具执行后回传新截图,循环推进。Gemini 4 与 3.x 支持浏览器、移动端、桌面三种环境,每个动作附带 intent 字段说明意图。
权威 Benchmark 与实测跑分对比
此次 GA 公告与文档未给出新的跑分数据,官方未公布基准成绩,本文不引用第三方数字。支持模型为 Gemini 4 Argon、Gemini 3.8 Flash(官方推荐)、Gemini 3.5 Flash-Lite 和 Gemini 3 Flash Preview。
开发者实战落地与开箱指南
在 tools 中加入 computer_use 并设置 environment 即可。响应里的 safety_decision 可能要求用户确认或直接拦截,需在客户端处理;可开启 enable_prompt_injection_detection 扫描截图里的恶意指令。官方仍建议对重要任务密切监督,避免用于不可逆或涉及敏感数据的操作。
即刻查看该技术对应模型与主流工具的实测差异,或一键测算团队 API 调用与 $20/月套餐盈亏平衡点。
讨论与评论
0登录后即可参与深度讨论
与广大 AI 开发者、工程师交流评测心得与前沿洞察