Gemini 3.5 Flash 的 Computer Use 工具正式可用

发布时间: 2026-06-26 文章分类: AI前沿技术
阅读量: 0
AI智能体
企业级AI智能体开发与部署
LumeValley提供全栈式企业级AI智能体开发与部署服务,涵盖战略规划、场景化开发、企业级应用构建、行业解决方案及算力支撑。从需求分析到持续优化,确保智能体高效稳定运行,助力企业实现智能化转型,提升运营效率与竞争力。

浏览器?那只是起点。谷歌刚刚把牌摊在了桌面上:**Computer Use** 工具正式可用,而且这次,它瞄准的是你手里的手机和桌面上的操作系统。这不是一次功能更新,这是战场边界的彻底消失。

边界消失了

不只是“看”网页,而是“用”系统

过去的AI助手,哪怕再聪明,也多半被困在浏览器标签页里。你看它聊天、画画、写代码,好像无所不能,但关掉那个网页,它就什么都不是。谷歌这次的操作,相当于给AI发了一张通往真实世界的通行证。Computer Use 现在内置了对移动操作系统和桌面操作系统的支持。这意味着,一个AI智能体理论上可以像你一样,在手机上打开设置菜单调整亮度,在电脑上启动一个专业软件完成一系列操作。它的“观察”范围从网页DOM树,扩展到了整个屏幕的像素流和系统级的交互事件。

长期任务:耐心成了新技能

让AI点一下按钮不难,难的是让它像一个真正的员工一样,处理一个需要分十个步骤、耗时半小时的“长期任务”。比如,让它在一个复杂的后台管理系统中,依次完成数据查询、导出、清洗和生成报告。过去,AI的“短期记忆”和上下文窗口会很快耗尽。Gemini 3.5 Flash的这次更新,关键突破在于其架构为处理这种长链条、高复杂度的交互序列做好了准备。它不再是对话式的应答,而是任务式的执行。

新武器有哪些

“意图”成了函数调用的灵魂

以往让AI操作界面,你得到的可能是一堆僵硬的坐标指令或元素选择器。谷歌引入了一个聪明的设计:所有函数调用都配备了“意图参数”。这好比你对一个实习生说“把那个表格里的销售额总和算出来”,而不是机械地说“点击A1单元格,输入SUM,然后选中B1到B100”。AI现在理解的是你要“做什么”,而不仅仅是“点哪里”。这让它的行为更灵活,能应对界面布局的微小变化,也更像一个真正的协作者。

人工接管:随时按下暂停键

完全自动化的理想很丰满,但现实业务里,人类的监督和判断永远是不可或缺的一环。这次更新最务实的一点,是提供了可定制的客户端函数,专门用于实现人工接管。当AI遇到一个它无法确定的决策点,或者执行到关键步骤时,它可以主动“呼叫”人类。你可以预设规则,比如“当涉及金额超过1万元时,暂停并请求确认”。这为AI进入金融、医疗、法律等高风险领域打开了安全通道。它不是要取代人,而是成为一个人随时可以介入的智能工具。

安全不是可选项

从“小心提示词”到“监控所有动作”

让一个AI拥有操作系统的权限,想想都令人后背发凉。如果它被恶意提示词诱导,去删除重要文件或者发送误导性信息怎么办?谷歌显然吸取了之前纯粹基于提示词防护的教训。Computer Use 加入了提示词注入检测机制,更重要的是,它允许开发者配置“动作级别”的安全策略。这意味着,安全管控的粒度不再是笼统的“允许或禁止AI行动”,而是细化到了“允许AI点击按钮,但禁止它访问剪贴板”;“允许AI读取邮件标题,但禁止它打开附件”。这种精细的权限管控,是AI工具从玩具变为生产力工具必须缴纳的“合规税”。

安全策略:开发者的控制面板

可配置的安全策略,本质上是将控制权交还给企业和开发者。每个应用场景的风险阈值都不同。自动化测试一个内部论坛的风险,和自动化处理银行转账的风险,天差地别。开发者可以根据业务需求,像搭建乐高一样,组合出不同的安全规则集。这确保了Computer Use 的强大能力,是被关在制度的笼子里运行的,而不是在互联网上横冲直撞。

战场前线见真章

自动化测试:Q&A工程师的噩梦或福音

最直接、最无争议的应用场景,就是自动化质量保证测试。想象一下,一个AI测试员,它可以7x24小时不间断地在不同设备、不同系统版本上,像真实用户一样操作APP,完成从注册、浏览、下单到支付的完整流程。它不仅能发现按钮失灵这类简单问题,更能通过复杂的用户路径,发现那些在常规脚本测试中难以复现的边缘案例错误。对于开发团队来说,这有望将他们从枯燥重复的回归测试中解放出来。

业务流程自动化:告别“数字流水线工人”

比测试更广阔的天地,在于对现有业务流程的改造。无数公司里,都有员工每天花几个小时,在两三个老旧的内部系统之间复制粘贴数据。这些工作规则清晰、步骤固定,但就是依赖人工操作。**Computer Use** 提供的,正是一个具备基础理解能力的“数字流水线工人”。它可以监控特定界面的状态,根据预设规则提取信息,并输入到另一个系统中。这比传统的RPA(机器人流程自动化)更灵活,因为它能“看懂”简单的界面变化,而不是完全依赖固定的坐标和选择器。当然,它现在处理的还是结构相对清晰的任务,但已经是一次巨大的效率提升。

谷歌的这次出手,信号再明确不过:AI的下一阶段,不是比谁聊天更幽默,而是比谁能更可靠地“把手弄脏”,在复杂的数字世界里完成实实在在的工作。**Computer Use** 提供了工具,安全策略划下了红线,人工接管预留了后路。舞台已经搭好,就看开发者们,能把这出戏唱到什么程度了。

AI智能体
企业级AI智能体开发与部署方案
LumeValley打造企业级AI智能体全流程方案,涵盖需求洞察、定制开发、多平台适配部署。凭借专业算法与丰富经验,确保智能体精准理解业务,高效执行任务,无缝融入企业生态,为企业数字化转型提供强劲智能引擎,提升核心竞争力。
点赞 | 65

Lumevalley——全栈AI服务领航者,以“战略-应用-算力”三位一体服务框架,为企业提供从顶层战略规划、场景化AI智能体(AI Agent)开发/搭建/部署,到企业级AI应用开发、AI+行业场景解决方案的全链路服务,并配套AI大模型部署与高性能AI算力底座支撑,助力客户在营销、服务、运营等核心环节实现效率倍增与模式创新。

马上扫码获取产品资料
相关文章

相关文章

填写以下信息, 免费获取方案报价
姓名
手机号码
企业名称
  • 建筑建材
  • 化工
  • 钢铁
  • 机械设备
  • 原材料
  • 工业
  • 环保
  • 生鲜
  • 医疗
  • 快消品
  • 农林牧渔
  • 汽车汽配
  • 橡胶
  • 工程
  • 加工
  • 仪器仪表
  • 纺织
  • 服装
  • 电子元器件
  • 物流
  • 化塑
  • 食品
  • 房地产
  • 交通运输
  • 能源
  • 印刷
  • 教育
  • 跨境电商
  • 旅游
  • 皮革
  • 3C数码
  • 金属制品
  • 批发
  • 研究和发展
  • 其他行业
需求描述
填写以下信息马上为您安排系统演示
姓名
手机号码
你的职位
企业名称

恭喜您的需求提交成功

尊敬的用户,您好!

您的需求我们已经收到,我们会为您安排专属电商商务顾问在24小时内(工作日时间)内与您取得联系,请您在此期间保持电话畅通,并且注意接听来自广州区域的来电。
感谢您的支持!

您好,我是您的专属产品顾问
扫码添加我的微信,免费体验系统
(工作日09:00 - 18:00)
电话咨询 (工作日09:00 - 18:00)
客服热线: 18011747352
售前热线: 189 2432 2993
扫码即可快速拨打热线