Antigravity SDK 支持本地模型,可完全离线运行智能体

发布时间: 2026-09-24 文章分类: AI前沿技术
阅读量: 0
AI智能体
企业级AI智能体开发与部署
LumeValley提供全栈式企业级AI智能体开发与部署服务,涵盖战略规划、场景化开发、企业级应用构建、行业解决方案及算力支撑。从需求分析到持续优化,确保智能体高效稳定运行,助力企业实现智能化转型,提升运营效率与竞争力。

Google 把 Antigravity SDK 的本地模型工作流正式放出来了,首发通道是 Google AI Edge 的 LiteRT,模型点名 Gemma 4 26B A4B。官方文档里那句硬件建议一点不含糊:显存或统一内存 24GB 以上。换句话说,智能体可以拔掉网线干活——不是演示视频里那种"离线",是真离线。这件事的分量不在于 Google 又支持了一个模型,而在于编排层开始往端侧沉降。

24GB 那道坎,卡住的不是技术是钱包

门槛为什么落在 24GB 而不是 16GB

26B 的权重,即便压到 4bit 量化,光是把参数塞进去就要吃掉十几 GB。剩下的额度得留给 KV cache、上下文窗口和 LiteRT 运行时本身。24GB 更像"能跑"和"跑得舒服"的分界线,而不是最低启动条件——16GB 的机器大概率也能加载,但上下文一拉长、工具调用一密集,就开始往磁盘上换页,单轮延迟从几百毫秒掉到几秒。智能体最怕这种抖动:一次任务可能循环几十轮工具调用,每轮慢一点,累积起来就是不可用。

苹果统一内存用户的顺风局

M 系列芯片在这件事上占了个便宜。48GB 或 64GB 的 MacBook Pro、Mac Studio,内存和显存共用同一个池子,官方那句"VRAM 或统一内存"基本是给这批人递话。反观消费级独显,24GB 以上的选择并不多,得 RTX 4090、5090 这个档位才够看。于是出现一个略反直觉的局面:本地智能体最舒服的开发机,可能是一台笔记本,而不是插满显卡的工作站。前提是你忍得了它的推理吞吐。

LiteRT 站到了台前

推理引擎换了个位置

LiteRT 前身是 TensorFlow Lite,过去几年的标签一直是"手机端小模型推理"。这次它出现在 Antigravity SDK 的本地工作流里,角色变了——不再只是把模型跑起来,而是要接住智能体的调度、工具调用和上下文管理。这个位置以前属于云端推理服务。Google 把 AI Edge 这条线拉进开发者工具链,等于承认端侧不只是推理的终点,也可以是编排的起点。

真正值钱的是混合编排

官方这次给了混合编排的示例代码,这比"支持本地模型"六个字重要得多。纯离线和纯云端都是简单题,难的是任务跑到一半,本地模型搞不定,需要把上下文递交给云端模型接着做。中间涉及状态怎么序列化、敏感信息怎么在出机器之前剥干净、两边的上下文窗口怎么对齐。这些没有现成答案,Google 给的是样板而不是银弹。但对想搭私有智能体的人来说,有样板和没样板,差着好几周的踩坑时间。

离线智能体,谁最先受益

代码不出内网的那批团队

金融、医疗、军工,还有一堆签了保密协议的外包团队,代码库是不能往任何第三方 API 上送的。过去这些团队要么用效果打折的开源方案自己糊,要么走本地部署的大模型服务,运维成本高得离谱。Antigravity SDK 这条路如果走得通,至少把"开发体验"这一环补齐了——IDE 里的补全、重构、跨文件检索,全在本地闭环完成。

按 token 计费的账要重算

智能体的成本模型很畸形。一次重构任务可能触发上百次模型调用,token 消耗是普通对话的几十倍。按量付费的模式下,这类工作流的账单能吓退一多半人。本地推理把边际成本压到接近电费,代价是一次性的硬件投入和明显更慢的响应。什么算得过来?高频、重复、结构化的任务。什么算不过来?偶尔跑一次、要求一次做对的复杂推理。

云端的活不会消失,只会往上走

本地跑 26B,云端跑什么?答案大概率是那些需要长上下文、需要最强推理的硬骨头。分层会变得清晰:日常编辑、代码检索、单元测试生成交给本地;架构级重构、跨仓库依赖分析、模糊需求拆解交给云端。这个分层不是 Google 发明的,但它在工具链里把这条路铺平了,会让更多团队认真掂量一次。

有几个坑,现在就该看见

26B 到底够不够用

A4B 这个后缀暗示着激活参数远小于总参数量,接近 MoE 的思路——用大容量存知识,用小激活换速度。听起来很美,实际效果要看具体任务。代码补全、局部修改这类活儿,26B 级别已经能打;但跨文件语义理解、需要长链条推理的重构,和旗舰级云端模型之间仍会有肉眼可见的差距。别指望它第一天就能替你现有的工作流。

绑定成本比想象中高

Antigravity SDK 眼下只给了 LiteRT 这一条本地通道。模型格式、量化方案、运行时优化,全跟着 Google 的节奏走。想换成 llama.cpp 或者 vLLM 跑别的开源模型?大概率要自己写适配层。工具链的锁定从来不是发布会当天发生的,是在你写完几百行集成代码、跑通 CI 之后才慢慢显现的。

先拿一个真实任务试水

最务实的做法,是挑一个团队里真实存在、又不太关键的任务——给老项目补测试,或者批量清理废弃接口——在本地环境跑两周。看它真实的工具调用成功率,看长上下文下的稳定性,看硬件是否够用。跑完再决定要不要往主工作流里迁。发布会上的 demo 和 token 数据都很好看,但你的代码库不是 demo。

AI智能体
企业级AI智能体开发与部署方案
LumeValley打造企业级AI智能体全流程方案,涵盖需求洞察、定制开发、多平台适配部署。凭借专业算法与丰富经验,确保智能体精准理解业务,高效执行任务,无缝融入企业生态,为企业数字化转型提供强劲智能引擎,提升核心竞争力。
点赞 | 6

Lumevalley——全栈AI服务领航者,以“战略-应用-算力”三位一体服务框架,为企业提供从顶层战略规划、场景化AI智能体(AI Agent)开发/搭建/部署,到企业级AI应用开发、AI+行业场景解决方案的全链路服务,并配套AI大模型部署与高性能AI算力底座支撑,助力客户在营销、服务、运营等核心环节实现效率倍增与模式创新。

马上扫码获取产品资料
相关文章

相关文章

填写以下信息, 免费获取方案报价
姓名
手机号码
企业名称
  • 建筑建材
  • 化工
  • 钢铁
  • 机械设备
  • 原材料
  • 工业
  • 环保
  • 生鲜
  • 医疗
  • 快消品
  • 农林牧渔
  • 汽车汽配
  • 橡胶
  • 工程
  • 加工
  • 仪器仪表
  • 纺织
  • 服装
  • 电子元器件
  • 物流
  • 化塑
  • 食品
  • 房地产
  • 交通运输
  • 能源
  • 印刷
  • 教育
  • 跨境电商
  • 旅游
  • 皮革
  • 3C数码
  • 金属制品
  • 批发
  • 研究和发展
  • 其他行业
需求描述
填写以下信息马上为您安排系统演示
姓名
手机号码
你的职位
企业名称

恭喜您的需求提交成功

尊敬的用户,您好!

您的需求我们已经收到,我们会为您安排专属电商商务顾问在24小时内(工作日时间)内与您取得联系,请您在此期间保持电话畅通,并且注意接听来自广州区域的来电。
感谢您的支持!

您好,我是您的专属产品顾问
扫码添加我的微信,免费体验系统
(工作日09:00 - 18:00)
电话咨询 (工作日09:00 - 18:00)
客服热线: 18011747352
售前热线: 189 2432 2993
扫码即可快速拨打热线