前 9 课,我们一点点把 Agent 的零件拼了起来:它会推理、会调工具、会记记忆、会规划、会协作、会检索知识、还能被评估监控。第 10 课,是收官——我们要把这些零件组装成一台能真正在公司里跑起来的机器,再抬头看看它往哪儿去。

一句话先立住:单 Agent 是玩具,企业级 Agent 是系统。系统能不能立住,看的是架构,不是某一个聪明的 Prompt。

第10课封面

一、企业级 Agent 总架构

一个能上生产的 Agent,不是只有一个大模型在硬撑,而是一组服务各管一摊。最外层是统一入口,里面是核心引擎加一堆支撑系统。

图片

记七个名字就够:API Gateway(入口)、Agent Runtime(引擎)、Memory Service(记忆)、Tool Service(工具)、Scheduler(调度)、Eval System(评测)、Monitoring(监控)。Runtime 是心脏,其余是绕着它转的支撑。

| 模块

|

管什么

API Gateway

|

鉴权、限流、路由、日志,所有请求的统一大门

| |

Agent Runtime

|

执行循环引擎,规划与行动都在这里发生

| |

Memory Service

|

长期 / 短期记忆的统一存取

| |

Tool Service

|

工具注册、调用、权限管理

| |

Scheduler

|

多任务排队、优先级、失败重试

| |

Eval System

|

离线评测、质量打分

| |

Monitoring

|

Trace 记录与告警,全程可观测

|

二、Agent Runtime:执行循环引擎

整个系统的心脏,就是 Runtime。它干的事其实很朴素——一个不断转的循环:规划、行动、观察、反思,然后再规划,直到任务完成或者触发退出条件。

图片

注意「退出条件」四个字。没有退出条件的循环,就是死循环。前面第 4 课讲的限步数、调用指纹、阶段退出,全都是给这个循环装刹车。

三、调度系统:多任务怎么排

当系统里同时跑着多个 Agent、多个任务,谁先跑、崩了怎么办,就得靠调度。它像是整个系统的交通指挥。

图片

调度三件套:Queue(排队,别让请求打爆系统)、Priority(优先级,重要的先跑)、Retry(重试,失败自动补,但限次数防爆循环)。

四、成本优化:三道缓存省真金白银

Agent 最大的隐形开支是 Token。能不复用的,就别重算——这是成本优化的核心思想。

图片

| 缓存

|

省的是什么

Prompt Cache

|

不变的系统提示不重复计费,每次请求省一大截

| |

Embedding Cache

|

相同文本不重复向量化,RAG 高频词最划算

| |

Tool Cache

|

相同入参的工具结果直接返回,省时又省 Token

|

五、小模型协同:未来不是全靠大模型

一个常见的误区:上了 Agent,所有事都丢给最贵的大模型。真相是——未来拼的是「小模型 + 大模型」的混合。

图片

小模型轻量、快、便宜,适合做分类、路由、简单判断这种「前台活」;大模型贵但强,只在复杂推理、长文生成这种「重活」上调用。混下来,成本能骤降。

六、AI Workflow 与 Agent 融合

Workflow 和 Agent 不是二选一,而是拼着用。这是接下来几年最实在的趋势。

图片

把确定的部分编成 Workflow(可控、好 debug),把不确定的部分交给 Agent(灵活、能应变)。两者拼起来,既稳又能打。

七、Self-Improving:持续学习系统

真正厉害的 Agent,不是上线就定型,而是越用越聪明。这靠一套持续学习闭环。

图片

三步走:经验沉淀(成功失败都记进记忆)、自动反思(复盘哪里能更好)、自动优化(改 Prompt / 策略,下一轮更强)。把每一次运行,都变成下一次的养料。

八、Agent 的未来方向

回头看,Agent 正在从「会聊天」一步步走向「会干活」,而且越来越往真实世界扎。

图片

| 方向

|

在做什么

Computer Use Agent

|

直接操作电脑软件,像人一样点菜单

| |

GUI Agent

|

看懂界面元素,自动点按钮、填表单

| |

Web Agent

|

自动上网查资料、替你办网上的事

| |

Embodied Agent

|

装在机器人身上,在真实世界里行动

| |

Autonomous Company

|

多个 Agent 组队,自己运营一家公司

|

九、毕业项目:企业级 AI Analyst Agent

学完 10 课,最好的检验就是动手做一个。我们的毕业项目,是把前 9 课全串起来——做一个能上生产的「企业级 AI Analyst Agent」。

毕业项目

它要同时具备这八项能力:多工具接入、长期记忆、多 Agent 协作、RAG 知识库、全程监控、持续评测、崩溃可恢复、防循环机制。少一个,都不算「企业级」。

这八个要求,其实就是前 9 课的目录:工具(第 3 课)、记忆(第 5 课)、多 Agent(第 7 课)、RAG(第 8 课)、监控评测(第 9 课)、可恢复(第 4 课)、防循环(第 4 课)。你不是在学新东西,是在把学过的东西组装起来。

本课重点回顾

第10课小结

10 课走到这里,我们从「什么是 Agent」一路走到了「怎么把 Agent 送进生产」。回头看,路线图其实很清楚:

第1课认知 第2课推理 第3课工具 第4课状态机 第5课记忆 第6课规划 第7课多智能体 第8课知识 第9课生产化 第10课架构

日拱一卒,功不唐捐。这 10 课是起点,不是终点——真正的本事,是在你自己的业务里把某一个 Agent 跑通、跑稳、跑出价值。我们下个系列见。

【麒麟Agent实验室 · 互联网大厂数仓人 | AI 工程实践者】

【日拱一卒,功不唐捐,和各位一起在 AI 时代无限进步】