LangGraph 实现了一个流式传输系统，以提供实时更新，从而实现响应迅速且透明的用户体验。

LangGraph 的流式传输系统允许您将图运行的实时反馈呈现在您的应用程序中。
您可以流式传输的数据主要有三类

  1. 工作流进度 — 在每个图节点执行后获取状态更新。
  2. LLM 令牌 — 在语言模型令牌生成时进行流式传输。
  3. 自定义更新 — 发出用户定义的信号（例如，“已获取 10/100 条记录”）。
  • 流式传输 LLM 令牌 — 从任何地方捕获令牌流：在节点内、子图或工具中。
  • 从工具发出进度通知 — 直接从工具函数发送自定义更新或进度信号。
  • 从子图流式传输 — 包括来自父图和任何嵌套子图的输出。
  • 使用任何 LLM — 从任何 LLM 流式传输令牌，即使它不是 LangChain 模型，也可以使用 custom 流式传输模式。
  • 使用多种流式传输模式 — 从 values（完整状态）、updates（状态增量）、messages（LLM 令牌 + 元数据）、custom（任意用户数据）或 debug（详细跟踪）中选择。