- 工作流具有预定的代码路径,并被设计为按特定顺序运行。
- 智能体是动态的,并定义它们自己的流程和工具使用。
在构建智能体和工作流时,LangGraph 提供了多项优势,包括持久性、流式处理,以及对调试和部署的支持。
使用 LangSmith 追踪并比较这些工作流模式。按照追踪快速入门查看数据如何流经每个步骤。我们还建议您设置 LangSmith Engine,它可以监控您的追踪、检测问题并提出修复方案。
设置
要构建工作流或智能体,您可以使用支持结构化输出和工具调用的任何聊天模型。以下示例使用 Anthropic:- 安装依赖项:
pip install langchain_core langchain-anthropic langgraph
- 初始化 LLM:
import os
import getpass
from langchain_anthropic import ChatAnthropic
def _set_env(var: str):
if not os.environ.get(var):
os.environ[var] = getpass.getpass(f"{var}: ")
_set_env("ANTHROPIC_API_KEY")
llm = ChatAnthropic(model="claude-sonnet-4-6")
LLM 与增强
工作流和智能体系统基于 LLM 以及您添加到其中的各种增强功能。工具调用、结构化输出和短期记忆是几种根据您的需求定制 LLM 的选项。
# 结构化输出的模式定义
from pydantic import BaseModel, Field
class SearchQuery(BaseModel):
search_query: str = Field(None, description="为网络搜索优化的查询语句。")
justification: str = Field(
None, description="解释此查询与用户请求相关的原因。"
)
# 使用结构化输出的模式增强 LLM
structured_llm = llm.with_structured_output(SearchQuery)
# 调用增强后的 LLM
output = structured_llm.invoke("钙化 CT 评分与高胆固醇有何关系?")
# 定义一个工具
def multiply(a: int, b: int) -> int:
return a * b
# 用工具增强 LLM
llm_with_tools = llm.bind_tools([multiply])
# 使用触发工具调用的输入调用 LLM
msg = llm_with_tools.invoke("2 乘以 3 等于多少?")
# 获取工具调用信息
msg.tool_calls
提示链
提示链是指每次 LLM 调用处理前一次调用的输出。它通常用于执行定义明确、可以分解为更小、可验证步骤的任务。一些例子包括:- 将文档翻译成不同语言
- 验证生成内容的一致性
from typing_extensions import TypedDict
from langgraph.graph import StateGraph, START, END
from IPython.display import Image, display
# 图状态
class State(TypedDict):
topic: str
joke: str
improved_joke: str
final_joke: str
# 节点
def generate_joke(state: State):
"""第一次 LLM 调用,生成初始笑话"""
msg = llm.invoke(f"写一个关于 {state['topic']} 的短笑话")
return {"joke": msg.content}
def check_punchline(state: State):
"""门控函数,检查笑话是否有包袱(punchline)"""
# 简单检查 - 笑话是否包含 "?" 或 "!"
if "?" in state["joke"] or "!" in state["joke"]:
return "通过"
return "失败"
def improve_joke(state: State):
"""第二次 LLM 调用,改进笑话"""
msg = llm.invoke(f"通过添加文字游戏让这个笑话更有趣: {state['joke']}")
return {"improved_joke": msg.content}
def polish_joke(state: State):
"""第三次 LLM 调用,进行最终润色"""
msg = llm.invoke(f"给这个笑话添加一个出人意料的转折: {state['improved_joke']}")
return {"final_joke": msg.content}
# 构建工作流
workflow = StateGraph(State)
# 添加节点
workflow.add_node("generate_joke", generate_joke)
workflow.add_node("improve_joke", improve_joke)
workflow.add_node("polish_joke", polish_joke)
# 添加边来连接节点
workflow.add_edge(START, "generate_joke")
workflow.add_conditional_edges(
"generate_joke", check_punchline, {"失败": "improve_joke", "通过": END}
)
workflow.add_edge("improve_joke", "polish_joke")
workflow.add_edge("polish_joke", END)
# 编译
chain = workflow.compile()
# 显示工作流
display(Image(chain.get_graph().draw_mermaid_png()))
# 调用
state = chain.invoke({"topic": "猫"})
print("初始笑话:")
print(state["joke"])
print("\n--- --- ---\n")
if "improved_joke" in state:
print("改进后的笑话:")
print(state["improved_joke"])
print("\n--- --- ---\n")
print("最终笑话:")
print(state["final_joke"])
else:
print("最终笑话:")
print(state["joke"])
from langgraph.func import entrypoint, task
# 任务
@task
def generate_joke(topic: str):
"""第一次 LLM 调用,生成初始笑话"""
msg = llm.invoke(f"写一个关于 {topic} 的短笑话")
return msg.content
def check_punchline(joke: str):
"""门控函数,检查笑话是否有包袱(punchline)"""
# 简单检查 - 笑话是否包含 "?" 或 "!"
if "?" in joke or "!" in joke:
return "失败"
return "通过"
@task
def improve_joke(joke: str):
"""第二次 LLM 调用,改进笑话"""
msg = llm.invoke(f"通过添加文字游戏让这个笑话更有趣: {joke}")
return msg.content
@task
def polish_joke(joke: str):
"""第三次 LLM 调用,进行最终润色"""
msg = llm.invoke(f"给这个笑话添加一个出人意料的转折: {joke}")
return msg.content
@entrypoint()
def prompt_chaining_workflow(topic: str):
original_joke = generate_joke(topic).result()
if check_punchline(original_joke) == "通过":
return original_joke
improved_joke = improve_joke(original_joke).result()
return polish_joke(improved_joke).result()
# 调用
stream = prompt_chaining_workflow.stream_events("猫", version="v3")
for snapshot in stream.values:
print(snapshot)
print("\n")
并行化
并行化是指 LLM 同时处理一项任务。这可以通过同时运行多个独立的子任务来完成,或者多次运行同一任务以检查不同的输出。并行化通常用于:- 分解子任务并并行运行,从而提高速度
- 多次运行任务以检查不同的输出,从而增加置信度
- 运行一个处理文档关键词的子任务,同时运行另一个子任务检查格式错误
- 运行一个任务多次,根据不同的标准(如引用数量、使用的来源数量和来源质量)对文档的准确性进行评分
# 图状态
class State(TypedDict):
topic: str
joke: str
story: str
poem: str
combined_output: str
# 节点
def call_llm_1(state: State):
"""第一次 LLM 调用,生成初始笑话"""
msg = llm.invoke(f"写一个关于 {state['topic']} 的笑话")
return {"joke": msg.content}
def call_llm_2(state: State):
"""第二次 LLM 调用,生成故事"""
msg = llm.invoke(f"写一个关于 {state['topic']} 的故事")
return {"story": msg.content}
def call_llm_3(state: State):
"""第三次 LLM 调用,生成诗歌"""
msg = llm.invoke(f"写一首关于 {state['topic']} 的诗")
return {"poem": msg.content}
def aggregator(state: State):
"""将笑话、故事和诗歌合并为单个输出"""
combined = f"这是一个关于 {state['topic']} 的故事、笑话和诗!\n\n"
combined += f"故事:\n{state['story']}\n\n"
combined += f"笑话:\n{state['joke']}\n\n"
combined += f"诗:\n{state['poem']}"
return {"combined_output": combined}
# 构建工作流
parallel_builder = StateGraph(State)
# 添加节点
parallel_builder.add_node("call_llm_1", call_llm_1)
parallel_builder.add_node("call_llm_2", call_llm_2)
parallel_builder.add_node("call_llm_3", call_llm_3)
parallel_builder.add_node("aggregator", aggregator)
# 添加边来连接节点
parallel_builder.add_edge(START, "call_llm_1")
parallel_builder.add_edge(START, "call_llm_2")
parallel_builder.add_edge(START, "call_llm_3")
parallel_builder.add_edge("call_llm_1", "aggregator")
parallel_builder.add_edge("call_llm_2", "aggregator")
parallel_builder.add_edge("call_llm_3", "aggregator")
parallel_builder.add_edge("aggregator", END)
parallel_workflow = parallel_builder.compile()
# 显示工作流
display(Image(parallel_workflow.get_graph().draw_mermaid_png()))
# 调用
state = parallel_workflow.invoke({"topic": "猫"})
print(state["combined_output"])
@task
def call_llm_1(topic: str):
"""第一次 LLM 调用,生成初始笑话"""
msg = llm.invoke(f"写一个关于 {topic} 的笑话")
return msg.content
@task
def call_llm_2(topic: str):
"""第二次 LLM 调用,生成故事"""
msg = llm.invoke(f"写一个关于 {topic} 的故事")
return msg.content
@task
def call_llm_3(topic):
"""第三次 LLM 调用,生成诗歌"""
msg = llm.invoke(f"写一首关于 {topic} 的诗")
return msg.content
@task
def aggregator(topic, joke, story, poem):
"""将笑话和故事合并为单个输出"""
combined = f"这是一个关于 {topic} 的故事、笑话和诗!\n\n"
combined += f"故事:\n{story}\n\n"
combined += f"笑话:\n{joke}\n\n"
combined += f"诗:\n{poem}"
return combined
# 构建工作流
@entrypoint()
def parallel_workflow(topic: str):
joke_fut = call_llm_1(topic)
story_fut = call_llm_2(topic)
poem_fut = call_llm_3(topic)
return aggregator(
topic, joke_fut.result(), story_fut.result(), poem_fut.result()
).result()
# 调用
stream = parallel_workflow.stream_events("猫", version="v3")
for snapshot in stream.values:
print(snapshot)
print("\n")
路由
路由工作流处理输入,然后将其引导至特定上下文的任务。这使您可以为复杂任务定义专门的流程。例如,一个用于回答产品相关问题的工作流可能首先处理问题类型,然后将请求路由到特定流程,如定价、退款、退货等。
from typing_extensions import Literal
from langchain.messages import HumanMessage, SystemMessage
# 用作路由逻辑的结构化输出模式
class Route(BaseModel):
step: Literal["poem", "story", "joke"] = Field(
None, description="路由过程中的下一步"
)
# 使用结构化输出的模式增强 LLM
router = llm.with_structured_output(Route)
# 状态
class State(TypedDict):
input: str
decision: str
output: str
# 节点
def llm_call_1(state: State):
"""写一个故事"""
result = llm.invoke(state["input"])
return {"output": result.content}
def llm_call_2(state: State):
"""写一个笑话"""
result = llm.invoke(state["input"])
return {"output": result.content}
def llm_call_3(state: State):
"""写一首诗"""
result = llm.invoke(state["input"])
return {"output": result.content}
def llm_call_router(state: State):
"""将输入路由到适当的节点"""
# 运行带有结构化输出的增强 LLM 作为路由逻辑
decision = router.invoke(
[
SystemMessage(
content="根据用户请求将输入路由到故事、笑话或诗歌。"
),
HumanMessage(content=state["input"]),
]
)
return {"decision": decision.step}
# 条件边函数,用于路由到适当的节点
def route_decision(state: State):
# 返回你接下来想访问的节点名称
if state["decision"] == "story":
return "llm_call_1"
elif state["decision"] == "joke":
return "llm_call_2"
elif state["decision"] == "poem":
return "llm_call_3"
# 构建工作流
router_builder = StateGraph(State)
# 添加节点
router_builder.add_node("llm_call_1", llm_call_1)
router_builder.add_node("llm_call_2", llm_call_2)
router_builder.add_node("llm_call_3", llm_call_3)
router_builder.add_node("llm_call_router", llm_call_router)
# 添加边来连接节点
router_builder.add_edge(START, "llm_call_router")
router_builder.add_conditional_edges(
"llm_call_router",
route_decision,
{ # route_decision 返回的名称 : 下一个要访问的节点名称
"llm_call_1": "llm_call_1",
"llm_call_2": "llm_call_2",
"llm_call_3": "llm_call_3",
},
)
router_builder.add_edge("llm_call_1", END)
router_builder.add_edge("llm_call_2", END)
router_builder.add_edge("llm_call_3", END)
# 编译工作流
router_workflow = router_builder.compile()
# 显示工作流
display(Image(router_workflow.get_graph().draw_mermaid_png()))
# 调用
state = router_workflow.invoke({"input": "给我写一个关于猫的笑话"})
print(state["output"])
from typing_extensions import Literal
from pydantic import BaseModel
from langchain.messages import HumanMessage, SystemMessage
# 用作路由逻辑的结构化输出模式
class Route(BaseModel):
step: Literal["poem", "story", "joke"] = Field(
None, description="路由过程中的下一步"
)
# 使用结构化输出的模式增强 LLM
router = llm.with_structured_output(Route)
@task
def llm_call_1(input_: str):
"""写一个故事"""
result = llm.invoke(input_)
return result.content
@task
def llm_call_2(input_: str):
"""写一个笑话"""
result = llm.invoke(input_)
return result.content
@task
def llm_call_3(input_: str):
"""写一首诗"""
result = llm.invoke(input_)
return result.content
def llm_call_router(input_: str):
"""将输入路由到适当的节点"""
# 运行带有结构化输出的增强 LLM 作为路由逻辑
decision = router.invoke(
[
SystemMessage(
content="根据用户请求将输入路由到故事、笑话或诗歌。"
),
HumanMessage(content=input_),
]
)
return decision.step
# 创建工作流
@entrypoint()
def router_workflow(input_: str):
next_step = llm_call_router(input_)
if next_step == "story":
llm_call = llm_call_1
elif next_step == "joke":
llm_call = llm_call_2
elif next_step == "poem":
llm_call = llm_call_3
return llm_call(input_).result()
# 调用
stream = router_workflow.stream_events("给我写一个关于猫的笑话", version="v3")
for snapshot in stream.values:
print(snapshot)
print("\n")
编排器-工作者
在编排器-工作者配置中,编排器:- 将任务分解为子任务
- 将子任务委派给工作者
- 将工作者的输出综合成最终结果
编排器-工作者工作流提供更高的灵活性,通常用于无法像并行化那样预先定义子任务的情况。这在需要编写代码或需要更新多个文件内容的工作流中很常见。例如,一个需要更新未知数量文档中多个 Python 库安装说明的工作流可能会使用这种模式。
from typing import Annotated, List
import operator
# 用于规划的结构化输出模式
class Section(BaseModel):
name: str = Field(
description="报告本节的名称。",
)
description: str = Field(
description="简要概述本节要涵盖的主要主题和概念。",
)
class Sections(BaseModel):
sections: List[Section] = Field(
description="报告的各个章节。",
)
# 使用结构化输出的模式增强 LLM
planner = llm.with_structured_output(Sections)
from typing import List
# 用于规划的结构化输出模式
class Section(BaseModel):
name: str = Field(
description="报告本节的名称。",
)
description: str = Field(
description="简要概述本节要涵盖的主要主题和概念。",
)
class Sections(BaseModel):
sections: List[Section] = Field(
description="报告的各个章节。",
)
# 使用结构化输出的模式增强 LLM
planner = llm.with_structured_output(Sections)
@task
def orchestrator(topic: str):
"""生成报告计划的编排器"""
# 生成查询
report_sections = planner.invoke(
[
SystemMessage(content="生成报告计划。"),
HumanMessage(content=f"报告主题是: {topic}"),
]
)
return report_sections.sections
@task
def llm_call(section: Section):
"""工作者撰写报告的一个章节"""
# 生成章节
result = llm.invoke(
[
SystemMessage(content="撰写报告章节。"),
HumanMessage(
content=f"章节名称是: {section.name},描述是: {section.description}"
),
]
)
# 将更新后的章节写入已完成章节
return result.content
@task
def synthesizer(completed_sections: list[str]):
"""从各章节综合完整报告"""
final_report = "\n\n---\n\n".join(completed_sections)
return final_report
@entrypoint()
def orchestrator_worker(topic: str):
sections = orchestrator(topic).result()
section_futures = [llm_call(section) for section in sections]
final_report = synthesizer(
[section_fut.result() for section_fut in section_futures]
).result()
return final_report
# 调用
report = orchestrator_worker.invoke("创建一份关于 LLM 缩放定律的报告")
from IPython.display import Markdown
Markdown(report)
在 LangGraph 中创建工作者
编排器-工作者工作流很常见,LangGraph 对其有内置支持。Send API 允许您动态创建工作者节点并向其发送特定输入。每个工作者都有自己的状态,所有工作者的输出都写入一个共享的状态键,该键对编排器图是可访问的。这使得编排器可以访问所有工作者的输出,并允许将其综合成最终输出。下面的示例遍历章节列表,并使用 Send API 将每个章节发送给一个工作者。
from langgraph.types import Send
# 图状态
class State(TypedDict):
topic: str # 报告主题
sections: list[Section] # 报告章节列表
completed_sections: Annotated[
list, operator.add
] # 所有工作者并行写入此键
final_report: str # 最终报告
# 工作者状态
class WorkerState(TypedDict):
section: Section
completed_sections: Annotated[list, operator.add]
# 节点
def orchestrator(state: State):
"""生成报告计划的编排器"""
# 生成查询
report_sections = planner.invoke(
[
SystemMessage(content="生成报告计划。"),
HumanMessage(content=f"报告主题是: {state['topic']}"),
]
)
return {"sections": report_sections.sections}
def llm_call(state: WorkerState):
"""工作者撰写报告的一个章节"""
# 生成章节
section = llm.invoke(
[
SystemMessage(
content="根据提供的名称和描述撰写报告章节。每个章节不要包含序言。使用 Markdown 格式。"
),
HumanMessage(
content=f"章节名称是: {state['section'].name},描述是: {state['section'].description}"
),
]
)
# 将更新后的章节写入已完成章节
return {"completed_sections": [section.content]}
def synthesizer(state: State):
"""从各章节综合完整报告"""
# 已完成章节列表
completed_sections = state["completed_sections"]
# 将已完成章节格式化为字符串,用作最终章节的上下文
completed_report_sections = "\n\n---\n\n".join(completed_sections)
return {"final_report": completed_report_sections}
# 条件边函数,用于创建撰写报告各章节的 llm_call 工作者
def assign_workers(state: State):
"""为计划中的每个章节分配一个工作者"""
# 通过 Send() API 并行启动章节撰写
return [Send("llm_call", {"section": s}) for s in state["sections"]]
# 构建工作流
orchestrator_worker_builder = StateGraph(State)
# 添加节点
orchestrator_worker_builder.add_node("orchestrator", orchestrator)
orchestrator_worker_builder.add_node("llm_call", llm_call)
orchestrator_worker_builder.add_node("synthesizer", synthesizer)
# 添加边来连接节点
orchestrator_worker_builder.add_edge(START, "orchestrator")
orchestrator_worker_builder.add_conditional_edges(
"orchestrator", assign_workers, ["llm_call"]
)
orchestrator_worker_builder.add_edge("llm_call", "synthesizer")
orchestrator_worker_builder.add_edge("synthesizer", END)
# 编译工作流
orchestrator_worker = orchestrator_worker_builder.compile()
# 显示工作流
display(Image(orchestrator_worker.get_graph().draw_mermaid_png()))
# 调用
state = orchestrator_worker.invoke({"topic": "创建一份关于 LLM 缩放定律的报告"})
from IPython.display import Markdown
Markdown(state["final_report"])
评估器-优化器
在评估器-优化器工作流中,一次 LLM 调用生成响应,另一次评估该响应。如果评估器或人在回路确定响应需要改进,则提供反馈并重新生成响应。此循环持续进行,直到生成可接受的响应。 评估器-优化器工作流通常用于任务有特定成功标准,但需要迭代才能达到该标准的情况。例如,在两种语言之间翻译文本时,并不总是有完美的匹配。可能需要几次迭代才能生成两种语言中含义相同的翻译。
# 图状态
class State(TypedDict):
joke: str
topic: str
feedback: str
funny_or_not: str
# 用于评估的结构化输出模式
class Feedback(BaseModel):
grade: Literal["funny", "not funny"] = Field(
description="判断笑话是否有趣。",
)
feedback: str = Field(
description="如果笑话不好笑,提供如何改进的反馈。",
)
# 使用结构化输出的模式增强 LLM
evaluator = llm.with_structured_output(Feedback)
# 节点
def llm_call_generator(state: State):
"""LLM 生成一个笑话"""
if state.get("feedback"):
msg = llm.invoke(
f"写一个关于 {state['topic']} 的笑话,但要考虑反馈: {state['feedback']}"
)
else:
msg = llm.invoke(f"写一个关于 {state['topic']} 的笑话")
return {"joke": msg.content}
def llm_call_evaluator(state: State):
"""LLM 评估笑话"""
grade = evaluator.invoke(f"给这个笑话打分: {state['joke']}")
return {"funny_or_not": grade.grade, "feedback": grade.feedback}
# 条件边函数,根据评估器的反馈路由回笑话生成器或结束
def route_joke(state: State):
"""根据评估器的反馈路由回笑话生成器或结束"""
if state["funny_or_not"] == "funny":
return "接受"
elif state["funny_or_not"] == "not funny":
return "拒绝 + 反馈"
# 构建工作流
optimizer_builder = StateGraph(State)
# 添加节点
optimizer_builder.add_node("llm_call_generator", llm_call_generator)
optimizer_builder.add_node("llm_call_evaluator", llm_call_evaluator)
# 添加边来连接节点
optimizer_builder.add_edge(START, "llm_call_generator")
optimizer_builder.add_edge("llm_call_generator", "llm_call_evaluator")
optimizer_builder.add_conditional_edges(
"llm_call_evaluator",
route_joke,
{ # route_joke 返回的名称 : 下一个要访问的节点名称
"接受": END,
"拒绝 + 反馈": "llm_call_generator",
},
)
# 编译工作流
optimizer_workflow = optimizer_builder.compile()
# 显示工作流
display(Image(optimizer_workflow.get_graph().draw_mermaid_png()))
# 调用
state = optimizer_workflow.invoke({"topic": "猫"})
print(state["joke"])
# 用于评估的结构化输出模式
class Feedback(BaseModel):
grade: Literal["funny", "not funny"] = Field(
description="判断笑话是否有趣。",
)
feedback: str = Field(
description="如果笑话不好笑,提供如何改进的反馈。",
)
# 使用结构化输出的模式增强 LLM
evaluator = llm.with_structured_output(Feedback)
# 节点
@task
def llm_call_generator(topic: str, feedback: Feedback):
"""LLM 生成一个笑话"""
if feedback:
msg = llm.invoke(
f"写一个关于 {topic} 的笑话,但要考虑反馈: {feedback}"
)
else:
msg = llm.invoke(f"写一个关于 {topic} 的笑话")
return msg.content
@task
def llm_call_evaluator(joke: str):
"""LLM 评估笑话"""
feedback = evaluator.invoke(f"给这个笑话打分: {joke}")
return feedback
@entrypoint()
def optimizer_workflow(topic: str):
feedback = None
while True:
joke = llm_call_generator(topic, feedback).result()
feedback = llm_call_evaluator(joke).result()
if feedback.grade == "funny":
break
return joke
# 调用
stream = optimizer_workflow.stream_events("猫", version="v3")
for snapshot in stream.values:
print(snapshot)
print("\n")
智能体 (Agents)
智能体 (Agents) 通常实现为一个使用 工具 执行操作的 LLM。它们在连续的反馈循环中运行,适用于问题和解决方案无法预测的场景。智能体比工作流拥有更多的自主权,可以决定使用哪些工具以及如何解决问题。你仍然可以定义可用的工具集以及智能体行为的准则。
使用工具
from langchain.tools import tool
# 定义工具
@tool
def multiply(a: int, b: int) -> int:
"""将 `a` 和 `b` 相乘。
Args:
a: 第一个整数
b: 第二个整数
"""
return a * b
@tool
def add(a: int, b: int) -> int:
"""将 `a` 和 `b` 相加。
Args:
a: 第一个整数
b: 第二个整数
"""
return a + b
@tool
def divide(a: int, b: int) -> float:
"""将 `a` 除以 `b`。
Args:
a: 第一个整数
b: 第二个整数
"""
return a / b
# 使用工具增强 LLM
tools = [add, multiply, divide]
tools_by_name = {tool.name: tool for tool in tools}
llm_with_tools = llm.bind_tools(tools)
from langgraph.graph import MessagesState
from langchain.messages import SystemMessage, HumanMessage, ToolMessage
# 节点
def llm_call(state: MessagesState):
"""LLM 决定是否调用工具"""
return {
"messages": [
llm_with_tools.invoke(
[
SystemMessage(
content="你是一个有用的助手,负责对一组输入执行算术运算。"
)
]
+ state["messages"]
)
]
}
def tool_node(state: MessagesState):
"""执行工具调用"""
result = []
for tool_call in state["messages"][-1].tool_calls:
tool = tools_by_name[tool_call["name"]]
observation = tool.invoke(tool_call["args"])
result.append(ToolMessage(content=observation, tool_call_id=tool_call["id"]))
return {"messages": result}
# 条件边函数,根据 LLM 是否进行了工具调用来决定路由到工具节点还是结束
def should_continue(state: MessagesState) -> Literal["tool_node", END]:
"""根据 LLM 是否进行了工具调用,决定是否继续循环还是停止"""
messages = state["messages"]
last_message = messages[-1]
# 如果 LLM 进行了工具调用,则执行操作
if last_message.tool_calls:
return "tool_node"
# 否则,我们停止(回复用户)
return END
# 构建工作流
agent_builder = StateGraph(MessagesState)
# 添加节点
agent_builder.add_node("llm_call", llm_call)
agent_builder.add_node("tool_node", tool_node)
# 添加边以连接节点
agent_builder.add_edge(START, "llm_call")
agent_builder.add_conditional_edges(
"llm_call",
should_continue,
["tool_node", END]
)
agent_builder.add_edge("tool_node", "llm_call")
# 编译智能体
agent = agent_builder.compile()
# 展示智能体
display(Image(agent.get_graph(xray=True).draw_mermaid_png()))
# 调用
messages = [HumanMessage(content="将 3 和 4 相加。")]
messages = agent.invoke({"messages": messages})
for m in messages["messages"]:
m.pretty_print()
from langgraph.graph import add_messages
from langchain.messages import (
SystemMessage,
HumanMessage,
ToolCall,
)
from langchain_core.messages import BaseMessage
@task
def call_llm(messages: list[BaseMessage]):
"""LLM 决定是否调用工具"""
return llm_with_tools.invoke(
[
SystemMessage(
content="你是一个有用的助手,负责对一组输入执行算术运算。"
)
]
+ messages
)
@task
def call_tool(tool_call: ToolCall):
"""执行工具调用"""
tool = tools_by_name[tool_call["name"]]
return tool.invoke(tool_call)
@entrypoint()
def agent(messages: list[BaseMessage]):
llm_response = call_llm(messages).result()
while True:
if not llm_response.tool_calls:
break
# 执行工具
tool_result_futures = [
call_tool(tool_call) for tool_call in llm_response.tool_calls
]
tool_results = [fut.result() for fut in tool_result_futures]
messages = add_messages(messages, [llm_response, *tool_results])
llm_response = call_llm(messages).result()
messages = add_messages(messages, llm_response)
return messages
# 调用
messages = [HumanMessage(content="将 3 和 4 相加。")]
stream = agent.stream_events(messages, version="v3")
for snapshot in stream.values:
print(snapshot)
print("\n")
工具节点 (ToolNode)
@[ToolNode] 是一个预构建节点,用于在 LangGraph 工作流中执行工具。它自动处理并行工具执行、错误处理和状态注入。
当你需要精细控制图如何执行工具时,请使用 @[ToolNode]。这是驱动许多 LangGraph 智能体模式中工具执行的基本构建块。
from langchain.tools import tool
from langgraph.prebuilt import ToolNode
from langgraph.graph import MessagesState, StateGraph
@tool
def search(query: str) -> str:
"""搜索信息。"""
return f"结果:{query}"
@tool
def calculator(expression: str) -> str:
"""计算数学表达式。"""
return str(eval(expression))
builder = StateGraph(MessagesState)
builder.add_node("tools", ToolNode([search, calculator]))
# ... 添加其他节点和边
graph = builder.compile()
从工具中访问图状态和上下文
由ToolNode 执行的工具将模型生成的参数作为其第一个参数接收。要读取模型未生成的、图侧的数据,请使用以下选项之一:
- 在 Python 中,从注入的 @[
ToolRuntime] 参数读取状态和运行时作用域上下文。 - 在 JavaScript 中,从工具的第二个参数(类型为 @[
ToolRuntime])读取状态和运行时作用域上下文。
工具只能访问传递给
ToolNode 的状态值。当 ToolNode 直接作为 StateGraph 节点添加时,该输入就是当前的图状态。如果你从另一个节点手动调用 ToolNode,当工具需要自定义状态字段时,请传递完整状态。例如,tool_node.invoke(state) 或 toolNode.invoke(state, config) 会暴露完整状态,而只传递 {"messages": state["messages"]} 或 { messages: state.messages } 则只暴露 messages。from dataclasses import dataclass
from langchain.messages import AIMessage
from langchain.tools import ToolRuntime, tool
from langgraph.graph import MessagesState, START, StateGraph
from langgraph.prebuilt import ToolNode
class State(MessagesState):
user_id: str
@dataclass
class Context:
organization_id: str
@tool
def get_user_info(runtime: ToolRuntime[Context, State]) -> str:
"""查询用户信息。"""
# 读取传递给 ToolNode 的当前图状态。
user_id = runtime.state["user_id"]
# 读取不属于图状态的、每次运行时明确提供的值。
organization_id = runtime.context.organization_id
return f"组织 {organization_id} 中的用户 {user_id}"
builder = StateGraph(State, context_schema=Context)
builder.add_node("tools", ToolNode([get_user_info]))
builder.add_edge(START, "tools")
graph = builder.compile()
result = graph.invoke(
{
"messages": [
AIMessage(
content="",
tool_calls=[
{
"name": "get_user_info",
"args": {},
"id": "call_user_info",
}
],
)
],
"user_id": "user_123",
},
context=Context(organization_id="org_456"),
)
Connect these docs to Claude, VSCode, and more via MCP for real-time answers.

