LangChain围绕Agent重构LangSmith,推出Agent Platform
We rebuilt LangSmith around the agent
LangChain 宣布将 LangSmith 围绕 Agent 重构,推出 LangSmith Agent Platform,把构建、运行、改进和治理四个环节统一到一条 agent 记录上。
LangSmith 以 agent 记录重构产品结构,读者可据此了解多框架、多运行时下智能体治理与评测的组织方式。
上周我们 宣布了我们的 C 轮融资 并介绍了新的 LangSmith Agent 平台:一个可以构建、运行、改进和管理所有代理的地方。有了这个平台,代理现在成为 LangSmith 的核心对象,连接了开发者的碎片化工作流程,并使平台团队能够跨业务管理代理。
在这篇文章中,我们讨论了为什么我们重新组织了产品、代理模型的工作原理、它所解锁的功能以及我们下一步的计划。
我们为什么要重建 LangSmith?
2026 年代理的采用带来了一个转折点,新的 工具、模型和工程方法使得构建能够 可靠地执行复杂、高价值的工作。
现在,公司跨业务运行许多代理:工程使用编码代理,产品部门正在构建面向客户的代理,而组织内的各个团队都有各种内部生产力代理。这些代理使用不同的框架构建,托管在不同的运行时上,并使用各种工具和模型。
其结果是工程师和平台团队的工作流程都变得碎片化。
工程师 在断开连接的表面上工作。 跟踪、监控 和 部署 都位于不同的地方。这需要频繁的上下文切换,在实践中导致团队跳过构建 evals 等困难但重要的步骤。
AI 平台团队 难以回答基本的治理问题。哪些代理存在,以及每个代理的负责人是谁?它们的成本是多少,以及它们的性能如何?当成本飙升时,通常没有明显的人可以询问发生了什么。
我们希望简化团队从一处管理整个 代理开发生命周期 的过程,使用任何技术栈,并在所有方面都具有所有权和治理。
一个平台用于整个代理开发生命周期
LangSmith 支持整个代理开发生命周期:构建、运行、改进和管理。现在,我们通过一个独特的代理记录连接了整个流程。
- 构建: 使用 LangSmith Studio 中的新 自然语言构建器 描述代理,使用我们的开源工具以代码方式构建,或使用任何其他框架。
- 运行: 部署在 LangSmith Agent 服务器 上,或保持代理在您已经使用的运行时上。
- 改进: 跟踪、evals、数据集、注释和 引擎 适用于任何向 LangSmith 发送跟踪的代理。
- 管理: LangSmith 代理注册表和 LLM 网关 提供组织级别的可见性和对每个注册代理的严格控制。
当您打开一个代理记录时,其跟踪、evals、Agent 服务器和引擎问题都可以通过一次点击访问,因此您不需要在多个表面上导航以找到它们。每个代理的本地、开发、测试和生产环境都位于同一个代理 ID 下,因此在进行更改后比较性能非常简单。
.png&mode=full&exp=1795132800&sig=347beb09486a95ac)
LangSmith 是可组合的,因此您可以选择需要的部分。如果您已经在另一个平台上运行代理,您可以将它连接到 LangSmith 以改进和管理它,而无需更改任何其他工作流程。
如果你在 LangSmith 上构建和运行,你将获得一个管理生命周期的单一场所。LangSmith 产品相互构建,因此你可以更快地找到、修复、发布和验证你的代理中的问题。例如,在将修复合并到生产环境之前,LangSmith 引擎可以在 Agent Server 预览中 验证一个建议的修复。
代理的新数据模型
以前,发送到 LangSmith 的跟踪使用一个扁平的项目层次结构,与任何特定的代理没有关联。来自单个代理在不同环境中的跟踪彼此没有关联。
现在有一个代理记录,环境和跟踪都分组在它下面。开发生命周期的每个阶段都与代理记录相连。
每个代理记录包括三个属性:
- 所有者:负责代理的命名个人
- ID:一个全局唯一、不可变的标识符
- 类型:它是什么类型的代理,这决定了在其仪表板中显示的信息、其数据连接和评估标准
.png&mode=full&exp=1795132800&sig=16293eb2f34a8e48)
不同代理类型的评估和治理
不同的代理做不同的工作,因此你需要不同类型的评估来管理和改进它们。例如,编码代理是根据它编写的代码是否被合并来评估的,而客户支持代理需要低延迟。代理类型将这些区别构建到 LangSmith 架构中,因此每个代理记录都提供了围绕代理目标设计的有用资源。
代理类型提供三件事:
围绕代理工作构建的数据视图:每种代理类型都有一个定制的仪表板,其中包含关键统计信息和评估标准。对于通用代理,这包括代理的描述、其最近的活动、在线监控、它常用的常见模型和工具,以及由引擎显示的代理故障。对于编码代理,它是合并的 PR、令牌成本以及代理完成的工作类型。
一致的数据,无需手动设置:仪表板有意地具有主观性。当你为代理分配一个类型时,它的仪表板可以立即使用,无需首先构建自定义视图。给定类型的每个代理都以相同的方式衡量,因此当你有三个人运行编码代理时,衡量标准在三者之间是可比较的。
数据连接:编码代理类型允许你连接你的 GitHub 仓库来跟踪代理使用的下游结果。随着我们构建更多代理类型,我们将继续构建集成,使你能够查看和采取与你的代理相关的数据。

我们已经开始了通用和编码代理,并且正在扩展到具有独特评估的代理的其他类型。例如,语音代理不仅需要解决客户问题,还需要与客户进行低延迟和良好音频质量的交互。通过代理类型,我们可以默认显示这些特定数据,并使开发人员更容易找到故障并修复它们。
治理每个无论它在哪里运行的代理
代理蔓延已成为一个治理问题,它来自三个方向。工程团队构建自定义代理。业务部门从供应商平台采用代理,例如用于 IT 的 ServiceNow 和用于企业搜索的 Glean。员工在自己的设备上自行获取编码和生产力代理。
平台团队和 AI 领导对所有这些都负有责任,但要求每个团队在同一个平台上标准化是不现实的。
使用 LangSmith,他们不必如此。它适用于在任何支持 OpenTelemetry 协议(OTLP)的平台运行的代理,包括实验室和超大规模系统。连接代理后,它将与工程师们构建的代理一起注册,并以相同的方式衡量。
每个注册的代理都有一个所有者、ID 和类型。对于管理员来说,这提供了一种一致的方式来监控和管理整个代理舰队。成本和质量指标汇总到每个代理的每个环境中。如果有一个来自 Glean 代理的成本激增,就会有指定的所有者可以联系,以及指示问题出在哪里的跟踪详细信息。

LangSmith 的下一步发展方向
代理记录是 LangSmith 的新基础,我们很高兴继续在此基础上构建。通过将每个跟踪、环境和部署都固定到代理上,我们可以为开发人员简化更多工作流程,并在其中内置治理。
以下是我们正在构建的目标:引擎 对你的代理进行红队测试,发现故障,并在你发布修复程序后监控回归。你的团队在围绕其自身审查流程构建的 自定义注释应用 中审查生产跟踪,并且审查的示例会自动流入评估数据集。 轨迹 来自你最好的运行成为 微调模型 的数据,降低成本并提高代理性能。所有这些都连接到同一个代理记录,KPI 在实时监控。
这些部件中的每一件今天都存在于 LangSmith 中。现在我们将它们连接起来,使开发体验更加轻松。
路线图上的其他内容:
更多代理类型: 今天可以提供通用和编码代理类型,而语音即将到来。我们将继续扩展,以使团队能够标准化他们如何评估和管理更多类型的代理,每个代理都有相关的数据连接和分析。
组织级仪表板: 今天可以在工作区级别提供集中式仪表板。我们正在开发组织级仪表板,以便领导者可以在一个视图中查看整个公司的汇总性能指标和趋势。
身份:每个代理已经有一个唯一的、不可变的 ID。接下来,您将能够将代理注册到您的身份提供程序中,以便安全团队可以像组织中的任何其他身份一样管理和审计它们。
如何开始使用新的 LangSmith
新的 LangSmith 在全球云、BYOC 和自托管环境中可用。您可以通过 今天登录或注册 来尝试它。
开始使用最快的方法是使用 LangSmith Studio 构建您的第一个代理或 连接您已经运行的代理。
来源: LangChain Blog · langchain.com