可观测性与追踪
将智能体行为追踪为结构化步骤时间线,帮助团队了解发生了什么、发生顺序以及发生原因。
LangSmith 是 LangChain 的工程平台,用于观测、评估和部署 AI 智能体,帮助开发者与团队追踪智能体行为、开展评测,并借助托管基础设施上线生产环境中的智能体。
LangChain 提供 LangSmith,这是一个用于观测、评估和部署 AI 智能体的工程平台,同时提供用于构建智能体的开源框架。该平台面向需要让智能体实验可重复、通过测试和评审工作流提升质量,并以更强的控制力上线生产系统的开发者与团队。
该产品覆盖智能体开发生命周期:用于理解行为的追踪与分析;用于通过人工和自动化反馈为智能体评分的评估工具;用于运行长期运行型和协作型智能体的部署基础设施;以及用于将日常任务转化为周期性智能体的 Fleet。LangSmith 采用框架无关的设计,支持 Python、TypeScript、Go 和 Java SDK。
将智能体行为追踪为结构化步骤时间线,帮助团队了解发生了什么、发生顺序以及发生原因。
运行离线和在线评估,对比提示词或模型版本,并利用人工反馈校准自动评分。
部署具备记忆、对话线程和持久化检查点功能,并支持人机协作交互的智能体。
在 LangSmith Engine 上构建智能体,对生产故障进行聚类,在追踪记录和代码中识别根因,并提出修复方案供评审。
在 Fleet 中为日常任务创建周期性智能体,并使用模板、工具连接、API 触发和共享反馈闭环。
使用 Python、TypeScript、Go 或 Java SDK,并通过框架无关的追踪连接到智能体技术栈。
检查追踪记录、线程历史和分析数据,定位长流程或分支型智能体流程出错的位置。
通过在线和离线评估运行精选数据集及生产流量,对比不同版本,并在发布前发现回归问题。
使用部署基础设施上线需要记忆、对话状态、检查点和人机协作步骤的长期运行型智能体。
将研究、跟进或状态检查等周期性工作转化为智能体,使其能够通过日常语言或 API 调用触发。
使用标注队列和共享评分标准收集专家反馈,并校准基于评审器的评估。
不必。来源说明 LangSmith 采用框架无关的设计,你可以通过 SDK 或 API 将其与 LangGraph、自定义 Python 或其他框架结合使用。
LangSmith 支持通过标注队列进行人工评估、启发式检查、LLM-as-judge 评估器、成对比较,以及使用 Python 或 TypeScript 编写的自定义评估器。
可以。来源说明 LangSmith 可与 pytest、Vitest 和 GitHub 工作流集成,让团队在每个 PR 或每次夜间构建时运行评估。
定价页面显示 Developer、Plus 和 Enterprise 方案。Developer 面向个人用户并支持自助服务,Plus 面向团队,Enterprise 涵盖高级托管、安全性、支持和部署需求。
不会。来源说明 LangSmith 不会使用客户数据进行训练,追踪记录、提示词和输出内容仅对所属组织保持私有。
流量数据仅供参考。
livekit.io
LiveKit 是一个开源开发者平台,用于构建、部署和监控语音、视频及实体 AI 智能体,支持 Python 或 TypeScript,以及通过 LiveKit Cloud 进行生产部署。
arize.com
用于追踪、评估和改进 AI 代理与应用的 AI 工程平台
agent.xfyun.cn
iFLYTEK 企业级智能体开发平台,支持用 Prompt、Workflow 和 Agentic Workflow 构建与发布智能体。
truefoundry.com
面向企业的 AI 网关与 MCP 网关平台,用于部署、治理和观测 LLM 与智能体工作负载。
deerflow.tech
DeerFlow 是一个基于 LangChain 的开源框架,用于构建能够借助沙盒工具、记忆和子代理进行研究、编程与创作的超级智能体,适合深度研究、分析和内容生成等长期多步骤任务。
www.thesys.dev
无代码平台,构建并部署带交互式 UI 的 AI 代理