# LangChain LangSmith 是 LangChain 的工程平台,用于观测、评估和部署 AI 智能体,帮助开发者与团队追踪智能体行为、开展评测,并借助托管基础设施上线生产环境中的智能体。 - Findings24: - 网站: - 价格: Freemium - 分类: AI编程助手, AI 可观测性, AI 测试助手 ## 什么是 LangChain? LangChain 提供 LangSmith,这是一个用于观测、评估和部署 AI 智能体的工程平台,同时提供用于构建智能体的开源框架。该平台面向需要让智能体实验可重复、通过测试和评审工作流提升质量,并以更强的控制力上线生产系统的开发者与团队。 该产品覆盖智能体开发生命周期:用于理解行为的追踪与分析;用于通过人工和自动化反馈为智能体评分的评估工具;用于运行长期运行型和协作型智能体的部署基础设施;以及用于将日常任务转化为周期性智能体的 Fleet。LangSmith 采用框架无关的设计,支持 Python、TypeScript、Go 和 Java SDK。 ## LangChain 能做什么? ### 可观测性与追踪 将智能体行为追踪为结构化步骤时间线,帮助团队了解发生了什么、发生顺序以及发生原因。 ### 评估工作流 运行离线和在线评估,对比提示词或模型版本,并利用人工反馈校准自动评分。 ### 生产部署基础设施 部署具备记忆、对话线程和持久化检查点功能,并支持人机协作交互的智能体。 ### 自动化问题诊断 在 LangSmith Engine 上构建智能体,对生产故障进行聚类,在追踪记录和代码中识别根因,并提出修复方案供评审。 ### 用于任务自动化的 Fleet 在 Fleet 中为日常任务创建周期性智能体,并使用模板、工具连接、API 触发和共享反馈闭环。 ### 多语言、框架无关的访问 使用 Python、TypeScript、Go 或 Java SDK,并通过框架无关的追踪连接到智能体技术栈。 ## 使用场景 ### 调试智能体行为 检查追踪记录、线程历史和分析数据,定位长流程或分支型智能体流程出错的位置。 ### 衡量质量随时间的变化 通过在线和离线评估运行精选数据集及生产流量,对比不同版本,并在发布前发现回归问题。 ### 运行生产环境中的智能体 使用部署基础设施上线需要记忆、对话状态、检查点和人机协作步骤的长期运行型智能体。 ### 自动化日常任务 将研究、跟进或状态检查等周期性工作转化为智能体,使其能够通过日常语言或 API 调用触发。 ### 收集人工评审 使用标注队列和共享评分标准收集专家反馈,并校准基于评审器的评估。 ## 常见问题 ### 使用 LangSmith 必须使用 LangChain 或 LangGraph 吗? 不必。来源说明 LangSmith 采用框架无关的设计,你可以通过 SDK 或 API 将其与 LangGraph、自定义 Python 或其他框架结合使用。 ### LangSmith 支持哪些类型的评估? LangSmith 支持通过标注队列进行人工评估、启发式检查、LLM-as-judge 评估器、成对比较,以及使用 Python 或 TypeScript 编写的自定义评估器。 ### 可以在 CI/CD 中运行评估吗? 可以。来源说明 LangSmith 可与 pytest、Vitest 和 GitHub 工作流集成,让团队在每个 PR 或每次夜间构建时运行评估。 ### LangSmith 提供哪些方案? 定价页面显示 Developer、Plus 和 Enterprise 方案。Developer 面向个人用户并支持自助服务,Plus 面向团队,Enterprise 涵盖高级托管、安全性、支持和部署需求。 ### LangSmith 会使用我的数据进行训练吗? 不会。来源说明 LangSmith 不会使用客户数据进行训练,追踪记录、提示词和输出内容仅对所属组织保持私有。 ## 快速信息 - **类别**: AI 智能体工程平台 - **主要用户**: 构建 AI 智能体的开发者与团队 - **框架定位**: 框架无关 - **提及的 SDK**: Python、TypeScript、Go、Java - **定价形式**: 免费 Developer 方案、付费 Plus 方案,Enterprise 方案需联系获取定价 - **来源域名**: langchain.com