Observabilidad y trazas
Registra el comportamiento de los agentes en una cronología estructurada de pasos para que los equipos puedan entender qué ocurrió, en qué orden y por qué.
LangSmith es la plataforma de ingeniería de LangChain para observar, evaluar y desplegar agentes de IA. Ayuda a desarrolladores y equipos a analizar su comportamiento, ejecutar evaluaciones y llevar agentes a producción con infraestructura gestionada.
LangChain ofrece LangSmith, una plataforma de ingeniería para observar, evaluar y desplegar agentes de IA, junto con frameworks de código abierto para crearlos. La plataforma está dirigida a desarrolladores y equipos que necesitan hacer repetible la experimentación con agentes, mejorar la calidad mediante flujos de trabajo de pruebas y revisión, y llevar sistemas a producción con mayor control.
El producto abarca el ciclo de vida del desarrollo de agentes: trazas y análisis para comprender su comportamiento, herramientas de evaluación para puntuar agentes con comentarios humanos y automatizados, infraestructura de despliegue para agentes de larga duración y colaborativos, y Fleet para convertir tareas rutinarias en agentes recurrentes. LangSmith se presenta como independiente del framework y es compatible con SDK de Python, TypeScript, Go y Java.
Registra el comportamiento de los agentes en una cronología estructurada de pasos para que los equipos puedan entender qué ocurrió, en qué orden y por qué.
Ejecuta evaluaciones offline y online, compara versiones de prompts o modelos y utiliza comentarios humanos para calibrar la puntuación automatizada.
Despliega agentes con memoria, hilos conversacionales, puntos de control persistentes y compatibilidad con interacciones con participación humana.
Crea agentes en LangSmith Engine, que agrupa los fallos de producción, identifica las causas raíz en las trazas y el código, y propone correcciones para su revisión.
Crea agentes recurrentes para tareas cotidianas en Fleet, con plantillas, conexiones de herramientas, activación mediante API y ciclos de comentarios compartidos.
Utiliza SDK de Python, TypeScript, Go o Java y conecta stacks de agentes mediante trazas independientes del framework.
Inspecciona las trazas, el historial de hilos y los análisis para localizar dónde falló un flujo de agente largo o ramificado.
Ejecuta conjuntos de datos seleccionados y tráfico de producción mediante evaluaciones online y offline para comparar versiones y detectar regresiones antes del lanzamiento.
Utiliza la infraestructura de despliegue para poner en producción agentes de larga duración que necesiten memoria, estado conversacional, puntos de control y pasos con participación humana.
Convierte tareas recurrentes, como investigación, seguimientos o comprobaciones de estado, en agentes que pueden activarse mediante lenguaje cotidiano o llamadas a la API.
Utiliza colas de anotación y criterios de puntuación compartidos para recopilar comentarios de expertos y calibrar la evaluación basada en jueces.
No. La fuente indica que LangSmith es independiente del framework y que puedes utilizarlo con LangGraph, Python personalizado u otros frameworks mediante el SDK o la API.
LangSmith admite evaluación humana mediante colas de anotación, comprobaciones heurísticas, evaluadores LLM-as-judge, comparaciones por pares y evaluadores personalizados en Python o TypeScript.
Sí. La fuente indica que LangSmith se integra con pytest, Vitest y los flujos de trabajo de GitHub para que los equipos puedan ejecutar evaluaciones en cada PR o en compilaciones nocturnas.
La página de precios muestra un plan Developer, un plan Plus y un plan Enterprise. Developer es autogestionado para usuarios individuales, Plus está dirigido a equipos y Enterprise cubre necesidades avanzadas de alojamiento, seguridad, soporte y despliegue.
No. La fuente indica que LangSmith no entrena con datos de clientes y que las trazas, los prompts y las salidas permanecen privadas para la organización.
Los datos de tráfico son solo como referencia.
lmnr.ai
Plataforma de observabilidad de código abierto para agentes de IA que ayuda a los equipos a rastrear ejecuciones, detectar fallos y ejecutar evaluaciones.
heym.run
Heym es una plataforma de automatización de flujos de trabajo de IA, con código fuente disponible y autoalojada, para crear y ejecutar flujos agénticos con un editor visual. Ayuda a los equipos de automatización, plataforma e IA a coordinar agentes, RAG, aprobaciones y trazas de ejecución en su propia infraestructura.
caveman.so
Caveman es una plataforma de eficiencia de tokens para agentes de IA y flujos de trabajo en producción. Ayuda a los equipos a reducir el contexto pertinente, enrutar el tráfico y medir ahorros verificados mediante herramientas locales, un SDK de TypeScript y una capa de nube gestionada.
latitude.so
Plataforma de código abierto para observar y monitorizar agentes de IA: inspecciona trazas de producción, detecta problemas y verifica correcciones con OpenTelemetry, alertas, búsqueda de sesiones y evaluaciones.
kiro.dev
Kiro es una plataforma de codificación e ingeniería agéntica con IA para desarrolladores y equipos; convierte prompts en especificaciones y ayuda a implementar y validar en IDE, CLI y web.
github.com
GitHub Copilot es la plataforma de asistencia de programación y agentes de IA de GitHub para desarrolladores: sugiere código, ejecuta tareas en segundo plano y ayuda a los equipos a gestionar el trabajo con agentes en editores, terminales y GitHub.