Trazas compatibles con OTEL
Captura trazas desde el SDK de Latitude o dirige una canalización de OpenTelemetry existente a la plataforma, para que las trazas puedan fluir sin un formato propietario.
Plataforma de código abierto para observar y monitorizar agentes de IA: inspecciona trazas de producción, detecta problemas y verifica correcciones con OpenTelemetry, alertas, búsqueda de sesiones y evaluaciones.
Latitude es una plataforma de código abierto para observar y monitorizar agentes de IA. Está diseñada para ayudar a los equipos a inspeccionar el tráfico real de producción, encontrar qué está fallando y verificar que una corrección haya funcionado realmente después del despliegue.
El producto se centra en las trazas, la búsqueda de sesiones, la detección de problemas y los flujos de trabajo de evaluación. Puede conectarse mediante su SDK o a través de una canalización de OpenTelemetry existente, y añade herramientas para agrupar fallos similares, anotar trazas y convertir ejemplos de producción en evaluaciones repetibles.
Captura trazas desde el SDK de Latitude o dirige una canalización de OpenTelemetry existente a la plataforma, para que las trazas puedan fluir sin un formato propietario.
Analiza sesiones completadas para identificar de qué trató la conversación, qué ocurrió y dónde se produjeron escalaciones, abandonos, reintentos, fallos de herramientas o pérdidas de confianza.
Busca en el 100 % de las trazas mediante búsqueda semántica, texto exacto y filtros de metadatos para encontrar rápidamente ejemplos reales relevantes.
Detecta nuevos problemas o escalaciones y envía alertas a Slack, correo electrónico o webhooks para que los equipos puedan responder antes de que los usuarios se quejen.
Convierte problemas de producción validados en evaluaciones, crea conjuntos de datos de referencia versionados y ejecuta comprobaciones de regresión con nuevas trazas.
Añade comentarios en línea a trazas, spans o resultados, y utiliza las anotaciones estructuradas resultantes en los flujos de trabajo de búsqueda, agrupación y evaluación.
Inspecciona las trazas de producción para entender qué hizo realmente un agente durante una sesión, incluidos mensajes, llamadas a herramientas, errores y otras señales de fallo.
Busca en todas las conversaciones para encontrar grupos de ejemplos reales que coincidan con una pregunta, una ventana de lanzamiento o un patrón de fallo concreto.
Detecta problemas cuando aparecen, agrupa fallos similares y envía alertas al equipo para que los problemas puedan clasificarse antes de propagarse.
Convierte un problema de producción validado en una evaluación basada en ejemplos reales y vuelve a ejecutarla con nuevas trazas después de implementar una corrección.
Utiliza anotaciones, conjuntos de datos y agrupación de problemas para mantener estructurado el trabajo de revisión de un equipo que trabaja en agentes de IA.
Latitude está configurado para monitorizar agentes de IA y sacar a la luz problemas a partir de las trazas de producción. La página de precios también indica un plan Starter gratuito y opciones Pro y Enterprise de pago.
La fuente indica que Latitude captura trazas, busca en conversaciones, descubre problemas y admite telemetría mediante un SDK o una canalización de OpenTelemetry existente.
La página de inicio indica que puede enviar alertas de problemas a Slack, correo electrónico o webhooks, y la página de precios señala que el plan Starter admite Slack y que Pro incluye asistencia prioritaria.
La página de inicio indica que Latitude ofrece observabilidad, búsqueda de sesiones, inteligencia de conversaciones, detección de problemas, evaluaciones automatizadas, gestión de conjuntos de datos, anotaciones humanas, filtros avanzados y agrupación de modos de fallo.
Los datos de tráfico son solo como referencia.
chirpz.ai
Plataforma de código abierto para rastrear, evaluar y monitorizar agentes de IA en producción, con herramientas de observabilidad y depuración para sus flujos de trabajo.
langchain.com
LangSmith es la plataforma de ingeniería de LangChain para observar, evaluar y desplegar agentes de IA. Ayuda a desarrolladores y equipos a analizar su comportamiento, ejecutar evaluaciones y llevar agentes a producción con infraestructura gestionada.
lmnr.ai
Plataforma de observabilidad de código abierto para agentes de IA que ayuda a los equipos a rastrear ejecuciones, detectar fallos y ejecutar evaluaciones.
livekit.io
Plataforma de código abierto para crear, desplegar y observar agentes de voz, vídeo e inteligencia artificial física.
browser-use.com
Plataforma de automatización de navegadores para agentes de IA, con herramientas de código abierto y servicios en la nube para navegar con discreción, ejecutar tareas y extraer datos estructurados a escala.
venice.ai
Plataforma privada de IA para chat, imágenes, vídeo, audio, código, búsqueda y flujos de trabajo con agentes, con plan gratuito, opciones de pago y API compatible con OpenAI.