Observabilidad de LLM
Realiza un seguimiento de prompts, trazas, errores, ejecuciones y metadatos relacionados para que los equipos puedan inspeccionar cómo se comportan las aplicaciones con LLM en producción.
Plataforma de observabilidad y gestión de prompts para aplicaciones basadas en modelos de lenguaje (LLM). Ayuda a los equipos a supervisar, mejorar y proteger chatbots, agentes y otros flujos de trabajo con LLM.
Lunary es una plataforma de observabilidad y gestión de prompts para aplicaciones basadas en modelos de lenguaje (LLM). Está diseñada para ayudar a los equipos a supervisar, mejorar y proteger chatbots de IA y otros flujos de trabajo con LLM a medida que pasan del desarrollo a producción.
El producto combina registros, trazas, plantillas de prompts, revisión humana, analítica y guardarraíles en un solo lugar. El sitio también destaca las opciones de alojamiento propio, los controles empresariales y la integración basada en SDK, para que los equipos puedan añadir supervisión sin colocar Lunary directamente en la ruta de las solicitudes.
Realiza un seguimiento de prompts, trazas, errores, ejecuciones y metadatos relacionados para que los equipos puedan inspeccionar cómo se comportan las aplicaciones con LLM en producción.
Crea plantillas de prompts, colabora con tus compañeros de equipo y utiliza el control de versiones y las pruebas A/B para iterar sobre los cambios en los prompts.
Revisa respuestas, etiqueta datos y exporta registros a JSONL para flujos de trabajo posteriores de ajuste fino.
Busca, filtra y analiza el uso, los costes, los temas y la satisfacción mediante analítica y paneles personalizados.
Enmascara información personal, gestiona roles y accesos, y admite SSO/SAML para controlar el acceso a los datos.
Conecta mediante SDK, una API HTTP e integraciones con OpenAI, LangChain, LiteLLM, Flowise y otras herramientas.
Usa Lunary para inspeccionar el tráfico de LLM en producción, revisar trazas y errores, y comprender cómo interactúan los usuarios reales con un chatbot o agente.
Crea plantillas, compara versiones de prompts y ejecuta pruebas A/B al iterar sobre prompts de sistema o flujos de conversación.
Etiqueta registros, revisa respuestas y exporta datos a JSONL al preparar conjuntos de datos para el ajuste fino o el análisis de modelos.
Aplica el enmascaramiento de información personal, controles de acceso y alojamiento propio al gestionar datos confidenciales de usuarios o cargas de trabajo sujetas a requisitos de cumplimiento.
Comparte proyectos, invita a compañeros de equipo y utiliza revisiones humanas y paneles para coordinar el feedback entre colaboradores técnicos y no técnicos.
Lunary es una plataforma para supervisar, mejorar y proteger chatbots de IA. Sus preguntas frecuentes la describen como una solución que cubre observabilidad, gestión de prompts, evaluaciones y guardarraíles para LLM.
Según las preguntas frecuentes, una ejecución puede ser de tipos como llm, trace, chain, embedding o chat. En el caso de los LLM, una ejecución suele ser una llamada a una API de inferencia o un mensaje de chat en un hilo.
No. Las preguntas frecuentes indican que los SDK de Lunary se ejecutan de forma asíncrona en lugar de situarse entre tu código y la API de inferencia, por lo que no deberían afectar a la latencia de las solicitudes.
Las preguntas frecuentes indican que los datos del plan gratuito están disponibles durante 30 días, los datos del plan de pago se conservan indefinidamente y los datos alojados por ti permanecen contigo de forma indefinida.
Sí. Las preguntas frecuentes indican que puedes alojar el servicio por tu cuenta de forma gratuita con Community Edition, mientras que Enterprise Edition admite Docker, Kubernetes y más opciones, y es de pago.
Los datos de tráfico son solo como referencia.
promptmetheus.com
IDE web de ingeniería de prompts para crear, probar y optimizar prompts para aplicaciones, agentes y flujos de trabajo basados en modelos de lenguaje.
inceptionlabs.ai
Inception desarrolla modelos de lenguaje grandes basados en difusión bajo la marca Mercury, como Mercury 2 para razonamiento y Mercury Edit 2 para edición de código, orientados a equipos que necesitan modelos rápidos y controlables para aplicaciones basadas en API, flujos de desarrollo, voz, agentes y búsqueda.
beaglesecurity.com
Beagle Security es una plataforma de pruebas de seguridad de aplicaciones impulsada por IA para aplicaciones web, API y GraphQL. Ayuda a los equipos a realizar pruebas de penetración, generar informes de remediación contextualizados e integrar las pruebas de seguridad en sus flujos de desarrollo.
omlx.ai
oMLX es un servidor de inferencia LLM nativo de macOS, basado en MLX, para ejecutar localmente en Apple Silicon modelos compatibles de lenguaje, visión-lenguaje, embeddings y reranking. Diseñado para flujos de trabajo con agentes de programación, funciona con Claude Code, OpenClaw, Cursor y clientes compatibles con OpenAI.
promptic.eu
Plataforma de optimización de GenAI para evaluar modelos, mejorar prompts y agentes, y seleccionar configuraciones según métricas de negocio.
www.cybedefend.com
CybeDefend es una plataforma de seguridad de código diseñada para flujos de trabajo de programación con IA. Su capa VibeDefend revisa los prompts de los agentes y los diffs, aplica reglas de proyecto y de negocio, protege frente a acciones riesgosas y combina análisis de código, dependencias, secretos, infraestructura y CI/CD antes de una pull request.