Gestión de prompts
Crea, prueba y gestiona prompts con cualquier modelo, incluidos modelos personalizados, desde el mismo espacio de trabajo.
Plataforma colaborativa de desarrollo de IA para crear, probar y supervisar funciones de IA, con gestión de prompts, evaluación, anotación, prototipado y monitorización en un único flujo de trabajo web.
Athina es una plataforma colaborativa de desarrollo de IA para crear, probar y supervisar funciones de IA. La página de inicio la presenta como una forma de que los equipos lancen IA en producción más rápido, al combinar la gestión de prompts, la evaluación, la anotación, el prototipado y la monitorización en un único producto.
La plataforma está diseñada tanto para usuarios técnicos como no técnicos. Los ingenieros pueden trabajar mediante código y API, mientras que los equipos de producto, QA y otros miembros pueden revisar resultados, anotar conjuntos de datos y participar en flujos de trabajo de experimentación a través de la interfaz de usuario.
Crea, prueba y gestiona prompts con cualquier modelo, incluidos modelos personalizados, desde el mismo espacio de trabajo.
Ejecuta evaluaciones de conjuntos de datos utilizando más de 50 evaluaciones predefinidas o configura evaluaciones personalizadas según tus propios criterios.
Cambia el modelo, el prompt o el recuperador para regenerar conjuntos de datos con unos pocos clics.
Permite que los miembros del equipo verifiquen los resultados de las evaluaciones y anoten conjuntos de datos mediante una etapa de revisión humana.
Crea prototipos de cadenas y ejecútalas mediante programación para flujos de trabajo de ingeniería.
Captura trazas de LLM, ejecuta evaluaciones en línea sobre registros activos y revisa análisis segmentados por prompts, modelos, temas o ID de cliente.
Los equipos que crean productos de IA pueden gestionar prompts, ejecutar evaluaciones, anotar resultados y supervisar el comportamiento en producción sin cambiar entre herramientas independientes.
Los ingenieros pueden crear prototipos de cadenas de prompts, ejecutarlas mediante programación y mantener sincronizados los flujos de trabajo de prompts versionados con el código de la aplicación.
Los equipos de ciencia de datos y QA pueden comparar conjuntos de datos en paralelo, verificar los resultados de las evaluaciones y añadir revisión humana cuando las evaluaciones automatizadas no captan los matices.
Los equipos de producción pueden capturar trazas de LLM, ejecutar evaluaciones en línea sobre los registros entrantes y comparar el rendimiento por prompt, modelo, tema o ID de cliente.
Las organizaciones que utilizan modelos personalizados o proveedores externos pueden centralizar en Athina los flujos de trabajo de evaluación y monitorización mientras trabajan con su pila de modelos existente.
Athina está diseñada para equipos que crean aplicaciones de IA y necesitan gestionar prompts, realizar evaluaciones, anotar, registrar y monitorizar en un solo lugar. La página de inicio muestra su uso para experimentación, trazas en producción y evaluaciones en línea.
La página de inicio indica que Athina funciona con o sin tu código. Los ingenieros pueden ejecutar prompts, flujos y evaluaciones mediante programación, mientras que los usuarios no técnicos pueden utilizar la interfaz de usuario.
Athina permite gestionar y probar prompts con cualquier modelo, evaluar conjuntos de datos con evaluaciones predefinidas o personalizadas, regenerar conjuntos de datos, crear prototipos de cadenas y monitorizar trazas de IA en producción.
La página de precios no estaba disponible en las fuentes proporcionadas, por lo que los precios y la estructura de los planes no pudieron confirmarse a partir del material revisado.
Los datos de tráfico son solo como referencia.
klu.ai
Plataforma para diseñar prompts, evaluar resultados y supervisar el comportamiento en producción de aplicaciones basadas en modelos de lenguaje (LLM) en un flujo de trabajo colaborativo.
humanloop.com
Plataforma empresarial de evaluación de LLM para equipos que desarrollan funcionalidades de IA, con evaluación, gestión de prompts y observabilidad en un mismo ciclo de feedback.
sense.education
Plataforma de evaluación y retroalimentación basada en IA para la educación superior, integrada en los flujos de trabajo de LMS y entornos de desarrollo.
ragas.io
Marco de código abierto para probar y evaluar aplicaciones de LLM, generar datos sintéticos de evaluación, medir su calidad y supervisar su comportamiento en producción.
rainforestqa.com
Plataforma de automatización de pruebas con IA y sin código para crear, mantener y ejecutar pruebas de extremo a extremo, integrada con flujos de trabajo CI/CD y con menos mantenimiento manual.
mabl.com
mabl es una plataforma de automatización de pruebas con agentes para aplicaciones web, móviles y de IA, y API. Ayuda a los equipos de software a crear y ejecutar pruebas continuamente, adaptarlas a los cambios y analizar fallos dentro de sus flujos de desarrollo existentes.