AI 可观测性工具帮助团队监控模型质量、延迟、成本、调用链与数据漂移,快速排查问题并持续改进生产环境中的 AI 应用。
目录更新于 2026年11月17日
AI开发者工具
Ito 是一款自动化 QA 产品,通过理解代码的智能代理审查拉取请求,帮助快速迭代的工程团队发现回归问题和可用性问题,无需维护手动测试脚本。
AI 可观测性
Akto 帮助安全团队发现 LLM、AI 智能体、MCP 服务器及生成式 AI 应用,并通过攻击模拟、活动监控和运行时策略管控相关风险。
Adaline 面向产品和工程团队,分析 AI 智能体的生产日志与追踪数据,发现重复行为并生成评估、测试数据集和提示词改进建议。
Trackingplan 为数字团队和代理机构持续监控网站、移动应用及后端的分析追踪数据,帮助识别失效事件、诊断埋点问题,并通过自然语言了解数据。
面向大语言模型应用的可观测性与提示词管理平台,帮助团队监控、改进并保障聊天机器人、智能体及其他 LLM 工作流的安全。
Bluejay 是面向 AI 语音和聊天代理的 QA 平台,支持部署前后测试、监控与优化。
AgentOps 为开发者提供 AI 智能体和大语言模型应用的可观测性支持,帮助团队追踪、调试并部署应用,兼容 OpenAI、CrewAI、AutoGen 等技术栈。
Hamming AI 为开发语音与聊天智能体的团队提供自动化测试、红队测试和生产环境监控,帮助团队在上线前评估智能体行为,排查真实对话中的故障,并将其转化为后续版本的回归测试。
AI SEO工具
追踪传统 SERP 与 AI 生成答案的搜索分析平台
AI 模型平台
面向 AI 团队的企业级 LLM 评估、提示词管理与可观测性平台
工程智能平台,衡量 AI 采用率、影响力与 ROI
用于运行 AI 编程代理和本地开发工作流的桌面工作区
Pangea 是面向 AI 应用的安全平台,可为提示词、输出、数据访问和日志记录添加安全护栏。通过 API、SDK、AI 工具或 API 网关保护 LLM 工作流。
AI DevOps助手
Coldtea 是一个由 AI 驱动的软件交付环境,帮助团队在一个地方完成 QA、生产监控、缺陷检测、任务创建和修复。它运行在你的机器上,在代码编写完成后及时发现回归问题和生产环境故障。
为生成式 AI 和智能体 AI 提供企业级评估、安全防护、监控与治理控制。
企业级 AI 治理平台,利用策略图和确定性检查实现审计、修复与免重训控制。
AI编程助手
面向生产环境 AI 智能体的可观测性与评估平台
用于可信数据的数据与 AI 可靠性控制平面
Anomalo 监控数据质量、调查问题并发现重要变化。
AI 智能体基础设施
TruLens 是一个用于追踪和评估 AI 智能体及其他 LLM 应用的开源库,帮助团队检查智能体步骤、使用可配置指标评估质量,并通过基于 OpenTelemetry 的埋点对比应用版本。