# Hamming AI Hamming AI 为开发语音与聊天智能体的团队提供自动化测试、红队测试和生产环境监控,帮助团队在上线前评估智能体行为,排查真实对话中的故障,并将其转化为后续版本的回归测试。 - Findings24: - 网站: - 价格: Freemium - 分类: AI 可观测性, AI 测试助手, 大语言模型评测 ## 什么是 Hamming AI? Hamming AI 是一个面向语音和聊天智能体的质量保障平台,结合了自动化测试、对抗性评估和生产环境监控。它帮助团队在发布前评估智能体行为,并调查真实对话中的故障。 该平台将上线前评估与持续可靠性工作连接起来:生产环境中的故障可以转化为针对未来版本运行的回归测试。其评估涵盖对话行为和任务完成情况,包括智能体声称已完成某项操作、但并未执行相应工具调用的情形。 ## Hamming AI 能做什么? ### 场景生成与评分 根据智能体提示词生成测试场景,并使用 50 多项内置指标评估结果。所列套餐包含自定义评分模板。 ### 大规模语音模拟 测试口音、打断、背景噪音、DTMF 输入和 IVR 树。Hamming 列出支持超过 50,000 个并发测试通话以及 CI/CD 集成。 ### 对抗性测试 运行经过整理的提示词注入、越狱、个人身份信息泄露、政策违规和社会工程攻击探测套件。测试发现可转化为后续版本的可复现测试。 ### 生产环境监控与告警 通过全天候健康检查监控实时流量,检测偏移、未经验证的承诺和合规风险。告警可以通知人工人员,而原生 OpenTelemetry 支持可连接整个技术栈中的可观测性。 ### 通话回放与回归测试 回放生产环境通话,并将已识别的故障转化为永久回归测试,以便在未来构建版本中检查此前出现的问题。 ## 使用场景 ### 验证预约流程 检查智能体是否确实完成预约,再向来电者确认预约成功。工程团队可以利用失败场景,诊断口头回复与工具执行之间的差距。 ### 评估多语言客户服务 在部署前,让客服智能体应对不同地区的口音和具有挑战性的通话条件,包括会打断对话或操作电话菜单的来电者。 ### 评估敏感数据处理 通过尝试提取私密信息或绕过政策来探测医疗或金融服务智能体,然后保留可复现测试,用于发布检查。 ### 管理代理机构客户项目 管理多个语音智能体项目的代理机构可以使用 Agency 套餐的多客户管理、通话分析以及信任与安全报告来组织评估工作。 ## 常见问题 ### 如何连接智能体? Hamming 支持从 Vapi、Retell、ElevenLabs 或其他编排框架导入智能体。设置可以从粘贴智能体提示词或通过 API 连接开始。网站宣传称,首次测试报告可在 10 分钟内生成。 ### 可提供哪些语言覆盖? Hamming 列出了超过 65 种语言和口音,包括英语、西班牙语、印地语、阿拉伯语、法语和德语,并覆盖地区口音。 ### 定价结构如何? Agency、Startup 和 Enterprise 套餐采用联系咨询定价。Enterprise 在 Startup 方案基础上增加支持 SLA 和专属支持工程师;Startup 包含每周七天支持以及创始人直接支持。 ### 列出了哪些安全与合规选项? 首页列出了 SOC 2 Type II 和 HIPAA,并提供商业伙伴协议。定价页面将 SOC-2 和 HIPAA 合规性列为 Enterprise 套餐的内容。 ## 快速信息 - **产品类别**: 语音和聊天智能体质量保障 - **主要用户**: 智能体开发者、代理机构和企业团队 - **工作流覆盖范围**: 上线前测试、红队测试和生产环境监控 - **网站**: https://hamming.ai