语音 AI 工具包
Hume 提供开源模型、数据集和评估 API,旨在为语音系统加入情感智能。
Hume AI 是面向语音与情感的 AI 平台,提供模型、数据集和评估 API,助力开发者与研究者构建富有表现力的文本转语音、语音转语音及人类评测系统。
Hume AI 是一个语音与情感平台,将模型、数据集和评估 API 结合起来,用于构建能够理解并生成富有表现力语音的系统。该网站将产品定位为“语音 AI 的情感智能实验室”,并提供基于研究的工具,支持文本转语音、语音转语音、训练数据和人工评测。
其架构页面重点展示了三个主要产品领域:用于同步文本与音频的 TADA TTS、用于具备共情能力的语音转语音交互的 EVI,以及用于低延迟 TTS 且支持语音设计和表达控制的 Octave。数据与评估页面则通过研究级数据集和人类反馈 API 扩展了这套工具,帮助测试声音在人类听感中的表现。
Hume 提供开源模型、数据集和评估 API,旨在为语音系统加入情感智能。
TADA 被介绍为一种文本转语音系统,可将文本和音频同步在同一流中,以减少 token 级幻觉并提升延迟表现。
EVI 被描述为一种语音转语音系统,具备韵律理解、原生语言生成、语音设计、工具使用和上下文注入能力。
Octave 是 Hume 的低延迟 TTS 系统,支持语音设计、声音克隆、声音转换、表达调制和多说话人合成。
训练数据页面介绍了用于会话音频、情感复现、多语言语音、声音真实感和表达分析的数据集。
Human Feedback API 可帮助团队运行研究、收集人工评分,并以快速周转时间评估语音模型。
当你需要带有同步文本与音频、更低延迟,并在输出中附带转录文本的文本转语音功能时,可使用 TADA。
如果你需要具备韵律理解、工具使用、上下文注入和自然轮次交互能力的会话式语音代理,可使用 EVI。
当你需要语音设计、声音克隆、声音转换或表达调制来生成富有表现力的音频时,可使用 Octave。
当你正在构建或优化面向会话音频、情感语音、多语言语音数据或表达分析的模型时,可使用训练数据资料库。
当你希望就可听性、音频质量和流畅度获得人工评分,以评估语音模型时,可使用 Human Feedback API。
Hume 将该产品定位为面向语音与情感的 AI 工具包,提供开源模型、数据集和评估 API,用于构建能够理解情感线索的语音 AI。
来源显示有从免费版到商业版的定价方案,另外还提供企业版选项,包含自定义定价和联系销售流程。
Hume 的网站重点展示了用于文本转语音的 TADA、用于语音转语音交互的 EVI、用于低延迟 TTS 的 Octave、用于语音和表达模型的训练数据,以及用于模型评估的人类反馈 API。
该网站介绍了 API 和研究级数据集,但所提供的来源未显示完整的开发者设置指南或集成列表。