エージェント接続とインポート
Vapi、Retell、ElevenLabsとのネイティブ連携、または提供される番号とAPIを使ってカスタムエージェントをルーティングすることで、音声エージェントを接続します。
Relyable
認証するRelyableは、AI音声エージェント向けのシミュレーションと監視プラットフォームです。テスト会話の生成、カスタム評価基準での通話採点、本番通話のリアルタイム監視に対応します。
概要
Relyableは、AI音声エージェント向けのシミュレーションと監視プラットフォームです。リリース前にエージェントをテストし、カスタム評価基準に基づいて通話を採点し、本番通話で発生する問題をその場で監視する必要があるチーム向けに設計されています。
この製品は、自動テスト、評価基準ベースの評価、ライブ監視を1つのワークフローでサポートします。Vapi、Retell、ElevenLabsとネイティブに連携し、さらに提供された番号とAPIベースの監視を通じて通話をルーティングすることで、カスタムエージェントにも対応できます。
主な機能
AI支援のテストケース作成
システムプロンプトからテストケースを生成するか、特定のビジネス目標に沿って定義し、すべてのシナリオを手作業で書かずに網羅性を構築します。
ペルソナベースのシミュレーション
アクセント、気分、目的などの属性を持つペルソナを作成し、生成したシナリオと組み合わせてさまざまな発信者を再現します。
並列テスト実行
大量のシミュレーション会話を並列で実行し、顧客がエージェントに接触する前にテストできます。
評価基準ベースの評価
カスタムの評価基準と、レイテンシ、感情、顧客満足度などの組み込みメトリクスに対して通話を採点します。
リアルタイム監視とアラート
ライブ通話を記録・分析し、しきい値を超えた場合はSlack、Email、PagerDuty、Opsgenie、Linear、またはwebhookエンドポイントなどのツールにアラートを送ります。
適用領域
リリース前の音声エージェントテスト
リリース前にRelyableを使って、実際に近い会話の網羅性を生成し、独自の評価基準でエージェントを採点し、ユーザーより先に不足しているフローを見つけます。
本番通話の監視
本番通話を継続的に監視し、スコアがしきい値を超えたときにアラートを受け取ることで、日次の手動監査なしで問題を把握できます。
ペルソナとシナリオの網羅
気分、アクセント、目的など、異なる発信者スタイルを反映したペルソナとシナリオを作成し、さまざまな利用者に対するエージェントの挙動をテストします。
業務通話ワークフロー
予約、キャンセル、日程変更、資格確認、ナレッジベース検索など、ソースで挙げられている一般的な業務フローの検証にこのプラットフォームを使います。
カスタムプラットフォームの監視
他の音声プラットフォームを使っているチームは、提供された番号とAPI経由で通話をルーティングし、既存のスタックから移行せずに監視を追加できます。
Pros and Cons
Pros
- ソースで公開されているネイティブ連携はVapi、Retell、ElevenLabsのみで、他のプラットフォームではカスタムフローが必要です。
- 公開価格ページにはプラン名と利用上限はありますが、請求の詳細や超過料金のルールまでは明記されていません。
Cons
- シミュレーションテスト、採点、ライブ監視を1つの製品でまとめて扱えるようにしています。
- システムプロンプトからテストケースを生成することも、独自の目標を定義することもできます。
- 固定の評価フレームワークを強制せず、カスタムの評価基準を使えます。
- リアルタイムアラートを提供し、一般的なインシデント管理・コラボレーションツールへ送信できます。
- ネイティブ連携とカスタムエージェント連携の両方に対応しています。
FAQ
Relyableは何をするものですか？
Relyableは、事前に定義したスクリプトやテストケースを使って、人手を介さずにAI音声エージェントを評価する自動テストとして説明されています。また、本番通話を継続的に評価し、異常があれば通知します。
どのプラットフォームと連携できますか？
ソースでは、Vapi、Retell、ElevenLabsとのネイティブ連携に対応していると記載されています。また、他のプラットフォーム上のカスタムエージェントについては、プロンプトをアップロードし、提供された番号に通話をルーティングし、APIを使ってリアルタイム監視を行えるとしています。
テストのワークフローはどのように動作しますか？
Relyableは、システムプロンプトまたはカスタム目標からテスト会話を生成し、ペルソナやシナリオを作成したうえで、本番の顧客がエージェントを利用する前に、シミュレーション通話を並列実行します。
料金体系はどのようになっていますか？
料金はクレジット制です。クレジットはシミュレーション通話とライブ通話の評価の両方に使われ、公開されているプランはCore、Premium、Enterpriseです。
無料プランはありますか？
ソースには、別途の無料プランは記載されていません。音声を大規模に運用するチーム向けに、有料の月額プランとEnterpriseへの問い合わせ経路が示されています。
Quick Facts
- カテゴリ
- AI音声エージェントのテストと監視
- プラットフォーム対応
- Vapi、Retell、ElevenLabs、API経由のカスタムエージェント
- 主なワークフロー
- シミュレーション会話を生成し、通話を評価し、本番をリアルタイムで監視する
- 料金モデル
- クレジットベースの有料プラン
- 公開プラン
- Core、Premium、Enterprise
- ソースドメイン
- relyable.ai
Relyableの代替品
Bluejay
Bluejayは、AIエージェント向けのQAプラットフォームです。音声・チャットシステムのテスト、監視、改善を支援し、デプロイ前後のシミュレーション、運用再生、可観測性、比較テストに対応します。
Twine AI Launcher
Twine AI Launcherは、ホーム画面からChatGPT風のAIヘルプを使えるAndroidランチャー。クイック回答、メモ、タスク、リマインダー、人物メモでメッセージ作成を支援します。
小艺
小艺は華为が自社開発したAI智慧アシスタント。知識Q&A、文章作成、文書閲覧、コード補助、画像認識に対応し、日常検索やコンテンツ処理、HarmonyOS開発まで幅広く活用できます。
BotLab
BotLab is a tool for testing video-game bots by running them in simulated game clients, reviewing session logs, and comparing results in the Reactor. It offers a free tier for short sessions and a paid Pro plan for longer online runs.
Gemma AI
Gemma AI is a phone call reminder app that calls you with scheduled reminders instead of push notifications. It helps people who want a more direct way to stay on schedule, with Google Calendar sync and conversational call interactions.
blop
blop は、リポジトリ内でブラウザテストをコードとして記述し、CIで実行、失敗をクラスタリングし、壊れたテスト修正用のPRも開けるQA agentです。