デジタルヒューマン作成
テンプレートからデジタルヒューマンを作成し、スクリプト、音声録音、表情、動きをガイド付きワークフローでカスタマイズできます。サイトでは、この作業は数分で完了すると説明されています。
TalkingAvatarは、話すアバター、ボイスクローン、リップシンクを使って動画を書き換えるためのAIプラットフォームです。サイトでは、既存映像の再吹き替え、新しいアバター動画の作成、短い音声サンプルやスクリプトからデジタルヒューマンに話させるといった実用的な動画ワークフローを中心に位置づけています。
製品ページ全体では、音声またはテキストを同期した発話と顔の動きに変換することが主な用途です。1文でのボイスクローン、マルチスピーカーのリップシンク、ストリームアバターの利用、ポッドキャスト風ワークフローに対応しており、料金ページには無料プランと、より多く使うユーザー向けの有料プランが表示されています。
テンプレートからデジタルヒューマンを作成し、スクリプト、音声録音、表情、動きをガイド付きワークフローでカスタマイズできます。サイトでは、この作業は数分で完了すると説明されています。
1文分の音声から声をクローンし、その音声を使って吹き替え、ナレーション、アバター動画向けの新しい音声を生成できます。
AI生成の口の形を使って、1人または複数人の発話に合わせて口の動きを同期します。音声と一致し、元の表情を保つように設計されています。
ホームページで説明されているように、Zoom、Twitch、TikTokでの利用を含め、配信やオンライン会議のライブカメラ映像をAIの分身に置き換えられます。
ポッドキャスト形式の音声を取り込み、話者を分離して各話者にセグメントを割り当て、リップシンクを適用することで、AI生成音声を一度に顔映像へ組み合わせられます。
サイトで説明されているワークフロー全体で多言語出力と音声処理をサポートし、吹き替えや異なる言語向けのコンテンツ作成に対応します。
既存の動画のスクリプトを書き換え、クローンした声で再吹き替えし、新しい音声に合わせて映像を同期させたまま更新します。
新しい映像を撮影せずに人間らしい画面上の話者が必要な、ブランド、教育、コンテンツ制作向けに、デジタル司会者や仮想キャラクターを作成します。
ポッドキャスト形式の音声を取り込み、話者を分離して各話者の口の動きを合わせることで、音声を顔主体のプレゼンテーションに変換します。
配信や会議中のライブカメラ映像を、ユーザーの声に合わせて話し、リップシンクするAIの分身に置き換えます。
ボイスクローンとリップシンクを組み合わせて、音声と口の動きを各言語で同期させながら、同じ動画の多言語版を作成します。
TalkingAvatarは、ブラウザからアクセスできる製品ページとWindows向けのダウンロード विकल्पを提供していますが、アプリへの登録や掲載されているワークフローを使う以外の、完全なセットアップ手順はソース資料に記載されていません。
ソースでは、ボイスクローン、リップシンク、デジタルヒューマン作成、動画の吹き替え、ストリームアバターの用途が説明されており、AI生成音声と同期したアバターで動画を作成・編集したい人向けとされています。
料金ページには無料プランと有料プランが表示されており、プランの違いはウォーターマーク、クレジット、ボイスクローンとリップシンクの利用上限に重点があります。
ソースでは、1文でのボイスクローン、ワンクリックのマルチスピーカー向けリップシンク、ノートブック形式のポッドキャスト音声処理が強調されていますが、詳細な書き出し形式や連携一覧は提供されていません。
利用可能なページで確認できるのは、サイトのダウンロードとシステム要件を通じたWindows対応のみです。macOS、モバイルアプリ、API連携については記載されていません。
トラフィックデータは参考情報としてご利用ください。
lemonslice.com
1枚の写真からリアルタイムで対話型AIビデオアバターを作成
keevx.com
Keevxは、テキスト、URL、画像、動画、音声から翻訳・クローン・動画生成ができるAI動画プラットフォームです。
shanjian.tv
闪剪は、デジタルアバターのナレーション、スマート編集、ライブ配信切り抜き、多言語音声に対応するAI動画制作ツールです。
gaga.art
Gaga AIは、画像や音声から同期した動画を作成できるWebベースのAI動画生成・アバター作成ツールです。無料プランに加え、有料プランでは透かしなしの書き出しと商用利用権に対応します。
www.synthesia.io
Synthesiaは、企業のコミュニケーションや研修向けに、スクリプトや資料からAIプレゼンター付き動画を作成・翻訳できるプラットフォームです。
canopylabs.ai
アバターとデジタルヒューマン向けリアルタイム対話モデル