ウェブカメラベースの上半身トラッキング
標準的なウェブカメラで手と指を追跡し、さらに頭のトラッキング、表情、視線、まばたき検出、リップシンク、上半身トラッキングにも対応します。
Webcam Motion Captureは、Webカメラやスマホカメラで手・顔・目・上半身をトラッキングするVTuber向けモーションキャプチャーソフト。外部アプリ連携やFBX書き出しにも対応。
Webcam Motion Capture は、VTuber 風のアバター操作、手のトラッキング、モーションキャプチャーのワークフロー向けのウェブカメラベースのトラッキングアプリです。専用のキャプチャーデバイスを必要とせず、コンピューターまたはスマートフォンのカメラを使って 3D アバターを動かせます。
この製品は、カメラ入力からストリーミング、動画収録、またはアバターアニメーションの作成を行いたいクリエイター向けに位置付けられています。サイトでは、VMC Protocol を通じて追跡データを他のアプリに送信でき、さらに FBX にモーションデータを書き出して 3D ソフトウェアで利用できるほか、対応するモバイル追跡アプリからの表情入力にも対応していると説明されています。
標準的なウェブカメラで手と指を追跡し、さらに頭のトラッキング、表情、視線、まばたき検出、リップシンク、上半身トラッキングにも対応します。
VMC Protocol を通じて追跡データを他のアプリに送信できるため、VTuber やゲームエンジンのワークフローで取得したモーションをリアルタイムに利用できます。
モーションキャプチャーデータを FBX に書き出せるため、Blender、Maya、3ds Max など一般的な 3D およびアニメーションツールで利用できます。
製品で案内されている iPhone および iPad アプリを含む、Perfect Sync に対応した Face Tracking アプリと連携し、より豊かな表情入力が可能です。
無料のモバイルトラッキングアプリ iWebcamMotionCapture が含まれており、低速なコンピューターから iPhone や iPad にトラッキング処理をオフロードできます。
Windows と macOS のダウンロードを提供しており、Apple silicon 用と Intel Mac 用の個別ビルドがあります。
OBS Studio を使って YouTube でライブ配信するために、ウェブカメラ映像で 3D アバターを動かし、手、顔、上半身のトラッキングをアプリで利用します。
OBS Studio でアバター आधारितの動画を録画し、専用のキャプチャーデバイスなしで、カメラ駆動のモーションを使って表情やジェスチャーを制御します。
取得したモーションを FBX に書き出し、後から Blender、Maya、3ds Max などの 3D アニメーションツールで調整または再利用します。
VMC Protocol を通じてリアルタイムの追跡データを外部アプリに送信し、その入力を受け付ける VTuber アプリやゲームエンジンと連携します。
メインのコンピューターの性能が低い場合や、キャプチャーとレンダリングを分けたい場合に、iPhone、iPad、またはスマートフォンのウェブカメラ構成を使って追跡を継続します。
はい。ホームページでは Webcam Motion Capture は VMC Protocol を介して追跡データを外部アプリに送信できるとされており、FAQ では YouTube でのライブ配信に OBS Studio と組み合わせて使う例が明記されています。
はい。FAQ では、OBS Studio のセットアップ手順に従って、3D アバターを使った自分の動画を作成できると説明されています。
FAQ では、追跡は通常、明るく散らかっていない部屋で、カメラがほぼ目の高さにあり、顔と胸が完全に見える状態のほうが安定しやすいとされています。また、手の追跡は肘、前腕、手が隠れていないときに改善されると記載されています。
はい。FAQ では、iPhone または iPad で iWebcamMotionCapture を使って追跡をオフロードできるほか、Android ユーザーは DroidCam のようなウェブカメラアプリをウェブカメラソースとして使えるとされています。
はい。ただし、既定では 1 台のウェブカメラを同時に 2 つのアプリからアクセスすることはできません。FAQ では、回避策として Windows 11 の複数アプリ向けカメラアクセス、2 台目のスマートフォンのウェブカメラ、または SplitCam のような仮想カメラを提案しています。