マーカーレスの全身モーションキャプチャ
独自のモデルと人体モデルを用いて、元の演技映像から時間的に一貫した自然な動きを再構築し、単一カメラ入力から3Dアニメーションデータを生成します。
Kinetixは、3D人体モーション知能に特化したAI研究ラボ。モーションキャプチャ、テキストからアニメーション生成、リターゲティング、リギング、物理ベースのAI動画生成を研究。
Kinetixは、3D人体モーション知能に特化したAI研究ラボです。機械学習と3Dエンジニアリングを組み合わせ、キャラクターアニメーションや関連するメディアワークフロー向けに、人間型のモーションを理解・生成・制御します。
同サイトでは、主に「3Dアニメーション技術」と「物理的に整合したAI動画」の2つの研究方向が紹介されています。3D分野では、マーカーレスのモーションキャプチャ、テキストからアニメーション生成、メッシュ対応のリターゲティング、自動リギングを開発しています。動画分野では、空間・モーションの事前情報を用いてカメラとキャラクターの動きを同時に誘導する、3D条件付き動画生成モデル「Kamo-1」を紹介しています。
独自のモデルと人体モデルを用いて、元の演技映像から時間的に一貫した自然な動きを再構築し、単一カメラ入力から3Dアニメーションデータを生成します。
自然言語のプロンプトから全身の3Dアニメーションを生成し、時間的な動きの一貫性を保ちます。
骨格構造とメッシュ形状をモデル化することで、ソースのモーションをターゲットキャラクターの体型に適応させ、クリッピング、貫通、その他の不一致を抑えます。
幾何学的・解剖学的な事前知識を用いて、リグのないキャラクターに適応したスケルトンを自動推定し、下流のアニメーションに適したリグを作成します。
カメラ軌道、再構築された3Dキャラクターアニメーション、参照画像、自然言語プロンプトなどの3D事前情報を条件として動画生成を行い、カメラとキャラクターの動きを同時に制御します。
大規模な独自モーションデータセットと、さまざまなキャラクターの体型、シーン、照明条件、カメラ設定にわたって学習データを拡張するための合成スケーリングパイプラインを基盤としています。
生の演技映像をアニメーション用の時間的に一貫した3Dモーションデータへ変換する際に、Kinetixのモーションキャプチャ研究を活用します。
3D制作作業向けにキャラクターモーションを生成・準備する際に、テキストからアニメーション生成とリギング技術を活用します。
異なる体型や骨格構造を持つキャラクター間でモーションを移す必要がある場合に、メッシュ対応リターゲティングを活用します。
カメラの動きとキャラクターの動きを同じ生成動画ショット内で連動させる必要がある場合に、Kamo-1を活用します。
Unity Muse、OVERDARE、Adobe Mixamoとの統合に示されているように、チームの技術をツールやゲームワークフローに埋め込み機能として組み込みます。
Kinetixは、3D空間における人間のモーションを理解し、生成することに特化したAI研究企業です。モーションキャプチャ、テキストからアニメーション生成、メッシュ対応のリターゲティング、物理ベースのAI動画を幅広く手がけています。
提供資料では、Kinetixは主にパッケージ化されたSaaS製品というより、研究ラボおよび技術提供者として紹介されています。3Dアニメーションと人体モーションのワークフロー向けのモデルとツールを開発しています。
Kinetixの3D研究ページでは、単一カメラからのマーカーレス全身モーションキャプチャ、自然言語からの全身3Dアニメーション生成、メッシュ対応リターゲティング、自動リギングが紹介されています。
料金ページは現在404になっているため、収集された資料では公開価格モデルは確認できません。
サイトでは、Unity Muse、KRAFTONのOVERDARE、Adobe Mixamoとの統合や導入事例が言及されていますが、収集されたページには一般的な統合一覧やAPIドキュメントは掲載されていません。