Genmoは、Mochi 1 text-to-video model などのオープン動画生成モデルを開発する研究ラボ。ブラウザで試せるプレイグラウンドと、ローカル実行・カスタマイズ向けのオープンソース公開を提供します。

Genmo preview

概要

Genmo は、オープン動画生成モデルに特化した研究ラボです。主な公開製品は Mochi 1 で、ホスト型プレイグラウンドとオープンリポジトリを通じて利用できるオープンソースの text-to-video model です。

このサイトでは、Mochi 1 を書かれたプロンプトから短い動画を生成するモデルとして位置づけており、モーション品質とプロンプトへの忠実性を重視しています。Genmo はまた、ユーザーがローカルで実行したり、用途に合わせてカスタマイズしたり、ComfyUI を使ったりできると案内しており、プレビュー版は個人利用および商用利用向けに Apache 2.0 ライセンスで提供されています。

主な機能

テキストから動画への生成

Mochi 1 は、書かれたプロンプトを生成動画に変換する Genmo のオープンソース text-to-video model です。

プロンプトへの忠実性

このモデルは詳細なプロンプトに忠実に従うよう設計されており、ブログではキャラクター、設定、アクションに対する高い prompt adherence が説明されています。

モーション重視の出力

Genmo は、プレビュー版が 30 frames per second で滑らかな動画を生成し、最大 5.4 seconds のクリップに対応し、一貫したモーションに重点を置いていると述べています。

ローカルおよび ComfyUI のワークフロー

オープンソースのリポジトリはローカルで実行でき、Genmo は Mochi を ComfyUI 経由でも使用できると述べています。

ホスト型プレイグラウンド

この製品には、ブラウザ上で Mochi 1 を直接試せるホスト型プレイグラウンドが含まれています。

開発向けのオープンリリース

このリリースは Apache 2.0 の下で公開されており、開発者向けにオープンウェイトとソースコードが利用できます。

実用的な活用例

  • テキストから動画へのプロトタイピング

    プレイグラウンドでブラウザベースの出発点を使い、その後にローカル実行やカスタマイズへ移行したい場合に、テキストから短いプロンプト駆動の動画を作成します。

  • ローカルでの実験

    オープンリポジトリをローカルで実行し、自分のワークフロー、実験、研究作業に合わせてモデルを調整します。

  • ComfyUI ベースの生成

    ノードベースのクリエイティブワークフローで Mochi 1 の出力を試したい場合は、ComfyUI 対応を利用します。

  • モデル評価と比較

    研究プレビューや製品実験など、モーション品質とプロンプトへの忠実性が重要な用途に対して、モデルの適合性を評価します。

  • ライセンス付きプレビューの利用

    現在の 480p と短い再生時間の制限を考慮しつつ、プレビュー版の Apache 2.0 ライセンスの下で個人用または商用の動画クリップを生成します。

Pros and Cons

Pros

  • Apache 2.0 ライセンスのオープンソース版で、個人利用および商用利用が可能です。
  • ホスト型プレイグラウンドにより、ローカル環境のセットアップなしでモデルを試せます。
  • ローカルのリポジトリにアクセスできるため、カスタマイズや開発者向けワークフローをサポートします。
  • このモデルは、高いプロンプト忠実性と改善されたモーション品質を備えていると説明されています。

Cons

  • プレビュー版としてブログで説明されている初回リリースは 480p に限定されています。
  • Genmo は、現在のモデルではアニメーションコンテンツとの相性はあまり良くないと述べています。
  • ブログでは、極端なモーションの一部のエッジケースで軽微な歪みや変形が発生することがあると記載されています。

FAQ

Mochi 1 はどのように試せますか?

Genmoのプレイグラウンドは、オープンソースのリポジトリをセットアップせずに Mochi 1 を試す最も簡単な方法です。サイトでは、ローカルで実行したりカスタマイズしたりしたいユーザー向けに、オープンソース版も案内しています。

Mochi 1 はオープンソースですか?

ブログ投稿では、Mochi 1 の初期研究プレビューは Apache 2.0 ライセンスのもとで、個人利用および商用利用が可能だと記載されています。

現在、Mochi 1 はどのような出力品質に対応していますか?

最初のリリースは 480p のベースモデルです。ブログでは、Mochi 1 HD は後日提供予定とされていますが、初期リリースには含まれていません。

開発者はどのようにモデルにアクセスできますか?

Genmo によると、Mochi 1 はオープンソースのリポジトリからローカルで実行でき、ComfyUI 経由でも使用できます。ブログではさらに、HuggingFace 上のオープンウェイトや API パートナーにも言及しています。

Quick Facts

カテゴリ
オープン動画生成
製品
Mochi 1
プラットフォーム
Web プレイグラウンド、ローカルリポジトリ、ComfyUI
ライセンス
プレビュー版は Apache 2.0
ソースドメイン
genmo.ai
モデルリリース
480p ベースモデルのプレビュー