統合型マルチモーダルアーキテクチャ
Janus-Pro は、デカップリングされた視覚エンコーディング経路を備えた 1 つの Transformer フレームワークを用い、画像理解と画像生成の両方を 1 つのモデルでサポートする統合型マルチモーダルアーキテクチャとして説明されています。
Janus Pro AIは、画像理解とテキストからの画像生成に対応するJanus-Proを紹介します。ダウンロード可能なモデル資源、ブラウザでのテスト、無料Starterプランと有料Proプランも案内しています。
Janus Pro AIは、画像を理解し、テキストから画像を生成するマルチモーダルモデルとして Janus-Pro を紹介します。サイトでは、学習戦略、学習データ、モデル規模の改善を伴う Janus の上位版として位置付けています。
製品ページでは、画像関連タスクのための統一されたワークフローを強調しています。つまり、視覚コンテンツの読解と解釈、テキストから画像へのプロンプトの追従、同じモデルファミリーからの画像生成です。サイトではさらに、モデルのダウンロード、GitHub リソース、Janus Pro WebGPU のブラウザテストも提供しており、単に説明を読むだけでなく、モデルを試したり展開したりしたいユーザーを想定していることが示されています。
サイト上の価格情報では、無料の Starter プランと有料の Pro プランが示されており、製品ページではモデルのライセンス条件の下で商用利用が許可されていることも記載されています。周辺ページでは Janus Pro と Flux の比較も行われており、Janus Pro は画像品質そのものよりもマルチモーダル理解を中心に位置付けられています。
Janus-Pro は、デカップリングされた視覚エンコーディング経路を備えた 1 つの Transformer フレームワークを用い、画像理解と画像生成の両方を 1 つのモデルでサポートする統合型マルチモーダルアーキテクチャとして説明されています。
サイトでは、Janus-Pro は理解と生成を別々の視覚経路に分けることで、1 つのエンコーダーに両方の役割を担わせることなく、それぞれのタスクを最適化できると説明しています。
製品ページでは、強力なテキストから画像への指示追従と画像理解が説明されており、画像内のテキストの読み取りや、画像ベースの質問への対応も含まれています。
サイトによると、Janus-Pro 7B は GenEval や DPG-Bench などのベンチマークセットで良好な性能を示し、公開資料では DALL-E 3 や Stable Diffusion と比較して有利に紹介されています。
サイトには 1B と 7B のパラメータ版、Hugging Face 上のダウンロード可能なモデルファイル、そして Janus シリーズと ComfyUI ノード向けの GitHub リソースが掲載されています。
モデルは 384×384 の入力解像度を使用し、一部のデモでは最大 768×768 の出力画像に対応すると説明されており、サイトではブラウザベースの Janus Pro WebGPU テストについても記載されています。
画像について質問し、その後プロンプトから関連画像を作成するような、視覚的理解と生成の両方が必要なワークフローで Janus Pro を使用します。
重視するのが単独の画像美観の最大化ではなく、詳細な指示への一致である場合に、テキストから画像へのプロンプト追従に使用します。
画像内のテキストの読み取りや抽出、あるいは視覚文書の内容理解など、モデルの理解経路が重要なタスクに使用します。
より広い展開の前に、開発や研究の環境でブラウザテストやダウンロード可能なモデル資源を使って Janus Pro を評価します。
公開ライセンスとダウンロード可能なリソースが重要な商用コンテキストで、記載されたライセンス条件に従ってモデルファミリーを使用します。
Janus Pro は、画像を理解し、テキストプロンプトから画像を生成できるマルチモーダルモデルとして紹介されています。サイトでは、ブラウザで動作する 1B 版と、より本格的なマルチモーダルタスク向けの 7B 版も説明されています。
サイトでは Janus Pro 1B と Janus Pro 7B が参照されており、ダウンロード可能なモデルとして Janus-1.3B と JanusFlow-1.3B も掲載されています。主な製品ページでは、Janus-Pro をマルチモーダルな理解・生成モデルとして紹介しています。
料金ページには、無料の Starter プランと有料の Pro プランが表示されています。Starter には 5 台のデバイス、1 か月のクラウド保持、無制限の通知、基本的な統合が含まれ、Pro は月額 $12 で、無制限のデバイス、1 年のクラウド保持、無制限の通知、高度な統合、優先サポートが含まれると記載されています。
ソースページでは、Janus Pro の画像理解、テキストから画像への生成、そして Janus Pro WebGPU のブラウザベースのテストが強調されています。また、画像品質は Flux ほどの主目的ではなく、解像度の制約が細部のタスクに影響する可能性があるとも記載されています。
サイトでは、モデルのライセンス条件の範囲内で商用利用が許可されていると説明されており、ダウンロードや統合のための Hugging Face、GitHub、ComfyUI のリソースへのリンクも掲載されています。