Wan2.1の勢いがすごい!! Kohya氏によるLoRAツール「Musubi Tuner」が公開。Google Colabで動かしてみた！

多くの要望に応えて、HunyuanVideoGP v5 で行ったのと同じ最適化を Wan 2.1 でも実行し、Wan2.1 の VRAM 消費量を 2 分の 1 に削減しました。 HunyuanのImageToVideoが出るのを待つ間、この前菜をお楽しみください。 Wan2.1 GP では、通常の機能が提供されます: - ウェブインターフェース - 選択したモデルの自動ダウンロード - 複数のプロンプト / 複数の世代 - ロラスのサポート - 通常の最適化（sage、コンパイル、非同期転送、 ...)による非常に高速な生成

【Wan2.1 GP by DeepBeepMeep】
Wan2.1 の Alibaba をベースにした GPUが貧弱な人向け のオープンで高度な大規模ビデオ生成モデル

Wan2.1 には、次の主要な機能があります:
・SOTA パフォーマンス: Wan2.1 は、複数のベンチマークで既存のオープン ソース モデルや最先端の​​商用ソリューションを一貫して上回っています。
・コンシューマー グレードの GPU をサポート: T2V-1.3B モデルは 8.19 GB の VRAM しか必要としないため、ほぼすべてのコンシューマー グレードの GPU と互換性があります。RTX 4090 で 5秒間の 480P ビデオを約4分で生成できます (量子化などの最適化手法なし)。そのパフォーマンスは、一部のクローズドソースモデルに匹敵します。
・複数のタスク: Wan2.1 は、テキストからビデオ、画像からビデオ、ビデオ編集、テキストから画像、ビデオからオーディオへの変換に優れており、ビデオ生成の分野を前進させます。
・ビジュアルテキスト生成: Wan2.1 は、中国語と英語の両方のテキストを生成できる最初のビデオモデルであり、実用的なアプリケーションを強化する堅牢なテキスト生成を備えています。
・強力なビデオ VAE: Wan-VAE は、時間情報を保持しながら任意の長さの 1080P ビデオをエンコードおよびデコードすることで、並外れた効率とパフォーマンスを提供し、ビデオと画像の生成に理想的な基盤となります。

このリポジトリは、HunyuanVideoおよびWan2.1のLoRA学習用のコマンドラインツールです。このリポジトリは非公式であり、公式のHunyuanVideoやWan2.1のリポジトリとは関係ありません。
Wan2.1については、Wan2.1のドキュメントも参照してください。