編集

ComfyUI、動画生成モデルWan2.2 Fun ControlとFun InPをネイティブサポート

ComfyUIが、Alibaba PAIチームが開発した動画生成モデルWan2.2 Fun ControlおよびWan2.2 Fun InPをネイティブでサポートした。同時に、動画生成を高速化するLightX2V Wan2.2 Lightning LoRAも統合。両モデルはApache 2.0ライセンスでリリースされており、商用利用が可能。

  • Wan2.2 Fun InP: 最初と最後のフレームを指定することで、その間の滑らかな遷移を持つ動画を生成するモデル。
  • Wan2.2 Fun Control: ポーズ、深度、Cannyエッジ、軌跡など、複数のモダリティで動画生成を精密に制御するモデル。
  • LightX2V 4 Steps LoRA: Wan2.2モデルに適用可能なLoRAで、動画生成速度を大幅に向上させる。品質はわずかに低下するものの、VRAMが少ないGPUでの利便性が向上。

RTX 4090D (24GB) 環境で640x640px、81フレームの動画を生成した場合、LoRAの使用により生成時間は177.3秒から48.7秒へと短縮される。

利用方法は、ComfyUIをダウンロードまたはアップデート後、WorkflowsメニューのBrowse TemplatesからVideoセクションに進み、Wan2.2 14B Fun InPまたはWan2.2 14B Fun Controlのテンプレートを選択する。プロンプトに従い、必要なモデルファイルをダウンロードして使用できる。

出展:ComfyUI Wan2.2 Fun Native Support and LightX2V 4-Step LoRA Integration

参考:

編集