Text2video Zero Controlnet Canny Arcane

🚀 Text2Video-Zeroモデルカード - ControlNet Canny Aracane Style

Text2Video-Zeroは、ゼロショットのテキストから動画を生成するモデルです。ゼロショットのテキストから動画生成、Video Instruct Pix2Pix（指示に基づく動画編集）、テキストとポーズ条件付き動画生成、テキストとキャニーエッジ条件付き動画生成、テキスト、キャニーエッジ、ドリームブース条件付き動画生成を行うことができます。この研究に関する詳細情報は、論文とデモを参照してください： 。当社のコードは、任意のStableDiffusionベースモデルで動作します。

このモデルは、Arcane styleのDreamBoothの重みを提供し、テキストから動画生成のゼロショットにおいてエッジガイダンス（ControlNetを使用）で利用できます。

🚀 クイックスタート

Text2Video-Zero用の重み

元の重みをdiffusers形式に変換し、エッジガイダンス付きのControlNetで使用可能にしました。変換には、https://github.com/lllyasviel/ControlNet/discussions/12 を使用しました。

✨ 主な機能

モデル詳細

引用方法

@article{text2video-zero,
  title={Text2Video-Zero: Text-to-Image Diffusion Models are Zero-Shot Video Generators},
  author={Khachatryan, Levon and Movsisyan, Andranik and Tadevosyan, Vahram and Henschel, Roberto and Wang, Zhangyang and Navasardyan, Shant and Shi, Humphrey},
  journal={arXiv preprint arXiv:2303.13439},
  year={2023}
}

元の重み

Arcane styleのDreambooth重みは、CIVITAIから取得しました。

モデル詳細

バイアスとコンテンツに関する注意事項

Text2Video-Zeroは、社会的バイアスを強化または悪化させるコンテンツ、リアルな顔、ポルノグラフィー、暴力を含むコンテンツを出力する可能性があります。このデモのText2Video-Zeroは、研究目的のみを意図しています。

📄 ライセンス

このモデルは、The CreativeML OpenRAIL M licenseの下で提供されています。