Tiny Planet Fisheye

🚀 Wan2.1 14B T2V用の小惑星魚眼LoRA

このLoRAは、Wan2.1 14B T2Vモデルをベースにトレーニングされており、高歪みの小惑星魚眼スタイルのビデオを生成することができます。

🚀 クイックスタート

このLoRAを使用することで、様々なシーンを小惑星魚眼スタイルのビデオに変換できます。以下に、いくつかのサンプルプロンプトと生成されるビデオの例を示します。

サンプルプロンプトとビデオ例

• プロンプト: Little planet view fisheye lens The video depicts a Mars-inspired desert with towering red rock formations and swirling dust devils, all rendered into a miniature, spinning planet under a dusky sky.
  • ビデオ: example_videos/1.mp4
• プロンプト: Little planet view fisheye lens The video shows a cyberpunk-inspired neon cityscape at night. Skyscrapers adorned with animated signs, pulsating lights, and digital effects twist into a compact, spherical world, evoking a futuristic dreamscape.
  • ビデオ: example_videos/2.mp4
• プロンプト: Little planet view fisheye lens The video is a time-lapse of a bustling real-life metropolis, inspired by New York City. Skewed roads and twisting bridges form a miniature planet where the city lights pulse like stars in the night.
  • ビデオ: example_videos/3.mp4
• プロンプト: Little planet view fisheye lens The video offers a unique view of Venice’s winding canals and ancient bridges. Gondolas drift along curving waterways that form a tiny planet, where reflections and ripples create a surreal, fisheye rendition of the historic city.
  • ビデオ: example_videos/4.mp4

✨ 主な機能

• ベースモデル: Wan2.1 14B T2Vモデルをベースにトレーニングされています。
• 一貫性のある結果: 様々なオブジェクトやシーンタイプで一貫した結果を得ることができます。
• 簡単なプロンプト: 簡単に適応できるプロンプト例が用意されています。

📦 インストール

📥 ダウンロードリンク

• fisheye_15_epochs.safetensors - LoRAモデルファイル
• wan_txt2vid_lora_workflow.json - ComfyUI用のWan T2V with LoRAワークフロー

📚 ドキュメント

推奨設定

トリガーワード

キーとなるトリガーフレーズは、<code style="background-color: #f0f0f0; padding: 3px 6px; border-radius: 4px;">Little planet view fisheye lens</code>です。

プロンプトテンプレート

プロンプトについては、サンプルプロンプトを参考にしてください。この方法でプロンプトを入力すると、良好な結果が得られます。

ComfyUIワークフロー

このLoRAは、KijaiのWan Video Wrapperワークフローの修正版と互換性があります。主な修正点は、ベースモデルに接続されたWan LoRAノードを追加することです。

修正版のワークフローについては、上記のダウンロードセクションを参照してください。

モデル情報

モデルの重みは、Safetensors形式で利用可能です。詳細は、上記のダウンロードセクションを参照してください。

トレーニング詳細

追加情報

トレーニングは、Diffusion Pipe for Trainingを使用して行われました。

謝辞

ComfyUI Wan Video Wrapperを提供してくれたKijaiと、トレーニングスクリプトを提供してくれたtdrussellに特別な感謝を送ります！

🔧 技術詳細

このLoRAは、Wan2.1 14B T2Vモデルをベースにトレーニングされています。トレーニングデータは、小惑星魚眼歪みのある様々なビデオの短いクリップから構成されています。エポック数は15で、Diffusion Pipe for Trainingを使用してトレーニングが行われました。

📄 ライセンス

このモデルは、Apache-2.0ライセンスの下で提供されています。

コミュニティ

• Discord: Discordコミュニティに参加して、このLoRAを無料で使用してビデオを生成しましょう。
• LoRAリクエスト: 無料でWan2.1 LoRAをトレーニングし、オープンソース化しています。Discordに参加してリクエストを送信してください！