🚀 POV Driving LoRA for Wan2.1 14B T2V
本項目基於Wan2.1 14B T2V模型訓練了一個LoRA,可用於生成任意場景的第一人稱駕駛視角視頻。
🚀 快速開始
下載文件
推薦設置
- LoRA強度:1.0
- 嵌入式引導比例:6.0
- Flow Shift:5.0
觸發詞
關鍵觸發短語為:p0v_dr1v1n6
ComfyUI工作流
此LoRA可與修改版的 Kijai的Wan Video Wrapper工作流 配合使用。主要修改是添加了一個連接到基礎模型的Wan LoRA節點。
可在上述下載部分找到修改後的工作流。
✨ 主要特性
- 基於Wan2.1 14B T2V基礎模型訓練。
- 在不同對象和場景類型上具有一致的生成效果。
- 提供簡單且易於調整的提示示例。
📚 詳細文檔
提示模板
進行提示時,可參考示例提示,這種提示方式效果很好。
模型信息
模型權重以Safetensors格式提供,可在上述下載部分獲取。
訓練詳情
屬性 |
詳情 |
基礎模型 |
Wan2.1 14B T2V |
訓練數據 |
使用17分鐘的視頻進行訓練,該視頻由204個不同第一人稱駕駛視角的短片段組成(每個片段單獨標註) |
訓練輪數 |
5 |
額外信息
訓練使用了 Diffusion Pipe for Training。
致謝
特別感謝Kijai提供的ComfyUI Wan Video Wrapper和tdrussell提供的訓練腳本!
📄 許可證
本項目採用Apache-2.0許可證。
👥 社區
- 加入Discord社區:點擊加入,可免費使用此LoRA生成視頻。
- 請求LoRA模型:我們正在免費訓練並開源Wan2.1的LoRA模型,加入我們的Discord社區提出你的需求!
🎥 示例視頻
示例1
- 提示文本:p0v_dr1v1n6, video shows a person driving a car through a burning hellscape. The driver is holding the steering wheel with both hands. Rivers of lava flow on both sides of the cracked road, and firestorms rage in the distance. The driver is looking straight ahead. The car has a digital dashboard and a touchscreen display flickering with demonic symbols.
- 視頻鏈接:example_videos/pov1.mp4
示例2
- 提示文本:p0v_dr1v1n6 through a sandstorm in the desert, visibility dropping as golden dust engulfs the horizon, digital dashboard displaying emergency alerts, the car struggling against the powerful winds.
- 視頻鏈接:example_videos/pov2.mp4
示例3
- 提示文本:dr1v12ng POV Driving. The video shows the interior of a car driving down a city street at night. The driver's hands are visible on the steering wheel. The city lights are reflecting in the windshield.
- 視頻鏈接:example_videos/pov3.mp4
示例4
- 提示文本:p0v_dr1v1n6, video shows a person driving a car on the surface of the Moon. The driver is holding the steering wheel with both hands. The road is covered in lunar dust, and Earth glows brightly in the sky. The driver is looking straight ahead. The car has a digital dashboard and a touchscreen display
- 視頻鏈接:example_videos/pov4.mp4