🚀 蒸汽船威利LoRA
本项目的LoRA模型基于蒸汽船威利风格,可用于文本到视频的转换,能生成具有黄金时代动画风格的视频内容。
🚀 快速开始
安装依赖
pip install git+https://github.com/huggingface/diffusers.git
代码示例
import torch
from diffusers.utils import export_to_video
from diffusers import AutoencoderKLWan, WanPipeline
from diffusers.schedulers.scheduling_unipc_multistep import UniPCMultistepScheduler
model_id = "Wan-AI/Wan2.1-T2V-14B-Diffusers"
vae = AutoencoderKLWan.from_pretrained(model_id, subfolder="vae", torch_dtype=torch.float32)
pipe = WanPipeline.from_pretrained(model_id, vae=vae, torch_dtype=torch.bfloat16)
pipe.scheduler = UniPCMultistepScheduler.from_config(
pipe.scheduler.config,
flow_shift=5.0
)
pipe.to("cuda")
pipe.load_lora_weights("benjamin-paine/steamboat-willie-14b")
pipe.enable_model_cpu_offload()
prompt = "steamboat willie style, golden era animation, an anthropomorphic cat character wearing a hat removes it and performs a courteous bow"
negative_prompt = "色调艳丽,过曝,静态,细节模糊不清,字幕,风格,作品,画作,画面,静止,整体发灰,最差质量,低质量,JPEG压缩残留,丑陋的,残缺的,多余的手指,画得不好的手部,画得不好的脸部,畸形的,毁容的,形态畸形的肢体,手指融合,静止不动的画面,杂乱的背景,三条腿,背景人很多,倒着走"
output = pipe(
prompt=prompt,
negative_prompt=negative_prompt,
height=720,
width=1280,
num_frames=81,
guidance_scale=5.0,
num_inference_steps=32
).frames[0]
export_to_video(output, "output.mp4", fps=16)
✨ 主要特性
📚 详细文档
模型描述
该模型在来自蒸汽船威利的剪辑片段上进行训练,按场景分割并使用Qwen2.5-VL-3B-Instruct进行标注。
触发词
模型使用触发短语 "steamboat willie style" 进行训练。结合 "golden era animation" 使用时,效果最佳。
下载模型
模型权重以Safetensors格式提供。可在 Files & versions 标签页 下载。
📄 许可证
本项目采用 CC0-1.0 许可证。