Ghibli Characters Sd3.5 Lora

✨ 主要特性

• 风格独特：基于吉卜力工作室的图像数据微调，生成具有吉卜力风格的图像。
• 易于使用：提供清晰的提示模板，方便用户生成所需图像。
• 兼容性强：与 diffusers 库兼容，支持高效推理。

📚 详细文档

模型描述

本仓库包含适用于 StableDiffusion 3.5 Large 的 LoRA 适配器。该适配器使用 Diffusers + Dreambooth 进行微调，训练数据为从 吉卜力工作室官网 手动下载的免费使用图像，并托管在 alvarobartt/ghibli-characters。

提示模板

在触发图像生成时，你应使用以下模板（在为图像添加标题注释时定义）： "吉卜力风格 [角色描述] 具备 [独特特征]，呈现 [动作或姿势]，处于 [环境或背景] 中，有着 [光线或氛围]，还有 [额外细节]"

模型信息

💻 使用示例

基础用法

import torch
from diffusers import DiffusionPipeline

model_id = "stabilityai/stable-diffusion-3.5-large"
adapter_id = "alvarobartt/ghibli-characters-sd3.5-lora"

pipeline = DiffusionPipeline.from_pretrained(model_id, torch_dtype=torch.bfloat16)
pipeline.load_lora_weights(adapter_id)
pipeline.to("cuda")

prompt = (
    "Ghibli style futuristic stormtrooper with glossy white armor and a sleek helmet,"
    " standing heroically on a lush alien planet, vibrant flowers blooming around, soft"
    " sunlight illuminating the scene, a gentle breeze rustling the leaves"
)

image = pipeline(
    prompt=prompt,
    num_inference_steps=30,
    width=1024,
    height=768,
    guidance_scale=3.5,
).images[0]

image.save("ghibli.png", format="PNG")

注意事项

⚠️ 重要提示

此推理过程需要 diffusers 0.31.0 或更高版本，详情请参阅 发布说明。

📄 许可证

本微调模型仅供 个人使用，不得用于商业目的，具体许可信息请参考：https://huggingface.co/stabilityai/stable-diffusion-3.5-large/blob/main/LICENSE.md。吉卜力工作室数据集依据其官网相关内容解读，采用自定义非商业许可证发布。