Ghibli Diffusion

🚀 吉卜力風格擴散模型

這是一個基於吉卜力工作室現代動漫電影圖像微調的Stable Diffusion模型。在你的提示詞中使用 ghibli style 標籤即可實現相應效果。

如果你喜歡我的作品，並且想在新模型發佈前進行測試，請考慮支持我。

✨ 主要特性

• 風格獨特：基於吉卜力工作室現代動漫電影圖像訓練，能生成具有吉卜力風格的圖像。
• 應用廣泛：支持文本到圖像、圖像到圖像等多種模式。

📦 安裝指南

此部分原文檔未提供具體安裝步驟，暫不展示。

💻 使用示例

基礎用法

from diffusers import StableDiffusionPipeline
import torch

model_id = "nitrosocke/Ghibli-Diffusion"
pipe = StableDiffusionPipeline.from_pretrained(model_id, torch_dtype=torch.float16)
pipe = pipe.to("cuda")

prompt = "ghibli style magical princess with golden hair"
image = pipe(prompt).images[0]

image.save("./magical_princess.png")

高級用法

風暴兵圖像生成提示詞及設置

提示詞：ghibli style (storm trooper) 負向提示詞：(bad anatomy) 參數設置：Steps: 20, Sampler: DPM++ 2M Karras, CFG scale: 7, Seed: 3450349066, Size: 512x704

大眾甲殼蟲圖像生成提示詞及設置

提示詞：ghibli style VW beetle 負向提示詞：soft blurry 參數設置：Steps: 30, Sampler: Euler a, CFG scale: 7, Seed: 1529856912, Size: 704x512

📚 詳細文檔

這個模型的使用方法與其他Stable Diffusion模型相同。更多信息，請參考 Stable Diffusion。

你還可以將模型導出為 ONNX、MPS 和/或 FLAX/JAX 格式。

🔧 技術細節

該模型使用基於diffusers的dreambooth訓練方法，由ShivamShrirao實現，採用先驗保留損失和 train-text-encoder 標誌，共訓練了15000步。

📄 許可證

此模型為開放訪問，所有人均可使用，採用CreativeML OpenRAIL - M許可證進一步明確了權利和使用規則。CreativeML OpenRAIL許可證規定：

1. 你不得使用該模型故意生成或分享非法或有害的輸出或內容。
2. 作者對您生成的輸出不主張任何權利，您可以自由使用它們，並對其使用負責，且使用不得違反許可證中的規定。
3. 您可以重新分發權重，並將模型用於商業用途和/或作為服務使用。如果您這樣做，請務必包含與許可證中相同的使用限制，並向所有用戶提供CreativeML OpenRAIL - M許可證的副本（請完整仔細閱讀許可證）。 請在此閱讀完整許可證

模型生成示例

模型渲染的角色： 模型渲染的汽車和動物： 模型渲染的風景： ghibli style beautiful Caribbean beach tropical (sunset) - Negative prompt: soft blurry ghibli style ice field white mountains ((northern lights)) starry sky low horizon - Negative prompt: soft blurry