🚀 Holodayo XL 2.1
Holodayo XL 2.1 是 Yodayo Holodayo XL 系列的最新版本。它是一個開源模型,基於 Animagine XL V3 構建,這是一個專門用於生成高質量動漫風格藝術作品的 SDXL 模型。該模型經過額外的微調與優化,專注於生成能夠準確呈現虛擬主播系列視覺風格和美學的圖像。
🚀 快速開始
你可以通過以下幾種方式使用該模型:
- 在我們的平臺上使用此模型:

- 在
ComfyUI
或 Stable Diffusion Webui
中使用它。
- 使用 🧨
diffusers
庫來使用它。
✨ 主要特性
- 專注特定風格:經過微調與優化,專注於生成能夠準確呈現虛擬主播系列視覺風格和美學的圖像。
- 繼承特殊標籤:繼承了 Animagine XL 3.1 的特殊標籤,可通過這些標籤引導圖像生成,提升圖像質量、相關性和美學效果。
📦 安裝指南
首先安裝所需的庫:
pip install diffusers transformers accelerate safetensors --upgrade
💻 使用示例
基礎用法
import torch
from diffusers import StableDiffusionXLPipeline
pipe = StableDiffusionXLPipeline.from_pretrained(
"yodayo-ai/holodayo-xl-2.1",
torch_dtype=torch.float16,
use_safetensors=True,
custom_pipeline="lpw_stable_diffusion_xl",
add_watermarker=False,
variant="fp16"
)
pipe.to('cuda')
prompt = "1girl, nakiri ayame, nakiri ayame \(1st costume\), hololive, solo, upper body, v, smile, looking at viewer, outdoors, night, masterpiece, best quality, very aesthetic, absurdres"
negative_prompt = "nsfw, (low quality, worst quality:1.2), very displeasing, 3d, watermark, signature, ugly, poorly drawn"
image = pipe(
prompt,
negative_prompt=negative_prompt,
width=832,
height=1216,
guidance_scale=7,
num_inference_steps=28
).images[0]
image.save("./waifu.png")
📚 詳細文檔
標籤排序
為了獲得最佳效果,建議遵循以下結構化提示模板,因為模型是按照此方式進行訓練的:
1girl/1boy, 角色名稱, 所屬系列, 作者, 其他任意順序的內容。
特殊標籤
Holodayo XL 2.1 繼承了 Animagine XL 3.1 的特殊標籤,可通過這些標籤引導圖像生成,使其在質量、評級、創作日期和美學方面取得更好的效果。即使不使用這些標籤,模型也能生成圖像,但使用它們有助於獲得更好的結果。
- 質量標籤:傑作,最佳質量,高質量,良好質量,普通質量,低質量,最差質量
- 評級標籤:安全,敏感,不適合工作場所,明確
- 年份標籤:最新,近期,中期,早期,最舊
- 美學標籤:非常美觀,美觀,令人不悅,非常令人不悅
推薦設置
為了引導模型生成高美學效果的圖像,建議使用以下設置:
nsfw, (low quality, worst quality:1.2), very displeasing, 3d, watermark, signature, ugly, poorly drawn
masterpiece, best quality, very aesthetic, absurdres
- 無分類器引導(CFG)比例:應在 5 到 7 左右;10 會過度處理,大於 12 則會嚴重過度處理。
- 採樣步數:應在 25 到 30 左右;28 是最佳值。
- 採樣器:強烈推薦使用 Euler Ancestral(Euler a)。
- 支持的分辨率:
1024 x 1024, 1152 x 896, 896 x 1152, 1216 x 832, 832 x 1216, 1344 x 768, 768 x 1344, 1536 x 640, 640 x 1536
🔧 技術細節
以下是訓練期間使用的關鍵超參數:
特性 |
預訓練 |
微調 |
硬件 |
2x H100 80GB PCIe |
2x A100 80GB PCIe |
批量大小 |
32 |
48 |
梯度累積步數 |
2 |
1 |
噪聲偏移 |
無 |
0.0357 |
訓練輪數 |
10 |
10 |
UNet 學習率 |
5e-6 |
2e-6 |
文本編碼器學習率 |
2.5e-6 |
無 |
優化器 |
Adafactor |
Adafactor |
優化器參數 |
縮放參數:False,相對步長:False,預熱初始化:False |
縮放參數:False,相對步長:False,預熱初始化:False |
調度器 |
帶預熱的常數調度器 |
帶預熱的常數調度器 |
預熱步數 |
0.05% |
0.05% |
📄 許可證
Holodayo XL 2.1 遵循 Fair AI Public License 1.0 - SD 許可協議,該協議與 Stable Diffusion 模型的許可協議兼容。關鍵要點如下:
- 修改共享:如果對 Holodayo XL 2.1 進行了修改,則必須同時共享修改內容和原始許可協議。
- 源代碼可訪問性:如果修改後的版本可以通過網絡訪問,則需要提供一種方式(如下載鏈接)讓他人獲取源代碼。這同樣適用於派生模型。
- 分發條款:任何分發都必須遵循此許可協議或具有類似規則的其他協議。