Sd Xl Alternative Bases

🚀 穩定擴散XL替代模型倉庫

本倉庫包含以.safetensors格式存儲的Stable Diffusion XL Base 1.0的替代或調優版本。這些模型可用於基於文本提示生成和修改圖像，為圖像生成研究提供了更多選擇。

🚀 快速開始

使用本倉庫中的模型，你可以進行圖像生成和修改等操作。以下是一些基本的使用說明：

• 如果你想使用特定的模型文件，請參考“可用模型”部分了解其具體內容。
• 若要從任意SDXL檢查點創建SDXL修復檢查點，請參考“如何從任意SDXL檢查點創建SDXL修復檢查點”部分。

✨ 主要特性

• 多種模型選擇：提供不同版本的Stable Diffusion XL Base 1.0模型，滿足多樣化的研究需求。
• 可創建修復檢查點：支持從任意SDXL檢查點創建SDXL修復檢查點，拓展了模型的應用場景。

📦 可用模型

📦 sd_xl_base_1.0_fp16_vae.safetensors

此文件包含 sd_xl_base_1.0.safetensors 的權重，並與來自MadeByOllin的SDXL FP16 VAE倉庫的 sdxl_vae.safetensors 的權重合並。

📦 sd_xl_base_1.0_inpainting_0.1.safetensors

該文件包含 sd_xl_base_1.0_fp16_vae.safetensors 的權重，並與來自 diffusers/stable-diffusion-xl-1.0-inpainting-0.1 的權重合並。

📚 詳細文檔

📚 如何從任意SDXL檢查點創建SDXL修復檢查點

使用此處的 .safetensors 文件，你可以使用公式 A + (B - C) 計算修復模型，其中：

• A 是 sd_xl_base_1.0_inpainting_0.1.safetensors
• B 是你的微調檢查點
• C 是 sd_xl_base_1.0_fp16_vae.safetensors

使用 ENFUGUE 的Web UI：

你必須專門使用本倉庫中的兩個文件才能使其正常工作。Diffusers團隊使用FP16 XL VAE訓練了XL修復模型，因此使用不同的XL基礎模型將導致應用於修復檢查點的增量不正確，並且生成的VAE將毫無意義。

📚 模型描述

📚 用途

📚 直接使用

該模型僅用於研究目的。可能的研究領域和任務包括：

• 藝術品生成以及在設計和其他藝術過程中的應用。
• 在教育或創意工具中的應用。
• 生成模型的研究。
• 對有可能生成有害內容的模型進行安全部署。
• 探究和理解生成模型的侷限性和偏差。
• 以下將描述排除的使用情況。

📚 超出範圍的使用

該模型並非用於真實地呈現人物或事件，因此使用該模型生成此類內容超出了該模型的能力範圍。

📚 侷限性和偏差

📚 侷限性

• 模型無法實現完美的照片級真實感。
• 模型無法渲染清晰可讀的文本。
• 模型在處理涉及組合性的更復雜任務時存在困難，例如渲染與“藍色球體上的紅色立方體”對應的圖像。
• 面部和人物通常可能無法正確生成。
• 模型的自動編碼部分存在信息損失。
• 當強度參數設置為1（即從完全遮罩的圖像開始修復）時，圖像質量會下降。模型會保留圖像的未遮罩內容，但圖像看起來不夠清晰。我們正在對此進行研究，並致力於開發下一版本。

📚 偏差

雖然圖像生成模型的能力令人印象深刻，但它們也可能強化或加劇社會偏差。

📄 許可證

本模型使用CreativeML Open RAIL++-M許可證。