Sd Xl Alternative Bases

🚀 Diffusers ライブラリ SDXL モデル

このリポジトリには、.safetensors 形式の Stable Diffusion XL Base 1.0 の代替または調整されたバージョンが含まれています。

🚀 クイックスタート

利用可能なモデル

sd_xl_base_1.0_fp16_vae.safetensors

このファイルには、sd_xl_base_1.0.safetensors の重みと、MadeByOllin の SDXL FP16 VAE リポジトリの sdxl_vae.safetensors の重みがマージされています。

sd_xl_base_1.0_inpainting_0.1.safetensors

このファイルには、sd_xl_base_1.0_fp16_vae.safetensors の重みと、diffusers/stable-diffusion-xl-1.0-inpainting-0.1 の重みがマージされています。

任意の SDXL チェックポイントから SDXL インペインティングチェックポイントを作成する方法

ここにある .safetensors ファイルを使用すると、A + (B - C) の式を使ってインペインティングモデルを計算できます。ここで、

• A は sd_xl_base_1.0_inpainting_0.1.safetensors
• B はあなたが微調整したチェックポイント
• C は sd_xl_base_1.0_fp16_vae.safetensors

ENFUGUE の Web UI を使用する場合：

これを機能させるには、このリポジトリにある 2 つのファイルを具体的に使用する必要があります。Diffusers チームは FP16 XL VAE を使用して XL インペインティングをトレーニングしているため、異なる XL ベースを使用すると、インペインティングチェックポイントに誤ったデルタが適用され、結果として得られる VAE は意味がなくなります。

モデルの説明

用途

直接利用

このモデルは研究目的のみを想定しています。可能な研究分野やタスクには以下が含まれます。

• アートワークの生成と、デザインやその他の芸術的プロセスでの使用。
• 教育または創造的ツールでのアプリケーション。
• 生成モデルに関する研究。
• 有害なコンテンツを生成する可能性のあるモデルの安全なデプロイ。
• 生成モデルの制限とバイアスの調査と理解。
• 除外される利用については以下で説明します。

想定外の利用

このモデルは、人やイベントの事実的または真実の表現としてトレーニングされていないため、このようなコンテンツを生成するためにモデルを使用することは、このモデルの能力範囲外です。

制限とバイアス

制限

• モデルは完全な写真的リアリズムを達成できません。
• モデルは読めるテキストをレンダリングできません。
• モデルは、「青い球体の上に赤い立方体」に対応する画像をレンダリングするなど、構成性を伴うより難しいタスクに苦労します。
• 顔や一般的な人物は適切に生成されない場合があります。
• モデルのオートエンコーディング部分は損失があります。
• 強度パラメータが 1 に設定されている場合 (つまり、完全にマスクされた画像からインペインティングを開始する場合)、画像の品質が低下します。モデルは画像のマスクされていない部分を保持しますが、画像は鮮明さを失います。私たちはこれを調査し、次のバージョンで改善するために取り組んでいます。

バイアス

画像生成モデルの能力は印象的ですが、社会的バイアスを強化または悪化させる可能性もあります。

📄 ライセンス

このモデルは CreativeML Open RAIL++-M License の下で提供されています。