Colorfulxl Lightning

🚀 多彩XL闪电模型（ColorfulXL-Lightning）

多彩XL闪电模型是一个基于文本到图像的生成模型，它在多彩XL（ColorfulXL）的基础上进行了优化，具备闪电特效生成能力，能够生成色彩丰富且具有独特风格的图像。

🚀 快速开始

代码示例

from diffusers import DiffusionPipeline
from diffusers import EulerDiscreteScheduler
import torch

pipeline = DiffusionPipeline.from_pretrained("recoilme/ColorfulXL-Lightning", torch_dtype=torch.float16,variant="fp16", use_safetensors=True).to("cuda")
pipeline.scheduler = EulerDiscreteScheduler.from_config(pipeline.scheduler.config, timestep_spacing="trailing")

prompt = "girl sitting on a small hill looking at night sky, fflix_dmatter, back view, distant exploding moon, nights darkness, intricate circuits and sensors, photographic realism style, detailed textures, peacefulness, mysterious."
height = 1024
width = 1024
steps = 3
scale = 0
seed = 2139965163
generator = torch.Generator(device="cpu").manual_seed(seed)

image = pipeline(
            prompt = prompt,
            height=height,
            width=width,
            guidance_scale=scale,
            num_inference_steps=steps,
            generator=generator,
        ).images[0]
image.show()
image.save("girl.png")

本地推理

你可以通过以下链接查看本地推理的相关内容：https://github.com/recoilme/100lineSDXL

在线体验（GPU加速）

点击下面的链接在网页上体验模型：https://huggingface.co/spaces/recoilme/ColorfulXL-Lightning

✨ 主要特性

• 美学微调：在美学方面进行了微调，生成的图像更具美感。
• 高分辨率支持：支持576 - 1280的高分辨率图像生成。
• 良好的提示遵循性：经过训练的文本编码器，能够更好地理解用户的提示。
• 自定义VAE：采用自定义的变分自编码器（VAE），提升图像生成质量。
• 闪电特效融合：融合了字节跳动（supermario）的2、4、8步闪电Unet模型，具备闪电特效生成能力。
• 色彩丰富：能够生成色彩鲜艳的图像，包括纯黑和纯白的色彩表现。

📦 安装指南

文档未提供具体安装步骤，可参考代码示例中的依赖导入部分，安装diffusers、torch等相关库。

📚 详细文档

模型详情

• 版本：v1.6
• 开发团队：AiArtLab
• 模型类型：基于扩散的文本到图像生成模型
• 模型描述：该模型是基于多彩XL进行微调的模型。
• 许可证：该模型不允许在API服务后使用。如需商业咨询、商业许可、定制模型和咨询，请联系vadim-kulibaba@yandex.ru。

模型使用

直接使用

该模型可用于以下研究领域和任务：

• 艺术作品生成，并应用于设计和其他艺术创作过程。
• 教育或创意工具中的应用。
• 生成模型的研究。
• 具有潜在生成有害内容的模型的安全部署。
• 探究和理解生成模型的局限性和偏差。

超出适用范围的使用

该模型并非用于生成真实人物或事件的事实性或真实表现内容，因此使用该模型生成此类内容超出了其能力范围。

局限性和偏差

局限性

• 无法实现完美的照片级真实感。
• 不能渲染清晰可读的文本。
• 在处理涉及组合性的复杂任务时存在困难，例如渲染与“红色立方体放在蓝色球体上”对应的图像。
• 人脸和人物的生成效果可能不佳。
• 模型的自动编码部分存在信息损失。

偏差

虽然图像生成模型的能力令人印象深刻，但它们也可能强化或加剧社会偏差。

📄 许可证

该模型不允许在API服务后使用。如需商业咨询、商业许可、定制模型和咨询，请联系vadim-kulibaba@yandex.ru。

📞 联系我们

• 关于模型的问题和评论，请加入：https://aiartlab.org/
• 关于AiArtLab AI模型、研究和活动的未来公告/信息，请关注：Discord
• 商业和合作咨询，请联系：https://t.me/recoilme

模型示例图片

模型宣传图

高分辨率示例（576*832）

多彩图像示例

模型存在的问题示例（手和脸的生成问题）

详细评测（版本1.0）