Zenctrl Tools

🚀 ZenCtrl

我們正在開發一個智能代理，它能夠自動化整個個性化視覺內容創作流程。這個代理需要執行多種類型的任務，包括設計任務以及為自身使用訓練模型。它將負責處理數據、管理模型並確保輸出內容的質量。

🚀 快速開始

我們正在打造一個能夠自動化整個個性化視覺內容創作流程的智能代理。它需要執行多種任務，包括設計任務以及為自身使用訓練模型。此代理將處理數據、管理模型並確保輸出內容的質量。

以下是我們隨機挑選的一些權重，這些權重是在圖像條件文本到圖像生成任務上訓練得到的，適用於空間對齊和非對齊任務。我們正在多種條件和設置下訓練多個任務。我們很快會分享更多關於這些權重以及如何運行它們的詳細信息，但這些權重是使用不同版本的 OminiControl 管道進行微調的。大多數（如果不是全部的話）應該可以與 OminiControl 兼容，因此你可以將它們添加到你的項目中並作為適配器加載。適配器名稱是文件夾名稱中“-”後面的字符串。

✨ 主要特性

控制類型

• 預處理：背景移除、摳圖、重塑、分割等。
• 控制模型：形狀（邊緣檢測、Hed、塗鴉、深度等）、姿態、掩碼、相機視角。
• 後處理模型：增強、顏色校正、融合。
• 編輯模型：圖像內繪製（包括移除、掩碼融合、替換等、添加）、圖像外繪製、運動/變換、重新光照。

任務類型

• 背景生成
• 可控背景生成
• 上下文中主體一致的生成
• 對象放置
• 視頻生成
• 上下文中圖像/視頻生成
• 多對象/主體合併/融合

應用類別

• 產品攝影
• 時尚配飾/鞋子、帽子等適配
• 虛擬試穿
• 人物相關

📦 安裝相關

暫未提供安裝步驟相關內容。

📚 詳細文檔

權重相關

這裡有一些我們在圖像條件文本到圖像生成任務上訓練的隨機挑選的權重，適用於空間對齊和非對齊任務。我們正在多種條件和設置下訓練多個任務，之後會分享更多關於權重及運行方式的詳細信息。這些權重是用不同版本的 OminiControl 管道微調的，多數（如果不是全部）應能與 OminiControl 兼容，可作為適配器添加到項目中，適配器名稱是文件夾名中“-”後的字符串。

控制、任務和類別

我們正在針對以下控制、任務和類別進行訓練，並計劃將它們全部開源，包括視頻模型。

• 控制：涵蓋預處理（如背景移除、摳圖等）、控制模型（形狀、姿態等）、後處理模型（增強、顏色校正等）和編輯模型（圖像內繪製、外繪製等）。
• 任務：包括背景生成、可控背景生成、主體一致生成等多種任務。
• 類別：涉及產品攝影、時尚配飾適配、虛擬試穿和人物相關等類別。

📄 許可證

本項目採用 CC BY - NC 4.0 許可證。

項目鏈接

• GitHub 倉庫
• HuggingFace 空間
• Discord 社區
• 項目官網
• X（原 Twitter）

項目展示

信息表格