🚀 ZenCtrl

私たちは、個人化されたビジュアルコンテンツの作成プロセス全体を自動化できるエージェントを開発しています。このエージェントは、複数種類のタスクを実行し、データやモデルを管理し、出力の品質を保証します。

ZenCtrl

ここに、画像条件付きのテキストから画像生成について、空間的にアラインされたタスクと非アラインのタスクに対して学習したランダムに選んだ重みを紹介します。

私たちは、様々な条件と設定で複数のタスクを学習させています。重みとその実行方法について、近日中に詳細を公開します。ただし、これらの重みはOminiControl Pipelinesのバージョンで微調整されています。ほとんどの場合、OminiControlで動作するため、プロジェクトに追加し、アダプタとして読み込むことができます。アダプタ名は、フォルダ名の「-」以降の文字列です。

📦 GitHubページ

https://github.com/FotographerAI/ZenCtrl/tree/main

ここでは、私たちが学習対象としているコントロール、タスク、カテゴリを紹介します。これらすべてをオープンソース化する予定です。ビデオモデルも含みます。

コントロール

• 前処理：背景除去、マッティング、形状変更、セグメンテーションなど
• コントロールモデル：形状（キャニー、Hed、スクライブル、深度など）、ポーズ、マスク、カメラビュー
• 後処理モデル：エンハンスメント、色補正、ブレンディング
• 編集モデル：インペインティング（除去、マスクブレンディング、置換など、追加）、アウトペインティング、モーション/変換、リライティング

タスク

• 背景生成
• 制御された背景生成
• コンテキスト内での主体の一貫性生成
• オブジェクト配置
• ビデオ生成
• コンテキスト内の画像/ビデオ生成
• 複数オブジェクト/主体のマージ/ブレンディング

カテゴリ

• 商品写真撮影
• ファッションアクセサリ / 靴、帽子などのフィッティング
• バーチャルトライオン
• 人物

📄 ライセンス

CC BY-NC 4.0