3dtopia XL

🚀 3DTopia-XL

このリポジトリには、「3DTopia-XL: Scaling High-quality 3D Asset Generation via Primitive Diffusion」の事前学習済みの重みが含まれています。このモデルは、高品質な3Dアセットの生成を可能にする革新的な技術を備えています。

プロジェクトページ | Arxiv | 重み | コード

🚀 クイックスタート

3DTopia-XLは、表現力豊かで効率的な3D表現であるPrimXに基づいたDiffusion Transformer (DiT) を使用して、高品質な3Dアセットの生成を行います。ノイズ除去プロセスは、テキストまたは画像入力から3D PBRアセットを生成するのにわずか5秒で、グラフィックパイプラインですぐに使用できる状態になります。

✨ 主な機能

• 高品質な3Dアセットを高速に生成することができます。
• テキストまたは画像入力から直接3D PBRアセットを生成します。
• 生成されたアセットはグラフィックパイプラインですぐに使用できます。

📦 インストール

モデルをダウンロードするには、以下のコードを実行します。

from huggingface_hub import hf_hub_download
ckpt_path = hf_hub_download(repo_id="frozenburning/3DTopia-XL", filename="model_sview_dit_fp16.pt")
vae_ckpt_path = hf_hub_download(repo_id="frozenburning/3DTopia-XL", filename="model_vae_fp16.pt")

ロードと推論の詳細については、リポジトリを参照してください。

📚 ドキュメント

モデルの詳細

このモデルは、Objaverseの約256Kのサブセットで学習されています。詳細については、論文を参照してください。

📄 ライセンス

このプロジェクトは、Apache-2.0ライセンスの下で公開されています。

引用

@article{chen2024primx,
  title={3DTopia-XL: High-Quality 3D PBR Asset Generation via Primitive Diffusion},
  author={Chen, Zhaoxi and Tang, Jiaxiang and Dong, Yuhao and Cao, Ziang and Hong, Fangzhou and Lan, Yushi and Wang, Tengfei and Xie, Haozhe and Wu, Tong and Saito, Shunsuke and Pan, Liang and Lin, Dahua and Liu, Ziwei},
  journal={arXiv preprint arXiv:2409.12957},
  year={2024}
}