PRM

🚀 PRM

PRM是一個基於光度立體視覺的大型重建模型，旨在重建具有精細局部細節的高質量網格。

我們提出了PRM，這是一種新穎的基於光度立體視覺的大型重建模型，用於重建具有精細局部細節的高質量網格。與以往在固定且簡單光照條件下準備圖像作為輸入和監督的大型重建模型不同，PRM通過改變材質和光照來渲染光度立體圖像，這不僅通過提供豐富的光度線索提高了局部細節的精度，還增強了模型對輸入圖像外觀變化的魯棒性。為了提高圖像渲染的靈活性，我們採用了即時渲染方法和網格光柵化技術進行在線圖像渲染。此外，PRM使用顯式網格作為三維表示，確保了可微PBR的應用，支持使用多種光度監督，並能更好地模擬高光顏色，以實現高質量的幾何優化。我們的PRM利用光度立體圖像實現了具有精細局部細節的高質量重建，即使在複雜的圖像外觀下也是如此。大量實驗表明，PRM明顯優於其他模型。

🚀 快速開始

相關鏈接

• 代碼倉庫：https://github.com/g3956/PRM
• 論文預印本：http://arxiv.org/abs/2412.07371
• Gradio演示：https://huggingface.co/spaces/LTT/PRM

✨ 主要特性

• 精細局部細節重建：通過改變材質和光照渲染光度立體圖像，提供豐富的光度線索，提高局部細節的精度。
• 增強魯棒性：對輸入圖像外觀的變化具有更強的魯棒性。
• 靈活的圖像渲染：採用即時渲染方法和網格光柵化技術進行在線圖像渲染。
• 高質量幾何優化：使用顯式網格作為三維表示，支持可微PBR，能更好地模擬高光顏色。

📄 許可證

本項目採用Apache-2.0許可證。