新型人工智能框架Rodin來了！可從多種輸入源生成 3D 數字化身
微新創想（idea2003.com）7月27日 消息:Rodin 是一個新穎的人工智能框架，可以從不同的輸入源生成3D 數字化身。該框架利用了擴散模型和生成模型來生成逼真的3D 內容。與2D 內容相比，生成3D 內容面臨著更多的挑戰，包括內存和處理成本的限制。
論文地址:https://arxiv.org/pdf/2212.06135.pdf
Rodin 的創新之處在于它可以根據圖像、隨機噪聲或者文字描述生成3D 數字化身。它采用擴散過程生成數字化身的粗糙幾何結構，并通過擴散上采樣器進行細節合成。Rodin 提供了目前最尖銳的數字化身，并且在生成樣本中沒有可見的偽影。該框架在計算和內存效率上也做了很好的優化，使用三平面表示法來減少內存占用。
最終，通過輕量級的 MLP 解碼器生成 RGB 體積圖像。這項研究對電影、游戲、元宇宙和3D 行業中數字化身的應用具有重要意義。
