这是什么?
多视角扩散是一种扩散模型(例如,稳定扩散)。但是,它不是在常规图像上进行训练,而是在对象的多个视角上进行训练。
问题
多视角扩散对 3D 很有用。
但是,它无法开箱即用。它往往会遇到一个被称为 Janus 问题的现象,即物体有多个面(或者更笼统地说,视角之间缺乏一致性)。
解决方案
像 MVDream 这样的最先进的多视角扩散模型使用专门的技术来解决这个问题。
在本课程中,我不会深入探讨多视角扩散的技术细节,因为它与 3D 关系不大,而与扩散关系更大。但是,如果你想了解更多信息,请查看 扩散课程。
在接下来的部分中,我们将使用经过预训练的多视角扩散模型来生成多视角图像。
< > 更新 在 GitHub 上