3D 机器学习课程文档

它是什么?

Hugging Face's logo
加入 Hugging Face 社区

并获得增强的文档体验

开始使用

它是什么?

多视图扩散是一种扩散模型(例如Stable Diffusion)。然而,它不是在普通图像上训练的,而是在从不同视角拍摄的物体多张视图上训练的。

Multi-view diffusion

问题

多视图扩散对 3D 很有用。

然而,它不能直接使用。它往往会遇到所谓的雅努斯问题(Janus problem),即物体具有多张脸(或者更普遍地说,视图之间缺乏一致性)。

Janus problem

解决方案

最先进的多视图扩散模型,如MVDream,通过专门的技术解决了这个问题。

在本课程中,我不会深入讲解多视图扩散的技术细节,因为它与扩散相关性更高,而不是与 3D 相关。但如果你想了解更多,可以查看扩散课程

在接下来的章节中,我们将使用预训练的多视图扩散模型来生成多视图图像。

< > 在 GitHub 上更新