
LucidDreamer 项目将各种功能绑定到一个管道中,该管道可以获取源图像(或根据文本提示生成图像)并将其内容“提升”为 3D,从而创建看起来很棒甚至可以导航的高度详细的高斯图。
高斯泼溅是一种用于渲染 NeRF(神经辐射场)的方法,NeRF 本身就是一种从稀疏 2D 源生成复杂场景并快速生成的方法。如果这对你来说都是新闻,那可能是因为从几年前最初的 NeRF 概念被提出时起,这些东西就以令人眼花缭乱的速度出现了。
LucidDreamer 之所以如此简洁,是因为它用很少的资源做很多事情。项目页面有可供探索的交互式场景,但也有一个演示供那些想要尝试从头开始生成场景的人使用(不过,需要熟悉基本工具。)
除了源代码本身之外,那些渴望了解细节的人还可以获得研究论文。快速阅读它,因为按照这些东西正在扩展的速度,老实说,如果你等待太久,它可能会过时。
原文: https://hackaday.com/2023/12/29/generating-3d-scenes-from-just-one-image/