Luma AI

Luma AI是一家总部位于美国加州的公司，成立于2021年9月，旨在让每个人都能捕捉和体验3D世界。 Luma AI的核心技术是NeRF（Neural Radiance Fields），这是一种三维重建技术方案，它的特点是基于现有视角的图像生成新视角的图像。有了NeRF，可以通过拍摄大量图片或视频来创建出一个可微分的三维场景。相较于传统的摄影测量方案，NeRF的优势在于可以用更少量的数据生成三维模型。
Luma AI的软件是由该公司基于云服务器开发，只需要一部Apple手机，无需安装激光雷达或花哨的设备，就能将现实中的2D照片渲染成3D模型，捕捉到的3D场景则包含复杂形状、反射和照明等细节。制作得到的3D模型既可以直接分享到网上，比2D照片更全方位地展示细节。
Luma AI是基于NeRF的一种衍生算法，在原有的NeRF算法的基础上，Luma AI做了很多改进和优化。Luma AI在场景图像获取、数据预处理、模型训练、模型渲染及其他模型文件的生成等方面均做了很多优化工作。例如，之前NeRF在生成带纹理的Mesh模型时需要对场景进行360度环绕拍摄，而Luma AI即使在非360度拍摄的场景下也能渲染出带纹理的Mesh模型。更多的优化方面将在后文进行分析。
Luma AI的Beta版本目前包括iOS移动端和Web端。在二维图像生成3D模型方面，Luma AI的效果碾压目前绝大部分NeRF算法，即使在复杂的形状和场景下也能得到逼真的细节和纹理，能够胜任多种复杂场景的三维建模需求。和现有的其他三维建模方法相比，Luma AI操作更加简单，即使一个“小白”也能分分钟掌握，基本实现了“零成本”建模。Luma AI能够导出渲染好的mp4视频、场景点云和Mesh模型，但不能导出训练好的神经网络模型。