3DTown

3DTown – 哥伦比亚联合Cybever AI等推出单视图生成3D城镇场景的框架

3DTown是什么

3DTown 是由哥伦比亚大学与Cybever AI等多方合作开发的框架，旨在通过单一俯视图生成三维城镇场景。该框架运用区域化生成与空间感知的3D修复技术，将输入的图像划分为重叠区域，并借助预训练的3D对象生成器，对每个区域进行的3D内容创建。通过掩码修正流技术，该框架能够填补几何结构的缺失，同时确保结构的连续性。3DTown 能够生成高质量的几何和纹理一致的连贯3D场景，在多样化风格的场景生成方面表现优于现有的先进技术。

3DTown的主要功能

• 多样化的3D场景生成：支持多种风格和布局的场景创建，如“雪镇”与“沙漠小镇”等。
• 几何与纹理一致性：生成的3D场景在几何结构和纹理上与输入图像保持高度一致。
• 高效处理复杂场景：能够有效处理复杂的场景，避免几何失真和布局混淆。

3DTown的项目地址

• 项目官网：https://eric-ai-lab.github.io/3dtown.github.io/
• arXiv技术论文：https://arxiv.org/pdf/2505.15765

3DTown的应用场景

• 虚拟世界构建：快速生成虚拟城镇或场景，为虚拟现实（VR）和增强现实（AR）应用提供真实的环境支持。
• 游戏开发：为游戏设计师提供高效的工具，从简单的俯视图生成复杂的3D游戏场景，从而节省时间和成本。
• 机器人模拟：创建逼真的3D场景以用于机器人训练，提升机器人在复杂环境中的导航和互动能力。
• 数字内容创作：帮助艺术家和设计师快速生成3D场景原型，加速创意流程，提高工作效率。
• 建筑与城市规划：从概念草图生成3D建筑模型和城市布局，辅助规划与设计工作，并便于方案的展示与评估。

常见问题

• 3DTown适合哪些用户?：3DTown 适用于虚拟现实开发者、游戏设计师、机器人研究者、数字艺术家以及建筑和城市规划专业人士。
• 使用3DTown需要哪些技术背景?：用户不需要深入的技术背景，但对3D建模和相关软件的基础理解将有助于更好地使用该工具。
• 3DTown支持哪些类型的输入图像?：3DTown 可以处理多种类型的俯视图图像，用户只需提供清晰的单张图像即可。