Controllable Generative Modeling in Minecraft by Training on Billions of Cubes
13 hours ago
- Dream-Cubed 是一个大型Minecraft区块数据集（包括程序生成和人类创作的区块），用于生成式建模。
- 它研究了用于生物群落条件区块生成的离散和连续3D扩散模型。
- 离散掩码扩散作为免费副产品，能够实现修复、扩展和基于区块条件的生成。
- 数据平衡确保了稀有生物群落（如村庄）通过定向收集得到充分代表。
- 模型在完整区块分辨率（32^3）下使用扩散Transformer进行训练，无需压缩。
- 人类评估显示，生成的区块往往比真实区块更受欢迎，FID指标经人类判断验证。
- 数据集、代码和模型权重已发布，以支持交互式3D世界的进一步研究。