想象一下，您可以将Minecraft项目变成现实。将您制造的房屋，您制造的城市或您创造的世界变成现实的柜台部分。至少可以说很酷。制作现实的场景将需要大量的处理能力，时间和大量用户的手动输入。
但是，如果有一种方法可以放置您的Minecraft世界并获得现实渲染的柜台零件，该怎么办？当然，所有这些都会自动完成。这个新的神经渲染框架，Gancraft只是做事。它能够生成像您将在Minecraft创建的世界一样的大型3D块世界的照片逼真的图像。
当前的方法将Minecraft中的摄像头轨迹转换为一系列逼真的图像，就好像这些图片是由地球上某个地方的真实摄像头拍摄的一样。这样的应用程序是无穷无尽的。它可以帮助艺术家更轻松地形象化他们的概念。它可以帮助游戏中的图形渲染，对环境的粗略草图进行粗略的遮挡，并将其变成真实的东西。
使用无监督的学习技术对Gancraft模型进行了训练。由于没有真实照片和3D块照片对数据集。因此，该模型是使用伪地真相和对抗训练训练的。Gancraft允许用户控制场景语义和输出样式，具体取决于馈送到模型的3D块状图像。每个块都分配了一个语义标签，例如污垢，草或水。
然后，世界被表示为连续的体积函数，并训练该模型以渲染视图一致的逼真的图像，以适用于用户控制的相机。您可以从下面的视频中了解有关Gancraft的更多信息。
在Gancraft背后提交的研究论文中已经讨论了更精细的技术细节，您可以阅读这里。团队所显示的结果令人印象深刻。该模型基本上能够从头开始，从而使整个现实世界以及逼真的草，绿化甚至水。
猜猜是时候该几年前在Minecraft中放置在现实生活中的4个街区了。
