《Rec Room》使用生成式 AI 工具创建虚拟世界项目“Fractura”

近日,《Rec Room》团队使用生成式 AI 工具创建了一个虚拟世界项目“Fractura”。
去年,《Rec Room》增加了与 Unity 的直接集成,称为 Rec Room Studio,让创作者可以在 Unity 编辑器中构建更高质量的世界,而不是局限于游戏中基于形状的创建工具。
图片
Fractura 就是这样一个世界,但主要是使用生成式 AI 工具而不是完全手动构建的。
团队表示,最初想使用 ChatGPT 来开发 Fractura 并不断进行迭代,填充了关于景观植物和背景故事等想法,在 ChatGPT 的文本输出的支持下,利用 MidjourneyDall-E 将这些想法可视化。官网还公布了概念设计这一阶段的开发日志。
图片
对于 Skybox,《Rec Room》表示使用了 Blockade Labs 的 Skybox AI。一些 Quest 用户已经在使用它来为他们的 Horizon Home 环境制作自定义 Skybox。在 Fractura 中,用户可以从 Skybox AI 生成的多个 Skybox 中进行选择。
为了生成世界本身的 3D 资产,《Rec Room》使用 CSM 和 Shap-E 在 Fractura 中填充了树木、古老的石头机器人、漂浮的陆地和远处的建筑物。然而,《Rec Room》发现这些工具生成的模型具有次优多边形计数,不利于实时性能,因此必须手动简化结果。《Rec Room》还指出,3D 模型的生成时间很长,很麻烦。
图片
撇开独立 VR 的性能问题不谈,Fractura 是一个早期的原始实验,它指向了用户创建的虚拟世界的未来。正如 Meta 去年展示的 Builder Bot 演示一样,生成式 AI 与语音识别相结合,有朝一日可能会带来类似《星际迷航》的未来,人们可以在 VR 中构建虚拟世界,只需使用他们的声音。