NVIDIA 的新 AI 模型可快速生成虚拟世界的对象和角色

英伟达正在寻求用一种新的方法来消除创建虚拟 3D 世界的痛苦人工智能模型。 NVIDIA 表示，GET3D 可以生成角色、建筑物、车辆和其他类型的 3D 对象。该模型也应该能够快速制作形状。该公司指出，GET3D 可以使用单个 GPU 每秒生成大约 20 个对象。

研究人员使用从多个角度拍摄的 3D 形状的合成 2D 图像来训练模型。 NVIDIA 表示，使用 A100 Tensor Core GPU 只用了两天时间就将大约 100 万张图像输入 GET3D。

该模型可以创建具有“高保真纹理和复杂几何细节”的对象，NVIDIA 的 Isha Salian在博客文章中写道. GET3D 制作的形状“是三角形网格的形式，就像一个纸质模型，上面覆盖着一种纹理材料，”Salian 补充道。

用户应该能够快速将对象导入游戏引擎、3D 建模器和电影渲染器进行编辑，因为 GET3D 将以兼容的格式创建它们。这意味着开发人员可以更轻松地为游戏和虚拟世界创建密集的虚拟世界。 NVIDIA 将机器人技术和架构列为其他用例。

该公司表示，基于汽车图像的训练数据集，GET3D 能够生成轿车、卡车、赛车和货车。在接受动物图像训练后，它还可以生产狐狸、犀牛、马和熊。正如您所料，NVIDIA 指出，输入 GET3D 的训练集越大、越多样化，“输出就越多样化和详细”。

在另一个 NVIDIA AI 工具的帮助下，风格GAN-NADA ，可以通过基于文本的提示将各种样式应用于对象。您可以将烧毁的外观应用于汽车，将房屋模型转换为鬼屋，或者正如展示技术的视频所暗示的那样，将虎纹应用于任何动物。

创建 GET3D 的 NVIDIA 研究团队认为，未来的版本可以在真实世界的图像而不是合成数据上进行训练。也可以一次在各种类型的 3D 形状上训练模型，而不必在给定时间专注于一个对象类别。