英伟达在 SIGGRAPH 2021 上,大显身手。
近日,在由非盈利的国际化会员组织 ACM SIGGRAPH 举办的 SIGGRAPH 2021 线上会议上,英伟达展示了 NVIDIA RTX 技术为 3D 开发者和行业爱好者带来的独家优势。
当地时间 8 月 10 日,NVIDIA 宣布推出 Omniverse —— 它是全球首个为元宇宙建立的基础模拟平台,它可以让用户身临其境地连接到虚拟世界中,用户在这里可以创建独一无二的数字场景、完美的 3D 模型、设计精美的建筑等。
为了满足 3D 开发者、爱好者强大的硬件性能需求,NVIDIA 同时也推出了 RTX A2000 显卡。在 Omniverse 和 RTX 硬件的双重配合下,英伟达还拿到了 SIGGRAPH 最佳展示奖。
Omniverse 应用生态正在迅速成长
为了简化 3D 建模,Omniverse 平台在不断扩张其应用生态系统。
目前,Omniverse 已支持世界顶尖动画制作工作室 Pixar 推出的 USD(通用场景描述) Blender 3.0 版本,创作者们能够在 Omniverse 平台中使用该应用。
NVIDIA 还推出了一个实验性的 Blender alpha 3.0 USD 分支插件,其中包括更高版本的 USD 和素材支持,并且很快将面向世界各地的 Blender 用户。
此外,英伟达和 Adobe 正在合作开发一个新的 Substance 3D 插件,该插件将使 Omniverse 支持 Substance Material。
使用该插件,用户可以在 Omniverse 中直接调整在 Adobe Substance 3D 中创建或导入的材料,这种方式可以有效节省更多时间,而不需要用户二次打开软件操作。
另外,在 Omniverse 上,英伟达还增加了一个名为 GANverse 3D – Image2Car 的拓展程序,它可以利用 AI 机制,使 3D 建模变得更容易。
GANverse3D 建立在一个在 2D 照片上训练的生成对抗网络上,合成数千个对象的多个视图来预测 3D 几何、纹理和零件分割标签。这个过程可以将汽车的单张照片变成可以在虚拟场景中行驶的 3D 模型,并配有逼真的前灯、闪光灯和车轮。
GANverse3D 是基于 2D 照片训练的深度学习引擎,它可以根据标准的 2D 图像来创建 3D 模型。例如,它可以将一张汽车照片转换为 3D 模型,该模型甚至可以在虚拟场景中行驶,并配有逼真的前灯、尾灯和车轮。
GANverse3D 是包含在 Omniverse AI Toy Box 的扩展集合中的第一个程序。AI Toy Box (人工智能玩具盒)的应用扩展允许没有经验的 3D 创作者轻松创建场景,且为经验丰富的用户提供多应用程序一体化的体验。
这是 GANverse3D 与 Omniverse 连接工作流程的实际应用,其中包括 Omniverse Create、Reallusion Character Creator 3 和 Adobe Photoshop。
RTX A2000 提供 3D 性能支持
NVIDIA RTX A2000 目前已成为面向 3D 创作者最的强大工具,这款 GPU 采用了 NVIDIA Ampere 架构中的最新 RTX 技术。
主要包括:
第二代 RT 核心,主要用于实时光线追踪,相比前一代,性能最大提升约 500%。
第三代 Tensor Cores,它为 AI 创造功能提供动力和加速支持。
2 个 PCIe Gen 4 和 6GB GPU ECC 内存,将进一步提升 3D 渲染和导出文件速度。
NVIDIA RTX A2000 工作站显卡,桌面版将在 10 月发售。
对于忙碌的开发者来说,拥有 NVIDIA RTX A2000 GPU 的笔记本电脑的确是最高效且最专业的,它为轻薄的 PC 产品带来了光线追踪和 AI 支持。
NVIDIA RTX A2000 GPU 支持多种创造性的工作,包括 3D 建模和 Omniverse,无论是在台式机还是笔记本电脑上,它都可以轻松运行。
NVIDIA 已集成入最新软件更新
最近,一些顶尖的创意应用程序进行了更新,已发布的 NVIDIA Studio 已将其更新内容全部纳入到了驱动程序中,主要包括对于以下三个软件的支持。
Topaz 锐化 AI v3.2 改进了 RTX GPU 和 Tensor Cores 加速的 AI 模型,增加了 1.5 倍的运动模糊的功能,进一步减少了伪影。通过实时处理蒙版笔划和覆盖显示的自定义控件,应用内蒙版也得到了改进。
Reallusion Character Creator v3.43 是第一个集成 Audio2Face 的第三方应用程序,它现在允许创作者将角色从 Character Creator 导出到 Omniverse 中,作为具有 Audio2Face 兼容性的 USD 文件。
它允许面部和唇部动画完全由人工智能驱动,不管语音效果如何,但它的确简化了 3D 角色动画的创作过程。
Capture One 21 v14.3.0 添加了一个新的 Magic Brush 工具,它可以根据图像内容瞬间创建复杂的蒙版,以用于图层编辑。此过程是需要硬件加速的,与 CPU 相比,使用 GPU 时速度最多可提高 3 倍。
软件生态的持续更新,将为 3D 开发者和艺术家们,提供更高效、高质量的创作环境,也将给予 Omniverse 平台更加长久的生命力。
软硬结合,英伟达获“最佳展示”奖
最后,值得一提的是,英伟达还凭借数字化身(虚拟人物)的演示,在 SIGGRAPH 上获得了“最佳展示”奖。
NVIDIA 研究团队在硅谷总部进行现场直播时,展示了一系列 AI 模型,这些模型可以在高速网络下,为视频会议和讲故事等项目创建栩栩如生的虚拟角色。
在演示中,一名 NVIDIA 研究员扮演了面试官,面试者则是英伟达的数字化身。NVIDIA 研究人员使用的是 RTX 笔记本电脑,另一位数字化身则由 RTX A6000 GPU 台式工作站驱动。
在通话过程中,英伟达展示了人工智能驱动的数字化虚拟人物技术与采访者沟通交流能力。
该演示的特色在于从单张照片生成数字化身,并使用自然的 3D 面部运动为化身制作动画,最后将文本转换为语音进行输出对话。
NVIDIA 应用深度学习研究副总裁 Bryan Catanzaro 在演讲中表示:
“众所周知,制作数字化虚拟人物是一个的困难、乏味和昂贵的过程,但是有了 AI 工具后,就有了一种简单的方法,它可以为真人以及卡通人物创建数字化身,可用于视频会议、讲故事、虚拟助手和许多其他应用程序。”
小结
目前,Omniverse 仍处于公测阶段,它对 NVIDIA RTX 和 GeForce RTX GPU 用户免费开放。用户在安装完 NVIDIA Studio 驱动程序后,即可获得更新支持。
英伟达在 Siggraph 上的一系列重磅更新,可谓震惊四座。不过,它能否为元宇宙、 3D 行业真正带来了真正革命性的改变,且让子弹再飞一会儿。