【编者按】近日,在计算机图形顶级会议ACM SIGGRAPH 2021上,英伟达介绍了公司研发的3D仿真模拟和协作平台Omniverse,并详细解释了数字假人黄仁勋的打造过程。难道英伟达今年4月的主题演讲是由“假黄仁勋”主持的?对此,英伟达澄清:“假黄仁勋”只出现了14秒!
整理 | 禾木木,祝涛
出品 | CSDN(ID:CSDNnews)
NVIDIA 在 SIGGRAPH 推出首个全球元宇宙平台,并赢得了最佳展示奖。目前处于公测阶段,它对 NVIDIA RTX 和 GeForce RTX GPU 用户免费开放。用户在安装完 NVIDIA Studio 驱动程序后,即可获得更新支持。
NVIDIA 宣布推出首个为元宇宙建立的基础模拟平台 Omniverse。它可以让用户身临其境且相互连接到虚拟世界,用户在这里可以创建自己的数字场景、3D 模型、设计建筑等,拥有更多的创意可能。在 4 月份的 GTC 主题演讲中,有一部分是由黄仁勋的虚拟数字假人出镜代替。
英伟达在博客中写道:“为了创建一个虚拟的黄仁勋,团队对他进行了全面的面部和身体扫描,创建了一个 3D 模型,然后训练人工智能模仿他的手势和表情,并应用高级人工智能技术,使他的克隆变得更真实。”
这个消息引发了不小的轰动,许多观众反复观看 4 月份的那个演讲视频,企图分辨出“真黄仁勋”和“假黄仁勋”。
随后,英伟达又更新了博文。该公司解释:“在这一小时 48 分钟的演讲中,除了中间 14 秒(即 1:02:41 到 1:02:55)之外,黄仁勋本人在主题演讲中都有发言。”
该公司还发布了一个纪录片,讲述了他们是如何做 GTC 主题演讲的,其中有一部分详细介绍了数字假人和虚拟厨房的制作。而这一切主要归功于英伟达打造的 Omniverse 的平台,这个软件也在纪录片中多次出现。
Omniverse 目前处于公开测试阶段,可供 NVIDIA RTX 和 GeForce RTX GPU 用户免费使用。为了满足3D开发者以及爱好者强大的性能需求, NVIDIA 同时也推出了 RTX A2000 显卡。
英伟达讲述了 3D 技术
目前,NVIDIA 支持全球顶尖动画制作工作室皮克斯推出的通用场景描述(USD)Blender 3.0 版本,开发者们能够在 Omniverse 平台中使用该应用。
开源3D文件框架为合作伙伴和开发者提供了 USD 采用、构建插件、Omniverse连接器等多种方式来扩展和连接到 Omnivers。
NVIDIA 还推出了一个实验性的 Blender alpha 3.0 USD 分支插件,其中包括更高级的 USD 和材料支持,并且很快将面向世界各地的 Blender 用户提供。
此外,NVIDIA 和 Adobe 正在合作开发一种新的 Substance 3D 插件,该插件将支持在 Substance Material 中实现。
使用该插件,用户可以在 Omniverse 中直接调整在 Adobe Substance 3D 中创建或从 Substance 3D 资源库导入的材料。这样可以给开发者们节省了宝贵的时间,因为他们不需要在进行二次操作。
另外,他们还发布了一个新的 Omniverse 扩展,命名为 GANverse3D – Image2Car ,它能够利用 AI 的机制,使 3D 建模变得更容易。
GANverse3D 建立在一个在 2D 照片上训练的生成对抗网络上,合成数千个对象的多个视图来预测 3D 几何、纹理和零件分割标签。这个过程可以将汽车的单张照片变成可以在虚拟场景中行驶的 3D 模型,并配有逼真的前灯、闪光灯和车轮。
GANverse3D 是包含在 AI Toy Box 的拓展集合中的一个程序。AI Toy Box 扩展允许没有经验的 3D 开发者轻松创建场景,为经验丰富的用户提供多应用程序中的新经验。
这是 GANverse3D 与 Omniverse 连接工作流程的实际应用,其中包括 Omniverse Create、Reallusion Character Creator 3 和Adobe Photoshop。
RTX A2000 提供 3D 创作
NVIDIA RTX A2000 已加入 RTX 系列,成为面向 3D 开发者的强大、低调的双插槽 GPU。这款 GPU 采用了 NVIDIA Ampere 架构中的最新 RTX 技术,包括:
第二代 RT 核心,用于实时光线追踪,相比上一代,性能提升了5倍。
第 3 代 Tensor Cores ,它为 AI 创造功能提供动力和加速支持。
2 个 PCIe Gen 4 和 6GB 的 GPU ECC 内存,用于 3D 渲染和导出大文件。
RTX A2000 桌面版将在 10 月开始发售。
对于忙碌的开发者而言,拥有 NVIDIA RTX A2000 GPU 的笔记本是高效且专业的 ,为轻薄的 PC 产品带入了光线追踪和 AI 的支持。
NVIDIA RTX A2000 GPU 支持丰富的工作,包括 3D 建模和 Omniverse,无论是在台式机后面还是在笔记本电脑上,都可以轻松运行。
创意应用程序的更新
最近,一些顶尖的创意应用程序进行了更新,已发布的 Studio 驱动程序增强了对以下三个软件的支持。Topaz Sharpen AI v3.2 改进了由 RTX GPU 和 Tensor Cores 加速的 AI 模型,增加了 1.5 倍运动模糊的功能,进一步减少了伪影。通过实时处理蒙版笔划和覆盖显示的自定义控件,应用内蒙版也得到了改进。
Reallusion Character Creator v3.43 是第一个集成 Audio2Face 的第三方应用程序,现在允许创作者将角色从 Character Creator 导出到 Omniverse 中,作为具有 Audio2Face 兼容网格的 USD 文件。允许面部和唇部动画完全由语音人工智能驱动,而不管语言效果如何,的确简化了 3D 角色动画的创作过程。
Capture One 21 v14.3.0 添加了一个新的 Magic Brush 工具,可以在根据图像内容瞬间创建复杂的蒙版,以用于图层编辑。此过程是需要硬件加速的,与 CPU 相比,使用 GPU 时速度最多可提高 3 倍。
结语
NVIDIA 应用深度学习研究副总裁 Bryan Catanzaro 在 SIGGRAPH 演讲中表示:"众所周知,制作数字化虚拟人物是出了名的困难、乏味和昂贵的过程。但是,有了 AI 工具后,就有了一个简单的方法来创建数字化身的真实人物以及卡通人物,它可用于视频会议、讲故事、虚拟助理和许多其他应用程序。”
目前,Omniverse 仍处于公测阶段,它对 NVIDIA RTX 和 GeForce RTX GPU 用户免费开放。用户在安装完 NVIDIA Studio 驱动程序后,即可获得更新支持。
参考链接:
https://blogs.nvidia.com/blog/2021/08/10/siggraph-real-time-live-demo/
https://blogs.nvidia.com/blog/2021/08/10/omniverse-connector-extension-plugin-siggraph/
https://blogs.nvidia.com/blog/2021/08/10/what-is-the-metaverse/
https://www.nvidia.cn/omniverse/
https://www.vice.com/en/article/88nbpa/nvidia-reveals-its-ceo-was-computer-generated-in-keynote-speech
☞百度启动史上规模最大校园招聘;荣耀Magic3系列售价4599元起;阿里成立反职场陋习小组,无条件支持员工拒绝劝酒|极客头条☞程序员门槛再被“神器”降低:只要会英文,就能写代码!
☞听说,这 9 张脸是人脸识别的“万能钥匙”?