何展:英伟达在元宇宙方面的最新探索丨2022 元宇宙云峰会
邱祥宇2022 年 4 月 20 日,巴比特主办的万物起源?2022 元宇宙云峰会(METAVERSE CONFERENCE 2022)正式开幕。英伟达中国 Omniverse 业务负责人何展介绍了英伟达在元宇宙方面的最新探索。
以下为演讲内容,巴比特略有删减:
大家好,我是来自英伟达的何展,今天给大家分享两部分的内容,第一部分是我们英伟达最新的技术和动态分享,第二部分是我们如何创建体验物理精确的数字世界。
第一部分:英伟达最新技术动态分享
过去的十年,英伟达为行业贡献了 100 万倍的算力的提升。
比如,我们创造的数字孪生地球,它的技术背后有非常多的算力的需求。数字孪生地球可以精确地去预判造成自然灾害的大气河的精确路线,帮助我们精准地预测自然灾害。这个例子反映了在过去的十年里,英伟达在计算速度方面的提升,不是 10 年 100 倍的摩尔定律,而是 100 万倍。我们正在开始为下一个 100 万倍的计算速度提升。
第二个给大家分享的是 Transformer 模型,它来自于 NLP。
Transformer 可以实现自监督学习,也就是说它可以解除人工标记需求。它是 2017 年提出的,类似于 BERT、GPT 都是基于 Transformer 模型构造的。
第二个动态,是我们正在进入自监督人工智能学习时代。这里有一句话想跟大家分享:人工智能从根本上改变了软件可以制作什么,以及如何制造软件。
第三个动态,前些天我们发布了我们最新的 Hopper 架构。这里我们告诉大家,各个公司正在处理和完善他们的数据,制造人工智能软件成为智能制造商,他们的数据中心正在变成人工智能工厂。
第四个动态,我们的机器人系统。我们大家都知道第一波人工智能是学习感知和推理,比如识别图像、理解语音、推荐视频或购买物品。人工智能的下一波浪潮是机器人技术,未来数字机器人、数字化身以及物理机器人将会感知、规划和行动,就像当年的 TENSOREFLOW 和 PYTORCH 等人工智能框架已经成为人工智能软件的组成部分一样。
第五个动态,DIGITAL TWINS,数字孪生实际上就是用实时存在的虚拟物来表征物理实体,数字孪生是一个与物理世界相连的虚拟世界。OMNIVERSE 是创建和模拟基于物理学的物理准确的虚拟世界的平台,会帮助到大家实现数字孪生。
OMNIVERSE 具备物理精确的特点,遵守物理学定律,并且可以在非常宏大的维度上进行。同时我们可以共享,能将设计师、审核者、AI 以及机器人连接起来。
第二部分:如何创建和体验物理准确的数字世界
OMNIVERSE 是一个创建和连接虚拟数字世界的技术平台。
大家可以看到这一页的图,非常经典地展示了它实现的过程。左侧就是我们不同的设计师使用不同的软件,在 OMNIVERSE 平台上进行设计写作,通过 USD 技术,可以和中间的 OMNIVERSE 最核心的连接器 Nucleus 进行交互和连接。
我们创建的 3 D 的数字世界里,应用了英伟达过去 20 多年里在 AI、图形学、物理学模拟仿真等方向的技术,它可以帮助到大家实现、创建数字 3 D 世界。
右侧,大家可以看到如果我们做好的数字世界,可以和现实世界的手机、iPad、工作站,通过 RTX GPU 的流式传输技术以及 OMNIVERSE 提供的 VR/AR 等微服务,进行交互和连接。
和大家分享一下 OMNIVERSE 创建数字化世界的三个应用方向,我们分为 AI 数字人、数字物品、数字孪生。
这里每一张照片以及里面做的数字内容,全部都是由 OMNIVERSE 完成,并能够通过 OMNIVERSE 平台进行完全的数字化。
比如 AI 的超写实数字人,拉面管理,同时还有工厂里的数字孪生/环境。
比如拉面管理,我么可以做到非常高逼真的拉面。大家看到每一个物品、每一个器具都有它不同的材质,同时我们看到模拟的水的沸腾状态、热气的蒸发状态,甚至一些我们的物体里面的浆汁等这样的模拟。
我们创造的数字世界,是基于物理定律,同时保证物理准确的数字世界,所以这就是 OMNIVERSE 的价值。
分享了数字世界创建的例子之后,我想分享给大家我们更有趣的一个数字孪生创建的整个过程,这个过程可能会和我们未来的生活息息相关。
比如我们的无人驾驶和自动驾驶的体验,可以看到车载的 AI 智慧数字形象,可以帮助到我们未来的乘客进行车载上的互动、自动驾驶以及和生活息息相关的体验。我们让技术融入自动驾驶,让我们非常有科技感的黑科技进入到这样的设计中,我们可以实现未来非常好的美好生活的期待。
总结一下我今天和大家分享的五大动态,我们可以看到百万的加速、我们 TENSOREFLOW 模型的重要性,我们的客户正在将数据中心打造成属于他们各自的 AI 工厂,未来我们可以有自主移动的机器人系统,同时我们还有 DIGITAL TWINS 这样的技术可以和 AI 结合。希望我的这些分享可以让大家看到科技赋予不同行业应用的各类的趋势。
最后也和大家分享英伟达在不同的技术层级上的服务,这里展示了 4 个 layer。
第一层是硬件层,可以提供更多的硬件的解决方案,为算力需求提供支持;第二层是系统和软件层,大家可以看到我们有 RTX、CUDA、PHYSX 物理模拟等等系统层;同时,我们还有其他的像 DOCA、UCF 等一系列的系统和软件工具层工具给大家支撑更好的应用;上面的平台层,有 for 超级计算的 HPC,for AI 的,我们还有 OMNIVERSE 这样的平台可以帮助到大家服务在不同的应用;最上面的应用层和框架层,有数字孪生的 MODULUS,还有服务医疗的 CLARA,还有和语音相关的 RIVA 平台,会议相关系统的 MAXINE,推荐系统 MERLIN,数字智慧虚拟形象制作平台 AVATAR,自动驾驶的 DRIVE 平台以及业机器人模拟仿真的 ISAAC,还有城市感知的 METROPOLIS 等等。这些应用和框架都可以帮助到大家在不同的行业实现不同的应用落地的可能,所以我希望我们的用户和我们一起走向更好的落地的新技术赋能的应用中。
最后我希望大家和我们一起创建模拟及体验未来美好的数字化世界。