黄仁勋骗过世界的14秒，英伟达押宝未来的元宇宙

资讯 3年前

807

物联网智库整理发布转载请注明来源和出处导读8月12日晚间,英伟达针对“虚拟黄仁勋召开发布会,‘骗过’观众”的说法做出了澄清。该公司在一份更新的博客文章中表示:“当然,主题演讲离不开一个有血有肉的人站在舞台中央

物联网智库整理发布

转载请注明来源和出处

导读

8月12日晚间,英伟达针对“虚拟黄仁勋召开发布会,‘骗过’观众”的说法做出了澄清。该公司在一份更新的博客文章中表示:“当然,主题演讲离不开一个有血有肉的人站在舞台中央,全部1小时48分钟的发布会上,虚拟黄仁勋只出现了14秒(从1:02:41到1:02:55),其他时间都是黄仁勋本人召开的发布会。”

在近期召开的计算机图形顶级会议ACM SIGGRAPH 2021 上,英伟达介绍了自研的3D仿真模拟和协作平台Omniverse,并放出了“合成版老黄”的打造过程。有媒体据此报道称——万万没想到,在3个月前的GTC大会中,厨房橱柜、老黄经典皮衣、不时摇动双手的老黄本人……竟然都是假的!

老黄骗了全世界!诸如此类的消息在极短的时间内引发了科技圈的轰动,很多人甚至在 Youtube、哔哩哔哩等平台反复回放今年4月GTC老黄的Keynote视频,企图分辨“真假黄仁勋”。

然而,就在全网热议不断的档口,英伟达在其官方博客中确认,4月发布会中,黄仁勋的Omniverse数字人仅出现过一次,就在发布会约62分钟处,持续时间约14秒。根据这个信息,发布会中其他消失的老黄、厨房等片段,应该是其他CG电脑动画特效,不属于数字人技术。

尽管并非完全“造假”,但老黄无疑又火了一把。不仅如此,英伟达旗下的全球首个为元宇宙建立提供基础的模拟和协作平台Omniverse也再次将元宇宙这一概念推到风口浪尖。

真假黄仁勋?

即使只有14秒,虚拟黄仁勋的难度也不可谓不高。

要想将老黄完美数字化,首先需要大量样本,做到细节丰富。为了达到这一目的,首先就需要数以千计的各种角度的照片,并通过3D扫描获取他身体的每一个特征——包括脸上的每一道褶子。

为了效果更为逼真,扫描过程还将对“标志性”皮衣单独拍照,并在3D建模过程中做非常精细的调整,从而方便后期编辑。在文字转换为音频的过程中,通过Audio2Face即能实现语音内容自动生成,只需导入纯音频即可实现模型自动讲话。

不过,仅仅只靠模型依然太假。这时候就要利用Face-Vid2Vid。通过一张老黄的照片,即可将其自动匹配合成至视频当中,达到“以假乱真”。

OK,脸的问题解决了,可是身体怎么办呢?这就需要专业的动作捕捉演员来代劳,毕竟老黄身为CEO,时间可是非常宝贵。

为了尽可能的采集老黄的身体动作,英伟达总共录制了8小时的视频,期间这位演员需要一边阅读以前的Keynote,一边模仿老黄的动作和表情。

在这些前期工作做完后,渲染仍然是接下来的重头戏,这就离不开英伟达自研的Omniverse RTX渲染器,真正意义上做到实时光线追踪、移动视角,即使调整光线也能立刻完成更新。当然,这一技术背后离不开英伟达显卡的支持,也需要GPU+云计算才能搞定。

据介绍,这场虚拟发布会总共有34个3D美术师和15个软件研究人员参与,英伟达为此做出了21版数字老黄,最终选择了其中最为相似的一个。而英伟达之所以大费周折的做出这样一位数字老黄,正是为了推广背后用到的3D仿真模拟和协作平台Omniverse。

Omniverse:英伟达“元宇宙”的关键

基于对计算机图形学(CG)技术的持续投入与探索,英伟达自主研发的CG技术已经太多太多。于是乎,英伟达选择将其整合成为一个平台——Omniverse。

具体看来,Omniverse可提供包括从CG到优化技术、从工具包到引擎等各种技术,涵盖从渲染、材质,到光影、照明(光追、路径追踪等)各种应用,其所承载的CG技术的体量可能远远不止本次发布会中用于“造假”。

据介绍,Omniverse已经被广泛应用于缺损像素修补、插帧,可对老照片和古早视频进行修复。不仅如此,Omniverse还能基于GAN生成超分辨率图像、直接把2D照片渲染成3D场景……

在丰富多彩的功能之外,“永远实时在线”是Omniverse的核心亮点,其是指能让设计师、艺术家和审核人员在任何地方通过领先的软件应用在同一个共享的虚拟世界进行实时合作,跨平台实现物理渲染、模拟和仿真。

正是基于平台具备的强大功能,不只是人像修复与仿真,Omniverse已经能够在工厂数字化中发挥重要作用。

例如,通过识别车辆、自主机器、机器人等,Omniverse能够帮助工厂进行设计,其还能在虚拟环境中加入机器人和AI,并在训练完成后直接部署在真实环境中。事实上,这些技术已经在宝马的数字工厂中得到落地,将工厂效率提升了30%。

不止是宝马工厂,Omniverse平台还能够应用于机器人仿真、自驾车仿真在内的一系列技术研发。例如,自动驾驶和工厂的AI检测可能存在行人误判,一旦AI将街头公告张贴的人脸图片识别为行人,就可能导致事故的发生。而如果能够将逼真的数字人与渲染等技术相结合,就能在仿真环境训练下模拟行人,让AI学会判断图片和真人的区别。

如今,借助海量技术工具,Omniverse已经得到广泛支持。自去年12月发布公测版以来,已经有超过5万名个人创作者下载了Omniverse。

为了提供更好的技术支持,Omniverse还计划将通过与Blender和Adobe集成来实现大规模扩展,并将向数百万新用户开放。据悉,Blender是全球领先的开源3D动画工具,现在该工具将加入通用场景描述(USD)支持,使艺术家能够访问Omniverse制作流程。同时,Adobe正与英伟达合作开发为Omniverse提供Substance Material支持的Substance 3D插件,为用户提供全新素材编辑功能。

而在不断加码的背后,英伟达之所以对Omniverse投入如此巨大的心血,其实还有一层更深的远望——元宇宙。

事实上,随着元宇宙概念逐步成为焦点,英伟达是少有的大力投入的企业之一。英伟达Omniverse开发平台副总裁Richard Kerris曾表示:“英伟达Omniverse通过实现元宇宙这一愿景来连接各个世界。”由此可见,Omniverse平台是英伟达实现元宇宙的基础技术和平台产品。

那么,元宇宙究竟是什么?

如何理解元宇宙?

根据各种研究机构、分析师和投资人对它的解读,元宇宙不仅是基于物理实体在虚拟世界中1:1重建的一个“数字孪生体”,还包括由我们的想象力创造的各种虚拟事物。

元宇宙拥有完整的经济逻辑,数据、物体、内容以及IP都可以在元宇宙中存在,而且元宇宙不仅包含虚拟和现实的万事万物,还包含他们之间的各种关系和连接。任何个人和企业都可以参与建设元宇宙,使之不断完善和更加繁荣。