NVIDIA发力虚拟世界构建!推Omniverse免费版,实时3D设计协作神器来了

智东西(公众号:zhidxcom)
作者 | ZeR0
编辑 | 漠影

智东西1月5日报道,今日,在CES展会的特别演讲中,NVIDIA宣布其实时3D设计协作和仿真平台Omniverse正式发布,可供配备RTX GPU的NVIDIA GeForce Studio创作者使用。

借助Omniverse,创作者可以在笔记本电脑或工作站上高效创作3D素材和场景。自一年前推出公测版以来,Omniverse已被近10万名创作者下载,通过该平台的基础渲染、模拟仿真和AI技术加速了工作流程。

同时,面向物流领域的挑战,NVIDIA宣布打造Isaac AMR自主移动机器人平台,并宣布与无人驾驶科技公司图森未来深化战略合作伙伴关系,设计研发专为L4级无人驾驶卡车场景需求打造的下一代无人驾驶域控制器。

一、Omniverse正式发布!迈向高效3D设计协作

随着越来越多创作者开始协作构建3D虚拟世界内容和虚拟环境,NVIDIA构建了一个为创作者全面加速工具流的平台NVIDIA Studio。

NVIDIA发力虚拟世界构建!推Omniverse免费版,实时3D设计协作神器来了

NVIDIA Studio始于先进的GPU架构RTX,带来对于光线追踪、模拟仿真和AI的硬件加速以及NVIDIA高性能视频处理器。其软件包括专属驱动和数十个SDK,可为200多个行业优秀创意应用加速。

NVIDIA还为创作者提供NVIDIA开发的Studio应用,包括针对3D设计协作和仿真的NVIDIA Omniverse平台。

今天,NVIDIA宣布NVIDIA Omniverse平台已经结束Beta版,正式面向GeForce RTX Studio创作者发布。

NVIDIA发力虚拟世界构建!推Omniverse免费版,实时3D设计协作神器来了

Omniverse将NVIDIA 20多年来在图形、人工智能、模拟仿真和计算方面的开创性技术整合到一个平台中,正逐渐改变3D工作流。该平台将各个独立的3D设计世界连接到共享虚拟空间,其连接语言为USD(Universal scene Description),可以将它视作“3D世界的HTML”。

对于3D艺术家来说,跨多个应用的线性工作是件繁琐的任务,比如他需要使用3ds Max建模,用Substance Painter设计纹理,最后用虚幻引擎来合成场景。这个过程中存在多次导出和导入大型文件。

而借助面向个人用户的免费版Omniverse,GeForce RTX Studio创作者可以将喜爱的3D设计工具连接至单个场景,并同时在两个应用之间创作和编辑。

NVIDIA发力虚拟世界构建!推Omniverse免费版,实时3D设计协作神器来了

目前Omniverse已连接到3ds Max、Maya、Blender、虚幻引擎等顶尖应用,未来还会连接更多应用。今日,NVIDIA还宣布为Omniverse新增了一些功能:

(1)Nucleus Cloud:一种一键协作式3D大型场景协同创作模式,现处于抢先体验阶段,它简化了Omniverse的场景共享,一键即可让整个3D场景在线协作,而且无需传输大量数据集,平台会将艺术家所做的更改及时反映,就像处理云共享文档一样,只是它是3D的。

2)获主流3D市场和数字素材库支持:主流3D市场均已提供Omniverse兼容素材,免费素材集合现可在Omniverse Launcher中获取。

(3)Omniverse Machinima:让用户可使用数千种游戏素材和场景重新合成并创建自己的游戏动画,机甲战士(Mechwarrior5)和影子武士3(Shadow Warrior 3)的素材现已被添加到Machinima库中。

NVIDIA发力虚拟世界构建!推Omniverse免费版,实时3D设计协作神器来了

(4)Audio2Face:一款革命性的AI应用,只需一条音轨即可轻松制作3D人脸动画,支持BlendShape和直接导出到Epic Games的MetaHuman。

NVIDIA发力虚拟世界构建!推Omniverse免费版,实时3D设计协作神器来了

由NVIDIA Studio提供支持的AI为创作者提供了新的能力,以前需要团队作战的任务,现在一位艺术家可以独立完成。

更多应用开发者将AI应用于内容创作,比如Adobe Lightroom通过AI可快速创建对象的精细蒙版,Topaz Labs Video Enhance AI用AI放大视频画面,可保留比传统放大算法更多的细节,Adobe 3D Substance Sampler使用AI从照片中生成高质量的照片级3D材质,Notch使用NVIDIA Maxine姿态估计,创作者可以通过一个网络摄像头来完成全身的动作控制。

NVIDIA发力虚拟世界构建!推Omniverse免费版,实时3D设计协作神器来了

NVIDIA Studio还有一个重要应用Canvas,能快速地将简单笔触转化为照片级逼真的图片。

今天NVIDIA亦宣布了Canvas AI的重大更新,基于NVIDIA GauGAN2的研究成果,最新Canvas能够提升4倍分辨率和更多的图片细节元素。此外,它还添加了鲜花和灌木丛等新材质。全新Canvas应用现已可在NVIDIA官网免费下载。

NVIDIA发力虚拟世界构建!推Omniverse免费版,实时3D设计协作神器来了

二、打造Isaac AMR平台,助力9万亿美元物流业发展

AI也被应用于解决物流领域的挑战。NVIDIA宣布打造Isaac自主移动机器人(AMR)平台,助力优化运营效率并加速AMR的部署。

Isaac AMR是NVIDIA多年产品研究和开发的成果,由GPU加速AI技术和SDK组成,可在NVIDIA EGX服务器上使用,通过扩展了NVIDIA Isaac的地图绘制、现场分析和机器人优化等机器人应用构建和部署能力,提供完整的工业和人类机器人模拟构建和路线优化路径。

该平台使用NVIDIA Omniverse为将要部署AMR的设施创建数字孪生。NVIDIA Isaac Sim(建立在Omniverse的基础上)通过高清物理学和感知来模拟数字孪生中的机器人、人类和其他机器的行为。它还能够生成用于训练AI模型的合成数据。

根据Interact Analysis的预测,到2025年,自主移动机器人部署的地点将从2020年的9000个增加到5.3万个。同时,在工人短缺和疫情限制的情况下,供应链难以跟上日益增长的电子商务。

其中的障碍之一是快速、自主开发高精度机器人地图的能力。这些地图需要随着业务的扩大或变化而持续更新。而为了提高运营效率,最重要的是提高移动机器人对变化环境的态势感知并不断重新优化路线,同时通过模拟来开发新的技能组合。

NVIDIA对DeepMap的近期收购也为AMR行业带来了自动驾驶汽车地图绘制技术的进步。部署AMR的地点可以访问DeepMap平台的云端SDK,有助于将机器人大型设施地图绘制的时间从几周加快到几天,同时达到厘米级精度。

NVIDIA发力虚拟世界构建!推Omniverse免费版,实时3D设计协作神器来了▲正在运行的NVIDIA Isaac AMR。该图像是由点云生成的体元栅格,而不是来自摄像机的数据,因此非常稀疏,所以才有模糊不清的感觉。

NVIDIA Metropolis视频分析平台可访问部署在整个工厂车间或仓库楼层的摄像机和传感器。借助Metropolis,AMR能访问更多的工厂车间态势感知层,因此可以避开高度拥挤的区域、消除盲点并且增强对人员和其他AMR的可视性。此外,Metropolis的预训练模型可以事先根据特定地点需求进行自定义。

NVIDIA ReOpt AI软件库能够实时优化车辆路线规划和物流,企业可通过NVIDIA ReOpt模拟多种AMR互动,并可以在仓库等环境的数字孪生中快速、准确地进行这些互动。当情况发生变化时,还可以在将机器人部署生产之前实现这些互动,从而节省时间和成本。

Isaac AMR平台可在NVIDIA NGC软件中心上和NVIDIA Omniverse平台内使用,早期提供Metropolis和ReOpt,不久后开始提供DeepMap和更多的NVIDIA技术。

三、与图森未来深化战略合作,加速无人驾驶卡车商业化

过去十年,加上疫情的蔓延,网上购物愈发流行,致使对卡车运输和最后一公里交付需求的增加。据NVIDIA副总裁兼汽车事业部总经理Ali Kani分享,这一趋势将持续下去,预计2022年将配送1700亿个包裹,并在2027年增至2800亿个。

NVIDIA发力虚拟世界构建!推Omniverse免费版,实时3D设计协作神器来了

与此同时,卡车运输业一直面临司机严重短缺的问题,在接下来的几年,这一差距预计将进一步扩大,到2027年,全球司机短缺将增加至超过100万名。

应对卡车和物流行业的挑战,NVIDIA与全球无人驾驶科技公司图森未来宣布,双方将深化战略合作伙伴关系,设计研发专为L4级无人驾驶卡车场景需求打造的下一代无人驾驶域控制器。该产品将搭载NVIDIA最新一代自动驾驶汽车系统级芯片NVIDIA DRIVE Orin。

NVIDIA发力虚拟世界构建!推Omniverse免费版,实时3D设计协作神器来了

NVIDIA DRIVE Orin SoC能够实现254 TOPS,是无人驾驶车辆的中央计算机,这将为图森未来无人驾驶系统(ADS)提供强大的运算能力,并加速图森未来实现无人驾驶货运网络(AFN)的规模化运营。

作为无人驾驶系统的中央计算单元,无人驾驶域控制器(ADC)的算力需要达到数千TOPS,来实现感知、规划和决策等关键任务。此次双方深化战略合作,将加速图森自主研发高性能、车规级、可大规模应用的无人驾驶域控制器的进程,同时将增强图森对ADC产品研发的控制力。

结语:加速释放创作者生产力

今日,用于3D设计协作和仿真的NVIDIA Omniverse终于面向GeForce RTX和Studio创作者正式推出。该平台使得创作者无需为工具使用的繁琐流程焦头烂额,而能更加专注于创作本身,并加速工作流程,这对于3D内容协作和虚拟世界的构建将产生正向的激励。

随着Omniverse免费版得到更广范围的使用,NVIDIA多年沉淀的图形、AI、仿真、可扩展性计算等创新研究成果不仅有助于提高3D设计领域的生产力,也将间接助力建筑、游戏、工厂、商店等各行业各种场景的创新。