图像AI大佬都在这争风炫技:表情和动作捕捉帅出新高度

智东西(公众号:zhidxcom)
文 | 心缘

智东西8月17日消息,SIGGRAPH图形图像学和交互技术大会今日将落下帷幕。SIGGRAPH已经举办了45届,在全球图形图像学领域的地位举足轻重。

SIGGRAPH大会不仅是一年一度的聚集了世界上学术界、艺术界和产业界的计算机图形领域前沿技术和产品的顶级盛会,而且是图形图像技术行业的风向标。今年的SIGGRAPH可谓是巨头云集,各家学术机构和影视游戏制作发行商、VR、AR、硬件设计商都在此次大会上拿出了“看家本领”。

图像AI大佬都在这争风炫技:表情和动作捕捉帅出新高度

智东西作为少数受邀来到现场的中国媒体,通过展会上的交流,发现AI技术已经全面渗透到图形图像领域的交领域。从具体应用来看,面部捕捉和动作捕捉相关技术基本可以算作是最火热的技术,几乎十个中有八个展位都在展示这类技术。

一、面部表情捕捉技术

面部捕捉技术通过使用特定设备捕捉人的面部表情上的捕捉点,然后将捕捉数据经软件处理后,将数据匹配到虚拟脸部,使得动画人物或影视人物的表情模拟真实的人物表情。iPhone X的Animoji动画表情就是基于面部表情捕捉技术的原理。

其中,一个名为SEER的模拟表情机器人吸引到许多人的目光,这个机器人由日本的Takayuki Todo发明,其外形模拟真人的头部和颈部,利用实时面部识别和捕捉技术,在和人类眼神对视后,扫描人类脸上的表情并收集面部数据,然后模仿人的表情。尽管在演示过程中,SEER除了一些小bug,不过它最终还是很好的做出了相应的表情。

图像AI大佬都在这争风炫技:表情和动作捕捉帅出新高度

动画专业开发商 Ikinema也展示了这项面部表情捕捉技术,通过iPhoneX可以捕获全部的面部表情数据点,将其传到Unreal Engine引擎中,使得屏幕中的动画人物可以仿真人的实时表情。

图像AI大佬都在这争风炫技:表情和动作捕捉帅出新高度

二、动作捕捉技术

动作捕捉技术在本次展会也很火热。最早可以追溯到1990年由施瓦辛格主演的电影《全面回忆》,经过28年的进化,动作捕捉技术的进步为电影创作者提供了更大的可操作空间,推动了电影在内容和形式上的变革,影响《指环王》、《阿凡达》、《猩球崛起》等经典影片的诞生。随后该技术延展到VR领域,因而催生了大批的VR初创公司。

在VR火热之时,中国也兴起了一批VR生产商,然而VR市场没有打开。不过在国外,VR依然是兴盛的话题,此次SIGGRAPH大会上就涌现了许多动作捕捉技术的参展商。

图像AI大佬都在这争风炫技:表情和动作捕捉帅出新高度

动作捕捉公司Vicon是世界上最大的精密运动捕捉和跟踪系统供应商,曾获得奥斯卡奖。它为CG动画,物体跟踪,虚拟和增强现实,工程,广播,生物力学,运动和临床科学领域的客户提供服务。

在此次大会上,Vicon推出了VR跟踪系统Origin。这是个基于位置的VR系统,包含紧凑轻便的跟踪设备和高度自动化、能实现自我修复的软件平台,具备容易上手的高精度动作捕捉能力。据工作人员介绍,Origin系统配置了游戏引擎插件,动画师穿上捕捉装备,进入捕捉空间,他们做的一切动作就会直接快速传输到游戏引擎。

在本次展会上,我们还看见许多国内企业的身影。深圳创企瑞立视是一家自主研发光学动作捕捉解决方案提供商,着力于打造在VR需求下的大空间多人互动同时捕捉功能。在去年瑞立视展示的捕捉设备还比较复杂,而在此次展会上展示的最新动作捕捉技术所使用的设备已经做了大量简化,远远看去,表演者仿佛只是穿了一件带光点装饰的衣服。表演者在前方舞蹈,屏幕内的虚拟小人会在极短的时间内随之做出相同动作,满足影视级高精度人体动作数据采集需求。瑞立视CEO许秋子表示,和欧洲品品牌相比,他们的光学动作捕捉有更好的性价比。

图像AI大佬都在这争风炫技:表情和动作捕捉帅出新高度

三、VR体验再升级

由于VR与图形图像息息相关,VR前沿技术也是本次大会的重要组成部分。VR体验区域也可谓是巨头云集,谷歌、HTC Vive、微软等VR老玩家纷纷参展。

其中,光场技术备受关注。光场技术是一套先进的捕捉、拼接和渲染算法,能引入运动视差概念以及逼真的纹理和照明,用以捕捉从不同角度和表面反射的光线,使VR图像有更高的质量。

在此次大会上,谷歌推出了一种新的光场(Light Fields)体验,通过光场信息捕捉生成逼真的3D场景,提升VR体验的真实感。只要用户移动一下位置,物体的角度和光线都会发出变化。HTC Vive、Oculus Rift和Windows Mixed Reality头显均可应用这一光场体验。工作人员介绍道,研究团队使用一种渲染算法,通过基于云的光场处理管道,可以实时混合几千张高质量图像,从而提供身临其境的光场体验。光线体验的不断升级对未来VR产业有很好的帮助。

图像AI大佬都在这争风炫技:表情和动作捕捉帅出新高度

与此同时,一向低调的宏碁旗下VR技术公司StarVR也在此次大会上推出新的头显设备——一代搭载眼动追踪技术的VR头显设备StarVR One。其工作人员表示,这款头显设备几乎覆盖了完整人眼视角,这在业界是史无前例的,设备内继承了Tobbi的眼球追踪技术,能够自动进行瞳距调节。

图像AI大佬都在这争风炫技:表情和动作捕捉帅出新高度

在现场体验完VR设备后,智东西不禁感慨,如果将来此类VR场景成熟和落地,那将意味着人们就像电影《头号玩家》那样,上学、办公、出行都可以在虚拟世界完成,再也不用饱受出行堵车的困扰,而且你可能永远都不知道你的同学、同事的真实样貌。

四、云计算助力高效图像渲染

在SIGGRAPH展区的入口处,我们还可以看到亚马逊AWS ThinkBox和微软Azure的展区,这两个展区都是旨在展示云服务对图像渲染效率和性能的提升。

这是AWS第一次在SIGGRAPH参展,AWS Thinkbox展示和合作伙伴的解决方案。其展示内容主要在游戏方面,旨在帮助完善客户的渲染能力,包括扩展在云上的渲染、增强Amazon EC2 Spot功能等、VFX虚拟工作站、快速创建VR和3D内容的Amazon Sumerian开发平台。

图像AI大佬都在这争风炫技:表情和动作捕捉帅出新高度

微软的Azure云计算平台也展示其在图像渲染方面的努力。通过使用Azure数据盒将数据迁移到云端,经过Azure高性能计算,用户可获得更快更好的图像渲染性能。微软也联合其合作伙伴进行一些具体的演示,展示内容包括Avid的MediaCentral Platform、Nimble Collective的动画平台以及Teradici的远程解决方案如何数据管理、提高效率降低成本。

五、英伟达和AMD发布新显卡

最后,由于此次大会是图形图像和交互技术大会,图形专业卡自然是兵家必争之地。作为显卡领域的最优秀的生产商,英伟达和AMD将战火继续延续,均选择在此次大会上发布全新图形专业卡。

英伟达老黄在其主题演讲中推出了全球首款光线追踪显卡——搭载新一代图灵(Turing)架构的Quadro RTX专业卡(英伟达推史上最强GPU!现场渲染复仇者联盟3,花10年打造)。

在展会现场,英伟达对RTX在电影、建筑、游戏等不同领域的应用进行了展示。英伟达的合作伙伴Adobe CC、维塔数码、黑魔法(Black Magic)、Epic Games、Autodesk、西门子、惠普、戴尔、联想等公司也进行了基于RTX的图像渲染演示。

图像AI大佬都在这争风炫技:表情和动作捕捉帅出新高度

AMD也发布了全新AMD Radeon Pro WX 8200专业卡,采用14nm制程,能为图像渲染、实施可视化和VR提供更出色的性能,并配置有专用AMD安全处理器,用以保护敏感数据、可信应用程序的处理和存储以及完整的关键资源。

图像AI大佬都在这争风炫技:表情和动作捕捉帅出新高度

此外,AMD 还为其基于物理的高性能渲染引擎Radeon ProRender推出新的插件,其PTC Creo和Pixar USD视口能使设计人员和工程师轻松快速地为产品进行跟踪渲染。

图像AI大佬都在这争风炫技:表情和动作捕捉帅出新高度

结语:图形图像和VR市场前景可期

此次SIGGRAPH展会是今年图形图像和交互技术最重要的盛会,经过几天在现场的“浸泡”,智东西看到AI技术如何深刻地影响到图形图像领域,包括面部识别、动作识别、全域视角和实时图像渲染等。与此同时,图形图像界的相关技术也在迅速发展。

在2014-2015年,VR曾燃起一把大火,大批巨头和VR创企涌入VR市场,遗憾的是,当时的市场热潮并没有维持很久就开始迈入寒冬。不过,在本届SIGGRAPH上,我们看到图形图像与VR领域很多前沿技术和产品,这说明面对市场的涨势趋缓,很多技术公司仍在这一领域默默耕耘。

图像AI大佬都在这争风炫技:表情和动作捕捉帅出新高度