英特尔与微软再次走到一起 准备打造Wintel VR联盟

智东西(公众号:zhidxcom)
文|海中天

突然之间,英特尔开始对VR/AR/MR热情起来。在2016年IDF大会上,英特尔披露了VR计划的细节,包括Project Alloy VR头盔,RealSense 400 Series摄像头以及主流头盔显示器(Helmet-Mounted Displays,以下简单HMD)的开发规格,所有这一切都有微软的参与。英特尔悄悄提出一些有待证明的概念,随后,英特尔又发起一连串收购,增强深度学习技术,而深度学习与VR/AR/MR有着密切的关系。

这些东西只是原材料,英特尔要用它们制作一顿大餐。今天我们就来深入分析一下英特尔的战略,包括已知的,我们认为自己知道的,以及存在怀疑的。在整个计划中有两大重要部分,它们就是英特尔正在开发的两种头盔,微软在两款头盔中都扮演了重要角色。

Project Alloy VR头盔

有一点要先说清楚,在今年的IDF大会上,英特尔并没有真正演示Project Alloy。没错,在主题演讲中,英特尔的确在讲台上演示了头盔,但是它并没有安装最终版RealSense摄像头,我们也没有机会亲自试用Alloy。

不管处在何种阶段,Project Alloy与Rift、Vive和HoloLens都是不同的。一些企业为了宣传自己的技术发明了许多“术语”,我注意到,英特尔将Project Alloy称为“混合现实(MR)”头盔。Project Alloy与Rift、Vive很相似,但是前面安装了RealSense摄像头,可以实时扫描真实世界,在头盔内部重新生成图像。如此一来,你可以“看见”真实世界。事实上,英特尔的头盔是一个“贯穿”系统,微软HoloLens安装了清晰的镜头,可以透过它看到真实世界,英特尔Alloy却是复制真实世界,然后展现给你看。

Project Alloy是一台完全独立的设备。简单来讲,头盔内部安装了PC,没有外部线缆连接。我们还不清楚头盔的具体规格,只知道它运行的是Core i5或者i7 Skylake处理器,没有独立GPU。在英特尔的幻灯片中还提到了“传感协处理器”,照猜测,它只是视觉处理器的另一种说法。这点无法确认,但是照我们的猜测,这块芯片是Movidius制造的,或者未来会由Movidius制造。
英特尔与微软再次走到一起 准备打造Wintel VR联盟

微软开发了一款HPU,这是一款特殊视觉处理器,专门针对HoloLens。英特尔Alloy不太可能采用微软的HPU。最近英特尔收购了Movidius公司,它很可能会使用该公司提供的VPU。Movidius已经推出Myriad2 VPU,大家都认为它还会发布新的芯片,Alloy可能安装的就是这种芯片。另外,英特尔Alloy配备的是Windows 10操作系统,从本质上看它就是一台PC,披上了Windows Holographic外衣。这也是再明显不过的事,毕竟英特尔与微软在Project Alloy上密切合作。

在合作方面英特尔有点谨慎,它曾表示,2017年的主流PC都可以运行Windows Holographic。不论怎样,Project Alloy内置的PC肯定属于“主流”产品,它执行运算任务,凡是HoloLens能够提供的体验,Project Alloy都能提供。HoloLens也是一款独立设备,它安装的是性能稍差的Cherry Trail芯片。
英特尔与微软再次走到一起 准备打造Wintel VR联盟

要理解Project Alloy与其它头盔的区别,可以参阅下述资料:

——Rift/Vive/OSVR:VR头盔,需要独立PC系统,有线,闭塞体验,非穿透式系统。

——索尼PSVR:VR头盔,需要PS4支持,有线,闭塞体验,非穿透式系统。

——微软HoloLens:AR/MR头盔,独立设备,无线,非闭塞体验,穿透式系统。

——英特尔Project Alloy:VR/AR/MR头盔,独立设备,无线,闭塞体验,穿透式系统。

——移动VR(三星Gear VR和DayDream):VR头盔,需要独立智能手机支持,无线,闭塞体验,非穿透式体验。
英特尔与微软再次走到一起 准备打造Wintel VR联盟

有一个问题让人困惑:如果Project Alloy是完全闭塞的头盔,如何使用Holograhic技术?为什么使用该技术?所谓的全息,就是将全息图像放置在真实世界中(相当于混合现实)。另外,HoloLens的显示屏技术只是用来投射图像的,不干其它事,看起来这点与全封闭头盔存在矛盾——比如Project Alloy。

另外,如果全息图对GPU的要求不高,将它放进头盔显示屏应该不是什么难事,如此一来头盔就可以形成一片虚拟空间,将全息图放进去。英特尔与微软都明确表示,通过双方的合作,在给定的XR(指VR、AR、MR等多种技术)环境中既可以支持2D应用,也可以支持3D应用,包括Windows中已有的一些应用。

正如我所指出的,英特尔的头盔虽然封闭,但是此封闭并非真正的封闭。通过RealSense摄像头,系统可以穿透真实世界,这点正是Project Alloy最有趣的地方。
英特尔与微软再次走到一起 准备打造Wintel VR联盟

RealSense 400 Series和深度学习

我们现在已经稍稍了解Project Alloy的内部细节,但是关于最新的RealSense摄像头我们还不熟悉,也就是400 Series摄像头。英特尔是否已经最终确定?我表示怀疑。在IDF展台上,以及本周的RealSense会议上,英特尔的确展示了RealSense摄像头,但是关于新工具包的具体规格我们一无所知。

尽管如此,RealSense摄像头的功能相当强大。在IDF展示过程中,英特尔视知觉运算集团总经理、副总裁Achin Bhowmik曾表示,RealSense的目标就是模拟人类的感知系统,既有视力系统也有前庭错觉系统。

这是一个伟大的目标,英特尔正在朝目标迈进。最新的RealSense 400 Series让英特尔离目标更近一步。根据Achin Bhowmik的介绍,新摄像头比前代产品更加精准,既可以在室内使用,也可以在室外使用,它的体积更小,重量更轻,设计更富弹性,可以用在不同的产品中。

英特尔与微软再次走到一起 准备打造Wintel VR联盟
将RealSense 400 Series摄像头与Alloy搭配,就可以通过VPU提供6DoF(六自由度)手部和身体虚拟化/追踪功能,还可以用3D形式扫描对象和空间,例如,你可以与对象互动,不会撞到它。HoloLens的运行原理与英特尔不同,在使用之前,HoloLens先要扫描、了解房间,然后才能将对象放在房间内,RealSense承诺可以实时(或者接近实时)呈现运动,追踪运动,覆盖范围达到几个房间。另外,它还可以让多人进入同一片虚拟空间,让个体与全息图互动。

英特尔已经围绕该功能开发一段时间了。在一年前的IDF上,英特尔用OSVR头盔展示技术,当时头盔安装的是Leap Motion摄像头。后来英特尔远离了这两家企业,用RealSense摄像头替代Leap Motion摄像头,用自己的头盔替代OSVR头盔。在今年年初的MWC上,英特尔用Project Tango来展示手部、对象虚拟化技术。请注意,不是“追踪”,而是“虚拟化”。几周前,我们看到英特尔的深度摄像头安装在HTC Vive上。紧接着,英特尔展示了Project Alloy。RealSense摄像头虽然很强大,但是真正值得重视的却是深度学习。

深度学习是AI的组成部分,而AI正是英特尔密切关注的领域。如何将Project Alloy、RealSense 400系列摄像头与AI联系起来?答案其实简单得多。简单来讲,深度学习有两个部分:一是训练,二是推断。

训练部分需要庞大的资源支持,它就是大数据,与超级计算有关。至于推断部分,用低性能计算机就可以完成。例如,Movidius开发了Fathom神经运算棒,它可以在一根棒子上提供深度学习功能。
英特尔与微软再次走到一起 准备打造Wintel VR联盟

像Fathom这样的设备(在小小的设备内植入芯片)可以加载神经网络,需要的空间只有几十兆。这些神经网络已经训练过,当设备“看到”对象、人、动物或者空间,就可以自动解释,它不单知道什么是狗,还能知道这条狗是不是金毛猎犬。

装载神经网络的设备还有一个优点:运行时不必依赖云连接,它们已经接受过训练。在“观察”世界的过程中,神经网络还可以不断学习,它会将数据送回到云端,让训练可以更好地进行。数据越多,训练越好,网络越聪明,到时我们就可以将神经网络下载到设备,让整个系统一直循环下去。

英特尔既收购了Movidius,它生产视觉芯片,还收购了深度学习、AI公司Nervana Systems,也就是说英特尔同时拥有了两大组件。

回到Project Alloy头盔,它可以将神经网络与RealSense 400 Series搭配使用,其潜力不可估量。
英特尔与微软再次走到一起 准备打造Wintel VR联盟

无名的主流XR HMD

事实上,Project Alloy并不是英特尔正在开发的唯一一款头盔。英特尔不愿意过多谈论,但是根据我们与英特尔的对话,从中可以找到一些支离破碎的线索,将它们拼凑在一起。从本质上讲,英特尔要征服的不只是头盔市场。

Project Alloy是一款独立的头盔,因为实时绘图和追踪而具备“穿透”功能。英特尔还在开发另一款头盔,针对的是主流市场,它采用全封闭设计,可以与PC、Windows兼容。从微软的口吻、英特尔代表透露的信息来看,英特尔可能会推出类似HoloLens这样的设备。关于第二款头盔,英特尔甚至没有取名,没有项目代号,它只是一个创意,一种战略,一个概念。在这款未命名的产品上,英特尔与微软密切合作。

从表面上看,这款头盔更加接近Rift、Vive,而不是Project Alloy,它会采用VR封闭设计,作为PC外设使用,它会成为一款主流设备。在XR市场英特尔看到了一个巨大的“黑洞”,也就是移动设备(比如Gear VR)与高端头盔(Rift、Vive)留下的空白地带。
英特尔与微软再次走到一起 准备打造Wintel VR联盟

这款设备会带来怎样的体验?英特尔VR卓越中心主管Kim Pallister表示:“用户需要更便宜的解决方案,尽管价格更低,并不意味着配置糟糕,因为配置太差体验也会很差。必须在某种程度上改变管道。”

说来容易做来难,英特尔会利用自己的特长来解决此问题,它的特长就是“处理器”。

虽然现在还没有具体的消息,但是据我们所知,英特尔准备从CPU上剔除一些任务,只为解决XR问题。在现有的PC平台上,英特尔工程师已经与一些游戏开发者合作,开发相应的处理器,它可以缓解GPU在VR上的压力。通过实验,英特尔也在为头盔寻找办法,提供相似的“援助”。

“除了在头盔上安装一些传感器,做一些传感器整合式工作,还有一种理论我们正在进行概念证明,让头盔自己处理一些任务,比如桶形畸变(barrel distortion)、时间扭曲(time warp)、色误差纠正,这样做可能会有更大的优势。” Kim Pallister表示,“采用这种方法,执行任务时可以更加接近传感器,获得传感器数据、更新时间扭曲会更快,减轻分辨率、帧速率的震动。”

“你可以快速更新头盔和时间扭曲,用不同的帧速率模拟运行。”Kim Pallister说。他对目前英特尔取得的进展相当满意,相信公司可以从低性能硬件上榨取更好的VR体验。

在英特尔前进的道路上存在障碍,正因如此,它需要微软的帮助。
英特尔与微软再次走到一起 准备打造Wintel VR联盟

英特尔与微软

“与微软的合作分两大部分。”Pallister表示,“合作有一个任务,那就是为PC、头盔设定一套规格,它们相互协调,为Windows Holographic Windows Shell提供一套主流解决方案,我们谨慎使用‘主流解决方案’这一说法,我们还会提供一套API,让大量PC可以支持VR。”

换言之,英特尔看中的是单一、主流VR头盔。英特尔尝试引入一个全新的生态系统,它要与微软合作,让软件OS与硬件紧密结合。英特尔还会向其它公司提供硬件,其它公司会制造终端用户产品。

也许你已经发现,在CPU市场上英特尔正是这样做的。在市场上你买不到英特尔PC,同样的,你也不能买到英特尔VR头盔。既然如此,为什么英特尔还要开发头盔?

英特尔会不会进入头盔市场?Pallister很快否定了这一说法。“我们开发原型产品,进行概念证明,做众多的事情,但是我们并不需要进入市场。”

Pallister表示,“就目前的情况来看,我们更希望能促进产业的发展……而不是进入任何垂直业务。”他还说,原型产品既是为英特尔工程师开发的,还为产业合作伙伴提供丰富的知识。英特尔工程师可以知道Core处理器、图形芯片在系统层面的要求。Pallister补充说:“为什么与微软开发两套设备(一套是Alloy,一套是主流VR头盔)?因为VR是一款高性能产品,对延迟很敏感,我们不能说:‘嗨,我做完了这一层,剩下的交给你。’你必须提供更严密的解决方案,然后由此开始发展下去。”

我们可以将Daydream VR平台与英特尔平台对比,谷歌同样没有兴趣制造头盔。Daydream只是一个平台,可以让OEM企业制造自己的VR设备。

听起来这就是英特尔对XR的看法,Pallister表示认同,他随后轻轻一笑。Pallister说:“用手机硬件生态系统替代PC生态系统,用Android和DayDream替代Windows和Windows Holographic。”两款产品的目标是一致的:让产品大众化、商品化,让VR成为一种便宜的高质量体验,可以轻易获得。

这只是第一步,只是制造了产品。从科技产业多年的发展经验来看,内容也是相当重要的。关于这个问题Pallister并不担心,如果“Wintel”联盟按预期发展,内容早就已经存在。Pallister解释称:“和微软HoloLens相似,你可以将Win32 APP和内容引进到VR领域,通过某种方式与它们互动。开发者为Windows Holographic开发了内容(面向HoloLens),这些内容也可以引进来,包括封闭头盔Windows Holographic Shell,这是另一个内容源,我们可以从中获得内容。”

今年12月,第一套针对头盔的英特尔、微软规范就会确定。

总体规划

谈了这么多,XR“理想国”到底是怎样的?虽然知道这么多,但是英特尔的XR战略仍然是朦胧的。

英特尔不会自己制造销售Alloy头盔,它正在打造一个Alloy平台,其它企业以此为基础开发可以销售的产品。英特尔也不会开发、销售主流VR头盔,它的性能比Rift、Vive低。英特尔会开发技术,还可能会开发原型产品,形成知识产权,微软及其它企业会以此为基础开发正式销售的产品。

英特尔与微软再次走到一起 准备打造Wintel VR联盟