体感交互222222222222

知道中枪什么感觉吗?这家公司竟要承包你的所有知觉

晓寒头条 智能穿戴 虚拟现实2016/07/20

智东西(公众号:zhidxcom) 文 | 晓寒 “金城武?”,这是广州数娱科技CEO […]

智东西(公众号:zhidxcom)
文 | 晓寒

“金城武?”,这是广州数娱科技CEO林云帆走进智东西编辑部之后我眼前蹦出来的第一个词,瘦高个与清秀的面庞再加上随时出现的微笑,你会下意识的觉得这是一个混迹影视圈的人。

广州数娱科技是一家专注于研发交互技术的科技公司,现阶段最主要的产品是其名为“INAVR-VEST” 的力反馈背心,是一款给VR游戏体验增加身体反馈的创新硬件产品,也是英特尔硬享公社重点推荐的创业项目之一。林云帆此行从广州来到北京,让我们有机会亲自体验并与其探讨这款产品的背后故事。

由于此前他也在关注智东西的文章,林云帆此次北京之行特意联系到了我们,亲自带着设备来到智东西编辑部给北京媒体圈几位朋友做了“INAVR-VEST” 力反馈背心的演示。本期智东西硬创先锋就带您走近广州数娱科技的CEO林云帆,一探这位科技圈“金城武”的创业经历与发展脉络。

林云帆22222222

70后连续创业:从广告影视转战科技交互

2000年从广州大学应用电子专业毕业后,已经拿到了广州某大型国企IT部门与国际巨头电脑公司Offer的林云帆正悠闲地喝着咖啡看着报纸,无意间看了一家录音公司的招聘启事,觉得挺好玩就跑去应聘了一把,结果被录取了,于是就这样机缘巧合地进入到了广告影视行业。

1978年出生的他,在广告影视行业摸爬滚打多年之后,自己也拥有了一家音频制作公司与一家影视制作公司。“在2003-2010年间,你打开电视,每十条广告中就有一条是我们录制的。”关于自己在广告影视圈的成绩,林云帆还是很有底气的。

“一眨眼十多年过去了,突然觉得没有了工作的激情。”当公司走上正轨之后,那时的林云帆已经不需要再盯着公司的业务了。然而就在这个时候,恰逢iPhone上市。林云帆拿着刚买来的iPhone逗女儿玩儿的时候,突然父爱感爆棚,想要亲自给女儿写一个APP出来。就这样,林云帆钻进了书房,捣鼓一阵子之后,不仅写出了自己的APP,还顺便把这个APP放到了APP Store上,“一度还冲到了免费榜单第一名。”林云帆笑着说道,“在写这个APP的时候,工作的热情仿佛一下子就又回来来!”

于是2011年,林云帆就决定成立一家公司来做自己感兴趣的科技产品。当年成立的时候公司名还叫做同声TBS(TheBestSync)。可能是对第一家公司用情至深,林云帆个人名片上的网址也仍是thebestsync.com。

结缘AR:从AR应用到交互技术

成立了科技公司之后,因为觉得好玩,林云帆选择的第一个方向就是AR应用。但是由于没有互联网背景,在人员的招募上,林云帆吃了不少苦头。后来慢慢的就有了几个工程师,“我给他们看了我自己在Unity上搭建的AR应用,”林云帆说道,“大家看了之后都很兴奋,就疯狂地投入到了对AR的研究之中。”

在研究了一段AR之后,数娱很幸运地得到了第一份商业订单——为联想X1 Carbon的上市推广制作一个AR应用。“我们在当年就实现了对着实体电脑做AR的交互,然而更幸运的则是参加了英特尔感知计算挑战赛(Intel Perceptual Computing Challenge),”林云帆说道,“我们凭借着一个音乐体感应用JOY,在这个比赛中拿了最高荣誉大奖,也是当年唯一一家获奖的中国公司!”

之后的两年,数娱也在逐渐的成长,可是却越来越觉得市面上现有的硬件无法适应自己所开发的软件。因此,数娱就开始转战智能硬件领域,并在2013年取得了突破性进展,当时数娱把英特尔的RealSense实感技术应用到了游戏城常见的夹娃娃机上面,做出了全球第一台依靠体感来夹取娃娃的机器。这一次数娱又与英特尔结下了缘分,“英特尔CEO科再奇(Brian Krzanich)在2013年的英特尔开发者大会上,亲自向与会者介绍了这款产品!”林云帆说道。

随后,数娱加快了自己的发展速度,又相继推出了三维扫描打印机、儿童体感游戏机、全感摄像头、全感特效系统等产品,数娱在体感交互这条路上越走越深。

2013年,林云帆开始玩起了Oculus,“当时觉得视觉上的沉浸感已经有了,但是当你摸到鼠标的时候,却又会将你拽回现实。”正式基于这种想法,林云帆就决定要去做一套反馈系统,他说,“以前我们关注都是Input(输入),现在伴随着视觉上的沉浸感,现在应该去关注Output(输出)了。”

力反馈背心图片

“奇葩”研发经历:买来医疗设备测试力反馈效果

在Output上面,林云帆首先想到了就是触觉,“比如带上Oculus深处一个虚拟世界的时候,你会下意识地想要去触摸周边的东西。”在确定了方向之后,数娱找了许多专家一起研究,其中甚至包括神经学的专家。钻研了很久之后发现,人类的触觉系统其实比视觉系统更为原始和丰富,“我们的进化是先有了触觉才有视觉的。”他说道。

当然,这里的触觉并不单指用手去触摸物体的触觉,也包括我们身体对于外界的“触觉”。想去模拟用手触摸其它物体的感觉虽不是不可以,但是难度要高的多。所以数娱决定从身体上的触觉开始,推出了这款力反馈背心。

据林云帆介绍,在这款力反馈背心从原型到量产的阶段中,衣服的纸样改了40多次,主板部分迭代了10多次。为了确定一个合适的大小,他们找来了100多号人来试玩,“包括高的、低的、胖的、瘦的、甚至还有胸大的、头大的等等。”说起力反馈背心的研发过程,林云帆笑着说道,“我们甚至还买了许多医疗的器具来测试不同类型的力反馈效果。”

得到英特尔的鼎力支持

“智能硬件的设计并不像想象中的那样,”在说道研发历程的时候,林云帆又一次提到了英特尔方面,“会遇到很多问题,例如主板的设计、震动模块等元器件的采购、甚至是静电问题的处理等等,不过好在我们获得了英特尔方面的鼎力支持。”

据林云帆介绍,英特尔方面提供的支持包括:提供Curie计算平台与测试主板以及相应的技术支持、帮助联系供应链企业、基于英特尔的平台提供了更广阔的展示与合作机会等等。

据了解,英特尔于2015年4月的深圳IDF(英特尔开发者大会)首次宣布了其全球首个“英特尔众创空间加速器”计划,在该计划下,特尔将会通过“众创空间联盟、线上创新中心、创投与产业加速”三个方面来推动全球智能硬件行业的发展。

需要说明的是,VR背心项目具体是由英特尔硬享公社提供支持,同时是英特尔智能硬件大赛第二季的前十项目;硬享公社的支持模式里,除了组织硬件创新大赛,一个核心是加速产业对接,为创客提供“全连接”支持:通过在线平台、网站、App、微信多钟界面达成创客与产业资源对接。

最终,数娱在英特尔的帮助下,与下游20多家供应商一道,数娱顺利地解决了款式、主板、线路、震动模块、组装以及抗静电等多个难题之后,正式推出了这款“INAVR-VEST” 力反馈背心。

产品逻辑:让游戏玩家感受到“中弹”的感觉

这款反馈背心与那种布满口袋的军用背心较为相似,纯黑色的外观加上色料材质的护盾显得很有科幻感。背心正面的中间位置有一个圆柱体的盒子,这个盒子是这件背心的控制中枢,内部集成了英特尔Curie计算平台与电池模块。

值得一提的是,这款背心还是英特尔智能硬件大赛第二季的获奖项目,并从一开始就得到了英特尔在线业务部旗下智能硬件创新在线平台“硬享公社”在技术、测试、产业链、宣传等方面的孵化支持。

背心正面2222222

另外,这款背心的四角还设置有四个扣环,“能够直接挂上背包电脑,”林云帆介绍道,“我们目前已经与国内主要的VR主题公园进行了接触,并且达成合作。”据林云帆介绍说,这款力反馈背心的正式售价会在2000多元,数娱科技也将于8月5日在广州召开产品上市发布会。

INAVR-VEST的正面拥有个6震动单元,依次分布在腰部、肋骨以及胸部(每个部位对称分布两个单元)。背后则在左右肩胛骨的位置各有一个震动单元。

现场演示的是一个游戏片段,需要体验者穿好背心并佩戴上大鹏VR一体机,大鹏VR一体机通过USB数据线与力反馈背心相联。在游戏中,体验者的前后各有一名持枪的敌人会依次对体验者进行射击。前后两名敌人会针对体验者的不同位置进行射击,进而触发不同的震动模块,并且还有一颗手雷爆炸的效果,当爆炸发生时,力反馈背心上总共8个震动单元都会开始震动。

根据现场体验来看,这款产品已经能够做到零延迟,体验者在游戏中看子弹射中自己的同时,震动也会同时开启。并且,由于英特尔Curie平台直接整合有六轴混合传感器(包含加速仪和陀螺仪),这款背心也能够判断出体验者的身体朝向。具体来说就是,当你的身体正面朝向敌人的时候,敌人击中的就是你的正面,而当你背朝敌人的时候,就会击中你的背面。

佩戴

林云帆介绍说,这款背心的震动能够实现几乎无限种震动模式的调节,就像是手机中的长震、短震、急促震动等等,并且还能够实现从上到下,或者是从左到右的依次震动效果。“例如游戏中的敌人砍了你一刀,”林云帆说道,“震动就会模拟真实的情况从一边开始再震到另外一边。”不过智东西在现场体验中并没能体验到震动的变化,林云帆表示这主要是因为这款供体验Demo并没设计相应的功能所致。

VR之外:更广泛的应用前景

除了上述在游戏领域应用之外,林云帆还表示,这款产品还可以应用在影视、音乐、医疗等领域。

力反馈背心在影视上的应用跟游戏类似,即在电影的高潮部分发出震动效果,如爆炸、车祸、跌落等场景出现时,用户的背心也会相应的产生震动。

然而视频是没有SDK接口的,力反馈背心的震动如何与影视融合?关于这个问题,林云帆表示,最简单的就是通过时间轴来控制,因为我们知道什么时候会出现什么场景。其次则是通过音频来控制,“我们拥有一套音频算法,”林云帆说道,“通过这套算法我们能够解析出什么时候该震而什么时候不该震。”

“音乐是分高潮与低谷部分的,”至于为什么能够通过音乐实现震动控制,林云帆说道,“并且音乐与电影的高潮部分也一定是一致的。”在音频控制模式下,只需用一根Aux线与背心的控制模块相连即可,正式基于此,这款背心还能在音乐领域进行搭配使用。

“普通用户戴上耳机听DJ等电音的时候时没有迪吧里面那种震动感的”关于该背心与音乐结合的使用场景,林云帆这样说道,“而穿上力反馈背心之后,你就能跟跟着音乐的节拍感受到震动。”

另外,据林云帆介绍,数娱科技也一直在与医疗机构合作,共同研究如何将反馈技术应用在医疗领域,目前正在实施的一个项目是为抑郁症患者的治疗提供多维度的反馈。“并且我们还是还是广东应用脑科学创新联盟的理事单位。”林云帆这样说道。

未来:从全感到5觉

数娱科技成立于2012年,发展至今,旗下已经拥有包括生产工厂、影视公司、音频公司、大数据公司在内的多个分支,总计拥有200多名员工,并且已于近期拿到了A轮融资。

数娱科技自成立以来就非常专注于“交互”领域,于2013年就拿到了英特尔全球感知计算的最高奖项,并且在此后的三年内连续获奖。数娱科技最早主要从事基于计算机视觉的动作识别方案的研究,随后又推出了包括体感机器人、基于摄像头的动作捕捉方案等产品。用林云帆的话来说就是,“以前我们关注都是Input(输入),现在伴随着视觉上的沉浸感,现在应该去关注Output(输出)了。”

林云帆坐下来222222222

除了目前已经推出的力反馈背心之外,数娱科技随后还会提供力反馈手套、脚套等配件,从而实现全身体感反馈。

然而数娱科技的野心也远不只于此,其在未来还会推出基于“嗅觉、触觉、味觉”的反馈系统。据林云帆介绍,由于嗅觉与味觉是相通的,所以这两种感觉会从雾化的香氛如手,例如给玩家提供出香味、甜味,甚至是鲜血的味道等反馈。至于触觉,数娱想到的解决方案则是类似经颅磁刺激技术来实现,“不过我们也正在和神经科学的专家们一同研究这个方向的安全性问题。”林云帆补充道。

最后,林云帆表示,数娱科技会在8月5日召开的产品发布会上一并展示他们的嗅觉/味觉反馈系统。“结合着VR/AR技术给人类带来的视觉上的反馈,我们的终极目标是为大家提供一套包含视觉、嗅觉、触觉、听觉、味觉五大知觉体系的全方位体感交互方案。”


每日一头条

趋势·深度·犀利·干货,最专业的行业解读

深喉爆料、投稿:guoren@zhidx.com

智东西