智东西(公众号:zhidxcom)
文 | 季瑜生
问题一,如果不算刻意的十秒延迟,春晚现场观众与电视机前的粉丝谁会先听到朱一龙的声音,看朱一龙更清楚?
答案:电视机前的粉丝们,因为今年的春晚不但用上了5G与4K,还用上了VR技术加持。首先声音信号的传输比光电信号更慢,这使得即便拉萨观众也能在0.01秒内听到偶像的声音。5G与VR加持,则让粉丝坐在家里不仅能比现场观众更早听到朱一龙声音,还能沉浸式自选视角任选距离与方向看爱豆。
问题二,林志玲在春节现场表演芭蕾,谁看到的舞台效果更唯美?
答案依旧是电视机前的观众。因为春晚现场使用了AR技术加入了花瓣舞美,志玲姐姐坐着花环在空中飞行时的漫天花雨只有电视机前的观众才能看得到。
不得不说,AI、VR、AR等一众黑科技的应用不但让春晚变得更有(wu)趣(liao),而且还让电视机前的观众们感受到了更有现场感更震撼的效果。飞天汽车、机器人、带屏柔衣在春晚的应用也展示出了以一汽、优必选、柔宇为代表的我国我科技企业的自主研发能力。
当春晚落下帷幕,智东西用显微镜扒尽每一分钟的细节,为大家还原今年春晚中的十大黑科技(5G、VR、4K、AR、飞天汽车、伴舞大型人形机器人、柔性屏表演服、高精度机械臂、虚拟主持人、AI抠图),看一看它们背后的技术原理以及创造者的故事。
一、5G与VR齐飞,4K共爱豆一色,三大黑科技打造家里的春晚现场
今年的央视春晚对于一众追星女孩来说不可谓不兴奋。首先,央视请来了TFboys、陈伟霆、张艺兴、白宇、朱一龙、阿云嘎、李易峰等新生代年轻偶像,同时还首次实现通过5G网络实时传输4K高清视频结合VR技术向全国转播分会场节目。
而5G加VR加4K这十大黑科技中的三大共同传输现场视频,对于追星女孩来说,意义约等于超近距离的现场与偶像互动。
在这之前,直播都是万家同屏,所有人坐在电视机前被动的收看由导播以及摄像机位来回切换传回的画面,自家的爱豆不仅和自己距离超远十分模糊,一不留神一个远景近景切换或者观众席特写,爱豆还会直接晃出画面。
但是今年的春晚,只要带上专门的VR设备,就能够感受沉浸式的现场体验。观众不仅可以自行选择视角,还可以远景近景视角自由切换。另外加上4K超高清晰度以及5.1环绕声的引入,坐在家里也能感受偶像坐在了自己面前的现场观感与听觉。
据了解,这也是央视首次完成高清与4K超高清同步直播,通过4K高清直播,不仅为观众带来了更高的清晰度、更宽的色域还意味着更高的动态范围视频。
但是4K与VR同时搭配也就意味着更大的数据传输量,想要获得良好的VR直播体验,这对于带宽以及信号的低延时性都有着非常高的要求。如果想要将体验做到最佳,带宽至少需要达到1Gbps以上,从而将清晰度严格把控并且将时滞控制在10ms以内。
而传统的4G网络以及相应100多毫秒的延时显然无法良好的负载,用于传输VR图像不但会出现画面会出现迟滞、拖尾,还会让观众产生眩晕感。使用5G技术搭配4K清晰度,则能良好的保障VR虚拟现实的沉浸式体验。
为此,央视在2018年年末分别与电信、移动、联通、华为共同签署了5G新媒体平台合作建设框架协议,打造了我国首个国家级5G新媒体平台。
在春晚深圳分会场上,共计有两台基于电信5G网络的4K机位将纳入深圳分会场的制作系统,用于春晚的4K电视直播。此次电信采取的是“双路端到端”技术,在两天时间内同时端到端打通5G网络和有限专线网络两路到中央电视台总台的VR直播链路,实测延时仅有50毫秒。另外,长春一汽分会场也由联通与华为共同成功开展了5G网络VR实时传输。
如果观众想要体验这一春晚技术 ,只要下载安装央视影音然后选择VR春晚以及合适的视频版本,并戴上合适的VR装备,连接上通畅的网络就可以开启看VR看春晚的流程。
不仅是4K,在地方卫视的春晚上,华为、中国联通还携手江西广电“赣云”,打造出了江西电视史上首台基于5G网络的超清全景VR春晚,实现沉浸式360°8K VR看江西卫视春晚。
二、连续六年上阵,AR技术打造幻梦舞台
VR上场,AR也自然少不了。
如果说VR技术让观众端坐家中也能实时感受现场的气氛,那么AR技术的应用则让电视机前的观众能感受到现场观众也无法看到的幻梦舞台。
简单来说,AR技术就是通过一块屏幕让观众不仅能看到现实存在的画面,还能看到一些基于真实空间打造的虚拟画面。
早在2013年央视春晚中,王力宏的歌舞节目《十二生肖》中就使用了这一技术。电视机前观众所看到的舞台上空飞舞的金色十二生肖字块就是AR技术所呈现的成果,而这是现场观众所无法看到的。
此外,当年孙俪、李健合唱的《风吹麦浪》,婉转起伏的声线以及美轮美奂的舞台效果都成为了当年春晚节目中的白月光。不过事实上,孙俪、李健演唱时麦浪田野中的树木、蝴蝶也是通过AR技术呈现的。
在今年的节目中,林志玲主演的舞蹈节目《绽放》也应用到了这一技术,在节目最后,林志玲一身红衣凌空坐在花环之上飞动,大红色的花瓣也随之在舞台上飞舞,营造出了浪漫梦幻的氛围,而林志玲周身的花瓣也是通过AR虚拟技术所打造的。
三、汽车也上天,共和国长子一汽大招频出
今年的春晚不仅创下了众多技术上的第一,同时也是第一次将举办场地选在了一个企业,而荣获此殊荣的正是共和国长子一汽。
春晚的吉林分会场直接放在了红旗汽车的大门口不说,场地中也布满了各种一汽车型。
其中22辆解放J7重卡排列舞台两侧用车尾托起整个舞台,105辆奔腾T77组成的方队矩阵则排列在主舞台对面占据了“池座”位置。甚至主舞台的设计也是直接借鉴的红旗l5车头,面积达1500平方米、超过350吨,搭配2600多只舞台灯具和48个点位投影设备构成了炫目的灯光秀。
不过最引人注目的还是歌舞东北小调《正对花》表演时出现在舞台上空的飞行汽车。一片红彤彤的舞台灯光中,一台长着翅膀的汽车腾空而起,形状酷似一台飞机,在舞台上方缓缓飞过。
智东西猜测,这应该是一汽丰田早在2014年就宣布开始着手研制的飞行汽车。接着2015年就有相关消息爆料,一汽丰田提交了一份关于飞行汽车的可折叠机翼专利。
到了2018年的9月份,一汽丰田又申请了一项垂直起降飞行汽车专利,其中电机的外壳可以用作地面行驶,汽车的轮胎则各自带有独立的电力供应系统,并配备像螺旋桨一样的可以在陆地模式以及飞行模式之间自由切换。当汽车从陆地模式切换到飞行模式后,轮胎的机械臂就会向外延伸出车轮进而像直升机一样高速旋转进而让汽车像飞机一样具备飞行能力。
在今年的CES上,一汽丰田就将一个缩小的复制品带去展示,另外这一飞行汽车还将在2020年的奥运会上点燃圣火,此次春晚亮相算是小试牛刀。
四、机器人届的冯巩,优必选再登春晚舞台
今年的春晚,虽然没有了董卿、撒贝宁等一众观众熟悉的主持天团,就连连登春晚32届的冯巩也没出现,但是机器人届的冯巩——优必选却第三次登上了春晚舞台,并且成为了深圳分会场首个节目《青春畅想》中的一大主力。
早在2016年,优必选的540台Alpha 1S机器人就曾为歌手孙楠伴舞,凭借着整齐的动作以及恢弘的方阵气势一战成名。接着在2018年春晚,优必选再度牵手春晚,为春晚定制了24台机器狗Jimu汪汪,在开场舞中“卖萌耍宝”,开启了主会场的开场表演。
而今年登台的优必选机器人不再以气势取胜,而是更加注重机器人的灵活性以及动作的丰富性。
在深圳分会场上,优必选6台Walker机器人和韩雪、关晓彤、王嘉、魏大勋、台风少年团等明星以及几百名舞蹈演员同台表演了歌舞《青春畅想》。
伴随着演唱者的歌声,Walker随节奏起舞,舞姿不仅融合了现代舞及popping流行舞,还能彼此之间相互配合不断变换队形精准配合。另外,Walker还会根据歌词的内容以及节奏做出相应的面部表情,眼神变化、嘴部模拟真实演唱开合都不是问题。
另外,值得注意的是,此次上台展示的Walker虽然表现的活灵活现,但是它的生产周期以及进化时间间隔却短的令人难以想象。
2018年2月首次亮相的第一代Walker,那时候还是一个胸以下全是腿的大长腿,无论是灵活性还是反应效果都大打折扣。但是仅仅过了一年不到的时间,Walker就进化出了双臂以及手掌,双手中的八个微型伺服舵机可以在1.5秒就完成张合,从而做出例如SWAG、端茶倒水,甚至弹琴写字等高难度动作。
根据优必选团队回忆,这一代的Walker其实在去年8月才出来样机,还有一些功能以及性能有待完善,这些本是列在2019年的工作计划中。但是由于春晚导演在2018年的11月前来考察,并于当月底拍板邀约。因此在短短两个月时间,优必选就完成了功能的优化稳定以及八台机器的生产调试。
五、柔性屏点亮舞台,衣服变身屏幕
作为今年春晚的科技担当,深圳分会场许多高科技产品集体亮相,而《青春畅想》节目中不但包括了优必选的炫酷机器人,30位舞蹈演员身穿的柔宇科技量产的全柔性屏特制的“柔衣”也同样引人注目。
这是央视春晚37年以来首次采用全柔性显示屏参与节目演出,也是全球首款大面积使用柔性屏的舞蹈服装首次公开亮相。
舞蹈演员身穿的“柔衣”每套均由32片轻、薄、柔、艳的全柔性屏组成,960片全柔性屏幕上,高清、绚丽的画面可以跟随着音乐的节奏变换。
据柔宇科技研发人员介绍,每套“柔衣”由32块大小约8英寸的柔性屏组成,所有屏幕的总重量仅相当于半瓶普通装矿泉水,在设计上也考虑到演员们快节奏的舞蹈动作,实现了传统显示屏无法实现的舞台服饰穿戴效果。
此外,每套“柔衣”上的多块屏幕均可通过手机APP远程无线控制视频、画面切换,也可同步播放或暂停,伴随音乐的节奏不断变换绚丽、高清的画面。
据柔宇科技表示,“柔衣”上使用的全柔性屏由柔宇科技自主研发并量产。与市场上现有的平面或固定曲面显示屏不同,柔宇科技量产的全柔性显示屏在用户手中也可以实现自由弯曲、折叠、卷曲,不仅具有AMOLED的鲜艳色彩,而且拥有大色域、强对比、广视角、高清分辨率。每片柔性屏集成了超过2000万个柔性超精密器件,数百万个柔性集成电路单元,近百种微纳米薄膜材料。
六、高精度机械臂同台PK郎朗,演绎科技版《朋友》
提起周华健,一股带着塞外烈酒、大漠黄沙还有江南流水、小桥桃花的江湖之气便铺面而来,即便是颇具流行色彩的《朋友》搭配周华健高亢的唱腔也同样让人热血沸腾。但是当江湖遇上高科技,《朋友》遇上机械臂又会擦出怎样的火花?
同样在深圳分会场,格力的高精度机械臂荣登春晚,与郎朗同台为周华健、任贤齐联袂演唱的歌曲《朋友》弹钢琴,将侠气与艺术的高雅以及科技的精密完美融合。
用机械臂弹钢琴看似是个噱头,但是背后透露出的科技实力却不容小觑。
早在2017年,格力就将这一技术对外亮相,弹琴、作画、斟酒样样在行。前不久的“珠洽会”上,格力再次展示了这一技术,打架子鼓、弹吉他、弹钢琴,“吹拉弹唱”机械臂样样在行,不但每一个都具有超高精准度,彼此之间的配合也同样天衣无缝。
事实上,这些活动虽然不费力,但是能够精准的画出一幅画、将酒倒进酒杯以及准确的弹出钢琴曲子,都要求机械臂的准确度不能有一丝一毫的差池。而这一技术,不仅能够用于表演,在进行一些精密仪器加工以及高精度产品加工时更是必不可少。
七、虚拟主持人频繁亮相,抢了小撒饭碗
如果说优必选的机器人让人觉得灵活可爱想要领养一只回家,那么在网络春晚上亮相的“小小撒”和《我要看春晚》中亮相的阿里“福袋”则足以与一众金牌主持人直接开杠抢饭碗。
1月29日,中央电视台网络春晚播出,而此次全程主持网络春晚的则是撒贝宁、朱迅、高博、龙洋四大名嘴的人工智能形象“小小撒”、“朱小迅”、“高小博”、“龙小洋”。
其中撒贝宁的人工智能形象“小小撒”刚一亮相就吓得撒贝宁高呼“感觉像照镜子一样。”仔细观察,两人无论是外形、声音、表情甚至眼神几乎都如出一辙,不过有趣的是“小小撒”居然比撒贝宁本撒还高了一些。
与此同时,小小撒全程表现妙趣横生,甚至还淡定表示“说小撒的台词,让小撒无话可说。”让撒贝宁委屈直言“能给我说一句吗?”
据悉,此次亮相的虚拟主持天团是由华人创业的人工智能公司偶邦(ObEN)研究发明。根据偶邦(ObEN)表示,在相关的20多项专利加持下,打造一个虚拟的主持人只需要被模仿对象的面部扫描以及半小时的录音数据,即可完成。
如果后续有更多的数据喂养,那么这个虚拟主持人还会继续模仿到对方的喜好、性格、讲话风格等更多维度的数据。
除过网络春晚亮相的“双胞胎主持人”,在《我要看春晚》上也亮相了一个憨态可掬的机器人主持,这是主持人王言的小搭档——阿里人工智能实验室的人工智能机器人福袋。
与优必选的灵动以及偶邦的高度仿真不同,福袋长的有些像一只会行走说话的垃圾桶。刚一亮相它就表示“观众朋友们,大家好,我是春晚小助手福袋,请大家多多指教。”
不仅可以对答如流,这只“福袋”还会跳舞,圆圆的体态,加上憨态可掬的造型,现场吸粉不少。
根据阿里巴巴人工智能实验室机器人实验室总监刘旭介绍,福袋”是阿里巴巴推出的第一款商用机器人,应用了环境感知、场景理解、自主规划、多模态人机交互等技术,未来可能会在许多场景中应用。
八、有奖竞猜,北京卫视、王牌对王牌如何用AI抠掉吴秀波?
春节在一片欢乐的氛围中展开,但是对于一些人来说可能就不是那么欢乐了。比如《王牌对王牌》以及北京卫视的春晚的节目录播人员,因为他们都在节目中抽到了王炸选手——吴秀波。
请神难,送神更难,如何把已经录好的节目在不影响整体效果的情况下擦除吴秀波,成了春节档一众节目后期的节日加班套餐。
一位《王牌对王牌》节目后期表示,自己刚以入职就遇上这一难题,最后一帧一帧的图片一直P了三天三夜终于完工。有网友算了一笔账,即便吴秀波只有10分钟镜头,以一秒25帧,12秒就一帧来算,这位后期需要不眠不休工作整整50个小时。当前这一期节目已经播出,不得不说后期的工作还是很尽责的。
但是北京卫视春晚究竟如何处理的这一问题,一切静待今晚揭晓。
不过好在当前的AI技术已经发展的足够先进,2017年Adobe推出了一项叫做Project Cloak视频修改技术。在现场演示中,后期工程师只要用一个圈圈起在山谷行走的情侣或者路面上行驶的某辆汽车,视频中这些不想被保留的东西就会全部消失。
这一项技术,北京卫视们值得拥有!
结语:科技全面杀入春晚,是大国实力也是带AI回家
从1985年湖北省歌舞团以一比一复制的曾侯乙墓大型编钟出演《编钟乐曲》,到1996年蔡明主演的小品《机器人趣话》以真人模拟机器人的未来可能,再到2019年优必选、阿里、偶邦机器人频繁春晚亮相,春晚35年,每一年都见证了我国的文化、科技最新进展。
当AI全面融入春晚,不仅将更炫酷的舞台技术展现给千家万户,也给观众们带来了更身临其境、更细腻的观感,让观众无论身处现场还是坐在电视机前都能千里共良宵。
而AI全面融入春晚,不仅是人工智能开始走进千家,更是让爱走进万户。