神奇传感器手套化身“手语翻译机”!实时手语转语音无压力

芯东西(ID:aichip001)
编 | 董温淑

芯东西6月30日消息,最近,加州大学洛杉矶分校(UCLA)设计了一种特殊的手套,通过结合更加灵活便宜的传感器和人工智能算法,将美国手语实时转换成英语语音。

这项研究已经发表在《自然·电子学》期刊上。研究人员希望,这为使用手语的人能提供一种能更加自如与他人交流的简便方法,同时也能帮助更多人自主学习手语。

神奇传感器手套化身“手语翻译机”!实时手语转语音无压力

据研究人员介绍,现有手语翻译可穿戴设备大多比较笨重,佩戴舒适度较差。

相比之下,加州大学洛杉矶分校研发的美国手语翻译手套由轻质、价格低廉、耐久、有弹性的聚合物制成,并且配备了通过沿着五个手指方向延伸的细长传感器。

这些传感器由导电纱线制成,既十分灵活又价格低廉,能精确捕捉用户手部动作,继而将其转换为电信号。

然后,这些代表着单个字母、数字、单词和短语的电信号被传送到佩戴在手腕上的电路板,电路板再将电信号传递到智能手机中,最终手机App用定制的机器学习算法,以大约每秒一个单词的速度,将这些电信号“还原”为它们所代表的语音。

为了验证算法的准确性,研究人员邀请4位使用美国手语的失聪人士对手套进行了测试。由于美国手语中还包含一些面部表情,研究人员也在测试者的眉心和唇侧粘上了传感器。

测试时,佩戴者将每个手势重复15次。该系统成功识别出660个符号,其中包括26个英文字母和数字从0到9。

目前,研究团队已经申请了这项技术的专利。但在实现商用目标之前,这个系统还需增加词汇量和提升翻译速度。

文章来源:TechXplore