新闻  |   论坛  |   博客  |   在线研讨会
神奇传感器手套化身“手语翻译机”!实时手语转语音无压力
芯东西 | 2020-06-30 21:16:24    阅读:256   发布文章
6月30日消息,最近,加州大学洛杉矶分校(UCLA)设计了一种特殊的手套,通过结合更加灵活便宜的传感器和人工智能算法,将美国手语实时转换成英语语音。

这项研究已经发表在《自然·电子学》期刊上。研究人员希望,这为使用手语的人能提供一种能更加自如与他人交流的简便方法,同时也能帮助更多人自主学习手语。

image.png

据研究人员介绍,现有手语翻译可穿戴设备大多比较笨重,佩戴舒适度较差。

相比之下,加州大学洛杉矶分校研发的美国手语翻译手套由轻质、价格低廉、耐久、有弹性的聚合物制成,并且配备了通过沿着五个手指方向延伸的细长传感器。这些传感器由导电纱线制成,既十分灵活又价格低廉,能精确捕捉用户手部动作,继而将其转换为电信号。然后,这些代表着单个字母、数字、单词和短语的电信号被传送到佩戴在手腕上的电路板,电路板再将电信号传递到智能手机中,最终手机App用定制的机器学习算法,以大约每秒一个单词的速度,将这些电信号“还原”为它们所代表的语音。


为了验证算法的准确性,研究人员邀请4位使用美国手语的失聪人士对手套进行了测试。由于美国手语中还包含一些面部表情,研究人员也在测试者的眉心和唇侧粘上了传感器。

测试时,佩戴者将每个手势重复15次。该系统成功识别出660个符号,其中包括26个英文字母和数字从0到9。目前,研究团队已经申请了这项技术的专利。但在实现商用目标之前,这个系统还需增加词汇量和提升翻译速度。


*博客内容为网友个人发布,仅代表博主个人观点,如有侵权请联系工作人员删除。

参与讨论
登录后参与讨论
推荐文章
最近访客