中国开源软件网

当前位置: 首页 > 科学 >

神奇传感器手套化身手语翻译机,将美国手语实时转换成英语语音

时间:2020-06-30 19:48来源:互联网 作者:小狐

神奇传感器手套化身手语翻译机,将美国手语实时转换成英语语音(图1)

芯东西(ID:aichip001)

编 董温淑

芯东西6月30日,最近,加州大学洛杉矶分校(UCLA)设计了一种特殊的手套,通过结合更加灵活便宜的传感器和人工智能算法,将美国手语实时转换成英语语音。

神奇传感器手套化身手语翻译机,将美国手语实时转换成英语语音(图2)

据研究人员介绍,现有手语翻译可穿戴设备大多比较笨重,佩戴舒适度较差。

相比之下,加州大学洛杉矶分校研发的美国手语翻译手套由轻质、价格低廉、耐久、有弹性的聚合物制成,并且配备了通过沿着五个手指方向延伸的细长传感器。

这些传感器由导电纱线制成,既十分灵活又价格低廉,能精确捕捉用户手部动作,继而将其转换为电信号。

这些代表着单个字母、数字、单词和短语的电信号被传送到佩戴在手腕上的电路板,电路板再将电信号传递到智能手机中,最终用定制的机器学习算法,以大约每秒一个单词的速度,将这些电信号“还原”为它们所代表的语音。

为了验证算法的准确性,研究人员邀请4位使用美国手语的失聪人士对手套进行了。由于美国手语中还包含一些面部表情,研究人员也在者的眉心和唇侧粘上了传感器。

时,佩戴者将每个手势重复15次。该成功识别出660个符号,其中包括26个英文字母和数字从0到9。

目前,研究团队已经申请了这项技术的专利。但在实现商用目标之前,这个还需增加词汇量和提升翻译速度。

本文相关词条概念解析:

手语

手语(signlanguage)是用手势比量动作,根据手势的变化模拟形象或者音节以构成的一定意思或词语,它是听力障碍的人(即聋哑人,以下简称为听障人)互相交际和交流思想的一种手的语言,它是“有声语言的重要辅助工具”,而对于听力障碍的人来说,它则是主要的交际工具。手语与语言的差别则主要在于语音这个问题上和听障人是否以手势进行思维。语言学家根据语言的语音属性认为手语是一个符号,而非语言;而聋教育专家、特殊教育工作者和听障人本身根据手语的语言属性认为手语同样是语言,它是语言的一个分支,是一种特殊的语言形式。

网友评论

相关文章