可穿戴技术手套可将手语实时转换为语音

加州大学洛杉矶分校的生物工程师设计了一种类似于手套的设备，该设备可以通过智能手机应用程序将美国手语实时转换为英语语音。他们的研究发表在《自然电子》杂志上。

加州大学洛杉矶分校萨穆里分校工程学院生物工程学助理教授陈军说：“我们的希望是，这为使用手语直接与非签字人交流而无需其他人为其翻译的人们提供一种简便的方法。”以及该研究的首席研究员。“此外，我们希望它可以帮助更多的人自己学习手语。”

该系统包括一副带有细长传感器的手套，该传感器可伸展五个手指中每个手指的长度。这些由导电纱线制成的传感器拾取代表单个字母，数字，单词和短语的手部动作和手指位置。

然后，该设备将手指的运动转换为电信号，然后将其发送到戴在手腕上的一美元硬币大小的电路板上。开发板将这些信号无线传输到智能手机，该智能手机以每秒大约一个单词的速度将其转换为语音。

研究人员还在眉毛之间和嘴巴的一侧之间的测试者脸上增加了粘合传感器，以捕捉作为美国手语一部分的面部表情。

可穿戴手套翻译手势语的简短视频。

Chen说，以前提供美国手语翻译功能的可穿戴系统受到笨重设备设计的限制，或者穿着不舒服。

UCLA团队开发的设备是由轻便，便宜，但经久耐用的可拉伸聚合物制成的。电子传感器也非常灵活且便宜。

系统的数字渲染，有助于将手语转换为语音。信用：Chen Chen Lab / UCLA

在测试设备时，研究人员与四个聋哑人一起使用美国手语进行了合作。佩戴者将每个手势重复15次。定制的机器学习算法将这些手势转换为它们所代表的字母，数字和单词。系统识别出660个符号，包括字母的每个字母以及数字0到9。

UCLA已为该技术申请了专利。陈说，基于这种技术的商业模型将需要增加词汇量和更快的翻译时间。