加州大学洛杉矶分校的生物工程师们设计了一款手套,可以利用智能手机应用程序将美国手语实时翻译成英语语音。该项目的目标是方便使用手语的人与不懂手语的人直接交流,而不需要人在那里翻译。
该团队还认为这款手套可以帮助更多的人学习手语。该系统是一副手套,手套上有薄薄的、可拉伸的传感器,这些传感器沿着五个手指的长度向上延伸。传感器由导电纱线制成,可以接收到手部动作和手指位置,这些动作和手指位置代表手语中的单个字母、数字、单词和短语。
该设备可以将手指动作转化为电信号,发送到戴在手腕上的一块美元大小的硬币电路板上。该电路板可以将信号无线传输到智能手机上,智能手机以每秒约一个字的速度将其翻译成口语。研究人员还在测试手套的人脸上放置了传感器。传感器被放置在眉毛之间和嘴的一侧,以捕捉作为美国手语一部分的面部表情。
研究人员表示,之前的可穿戴系统翻译手语的作用有限,因为它们笨重,或者佩戴起来不舒服。加州大学洛杉矶分校团队创建的轻量级可穿戴系统由廉价的材料制成,也能使用很长时间。电子传感器也很灵活,价格也很实惠。
该团队表示,该系统在对四名使用美国手语的聋哑人的测试中表现良好。每位参与者分别做了15次手势,定制的机器学习算法将手势变成了字母、数字和单词的代表。该系统可以识别660个手势,包括每个字母和数字0到9。但是,它的商业模式需要改进,以支持更广泛的词汇和更快的翻译时间。
联系客服