医平台医学资讯

资讯中心 > 医学进展 > 其他 > 可穿戴技术解构肢体语言 成为聋哑人的贴身翻译

可穿戴技术解构肢体语言 成为聋哑人的贴身翻译

收藏
来源:腾讯数码 2015-12-10 15:09

全世界目前有7000万聋哑人,作为一个特殊群体,聋哑人可以使用肢体语言来跟别人进行交流,但是如果遇上了看不懂肢体语言的人,双方就无法正常交 流。近期美国德州农工大学(Texas A&M University)开发出了一种新型可穿戴技术,它或许在未来能够打破聋哑人与其他看不懂肢体语言人的交流障碍。

 

跟其他可穿戴设备相似,这款可穿戴设备也是依赖于传感器来工作,其中包括了可以追踪聋哑人手势运动的传感器,以及可以捕捉聋哑人在做肢体语音时肌肉产生的肌电图或者EMG信号的传感器,系统能够识别、分析这些信号,从而读懂他们所说的话。

 

美国德州农工大学生物医学工程教授Roozbeh Jafari表示,这种新型可穿戴设备系统能够解码从手腕捕获的肌肉运动,其中有些运动通过追踪手指运动来以间接方式获取,比如有时候聋哑人用拳头来做肢体语言,这种肌肉活动跟手臂运动会有不同。

 

对于研究人员来说,这种差异是他们开发这套系统中遇到的最大挑战。因为在现实生活中,聋哑的交流动作很多,系统需要准确、实时地处理和翻译这些不同的信号动作,这个过程就需要成熟的算法来支持。

 

另一个挑战就是,即便是一个动作,让两个聋哑人来做,做出来也不会是一模一样,这也就意味着,这些肢体语言,并没有统一的标准,这样就增加了系统识别难度。不过,研究人员通过设定程序让系统来向用户学习

 

当你首次使用这款可穿戴设备时,系统的操作可能会存在一些误差,但是随着你使用这款设备次数越多,系统将会逐步地学习用户的行为,并围绕用户建立一种自己的学习模式”Jafari表示。

 

目前,这款设备还是原型产品,需要通过使用蓝牙将设备与电脑或者智能手机连接,来发送已翻译出的肢体语言。不过,该团队表示,未来他们将把这款设备的体型缩小,以便能够让用户将其戴在手腕上,类似于智能手表。

 

另一方面,人与人的交流应该是连续性,不间断的,因此研究人员希望这套系统能够完整地按一段话来翻译,而不是仅仅几个字。此外,研究人员还希望在这款可穿戴设备中加入合成声扬声器,这样就能够让那些聋哑人不光能够看懂别人的手势,还能够发声说话。

关键词: 最新进展 聋哑人 可穿戴技术 肢体语言

医友评论 0人评论)

匿名发表

热门检索:糖尿病伤医基层医院