第14版:国内新闻
本版新闻列表
 
上一篇  下一篇
2017年5月26日 星期
历时两年 把手语转化成语音
两名“90后”女生发明翻译臂环


王娜娜和黄爽,分别是北京航空航天大学和清华大学的一年级研究生,一个23岁,一个22岁。和许多处在这个年纪的女孩不同,她俩并不热衷梳妆打扮,也很少关注流行的影视剧、偶像明星。

大约两年前,王娜娜和黄爽开始用业余时间,为失语者群体研究一款直接将手语转化成语音的翻译臂环。应用后,可以实现失语者与普通人的流利对话。她们说,团队从没想过赚钱,只想帮助失语者朋友解决沟通障碍。

为方便沟通 俩女生决定帮助失语者

两年前,读大三的王娜娜结识了聋人朋友张权。因为不懂手语,即使当面交流,她也不得不用微信打字。明明是现实中的朋友,相处起来却更像网友。特别当许多人一起聊天时,她更为无声世界中的张权感到抱歉,担心自己说话,是不是忽略、伤害了他?当时,计算机专业的王娜娜,正在实验室里研究基于图像的手势识别技术。她想,手语也是有一定规则的手势,是不是可以用摄像头识别,转化成语音,打破无声到有声的隔阂?

王娜娜告诉记者,“黄爽当时就跟我说,用摄像头去做不现实,在大街上谁帮失语者拿摄像头?”

黄爽是王娜娜的本科室友,这次交谈前,王娜娜已经为翻译手语忙了八九个月。听到闺蜜几乎从根本上否定自己的研究,王娜娜不但没有生气,反而感到庆幸。她说,自己一直在沿着技术逻辑推进,却忽略了最重要的部分——如何才能让失语者使用。

设计受益于钢琴臂环的启发

“后来我看家里的小朋友,学弹钢琴,老师说手指该用力的时候,小朋友没用力。我就问老师这怎么看出来的,老师说看肌肉的用力情况,肌肉没有动指法肯定不对。这点提醒了我,我就上网查,有一种研究是戴着一个臂环来判断小朋友的指法正确不正确,我立马就想到了手语。”王娜娜告诉记者。

不同的手指动作,会触动不同区域的小臂肌肉,发出不一样的肌肉电信号。受益于钢琴臂环的启发,王娜娜和黄爽也打算应用这项技术,将每个手语词汇的肌肉电信号录入系统,让人工智能深度学习,识别和转化成语音。

在运动手环、智能手表普及的今天,佩戴臂环也不会让失语者显得突兀。

手语识别臂环创新大赛夺冠

一个多月时间,王娜娜和黄爽对着手语教材,完成了30个手势的录入,每人至少重复比划了一万五千多次。证实方案可行后,她们将更多志同道合的朋友拉入团队。经过天津理工大学聋人工学院的推荐,团队决定先录入400个常用的手语动作。尽管目前臂环只能逐个翻译手语,实现失语者像普通人一样流利对话,也存在许多技术难题,但她们相信,随着人工智能的成熟,这些都将迎刃而解。

日前,王娜娜团队的手语识别臂环,在联合国和国内一家互联网公司共同举办的创新大赛上,夺得冠军。同台竞技的,还有2074份来自国内外知名高校、科研机构的创新方案。与大多数盯紧收益的项目相比,这份冠军创业计划,显得另类。王娜娜和黄爽说,团队开始做这个项目,只是想解决失语者朋友遇到的难题,没太考虑过赚钱的事。

晚综


上一篇  下一篇
Copyright@1984-2006 China water transport. All Rights Reserved.
漯河日报社 版权所有 建议分辨率1024*768 IE6.0下浏览