四川教育在線(xiàn)

熱線(xiàn):028-85056429 通訊員QQ群:197538807
投稿郵箱: 2629731537@qq.com

女學(xué)霸研發(fā)手語(yǔ)翻譯器 通過(guò)臂環(huán)捕捉肌電信號(hào)

來(lái)源:中國(guó)青年報(bào)·中青在線(xiàn)   作者:陳璐   瀏覽量:   發(fā)布時(shí)間:2017-05-09

演示者用手指向前方,又做出點(diǎn)贊的手勢(shì),“你好”的文字快速地反應(yīng)在App“手音”的界面上。捕捉手部運(yùn)動(dòng)的肌電信號(hào)的是演示者手臂上的黑色臂環(huán),看上去像跑步時(shí)用的護(hù)腕。T1b四川教育在線(xiàn)

“手音”是一款針對(duì)失語(yǔ)者的小眾產(chǎn)品,預(yù)計(jì)今年5月下旬上線(xiàn)。普通人可能難以想象這款產(chǎn)品的意義所在——手語(yǔ)是失語(yǔ)者彼此溝通的橋梁,但對(duì)于普通人來(lái)說(shuō)是比所有外語(yǔ)都難的語(yǔ)言,“手音”將做潤(rùn)物細(xì)無(wú)聲的溝通橋梁。T1b四川教育在線(xiàn)

462444d243c54b068c6029083c2232a3.jpgT1b四川教育在線(xiàn)

 T1b四川教育在線(xiàn)

462444d243c54b068c6029083c2232a3.jpgT1b四川教育在線(xiàn)

美女學(xué)霸研發(fā)手語(yǔ)翻譯器 通過(guò)臂環(huán)捕捉肌電信號(hào)T1b四川教育在線(xiàn)

“手音”的創(chuàng)始人王娜娜和聯(lián)合創(chuàng)始人黃爽原是北京航空航天大學(xué)2012級(jí)的學(xué)生,她們是同一個(gè)宿舍的閨蜜,兩個(gè)充滿(mǎn)活力的女生在2015年開(kāi)始想為失語(yǔ)者做些什么。T1b四川教育在線(xiàn)

在一次活動(dòng)上,王娜娜認(rèn)識(shí)了北京聯(lián)合大學(xué)特殊教育學(xué)院畢業(yè)的失語(yǔ)者張權(quán),并成了好朋友。因?yàn)橥跄饶炔粫?huì)手語(yǔ),這兩位現(xiàn)實(shí)中的朋友相處更像網(wǎng)友,即便見(jiàn)面也往往會(huì)求助微信溝通。T1b四川教育在線(xiàn)

回到宿舍,王娜娜把張權(quán)的故事告訴了黃爽。她們此后認(rèn)識(shí)了更多的失語(yǔ)者,也愈發(fā)感到溝通的困難。“有時(shí)我覺(jué)得我說(shuō)話(huà)是在‘傷害’他們,一聊得開(kāi)心就在想是不是忽略他們了,甚至有些自責(zé)。”王娜娜說(shuō)。T1b四川教育在線(xiàn)

兩個(gè)善良的姑娘一直在想,張權(quán)是失語(yǔ)者中的幸運(yùn)兒,不僅可以上學(xué)還有工作,更多的失語(yǔ)者因?yàn)闇贤ㄒ恢笔巧鐣?huì)的邊緣人,她們假想:老板開(kāi)會(huì)聽(tīng)不見(jiàn),點(diǎn)外賣(mài)沒(méi)辦法和店家溝通,別人怎么能接納他們?《新聞聯(lián)播》有手語(yǔ)同步翻譯,可其他直播節(jié)目如果沒(méi)有字幕,失語(yǔ)者就永遠(yuǎn)無(wú)法享受它。T1b四川教育在線(xiàn)

上網(wǎng)一查,數(shù)字更讓兩人咋舌:失語(yǔ)者(包含聽(tīng)障人士、腦中風(fēng)患者、腦癱患者和漸凍癥患者)在中國(guó)的數(shù)量達(dá)到7000萬(wàn)人,占總?cè)丝诘?%,這是一個(gè)非常龐大的數(shù)字。T1b四川教育在線(xiàn)

兩個(gè)人想起了參加“馮如杯”(馮如杯為北航校內(nèi)學(xué)生學(xué)術(shù)科技作品競(jìng)賽)時(shí)的圖像識(shí)別項(xiàng)目,當(dāng)時(shí)這個(gè)項(xiàng)目獲得了一等獎(jiǎng),或許可以用這種技術(shù)幫助失語(yǔ)者。王娜娜回憶:“我們感覺(jué)發(fā)現(xiàn)了一個(gè)沒(méi)有人發(fā)現(xiàn)的需求,想成為第一個(gè)實(shí)現(xiàn)它的人,也讓我們所學(xué)的知識(shí)有價(jià)值。”T1b四川教育在線(xiàn)

于是,她倆著手研究手語(yǔ)翻譯的可行性,開(kāi)始查論文、做實(shí)驗(yàn)、寫(xiě)代碼,用馮如杯一等獎(jiǎng)獎(jiǎng)金5萬(wàn)元作為啟動(dòng)資金行動(dòng)起來(lái)。圖像識(shí)別被否決了,因?yàn)椴荒茈S時(shí)攜帶攝像頭;手套被否決了,因?yàn)樘俗⒁,最終確定了通過(guò)臂環(huán)捕捉肌電信號(hào)的方法。因?yàn)橹悄苁直碇饾u普及,失語(yǔ)者帶著臂環(huán)看上去并不突兀。T1b四川教育在線(xiàn)

產(chǎn)品一次次迭代,為的是要保護(hù)失語(yǔ)者的尊嚴(yán)。黃爽記得,她們做過(guò)“體驗(yàn)一天失語(yǔ)者”的活動(dòng)。在便利店,因?yàn)榻Y(jié)賬時(shí)需要了解價(jià)格,失語(yǔ)者只能通過(guò)手機(jī)和店員溝通,時(shí)間稍長(zhǎng)排在后面的人開(kāi)始不耐煩地催促。“如果別人知道我是失語(yǔ)者可能會(huì)體諒,但不知道就會(huì)埋怨,越埋怨我越著急。”一些失語(yǔ)者不愿意別人稱(chēng)呼他們?yōu)?ldquo;聾人”,自己會(huì)寫(xiě)成“龍人”。T1b四川教育在線(xiàn)

確定研發(fā)方向后,關(guān)鍵是不斷地輸入數(shù)據(jù)、調(diào)試數(shù)據(jù)以保證手語(yǔ)翻譯的準(zhǔn)確性。為了檢驗(yàn)?zāi)P偷目煽啃,最初只有兩個(gè)人在錄手語(yǔ)的數(shù)據(jù),整天戴著臂環(huán)不停地做動(dòng)作,黃爽開(kāi)玩笑說(shuō):“練下去咱倆就要成為‘麒麟臂’啦!”T1b四川教育在線(xiàn)

“當(dāng)你真正去幫助他們,他們就知道是為他們好,就會(huì)非常配合。”王娜娜說(shuō),為了保證數(shù)據(jù)的多樣化,并且真正讓失語(yǔ)者喜歡,她們后來(lái)聯(lián)系了天津理工大學(xué)聾人工學(xué)院,合作進(jìn)行數(shù)據(jù)采集和智能臂閉環(huán)開(kāi)發(fā),還與北京市朝陽(yáng)區(qū)殘聯(lián)達(dá)成合作意向,為“手音”的產(chǎn)品服務(wù)化提供咨詢(xún)、指導(dǎo)。張權(quán)也成了團(tuán)隊(duì)的顧問(wèn)。T1b四川教育在線(xiàn)

如今,“手音”涵蓋了200個(gè)手語(yǔ)動(dòng)作,為了保證精確度,每一個(gè)動(dòng)作錄制了1000人次。在有了自己的手勢(shì)數(shù)據(jù)庫(kù)之后,團(tuán)隊(duì)還搭建了一個(gè)7層BP神經(jīng)網(wǎng)絡(luò)(一種按誤差逆?zhèn)鞑ニ惴ㄓ?xùn)練的多層前饋網(wǎng)絡(luò),是目前應(yīng)用最廣泛的神經(jīng)網(wǎng)絡(luò)模型之一)對(duì)數(shù)據(jù)速度進(jìn)行訓(xùn)練,目前識(shí)別準(zhǔn)確度已經(jīng)達(dá)到95%。T1b四川教育在線(xiàn)

直到去年8月,團(tuán)隊(duì)里只有王娜娜和黃爽兩個(gè)人,后來(lái)其他人逐漸加入。他們沒(méi)有辦公室,開(kāi)會(huì)都是“打游擊戰(zhàn)”,咖啡廳、餐廳、教室都被征用過(guò),做研發(fā)都是在自己的實(shí)驗(yàn)室里,但王娜娜說(shuō):“我們一天都沒(méi)有想過(guò)放棄。”后來(lái),團(tuán)隊(duì)內(nèi)有人因出國(guó)而退出,王娜娜在北航保研繼續(xù)深造,黃爽保研至清華大學(xué)。兩個(gè)女學(xué)霸沒(méi)有因升學(xué)而放棄團(tuán)隊(duì),繼續(xù)堅(jiān)定地吸引人才研發(fā)產(chǎn)品。T1b四川教育在線(xiàn)

由女生主導(dǎo)的技術(shù)型創(chuàng)業(yè)團(tuán)隊(duì)很少見(jiàn),兩個(gè)人也經(jīng)歷了磨合。最初,黃爽遇到意見(jiàn)不同時(shí)會(huì)等著雙方都冷靜下來(lái)回宿舍再溝通。王娜娜告訴她,團(tuán)隊(duì)溝通對(duì)事不對(duì)人,要彼此敞開(kāi)心扉,現(xiàn)在兩個(gè)人可以為一件事辯論個(gè)“你死我活”,也能在達(dá)成一致意見(jiàn)后手挽手去吃吃喝喝。團(tuán)隊(duì)里還有其他技術(shù)人員,大家一起熬夜寫(xiě)代碼的時(shí)候,兩個(gè)女生也會(huì)偶爾化身為“程序員鼓勵(lì)師”,一起為團(tuán)隊(duì)加油打氣。T1b四川教育在線(xiàn)

這兩個(gè)分別出生于1994年、1995年的女生笑著說(shuō):“或許因?yàn)槲覀儸F(xiàn)在還沒(méi)有走向社會(huì),沒(méi)有買(mǎi)房的苦惱和社會(huì)的壓力,只是覺(jué)得我們所擁有的技術(shù)能夠?qū)ι鐣?huì)有價(jià)值,能夠真正幫助一些人,我們又有時(shí)間,那就做吧!”T1b四川教育在線(xiàn)

她們關(guān)于未來(lái)有很多設(shè)想,“手音”可以實(shí)現(xiàn)面對(duì)面小聊和長(zhǎng)時(shí)間對(duì)話(huà)的功能,未來(lái)還可以推出手語(yǔ)教學(xué)、手語(yǔ)字母和智能臂環(huán)閉環(huán),解決手語(yǔ)教師缺乏等各種問(wèn)題。此外,這種人工智能技術(shù)成熟后還可以應(yīng)用在其他方面,例如可以教學(xué)鋼琴的孩子更加準(zhǔn)確地彈琴。T1b四川教育在線(xiàn)

在前不久百度與聯(lián)合國(guó)開(kāi)發(fā)計(jì)劃署共同主辦的“極·致未來(lái)”責(zé)任創(chuàng)新挑戰(zhàn)賽上,“手音”團(tuán)隊(duì)獲得了一等獎(jiǎng)和最佳人氣獎(jiǎng),被譽(yù)為最有“包容性”的項(xiàng)目。T1b四川教育在線(xiàn)

責(zé)任編輯:田媛  由四川教育在線(xiàn)網(wǎng)整理發(fā)布

最火資訊

網(wǎng)站簡(jiǎn)介   |  法律聲明  |  聯(lián)系我們   | 
Copyright © 2010 - 2021 四川非凡魅力影視文化傳播有限公司 All Rights Reserved
蜀ICP備15019259號(hào)-3 川公網(wǎng)安備:51010402000252
廣播電視節(jié)目制作經(jīng)營(yíng)許可證(川)字第00850號(hào) 川廣審批準(zhǔn)字[2019]13號(hào)
網(wǎng)絡(luò)文化經(jīng)營(yíng)許可證:川網(wǎng)文〔2022〕3363-037號(hào) 增值電信業(yè)務(wù)經(jīng)營(yíng)許可證:川B2-20200029
廣告聯(lián)系QQ443652