
李榮頡正在演示供聾啞人交流使用的“神奇手環(huán)”
央廣網(wǎng)沈陽7月8日消息(記者郭威)東北大學(xué)三名學(xué)生研發(fā)出一種“手語轉(zhuǎn)換發(fā)聲”手環(huán),通過連接服務(wù)器可以讓手語發(fā)聲,并把外界語音轉(zhuǎn)化為文字,實(shí)現(xiàn)聾啞人和外界的無障礙溝通。5月18日,該項(xiàng)目獲得了2018“未來力大會(huì)”大學(xué)生社會(huì)創(chuàng)新大賽全國總冠軍。今年10月,該團(tuán)隊(duì)將代表中國前往美國硅谷參加2018創(chuàng)行世界杯總決賽。
“你好,我們幫助聾啞人交流,請(qǐng)大家支持我們,謝謝!”隨著佩戴著手環(huán)的李榮頡所做的手語動(dòng)作,平板電腦上清晰的發(fā)出了完整意思的語音。讓聾啞人與完全不動(dòng)懂手語的健全人進(jìn)行交流,這一看起來“不可完成”的任務(wù),就這樣在東北大學(xué)李榮頡、曾振、賀蕭三個(gè)大三學(xué)生的手中成為了現(xiàn)實(shí)。李榮頡說:“企業(yè)做1到1萬的商業(yè)轉(zhuǎn)化,而學(xué)生實(shí)驗(yàn)室可以不計(jì)回報(bào)地做從0到1的技術(shù)研發(fā)。經(jīng)過各種各樣的努力,這個(gè)算法模擬出各種問題之后,第一次做的手勢發(fā)出聲音時(shí),真的特別開心!
在機(jī)器人科學(xué)與工程學(xué)院教師王斐的指導(dǎo)下,這個(gè)由三個(gè)大學(xué)生組成的團(tuán)隊(duì)研發(fā)出了一套基于多源信息融合的手語雙向識(shí)別系統(tǒng)。通過連接服務(wù)器把手語動(dòng)作轉(zhuǎn)化為語句,同時(shí)還可以把外界語音轉(zhuǎn)化為文字。與傳統(tǒng)基于視覺的手語識(shí)別方法相比,可避免光照、遮擋、干擾和手指細(xì)微動(dòng)作無法捕捉等嚴(yán)重缺陷,在便攜實(shí)用的同時(shí),保證了識(shí)別的實(shí)時(shí)性和準(zhǔn)確性。王斐介紹:“視頻捕獲抓肢體的動(dòng)作沒有問題,就像體感游戲,但是手指的動(dòng)作是采不到的,還有外界自然光的干擾。而手環(huán)的優(yōu)勢是,手指在做動(dòng)作的時(shí)候是由手臂的肌肉來牽引的,表面就有微弱的電信號(hào),通過這個(gè)設(shè)備也可以清晰地采集到!

王斐教授正在和學(xué)生們分析交流研發(fā)問題
在研發(fā)過程中,團(tuán)隊(duì)曾遇到了智能硬件核心技術(shù)的瓶頸問題,開發(fā)到一定程度就受制于國外的技術(shù)封鎖,無法再進(jìn)行深層次開發(fā)。為了能夠做到從軟件到硬件都是自有技術(shù),團(tuán)隊(duì)經(jīng)歷了千萬遍枯燥重復(fù)的實(shí)驗(yàn)和數(shù)不清的“推倒重來”。王斐說:“硬件的困難主要體現(xiàn)在微弱電信號(hào)、生理電信號(hào)的采集、放大還有處理。軟件的難度則是如何能夠把手語拆成單體的手語,在這個(gè)模型里組合,從語句變到句子,是最難的也是將來能夠保住自己東西的壁壘。”
充分考慮到聾啞人是普遍收入偏低的弱勢群體,研發(fā)團(tuán)隊(duì)通過對(duì)多種材料反復(fù)比對(duì)試驗(yàn),最終選擇了在保證產(chǎn)品性能的基礎(chǔ)上,材料成本最低的方案,以實(shí)現(xiàn)項(xiàng)目成果的市場化轉(zhuǎn)換。王斐表示,目前這個(gè)手環(huán)成本才250美元,價(jià)格很便宜。將來如果實(shí)現(xiàn)生產(chǎn)估計(jì)售價(jià)將在200、300塊錢人民幣,殘疾人群體是完全負(fù)擔(dān)得起的。
目前,包括一家國企在內(nèi)的多家國內(nèi)電子信息企業(yè)正在積極與研發(fā)團(tuán)隊(duì)就該項(xiàng)目進(jìn)行接觸。研發(fā)團(tuán)隊(duì)成員李榮頡說:“他最希望的事就是看到這個(gè)項(xiàng)目真正能夠商品化,能夠?qū)嵱,真正解決聾啞人群體生活不便的問題,這比發(fā)幾篇論文,獲不獲獎(jiǎng)都來得重要的多。”
張家界天門山出現(xiàn)云海云瀑景觀