01:59

翻譯軟件大家可能都用過,，但是你見過AI智能手語(yǔ)翻譯系統(tǒng)軟件嗎,？健聽者可以和聽障者通過軟件十分順暢地交流,。帶領(lǐng)團(tuán)隊(duì)研發(fā)出這套系統(tǒng)的是一名從小雙耳失聰?shù)奶K州小伙，名叫楊陽(yáng)，27歲,。他和志同道合的聽障小伙伴一創(chuàng)業(yè)搞研發(fā)，努力追夢(mèng),。為了讓研發(fā)的AI智能手語(yǔ)翻譯系統(tǒng)性能更優(yōu)化,，他在工作間隙考上了北京交通大學(xué)人工智能專業(yè)的碩士研究生，研究方向是機(jī)器翻譯和自然語(yǔ)言處理,，都和正在開發(fā)的智能手語(yǔ)翻譯系統(tǒng)相關(guān),，讀研的同時(shí)也在遠(yuǎn)程操作軟件開發(fā)。8月30日,，接受揚(yáng)子晚報(bào)紫牛新聞?dòng)浾卟稍L時(shí),，楊陽(yáng)說：“我們所做的就是為了幫助包括我自己在內(nèi)的聽障人群打破溝通壁壘，讓溝通困難的聽障者被‘聽’見,，更好地融入社會(huì),。”

從小雙耳失聰

不放棄努力,，考上蘇州大學(xué)

近日,，揚(yáng)子晚報(bào)紫牛新聞?dòng)浾邅淼教K州太湖灣數(shù)字科技園內(nèi)，楊陽(yáng)和幾位同事正在這里進(jìn)行智能手語(yǔ)翻譯系統(tǒng)的優(yōu)化工作,。體型纖瘦的楊陽(yáng)看上去十分精干,，工作交流中沉著穩(wěn)重，耳朵上戴著的人工耳蝸,。記者的采訪就是通過他們研發(fā)的智能手語(yǔ)翻譯系統(tǒng)進(jìn)行的,，整個(gè)采訪過程很順暢,，毫無障礙。記者的聲音通過軟件識(shí)別后,，手機(jī)屏幕上的虛擬人物會(huì)做出手語(yǔ)的動(dòng)作,，這樣楊陽(yáng)可以很快讀懂，并且做出回復(fù),。

楊陽(yáng)利用翻譯軟件在和其他工作人員交流

楊陽(yáng)今年27歲,，蘇州人,。上幼兒園之前，父母發(fā)現(xiàn)他學(xué)講話比普通小朋友慢,，于是帶他去醫(yī)院檢查,，沒想到醫(yī)生診斷出他患有先天性前庭導(dǎo)水管擴(kuò)大，導(dǎo)致雙耳失聰,，完全聽不見外界的聲音,。

楊陽(yáng)借助翻譯軟件告訴記者，“出生之后我的耳朵就聽不見了,，但家人當(dāng)時(shí)并不知道,，后來帶我去了上海的醫(yī)院檢查，才意識(shí)到我患有先天性聽力障礙,。父母不舍得把我送去特殊學(xué)校,，希望我可以像普通的孩子一樣上學(xué)，于是把我送到了普通幼兒園培訓(xùn)語(yǔ)言表達(dá)能力,。幼兒園老師用手摸著我的喉嚨幫著練習(xí)開口發(fā)音,，但我實(shí)在沒法準(zhǔn)確地找到發(fā)音位置，訓(xùn)練了幾年,，我僅僅只能看懂口型,，沒學(xué)會(huì)發(fā)聲。后來,，我也只學(xué)會(huì)簡(jiǎn)單的兩三個(gè)詞語(yǔ),。”楊陽(yáng)遺憾地向記者表示,，聽力障礙帶來了發(fā)聲的困難,，因此在沒有翻譯軟件之前，他們這樣的群體與健聽人交流是很困難的,，他們的聲音很難被“聽”到,。

除了與他人溝通困難，聽力障礙也給學(xué)習(xí)帶來了很大的挑戰(zhàn),，“上課時(shí)沒法聽清老師說的話,，很多內(nèi)容都無法弄懂,。”學(xué)同樣的東西,，他往往要比同學(xué)們多花幾倍的精力，“反復(fù)看書,，看筆記,，用手比劃著問同學(xué)，然后反復(fù)做習(xí)題,?！?/p>

因?yàn)楫?dāng)時(shí)人工耳蝸的技術(shù)還不成熟，家長(zhǎng)了解得也比較晚,，所以直到楊陽(yáng)上高中時(shí),，家人才帶他安裝了人工耳蝸。有了人工耳蝸之后,，他勉強(qiáng)可以聽到一些聲音了,，“但因?yàn)檠b的時(shí)間比較晚，效果不是太好,，聽到的聲音比較微弱,，高中時(shí)聽課仍然需要下課后復(fù)盤好多遍?！?/p>

雖然困難重重,，但楊陽(yáng)從未放棄過學(xué)習(xí)，2015年,，他憑優(yōu)異的成績(jī)考上了蘇州大學(xué)物聯(lián)網(wǎng)工程專業(yè),。2019年大學(xué)畢業(yè)后，楊陽(yáng)應(yīng)聘到蘇州一家游戲公司,，成為了一名從事軟件開發(fā)的程序員,。

楊陽(yáng)接受揚(yáng)子晚報(bào)紫牛新聞?dòng)浾卟稍L

三位小伙伴攜手創(chuàng)業(yè)

研發(fā)AI智能手語(yǔ)翻譯系統(tǒng)

“前兩年由于種種原因,，我換了一份工作,，在應(yīng)聘新工作的時(shí)候,，遇到了一名和我有類似經(jīng)歷的聽障患者果果。她3歲那年突發(fā)高燒,，數(shù)天不退,，因此失去了聽力。她也因?yàn)樾r(shí)候沒有及時(shí)接受康復(fù)治療和發(fā)音練習(xí),，錯(cuò)失了開口說話的機(jī)會(huì),，如今與人溝通只能靠文字?！?/p>

楊陽(yáng)說,，了解了果果的故事之后，他內(nèi)心受到的觸動(dòng)很大,，“果果告訴我,，她有個(gè)好閨蜜叫萱萱，她們相識(shí)六年,。因?yàn)檩孑媸墙÷犎?，所以他倆平時(shí)的溝通只能靠打字，很麻煩,。她們一直想研發(fā)一款可以幫助聽障者和健聽人溝通的手語(yǔ)翻譯系統(tǒng),。”了解到她們的想法后，楊陽(yáng)激動(dòng)地表示他也有過類似的想法,，于是三個(gè)年輕人一拍即合,。萱萱和果果一起做過多年的手語(yǔ)數(shù)據(jù)統(tǒng)計(jì)工作，而楊陽(yáng)擅長(zhǎng)軟件開發(fā),，“我們決定一起創(chuàng)業(yè)搞研發(fā),，用科技搭建聽障者與健聽人之間溝通的橋梁！”

工作中的楊陽(yáng)

于是，楊陽(yáng)帶著一幫和他一樣熱血的年輕人開始了追夢(mèng)之旅,。2020年4月,，他們的公司在蘇州吳中區(qū)注冊(cè)成立,，“公司成立之初,，資金上存在困難，萱萱主動(dòng)將自己的房產(chǎn)進(jìn)行抵押,，幫助公司渡過資金難關(guān),。”

楊陽(yáng)告訴記者,，他們成立的這家公司是一家殘健融合型社會(huì)新型的科技公司,，專注于障礙人群無障礙領(lǐng)域產(chǎn)品的研發(fā)。目前公司由20余名聽障者及健聽人組成,，研發(fā)的譯語(yǔ)智能手語(yǔ)翻譯系統(tǒng)能提供語(yǔ)音,、文字與手語(yǔ)之間的快速轉(zhuǎn)換，讓聽障者與健聽人溝通交流更加便捷無障礙,。

團(tuán)隊(duì)的核心研發(fā)人員均為聽障者,，能精準(zhǔn)定位聽障者的需求，軟件也是由他們基于自身的諸多溝通障礙和“痛點(diǎn)”開發(fā)完成的,?？梢哉f，他們既是軟件的開發(fā)者,，也是軟件的受益者,。“公司的小伙伴里既有健聽人,，也有聽障者,，公司成立之初，工作交流只能通過紙筆進(jìn)行,，溝通效率極低,，而現(xiàn)在我們開會(huì)溝通都是用我們自己制作的手語(yǔ)翻譯軟件，大大降低了溝通成本，提升了溝通效率,?！睏铌?yáng)說。

楊陽(yáng)向記者展示翻譯軟件

軟件精準(zhǔn)度可達(dá)80%以上

他還利用工作間隙讀研深造

據(jù)了解，楊陽(yáng)及其團(tuán)隊(duì)研發(fā)的這款智能手語(yǔ)翻譯系統(tǒng),，可以說是一名24小時(shí)全天候在線的手語(yǔ)“翻譯官”,，旨在為聽障者與健聽人搭建無障礙信息通道。它的特點(diǎn)是基于聾人團(tuán)隊(duì)自建手語(yǔ)數(shù)據(jù)庫(kù)和多模態(tài)深度學(xué)習(xí)技術(shù),，實(shí)現(xiàn)語(yǔ)音與手語(yǔ)的快速轉(zhuǎn)換,。簡(jiǎn)單來說，就是通過AI技術(shù)把視頻語(yǔ)音實(shí)時(shí)翻譯成手語(yǔ),，從而幫助聽障人士與健聽人實(shí)現(xiàn)無障礙溝通,。

“最初，手語(yǔ)動(dòng)畫播放時(shí),，‘?dāng)?shù)字人’的動(dòng)作和表情不能自由結(jié)合,、表現(xiàn)生硬，這是軟件涉及到的最大技術(shù)難點(diǎn),。后來,，我們通過建立表情層和動(dòng)作層，設(shè)定不同權(quán)重,，使用狀態(tài)機(jī)制實(shí)現(xiàn)手語(yǔ)動(dòng)作和表情的自由結(jié)合,，比如動(dòng)作有10種，表情有5種,，那結(jié)合起來,，就能得到50種不同的狀態(tài)，大大提升了畫面手語(yǔ)的流暢度,。此外,，研發(fā)團(tuán)隊(duì)還在算法中融入了自然手語(yǔ)語(yǔ)序、表情,、唇語(yǔ),、身體姿態(tài)等特性，極大地提高了翻譯的精準(zhǔn)度,，現(xiàn)在實(shí)時(shí)翻譯的精準(zhǔn)度可以達(dá)到80%以上,。”

楊陽(yáng)告訴記者,，他們翻譯系統(tǒng)達(dá)到了一定的精準(zhǔn)度,，但仍有提升的空間,，因此去年，他在忙碌的工作間隙選擇了考研,，“當(dāng)時(shí)想讀研主要是考慮學(xué)以致用,，想用所學(xué)知識(shí)不斷優(yōu)化智能手語(yǔ)翻譯系統(tǒng)。了解到北京交通大學(xué)的人工智能專業(yè)很適合我,，也能對(duì)公司的發(fā)展有驅(qū)動(dòng)作用,。”于是,，經(jīng)歷了近一年時(shí)間的忙碌復(fù)習(xí),，他考上了北京交通大學(xué)的人工智能專業(yè)，如今是一名在讀研究生,，“現(xiàn)在的研究方向是機(jī)器翻譯和自然語(yǔ)言處理,，這些都和正在開發(fā)的智能手語(yǔ)翻譯系統(tǒng)相關(guān)，在校讀研的同時(shí)我也可以遠(yuǎn)程操作軟件開發(fā),?！?/p>

如今的楊陽(yáng)一邊讀研，一邊工作,，生活變得特別忙碌,，時(shí)間不夠用，常常吃飯的時(shí)候還在背單詞,，每天都很晚睡覺,。暑假期間他回到蘇州，緊鑼密鼓地和同事一起優(yōu)化智能手語(yǔ)翻譯系統(tǒng),。雖然辛苦,，但對(duì)于現(xiàn)在的生活，楊陽(yáng)覺得很滿足，也很有成就感,，“我國(guó)現(xiàn)在約有2780萬聽障人士,，占全國(guó)殘疾人的30%以上。聽障人群缺乏從正常渠道獲取聲音的能力,，即便是大分貝的聲音在他們聽來也是微弱且殘缺的,，他們很難獲得尋常的交流機(jī)會(huì)，但又渴望與外界產(chǎn)生連結(jié),。我作為他們中的一員,，深知大家的渴望與需求，因此我和我的團(tuán)隊(duì)都希望通過努力,，幫助聽障人群打破溝通壁壘,，更好地融入社會(huì)?！?/p>

談及未來發(fā)展,，楊陽(yáng)說：“目前，我們正在繼續(xù)優(yōu)化手語(yǔ)翻譯系統(tǒng),，借助數(shù)字化技術(shù)實(shí)現(xiàn)從手語(yǔ)到語(yǔ)音的轉(zhuǎn)換,，我們希望聽障群體的每一個(gè)人，每一句話被世界‘聽’到,?！?/p>

紫牛新聞?dòng)浾?｜張畢榮

編輯｜張冰晶

剪輯｜萬惠娟

主編｜陳迪晨

圖片和視頻素材：記者拍攝

揚(yáng)子晚報(bào)·紫牛新聞未經(jīng)授權(quán)不得轉(zhuǎn)載

轉(zhuǎn)載拒絕任何形式刪改

否則保留追究法律責(zé)任的權(quán)利

紫牛新聞常年法律顧問：

北京大成（南京）律師事務(wù)所唐迎鸞律師