01:59

翻譯軟件大家可能都用過,，但是你見過AI智能手語翻譯系統(tǒng)軟件嗎,？健聽者可以和聽障者通過軟件十分順暢地交流。帶領(lǐng)團(tuán)隊研發(fā)出這套系統(tǒng)的是一名從小雙耳失聰?shù)奶K州小伙,，名叫楊陽,，27歲。他和志同道合的聽障小伙伴一創(chuàng)業(yè)搞研發(fā),，努力追夢,。為了讓研發(fā)的AI智能手語翻譯系統(tǒng)性能更優(yōu)化，他在工作間隙考上了北京交通大學(xué)人工智能專業(yè)的碩士研究生,，研究方向是機器翻譯和自然語言處理,，都和正在開發(fā)的智能手語翻譯系統(tǒng)相關(guān)，讀研的同時也在遠(yuǎn)程操作軟件開發(fā),。8月30日,，接受揚子晚報紫牛新聞記者采訪時，楊陽說：“我們所做的就是為了幫助包括我自己在內(nèi)的聽障人群打破溝通壁壘,，讓溝通困難的聽障者被‘聽’見,，更好地融入社會?！?/p>

從小雙耳失聰

不放棄努力,，考上蘇州大學(xué)

近日，揚子晚報紫牛新聞記者來到蘇州太湖灣數(shù)字科技園內(nèi),，楊陽和幾位同事正在這里進(jìn)行智能手語翻譯系統(tǒng)的優(yōu)化工作,。體型纖瘦的楊陽看上去十分精干，工作交流中沉著穩(wěn)重，耳朵上戴著的人工耳蝸,。記者的采訪就是通過他們研發(fā)的智能手語翻譯系統(tǒng)進(jìn)行的,，整個采訪過程很順暢，毫無障礙,。記者的聲音通過軟件識別后,，手機屏幕上的虛擬人物會做出手語的動作，這樣楊陽可以很快讀懂,，并且做出回復(fù),。

楊陽利用翻譯軟件在和其他工作人員交流

楊陽今年27歲,，蘇州人。上幼兒園之前,，父母發(fā)現(xiàn)他學(xué)講話比普通小朋友慢,，于是帶他去醫(yī)院檢查，沒想到醫(yī)生診斷出他患有先天性前庭導(dǎo)水管擴大,，導(dǎo)致雙耳失聰,，完全聽不見外界的聲音。

楊陽借助翻譯軟件告訴記者,，“出生之后我的耳朵就聽不見了,，但家人當(dāng)時并不知道，后來帶我去了上海的醫(yī)院檢查,，才意識到我患有先天性聽力障礙,。父母不舍得把我送去特殊學(xué)校,，希望我可以像普通的孩子一樣上學(xué),，于是把我送到了普通幼兒園培訓(xùn)語言表達(dá)能力。幼兒園老師用手摸著我的喉嚨幫著練習(xí)開口發(fā)音,，但我實在沒法準(zhǔn)確地找到發(fā)音位置,，訓(xùn)練了幾年，我僅僅只能看懂口型,，沒學(xué)會發(fā)聲,。后來，我也只學(xué)會簡單的兩三個詞語,?！睏铌栠z憾地向記者表示，聽力障礙帶來了發(fā)聲的困難,，因此在沒有翻譯軟件之前,，他們這樣的群體與健聽人交流是很困難的，他們的聲音很難被“聽”到。

除了與他人溝通困難,，聽力障礙也給學(xué)習(xí)帶來了很大的挑戰(zhàn),，“上課時沒法聽清老師說的話，很多內(nèi)容都無法弄懂,?！睂W(xué)同樣的東西，他往往要比同學(xué)們多花幾倍的精力,，“反復(fù)看書,，看筆記，用手比劃著問同學(xué),，然后反復(fù)做習(xí)題,。”

因為當(dāng)時人工耳蝸的技術(shù)還不成熟,，家長了解得也比較晚,，所以直到楊陽上高中時，家人才帶他安裝了人工耳蝸,。有了人工耳蝸之后,，他勉強可以聽到一些聲音了，“但因為裝的時間比較晚,，效果不是太好,，聽到的聲音比較微弱，高中時聽課仍然需要下課后復(fù)盤好多遍,?！?/p>

雖然困難重重，但楊陽從未放棄過學(xué)習(xí),，2015年,，他憑優(yōu)異的成績考上了蘇州大學(xué)物聯(lián)網(wǎng)工程專業(yè)。2019年大學(xué)畢業(yè)后,，楊陽應(yīng)聘到蘇州一家游戲公司,，成為了一名從事軟件開發(fā)的程序員。

楊陽接受揚子晚報紫牛新聞記者采訪

三位小伙伴攜手創(chuàng)業(yè)

研發(fā)AI智能手語翻譯系統(tǒng)

“前兩年由于種種原因，我換了一份工作,，在應(yīng)聘新工作的時候,，遇到了一名和我有類似經(jīng)歷的聽障患者果果。她3歲那年突發(fā)高燒,，數(shù)天不退,，因此失去了聽力。她也因為小時候沒有及時接受康復(fù)治療和發(fā)音練習(xí),，錯失了開口說話的機會,，如今與人溝通只能靠文字?！?/p>

楊陽說,，了解了果果的故事之后,，他內(nèi)心受到的觸動很大,，“果果告訴我，她有個好閨蜜叫萱萱,，她們相識六年,。因為萱萱是健聽人，所以他倆平時的溝通只能靠打字,，很麻煩,。她們一直想研發(fā)一款可以幫助聽障者和健聽人溝通的手語翻譯系統(tǒng)。”了解到她們的想法后,，楊陽激動地表示他也有過類似的想法,，于是三個年輕人一拍即合。萱萱和果果一起做過多年的手語數(shù)據(jù)統(tǒng)計工作,，而楊陽擅長軟件開發(fā),，“我們決定一起創(chuàng)業(yè)搞研發(fā)，用科技搭建聽障者與健聽人之間溝通的橋梁,！”

工作中的楊陽

于是,，楊陽帶著一幫和他一樣熱血的年輕人開始了追夢之旅,。2020年4月，他們的公司在蘇州吳中區(qū)注冊成立,，“公司成立之初,，資金上存在困難，萱萱主動將自己的房產(chǎn)進(jìn)行抵押,，幫助公司渡過資金難關(guān),。”

楊陽告訴記者,，他們成立的這家公司是一家殘健融合型社會新型的科技公司,，專注于障礙人群無障礙領(lǐng)域產(chǎn)品的研發(fā)。目前公司由20余名聽障者及健聽人組成,，研發(fā)的譯語智能手語翻譯系統(tǒng)能提供語音,、文字與手語之間的快速轉(zhuǎn)換，讓聽障者與健聽人溝通交流更加便捷無障礙,。

團(tuán)隊的核心研發(fā)人員均為聽障者,，能精準(zhǔn)定位聽障者的需求，軟件也是由他們基于自身的諸多溝通障礙和“痛點”開發(fā)完成的,?？梢哉f，他們既是軟件的開發(fā)者,，也是軟件的受益者,。“公司的小伙伴里既有健聽人,，也有聽障者,，公司成立之初，工作交流只能通過紙筆進(jìn)行,，溝通效率極低,，而現(xiàn)在我們開會溝通都是用我們自己制作的手語翻譯軟件,，大大降低了溝通成本，提升了溝通效率,?！睏铌栒f。

楊陽向記者展示翻譯軟件

軟件精準(zhǔn)度可達(dá)80%以上

他還利用工作間隙讀研深造

據(jù)了解，楊陽及其團(tuán)隊研發(fā)的這款智能手語翻譯系統(tǒng),，可以說是一名24小時全天候在線的手語“翻譯官”,，旨在為聽障者與健聽人搭建無障礙信息通道。它的特點是基于聾人團(tuán)隊自建手語數(shù)據(jù)庫和多模態(tài)深度學(xué)習(xí)技術(shù),，實現(xiàn)語音與手語的快速轉(zhuǎn)換,。簡單來說，就是通過AI技術(shù)把視頻語音實時翻譯成手語,，從而幫助聽障人士與健聽人實現(xiàn)無障礙溝通,。

“最初，手語動畫播放時,，‘?dāng)?shù)字人’的動作和表情不能自由結(jié)合,、表現(xiàn)生硬，這是軟件涉及到的最大技術(shù)難點,。后來,，我們通過建立表情層和動作層，設(shè)定不同權(quán)重,，使用狀態(tài)機制實現(xiàn)手語動作和表情的自由結(jié)合,，比如動作有10種，表情有5種,，那結(jié)合起來,，就能得到50種不同的狀態(tài)，大大提升了畫面手語的流暢度,。此外,，研發(fā)團(tuán)隊還在算法中融入了自然手語語序、表情,、唇語,、身體姿態(tài)等特性，極大地提高了翻譯的精準(zhǔn)度,，現(xiàn)在實時翻譯的精準(zhǔn)度可以達(dá)到80%以上,。”

楊陽告訴記者,，他們翻譯系統(tǒng)達(dá)到了一定的精準(zhǔn)度,，但仍有提升的空間，因此去年,，他在忙碌的工作間隙選擇了考研,，“當(dāng)時想讀研主要是考慮學(xué)以致用，想用所學(xué)知識不斷優(yōu)化智能手語翻譯系統(tǒng),。了解到北京交通大學(xué)的人工智能專業(yè)很適合我,，也能對公司的發(fā)展有驅(qū)動作用,。”于是,，經(jīng)歷了近一年時間的忙碌復(fù)習(xí),，他考上了北京交通大學(xué)的人工智能專業(yè)，如今是一名在讀研究生,，“現(xiàn)在的研究方向是機器翻譯和自然語言處理,，這些都和正在開發(fā)的智能手語翻譯系統(tǒng)相關(guān)，在校讀研的同時我也可以遠(yuǎn)程操作軟件開發(fā),?！?/p>

如今的楊陽一邊讀研，一邊工作,，生活變得特別忙碌,，時間不夠用，常常吃飯的時候還在背單詞,，每天都很晚睡覺,。暑假期間他回到蘇州，緊鑼密鼓地和同事一起優(yōu)化智能手語翻譯系統(tǒng),。雖然辛苦,，但對于現(xiàn)在的生活,，楊陽覺得很滿足，也很有成就感,，“我國現(xiàn)在約有2780萬聽障人士,，占全國殘疾人的30%以上。聽障人群缺乏從正常渠道獲取聲音的能力,，即便是大分貝的聲音在他們聽來也是微弱且殘缺的,，他們很難獲得尋常的交流機會，但又渴望與外界產(chǎn)生連結(jié),。我作為他們中的一員,，深知大家的渴望與需求，因此我和我的團(tuán)隊都希望通過努力,，幫助聽障人群打破溝通壁壘,，更好地融入社會?！?/p>

談及未來發(fā)展,，楊陽說：“目前，我們正在繼續(xù)優(yōu)化手語翻譯系統(tǒng),，借助數(shù)字化技術(shù)實現(xiàn)從手語到語音的轉(zhuǎn)換,，我們希望聽障群體的每一個人，每一句話被世界‘聽’到,?！?/p>

紫牛新聞記者 ｜張畢榮

編輯｜張冰晶

剪輯｜萬惠娟

主編｜陳迪晨

圖片和視頻素材：記者拍攝

揚子晚報·紫牛新聞未經(jīng)授權(quán)不得轉(zhuǎn)載

轉(zhuǎn)載拒絕任何形式刪改

否則保留追究法律責(zé)任的權(quán)利

紫牛新聞常年法律顧問：

北京大成（南京）律師事務(wù)所唐迎鸞律師