01:59

翻譯軟件大家可能都用過,，但是你見過AI智能手語翻譯系統(tǒng)軟件嗎？健聽者可以和聽障者通過軟件十分順暢地交流,。帶領(lǐng)團隊研發(fā)出這套系統(tǒng)的是一名從小雙耳失聰?shù)奶K州小伙,，名叫楊陽，27歲,。他和志同道合的聽障小伙伴一創(chuàng)業(yè)搞研發(fā),，努力追夢。為了讓研發(fā)的AI智能手語翻譯系統(tǒng)性能更優(yōu)化,，他在工作間隙考上了北京交通大學人工智能專業(yè)的碩士研究生,，研究方向是機器翻譯和自然語言處理，都和正在開發(fā)的智能手語翻譯系統(tǒng)相關(guān),，讀研的同時也在遠程操作軟件開發(fā),。8月30日，接受揚子晚報紫牛新聞記者采訪時,，楊陽說：“我們所做的就是為了幫助包括我自己在內(nèi)的聽障人群打破溝通壁壘,，讓溝通困難的聽障者被‘聽’見，更好地融入社會,?！?/p>

從小雙耳失聰

不放棄努力，考上蘇州大學

近日,，揚子晚報紫牛新聞記者來到蘇州太湖灣數(shù)字科技園內(nèi),，楊陽和幾位同事正在這里進行智能手語翻譯系統(tǒng)的優(yōu)化工作。體型纖瘦的楊陽看上去十分精干,，工作交流中沉著穩(wěn)重,，耳朵上戴著的人工耳蝸。記者的采訪就是通過他們研發(fā)的智能手語翻譯系統(tǒng)進行的,，整個采訪過程很順暢,，毫無障礙。記者的聲音通過軟件識別后,，手機屏幕上的虛擬人物會做出手語的動作,，這樣楊陽可以很快讀懂，并且做出回復(fù),。

楊陽利用翻譯軟件在和其他工作人員交流

楊陽今年27歲,，蘇州人,。上幼兒園之前，父母發(fā)現(xiàn)他學講話比普通小朋友慢,，于是帶他去醫(yī)院檢查,，沒想到醫(yī)生診斷出他患有先天性前庭導(dǎo)水管擴大,，導(dǎo)致雙耳失聰，完全聽不見外界的聲音,。

楊陽借助翻譯軟件告訴記者,，“出生之后我的耳朵就聽不見了，但家人當時并不知道,，后來帶我去了上海的醫(yī)院檢查，才意識到我患有先天性聽力障礙,。父母不舍得把我送去特殊學校,，希望我可以像普通的孩子一樣上學，于是把我送到了普通幼兒園培訓語言表達能力,。幼兒園老師用手摸著我的喉嚨幫著練習開口發(fā)音,，但我實在沒法準確地找到發(fā)音位置，訓練了幾年,，我僅僅只能看懂口型,，沒學會發(fā)聲。后來,，我也只學會簡單的兩三個詞語,。”楊陽遺憾地向記者表示,，聽力障礙帶來了發(fā)聲的困難,，因此在沒有翻譯軟件之前，他們這樣的群體與健聽人交流是很困難的,，他們的聲音很難被“聽”到,。

除了與他人溝通困難，聽力障礙也給學習帶來了很大的挑戰(zhàn),，“上課時沒法聽清老師說的話,，很多內(nèi)容都無法弄懂?！睂W同樣的東西,，他往往要比同學們多花幾倍的精力，“反復(fù)看書,，看筆記,，用手比劃著問同學，然后反復(fù)做習題,?！?/p>

因為當時人工耳蝸的技術(shù)還不成熟，家長了解得也比較晚,，所以直到楊陽上高中時,，家人才帶他安裝了人工耳蝸,。有了人工耳蝸之后，他勉強可以聽到一些聲音了,，“但因為裝的時間比較晚,，效果不是太好，聽到的聲音比較微弱,，高中時聽課仍然需要下課后復(fù)盤好多遍,。”

雖然困難重重,，但楊陽從未放棄過學習,，2015年，他憑優(yōu)異的成績考上了蘇州大學物聯(lián)網(wǎng)工程專業(yè),。2019年大學畢業(yè)后，楊陽應(yīng)聘到蘇州一家游戲公司，成為了一名從事軟件開發(fā)的程序員,。

楊陽接受揚子晚報紫牛新聞記者采訪

三位小伙伴攜手創(chuàng)業(yè)

研發(fā)AI智能手語翻譯系統(tǒng)

“前兩年由于種種原因,，我換了一份工作,，在應(yīng)聘新工作的時候，遇到了一名和我有類似經(jīng)歷的聽障患者果果,。她3歲那年突發(fā)高燒,，數(shù)天不退，因此失去了聽力,。她也因為小時候沒有及時接受康復(fù)治療和發(fā)音練習,，錯失了開口說話的機會，如今與人溝通只能靠文字,?！?/p>

楊陽說,，了解了果果的故事之后,，他內(nèi)心受到的觸動很大，“果果告訴我,，她有個好閨蜜叫萱萱,，她們相識六年。因為萱萱是健聽人,，所以他倆平時的溝通只能靠打字,，很麻煩。她們一直想研發(fā)一款可以幫助聽障者和健聽人溝通的手語翻譯系統(tǒng),?！绷私獾剿齻兊南敕ê螅瑮铌柤拥乇硎舅灿羞^類似的想法,，于是三個年輕人一拍即合,。萱萱和果果一起做過多年的手語數(shù)據(jù)統(tǒng)計工作，而楊陽擅長軟件開發(fā),，“我們決定一起創(chuàng)業(yè)搞研發(fā),，用科技搭建聽障者與健聽人之間溝通的橋梁！”

工作中的楊陽

于是，楊陽帶著一幫和他一樣熱血的年輕人開始了追夢之旅,。2020年4月,，他們的公司在蘇州吳中區(qū)注冊成立，“公司成立之初,，資金上存在困難,，萱萱主動將自己的房產(chǎn)進行抵押,，幫助公司渡過資金難關(guān)?！?/p>

楊陽告訴記者,，他們成立的這家公司是一家殘健融合型社會新型的科技公司，專注于障礙人群無障礙領(lǐng)域產(chǎn)品的研發(fā),。目前公司由20余名聽障者及健聽人組成,，研發(fā)的譯語智能手語翻譯系統(tǒng)能提供語音、文字與手語之間的快速轉(zhuǎn)換,，讓聽障者與健聽人溝通交流更加便捷無障礙,。

團隊的核心研發(fā)人員均為聽障者，能精準定位聽障者的需求,，軟件也是由他們基于自身的諸多溝通障礙和“痛點”開發(fā)完成的,。可以說,，他們既是軟件的開發(fā)者,，也是軟件的受益者?！肮镜男』锇槔锛扔薪÷犎?，也有聽障者，公司成立之初,，工作交流只能通過紙筆進行,，溝通效率極低，而現(xiàn)在我們開會溝通都是用我們自己制作的手語翻譯軟件,，大大降低了溝通成本,，提升了溝通效率?！睏铌栒f,。

楊陽向記者展示翻譯軟件

軟件精準度可達80%以上

他還利用工作間隙讀研深造

據(jù)了解,，楊陽及其團隊研發(fā)的這款智能手語翻譯系統(tǒng)，可以說是一名24小時全天候在線的手語“翻譯官”,，旨在為聽障者與健聽人搭建無障礙信息通道,。它的特點是基于聾人團隊自建手語數(shù)據(jù)庫和多模態(tài)深度學習技術(shù)，實現(xiàn)語音與手語的快速轉(zhuǎn)換,。簡單來說,，就是通過AI技術(shù)把視頻語音實時翻譯成手語，從而幫助聽障人士與健聽人實現(xiàn)無障礙溝通。

“最初,，手語動畫播放時,，‘數(shù)字人’的動作和表情不能自由結(jié)合、表現(xiàn)生硬,，這是軟件涉及到的最大技術(shù)難點,。后來，我們通過建立表情層和動作層,，設(shè)定不同權(quán)重,，使用狀態(tài)機制實現(xiàn)手語動作和表情的自由結(jié)合，比如動作有10種,，表情有5種,，那結(jié)合起來，就能得到50種不同的狀態(tài),，大大提升了畫面手語的流暢度,。此外，研發(fā)團隊還在算法中融入了自然手語語序,、表情,、唇語、身體姿態(tài)等特性,，極大地提高了翻譯的精準度,，現(xiàn)在實時翻譯的精準度可以達到80%以上,?！?/p>

楊陽告訴記者，他們翻譯系統(tǒng)達到了一定的精準度,，但仍有提升的空間,，因此去年，他在忙碌的工作間隙選擇了考研,，“當時想讀研主要是考慮學以致用,，想用所學知識不斷優(yōu)化智能手語翻譯系統(tǒng)。了解到北京交通大學的人工智能專業(yè)很適合我,，也能對公司的發(fā)展有驅(qū)動作用?！庇谑?，經(jīng)歷了近一年時間的忙碌復(fù)習，他考上了北京交通大學的人工智能專業(yè),，如今是一名在讀研究生,，“現(xiàn)在的研究方向是機器翻譯和自然語言處理，這些都和正在開發(fā)的智能手語翻譯系統(tǒng)相關(guān),，在校讀研的同時我也可以遠程操作軟件開發(fā),。”

如今的楊陽一邊讀研,，一邊工作,，生活變得特別忙碌，時間不夠用,，常常吃飯的時候還在背單詞,，每天都很晚睡覺。暑假期間他回到蘇州,，緊鑼密鼓地和同事一起優(yōu)化智能手語翻譯系統(tǒng),。雖然辛苦，但對于現(xiàn)在的生活,，楊陽覺得很滿足,，也很有成就感，“我國現(xiàn)在約有2780萬聽障人士,，占全國殘疾人的30%以上,。聽障人群缺乏從正常渠道獲取聲音的能力，即便是大分貝的聲音在他們聽來也是微弱且殘缺的,，他們很難獲得尋常的交流機會,，但又渴望與外界產(chǎn)生連結(jié)。我作為他們中的一員,，深知大家的渴望與需求,，因此我和我的團隊都希望通過努力，幫助聽障人群打破溝通壁壘,，更好地融入社會,?！?/p>

談及未來發(fā)展，楊陽說：“目前,，我們正在繼續(xù)優(yōu)化手語翻譯系統(tǒng),，借助數(shù)字化技術(shù)實現(xiàn)從手語到語音的轉(zhuǎn)換，我們希望聽障群體的每一個人,，每一句話被世界‘聽’到,。”

紫牛新聞記者 ｜張畢榮

編輯｜張冰晶

剪輯｜萬惠娟

主編｜陳迪晨

圖片和視頻素材：記者拍攝

揚子晚報·紫牛新聞未經(jīng)授權(quán)不得轉(zhuǎn)載

轉(zhuǎn)載拒絕任何形式刪改

否則保留追究法律責任的權(quán)利

紫牛新聞常年法律顧問：

北京大成（南京）律師事務(wù)所唐迎鸞律師