新(xin)華社天津2月18日電（記者白(bai)佳麗(li)、宋瑞(rui)）對聽(ting)障(zhang)人(ren)(ren)(ren)士來說(shuo)，激烈的(de)賽事往(wang)往(wang)只能被看見，卻無(wu)法被聽(ting)見。而今年的(de)北京(jing)冬奧(ao)會上，不少聽(ting)障(zhang)人(ren)(ren)(ren)士發現，賽事新(xin)聞中出(chu)現了一(yi)名(ming)面容清秀的(de)冬奧(ao)新(xin)聞AI主播(bo)，“她”精(jing)準的(de)手(shou)語(yu)手(shou)勢讓聽(ting)障(zhang)人(ren)(ren)(ren)士與健聽(ting)人(ren)(ren)(ren)（聽(ting)力健全(quan)人(ren)(ren)(ren)的(de)簡稱(cheng)）一(yi)樣，可(ke)以同步感受冰雪運動的(de)魅(mei)力。
“用技(ji)術跨(kua)越聲音(yin)的(de)障礙，讓聽障人士‘聽見(jian)’冬(dong)奧。”澳(ao)(ao)門(men)(men)澳(ao)(ao)門(men)(men)澳(ao)(ao)門(men)(men)精準大(da)全聾人工(gong)澳(ao)(ao)門(men)(men)澳(ao)(ao)門(men)(men)澳(ao)(ao)門(men)(men)精準大(da)全副院長、冬(dong)奧新聞AI主(zhu)播(bo)的(de)手語數據(ju)庫支持團隊(dui)負責人袁甜(tian)甜(tian)說。
海報制作：方金洋(yang)
用6年時間搭一座“溝通的橋”
袁甜甜身上，有股堅持到(dao)底(di)的韌(ren)勁。
她帶領團隊用6年時(shi)間，為聽障人(ren)士搭建了一座與健聽人(ren)無(wu)障礙溝(gou)通的“橋梁(liang)”。并(bing)在北(bei)京(jing)冬(dong)奧會上，邁(mai)出了落地應用的“第一步”。
“我們(men)研(yan)發了(le)一套系統，叫作‘復雜(za)場景(jing)下中(zhong)國手語(yu)(yu)實時翻譯(yi)系統’，這(zhe)套系統能將(jiang)輸(shu)入的手語(yu)(yu)動作和(he)表情經由(you)計算機視覺技術識別后翻譯(yi)成文字或語(yu)(yu)音。為(wei)此，我們(men)共收集(ji)了(le)20多萬條語(yu)(yu)料。”袁甜(tian)甜(tian)說。
談到(dao)做這件(jian)事的初(chu)衷，袁甜甜表示是為了與聽(ting)障學生更好地交流。
澳門澳門澳門精準大全聾人工澳門澳門澳門精準大全學生通過手機App為手語識別系統進行數據采集。（新(xin)華社記者 孫凡越 攝）
“我16年前來到澳門澳門澳門精準大全當(dang)老師，與(yu)聽(ting)障學生接觸的過(guo)程中，發現他們最(zui)渴望也最(zui)懼怕的就(jiu)是與(yu)健聽(ting)人(ren)交流。因為有網絡專(zhuan)業(ye)背(bei)景，于是我決心通過(guo)技術(shu)改變這種現狀。”袁甜甜說。
從一(yi)(yi)個(ge)人(ren)摸(mo)索，到僅有(you)一(yi)(yi)名聽(ting)障學(xue)生(sheng)加入，再到成立無障礙智能科技研發團隊。如今，這支由健聽(ting)人(ren)與聽(ting)障人(ren)士組成的“特殊(shu)”技術(shu)團隊，核心成員達50多人(ren)，其(qi)中不少是“00后(hou)”聽(ting)障學(xue)生(sheng)。
隨著(zhu)團隊的(de)發展(zhan)壯大，技術(shu)難(nan)關也被(bei)層(ceng)(ceng)層(ceng)(ceng)攻(gong)破。“目(mu)前(qian)，我(wo)們實現了在光線充足(zu)且穩(wen)定(ding)的(de)室(shi)內，系統對手語的(de)識別(bie)率最高達95%，部分場景下可以(yi)實現‘同步(bu)翻譯(yi)’。”袁甜甜自豪地補充，“只要在攝像頭前(qian)打出手語，顯(xian)示屏(ping)上就會出現語意連貫的(de)文字(zi)翻譯(yi)。現在已經可以(yi)用于教育、法律咨詢、餐飲、交通多個場景。”
讓聽障人士“聽見”冬奧
2021年11月，袁甜甜接到一(yi)個緊急任務(wu)——教冬奧新(xin)聞(wen)AI主(zhu)播“說(shuo)”手(shou)語。
“人工智能深(shen)度學習(xi)的(de)過程(cheng)，就像教小孩子學說(shuo)話，每一(yi)個詞、每一(yi)個手語動(dong)作(zuo)都需要重復‘學習(xi)’才能實(shi)現精(jing)準無誤(wu)。”袁甜甜與同伴們開始一(yi)一(yi)攻克難題。
第一(yi)(yi)時間(jian)參與其中的聾人工澳門澳門澳門精準大全教師閔(min)笛對這一(yi)(yi)過程深(shen)有體會(hui)。“一(yi)(yi)個字‘難(nan)’。”他說。
首(shou)先擺(bai)在面(mian)前的，就(jiu)是“冷(leng)門”的冬奧詞匯，以及(ji)專業新(xin)聞語言，怎(zen)么才能轉換為(wei)大多數聽障人士能看懂(dong)的手語？
團隊成(cheng)(cheng)員(yuan)先把(ba)整理出(chu)的新詞形成(cheng)(cheng)一定的手語打法，再讓手語專家(jia)一一判(pan)定聽障人(ren)士(shi)能(neng)否(fou)看懂。遇到難(nan)用(yong)手語表示的詞匯(hui)時，還(huan)需多番討論。“每個詞至(zhi)少要經(jing)歷這樣兩個來回，就這樣我們(men)共新增了(le)1000多個專業詞匯(hui)的手語打法。”閔笛說。
有了過去20多(duo)萬條語(yu)料做基。衷(zhong)黽(min)恿(yong)誦碌淖ㄒ蕩駛，本以為工(gong)作已接近完成(cheng)。但很快大家發現(xian)，手語(yu)語(yu)序與普通(tong)人說話語(yu)序并不相同，即便把這些詞匯通(tong)通(tong)“灌輸”給AI主播，也無(wu)法打出連貫的、聽障人士能夠理解(jie)的語(yu)句。
“我(wo)們通過多(duo)年積累的技術經驗，讓AI主(zhu)播逐步掌握從普(pu)通人語言到手(shou)語的流(liu)暢直譯，并不斷調試(shi)AI主(zhu)播手(shou)語速度(du)，讓聽障人士(shi)能夠更清晰地理解。”閔笛說。
用技術破解更多“52赫茲”的密碼
今年22歲的(de)王曉陽(yang)，是(shi)聾(long)人工澳門澳門澳門精準大(da)全大(da)三的(de)學生。作為一名(ming)聽(ting)障學生，他參(can)與(yu)了冬奧新聞AI主播(bo)“學習”手(shou)語(yu)的(de)全過程。從(cong)冬奧會開幕那(nei)天(tian)起，他每天(tian)都(dou)會準時打開手(shou)機“盯著(zhu)”AI主播(bo)的(de)每一個(ge)手(shou)語(yu)手(shou)勢。
“就怕她(ta)沒學好，怕她(ta)出(chu)錯！”王曉陽用(yong)手語(yu)解釋。但令他(ta)欣慰的(de)(de)是，越來(lai)越多聽障朋(peng)友發來(lai)信息，告訴(su)他(ta)AI主播的(de)(de)手語(yu)“看得(de)清楚、清晰”。“手語(yu)打得(de)很漂亮，我們為自己驕傲。”一旁的(de)(de)同(tong)學魏翔羽用(yong)手語(yu)補充。
澳門澳門澳門精準大全聾人工澳門澳門澳門精準大全學生在進行手語識別系統調試。（新華(hua)社記者 孫凡(fan)越 攝）
技術(shu)越過聲(sheng)音的障(zhang)(zhang)礙，讓更(geng)(geng)多聽(ting)障(zhang)(zhang)人士走(zou)向更(geng)(geng)廣闊的世界。
“信息技(ji)術對我(wo)(wo)(wo)們(men)幫助很大。”王(wang)曉陽用(yong)手(shou)語說，以前與健(jian)聽人交流，他總覺得不安，有了這些技(ji)術手(shou)段，讓(rang)他更有勇氣融入社會。“以后我(wo)(wo)(wo)想當老師，因為(wei)我(wo)(wo)(wo)的家鄉缺(que)少(shao)聾人老師。或者我(wo)(wo)(wo)去當程序(xu)員，用(yong)技(ji)術讓(rang)更多人聾人‘聽見’。”
對(dui)袁(yuan)甜甜來(lai)說(shuo)，還有很多工作等著她(ta)帶(dai)領(ling)團隊完(wan)成。“我們(men)將不斷迭(die)代(dai)升級我們(men)的系統，直到它能夠在各種(zhong)場(chang)景下讓聽(ting)障(zhang)人士(shi)與我們(men)流暢交流。”
袁甜甜講(jiang)了一個“52赫茲鯨(jing)(jing)”的(de)(de)故(gu)事——海洋中，有(you)只叫聲頻率與(yu)眾不同的(de)(de)鯨(jing)(jing)魚，因無法與(yu)同類交(jiao)流(liu)而孤獨(du)。這只鯨(jing)(jing)魚很像聽障群體，“我們要(yao)去破解‘52赫茲’的(de)(de)密碼(ma)，用技術(shu)把孤獨(du)的(de)(de)鯨(jing)(jing)魚與(yu)其他鯨(jing)(jing)魚連起，讓它們獲得(de)更多機(ji)會與(yu)幸福(fu)。”
