■ 中國(guó)工業(yè)報(bào) 彭定芳
“冬奧手語(yǔ)播報(bào)數(shù)字人”系統(tǒng)已于冬奧開(kāi)幕后，每日持續(xù)在北京衛(wèi)視 《北京您早》節(jié)目中對(duì) “冬奧賽事集錦”和 “一起看冬奧”進(jìn)行手語(yǔ)播報(bào)，不僅能為聽(tīng)障人士提供手語(yǔ)信息播報(bào)服務(wù)，降低冬奧運(yùn)營(yíng)成本，還便捷了聽(tīng)障人士收看賽事專題報(bào)道，提升他們的社會(huì)參與度和幸福感。
2月9日，由北京市科委組織的 “科技冬奧企業(yè)行”大型主題系列采訪活動(dòng)，在北京智譜華章科技有限公司 （以下簡(jiǎn)稱 “智譜AI”）舉行。參與打造這一應(yīng)用項(xiàng)目的智譜AI副總裁左家平和凌云光技術(shù)股份有限公司副總裁楊藝分別向中國(guó)工業(yè)報(bào)證實(shí)： “冬奧手語(yǔ)播報(bào)數(shù)字人”系統(tǒng)可首先應(yīng)用于各電視臺(tái)、網(wǎng)絡(luò)平臺(tái)和大屏等多媒體渠道推廣。
北京電視臺(tái)新聞中心副主任王毅在活動(dòng)現(xiàn)場(chǎng)表示， “冬奧手語(yǔ)播報(bào)數(shù)字人”技術(shù)展現(xiàn)了強(qiáng)大的科技應(yīng)用能力，既有公益推廣價(jià)值，也有商業(yè)應(yīng)用價(jià)值，綜合社會(huì)價(jià)值十分大，希望能得到推廣使用。
據(jù)左家平介紹，根據(jù)全國(guó)第二次殘疾人抽樣調(diào)查數(shù)據(jù)，中國(guó)有超過(guò) 2700萬(wàn)名殘疾性聽(tīng)力障礙人士。“冬奧手語(yǔ)播報(bào)數(shù)字人”的科技賦能手段，讓他們能更全面感受這場(chǎng)精彩卓越的奧運(yùn)盛會(huì)。
中國(guó)工業(yè)報(bào)了解到， “冬奧手語(yǔ)播報(bào)數(shù)字人”，主要由智譜AI、凌云光和北京廣播電視臺(tái)聯(lián)合打造，清華大學(xué)賈珈教授團(tuán)隊(duì)和中科院計(jì)算所陳益強(qiáng)研究員團(tuán)隊(duì)也參與了相關(guān)關(guān)鍵技術(shù)的研究和開(kāi)發(fā)。該系統(tǒng)以超大規(guī)模預(yù)訓(xùn)練模型為核心技術(shù)，自主搭建多模態(tài)肢體動(dòng)作、表情、手指同步采集系統(tǒng)，運(yùn)用跨模態(tài)擬人生成算法、超高精度寫實(shí)數(shù)字人等行業(yè)領(lǐng)先技術(shù)，實(shí)現(xiàn)冬奧期間賽事新聞的專業(yè)手語(yǔ)翻譯播報(bào)。
《國(guó)家通用手語(yǔ)常用詞表》和 《國(guó)家通用盲文方案》于2018年作為語(yǔ)言文字規(guī)范正式發(fā)布。為了推廣和普及國(guó)家通用手語(yǔ)， “冬奧手語(yǔ)播報(bào)數(shù)字人”系統(tǒng)完成了 《國(guó)家通用手語(yǔ)詞典》收錄的8214條通用手語(yǔ)的采集和錄制，并且語(yǔ)法都以聽(tīng)障群體習(xí)慣打法為準(zhǔn)，以確保手語(yǔ)播報(bào)成果的準(zhǔn)確性和專業(yè)度，更好地服務(wù)聽(tīng)障人群。
由于當(dāng)前國(guó)內(nèi)缺少較完善的手語(yǔ)語(yǔ)料數(shù)據(jù)，研發(fā)人員在北京市殘疾人聯(lián)合會(huì)和市殘聯(lián)聾人協(xié)會(huì)的支持下，邀請(qǐng)超過(guò)40余位聾人老師及手語(yǔ)專家進(jìn)行手語(yǔ)文本轉(zhuǎn)寫和技術(shù)指導(dǎo)，并進(jìn)行大范圍聽(tīng)障群體評(píng)測(cè)，最終構(gòu)建了符合國(guó)家通用手語(yǔ)規(guī)范的國(guó)內(nèi)最大規(guī)模多模態(tài)手語(yǔ)語(yǔ)料庫(kù)，詞匯及語(yǔ)句總規(guī)模超10萬(wàn)。
為實(shí)現(xiàn)高精度、高自然度的人物形象和手語(yǔ)動(dòng)作姿態(tài)，研發(fā)團(tuán)隊(duì)還自主搭建了多模態(tài)肢體動(dòng)作、表情、手指同步采集系統(tǒng)。通過(guò)采集多模態(tài)動(dòng)作捕捉數(shù)據(jù)，運(yùn)用跨模態(tài)擬人生成算法對(duì)超寫實(shí)數(shù)字人進(jìn)行自然、流暢的驅(qū)動(dòng)和渲染，實(shí)現(xiàn)對(duì)文本內(nèi)容的手語(yǔ)播報(bào)。其中，通過(guò)肌肉綁定技術(shù)驅(qū)動(dòng)實(shí)現(xiàn)面部采集，結(jié)合業(yè)內(nèi)領(lǐng)先的語(yǔ)音識(shí)別及高清視頻合成等技術(shù)，呈現(xiàn)給聽(tīng)障人群親切自然的冬奧手語(yǔ)播報(bào)服務(wù)。
據(jù)活動(dòng)主辦方有關(guān)人士現(xiàn)場(chǎng)介紹，手語(yǔ)播報(bào)數(shù)字人的應(yīng)用場(chǎng)景廣泛，一方面可以為新聞媒體提供全流程智能化的數(shù)字人手語(yǔ)生成服務(wù)，方便聽(tīng)障人士快速了解新聞簡(jiǎn)訊；另一方面可將聲音廣播內(nèi)容轉(zhuǎn)化為手語(yǔ)，為聽(tīng)障人士播報(bào)冬奧會(huì)賽事賽情、賽場(chǎng)成績(jī)，便于獲取即時(shí)信息。
此外，手語(yǔ)播報(bào)數(shù)字人的推廣可加速國(guó)家通用手語(yǔ)推廣落地，推動(dòng)國(guó)家通用手語(yǔ)標(biāo)準(zhǔn)普及，為殘疾人平等參與社會(huì)生活創(chuàng)造無(wú)障礙環(huán)境，讓科技更有溫度。
智譜AICTO張鵬表示： “冬奧手語(yǔ)播報(bào)數(shù)字人的應(yīng)用展現(xiàn)了公司 ‘讓機(jī)器像人一樣思考’的愿景。不僅使聽(tīng)障人士能快捷獲取冬奧賽事資訊，還將無(wú)障礙環(huán)境理念傳遞到數(shù)億人群。智譜AI將持續(xù)深化數(shù)據(jù)和知識(shí)雙輪驅(qū)動(dòng)的戰(zhàn)略，打造強(qiáng)大而通用的人工智能系統(tǒng)，通過(guò)創(chuàng)新助力我國(guó)人工智能生態(tài)建設(shè)，讓技術(shù)創(chuàng)造更多價(jià)值。”
請(qǐng)輸入驗(yàn)證碼