【成果應(yīng)用】科大訊飛“聽(tīng)見(jiàn)A.I.的聲音”走進(jìn)中國(guó)殘疾人藝術(shù)團(tuán) ?——訊飛聽(tīng)見(jiàn)云會(huì)議、錄音寶M1助力殘疾人遠(yuǎn)程教學(xué)
- 文章來(lái)源:
無(wú)障礙智庫(kù)
- 發(fā)布時(shí)間:2020.07.24

大美無(wú)障愛(ài):發(fā)現(xiàn)美 傳遞愛(ài)
科大訊飛“聽(tīng)見(jiàn)A.I.的聲音”
走進(jìn)中國(guó)殘疾人藝術(shù)團(tuán)
——訊飛聽(tīng)見(jiàn)云會(huì)議、錄音寶M1助力殘疾人遠(yuǎn)程教學(xué)
為了阻斷疫情向校園蔓延,確保師生生命安全和身體健康,教育部明確2020年春季延期開(kāi)學(xué),并提出“停課不停學(xué)”。目前,各地學(xué)校陸續(xù)開(kāi)始行動(dòng),老師們紛紛通過(guò)開(kāi)設(shè)網(wǎng)絡(luò)直播給學(xué)生上課。受疫情影響,殘疾人藝術(shù)團(tuán)的線下教學(xué)工作也受到了一定的阻礙,在“停課不停學(xué)”上,因?yàn)榇蠖嗑W(wǎng)絡(luò)學(xué)習(xí)課件沒(méi)和直播課程有字幕及手語(yǔ)解釋?zhuān)?tīng)障學(xué)生其實(shí)更應(yīng)當(dāng)收到社會(huì)更多的關(guān)注與幫助。

上圖中國(guó)殘疾人藝術(shù)團(tuán)學(xué)員2019年5月15日,第二十九個(gè)全國(guó)助殘日上,中國(guó)聾協(xié)聯(lián)合科大訊飛正式發(fā)起了“聽(tīng)見(jiàn)A.I.的聲音”關(guān)愛(ài)聽(tīng)障人士公益行動(dòng)。訊飛聽(tīng)見(jiàn)APP承諾向所有聽(tīng)障用戶(hù)提供終身免費(fèi)轉(zhuǎn)寫(xiě)服務(wù)。適逢“聽(tīng)見(jiàn)A.I.的聲音”關(guān)愛(ài)行動(dòng)一周年之際,科大訊飛于2020年5月15日再次來(lái)到中國(guó)殘疾人藝術(shù)團(tuán),為藝術(shù)團(tuán)的80余名聽(tīng)障同學(xué)進(jìn)行了一場(chǎng)“云捐贈(zèng)”,包含訊飛聽(tīng)見(jiàn)云會(huì)議產(chǎn)品及近百臺(tái)訊飛聽(tīng)見(jiàn)錄音寶M1,并通過(guò)線下+線上連線的新方式為同學(xué)們進(jìn)行培訓(xùn),手把手教會(huì)大家使用。網(wǎng)絡(luò)授課方式顯著降低了講課聽(tīng)課的門(mén)檻,多種學(xué)習(xí)軟件、學(xué)習(xí)視頻、網(wǎng)絡(luò)課堂APP層出不窮,讓普通人隨時(shí)隨地都可以在線學(xué)習(xí),獲取前沿知識(shí)。然而,聽(tīng)力不同的觀眾,對(duì)字幕詳細(xì)程度的需求差別很大。聽(tīng)力沒(méi)有損失的觀眾,只要畫(huà)面上有幻燈片或者關(guān)鍵詞,他們已經(jīng)能輕松地聽(tīng)明白全部細(xì)節(jié)。對(duì)有聽(tīng)力損失的觀眾來(lái)說(shuō),視頻和直播中所有的言語(yǔ)信息要逐字展示,與畫(huà)面同步,才是一個(gè)完整的、可以理解的信息結(jié)構(gòu)。對(duì)于有更嚴(yán)重的聽(tīng)力損失的觀眾來(lái)說(shuō),有時(shí)還需要提示背景環(huán)境音,使看不見(jiàn)的聲音能夠被“看”到:比如日本的一些信息無(wú)障礙電影中,甚至汽車(chē)?guó)Q笛的背景音都要通過(guò)文字顯現(xiàn)。最受聽(tīng)障人士歡迎的,還是配有字幕的網(wǎng)絡(luò)課程。無(wú)論是電視、電話,還是視頻、音頻,傳輸?shù)穆曇粜盘?hào)都有一定的變形,這讓聽(tīng)障人士,特別是中重度聽(tīng)障者,辨聽(tīng)電子聲多少有一定的困難。而帶有字幕的視頻,能夠幫助他們實(shí)時(shí)對(duì)接聲音與畫(huà)面。可見(jiàn),言語(yǔ)信息的逐字字幕是通用無(wú)障礙設(shè)施的一部分,可以覆蓋到最多人群的需要,和建筑物門(mén)口的無(wú)障礙斜坡性質(zhì)是一樣的,它是聲音世界里的坡道。對(duì)于聽(tīng)障學(xué)生來(lái)說(shuō),“云課堂”下的信息無(wú)障礙需求,主要體現(xiàn)在搭配字幕。網(wǎng)絡(luò)遠(yuǎn)程教學(xué)的字幕呈現(xiàn),應(yīng)該滿(mǎn)足以下幾個(gè)原則:1、制作盡量自動(dòng)化,不需要額外雇用翻譯(速錄師)來(lái)同步轉(zhuǎn)錄,或者要求親戚朋友長(zhǎng)時(shí)間做兼職的同聲傳譯。2、確保聲音、畫(huà)面、課件、字幕信息同步。4、位置最好在屏幕下方或者右方,并帶有延時(shí)交替性(類(lèi)似卡拉OK那樣,后一句話出現(xiàn)時(shí),前一句話不要馬上消失,逐句頂替)。一些老師講課語(yǔ)速較快,聽(tīng)障學(xué)生低頭記筆記的時(shí)候,注意力難以一心二用,很容易錯(cuò)過(guò)老師沒(méi)有強(qiáng)調(diào)的重點(diǎn)。5、上手簡(jiǎn)單快捷,對(duì)老師和學(xué)生雙方來(lái)說(shuō),學(xué)習(xí)成本都很低。6、不容易引起教學(xué)內(nèi)容方面的知識(shí)產(chǎn)權(quán)爭(zhēng)議,授課者也更愿意配合。為此,科大訊飛利用聽(tīng)見(jiàn)云會(huì)議產(chǎn)品為殘疾人遠(yuǎn)程教學(xué)提供“軟件+硬件”全套無(wú)障礙教學(xué)解決方案,軟件服務(wù)包括:多方音視頻通信、實(shí)時(shí)語(yǔ)音轉(zhuǎn)寫(xiě)、中英文互譯等;硬件終端包括:一款以多功能視頻通信、實(shí)時(shí)語(yǔ)音轉(zhuǎn)寫(xiě)及翻譯為核心功能,可放置在老師講桌上或辦公桌的高端智能教學(xué)設(shè)備訊飛聽(tīng)見(jiàn)L1;提供各類(lèi)軟件客戶(hù)端(IOS,ANDROID,WINDOWS,MAC端),聽(tīng)障可使用各種設(shè)備(手機(jī)、電腦、訊飛聽(tīng)見(jiàn)L1等)開(kāi)啟教學(xué)進(jìn)行即時(shí)溝通,通過(guò)業(yè)界領(lǐng)先的語(yǔ)音轉(zhuǎn)寫(xiě)、翻譯及基于云架構(gòu)多系統(tǒng)兼容的視頻通信技術(shù),實(shí)現(xiàn)視頻教學(xué)語(yǔ)音轉(zhuǎn)寫(xiě)、遠(yuǎn)程課件分享、教學(xué)全程記錄、教學(xué)成果沉淀、內(nèi)容快速分享等獨(dú)特功能。

5月15日,殘疾人藝術(shù)團(tuán)80余名聽(tīng)障同學(xué)體驗(yàn)了這種學(xué)習(xí)新的形式,使用訊飛聽(tīng)見(jiàn)云會(huì)議進(jìn)行授課,現(xiàn)場(chǎng)通過(guò)訊飛聽(tīng)見(jiàn)云會(huì)議遠(yuǎn)程連線了身處外地暫時(shí)無(wú)法復(fù)課的同學(xué),產(chǎn)品對(duì)發(fā)言人提供實(shí)時(shí)語(yǔ)音轉(zhuǎn)文字的服務(wù),將字幕呈現(xiàn)在屏幕端,幫助每一位聽(tīng)障學(xué)生進(jìn)行實(shí)時(shí)的溝通,變聽(tīng)為看,成為他們與世界溝通的小耳朵。


上圖:運(yùn)用聽(tīng)見(jiàn)云會(huì)議進(jìn)行遠(yuǎn)程教學(xué)培訓(xùn)

上圖:培訓(xùn)現(xiàn)場(chǎng)
“大多數(shù)的人會(huì)認(rèn)為聽(tīng)障群體通過(guò)手語(yǔ)就能進(jìn)行準(zhǔn)確的溝通和理解,其實(shí)不然。普通人的語(yǔ)言表達(dá)其實(shí)是非常豐富的,除了肢體表情,還有文字的描述,相近的詞語(yǔ)在不同的語(yǔ)境下表達(dá)的意思可能千差萬(wàn)別。對(duì)于他們來(lái)說(shuō),唇語(yǔ)、手語(yǔ)加文字,如此立體的三方理解培養(yǎng),至關(guān)重要。而隨著技術(shù)的不斷成熟,尤其是像訊飛聽(tīng)見(jiàn)的語(yǔ)音轉(zhuǎn)文字技術(shù),對(duì)于聽(tīng)障群體來(lái)說(shuō),是一件幫助他們與世界溝通的有效手段。”中國(guó)殘疾人藝術(shù)團(tuán)張京津副團(tuán)長(zhǎng)說(shuō)道。殘疾人藝術(shù)團(tuán)日常會(huì)使用訊飛聽(tīng)見(jiàn)云會(huì)議進(jìn)行遠(yuǎn)程教學(xué),同學(xué)們不僅能看見(jiàn)手語(yǔ),同時(shí)還可以看到實(shí)時(shí)的字幕出現(xiàn)在屏幕下方。藝術(shù)團(tuán)內(nèi)80余名聽(tīng)障學(xué)生還會(huì)使用訊飛聽(tīng)見(jiàn)錄音寶M1連接手機(jī)中的訊飛聽(tīng)見(jiàn)APP進(jìn)行日常的溝通、學(xué)習(xí)。如今A.I.正在持續(xù)助力社會(huì)的無(wú)障礙建設(shè),通過(guò)人工智能技術(shù)把語(yǔ)音轉(zhuǎn)化成文字,變聽(tīng)為看、看聽(tīng)結(jié)合,讓聽(tīng)障人士通過(guò)文字去感受世界、與人溝通交流、順利完成工作學(xué)習(xí),建立起與聽(tīng)障人士溝通的橋梁?!巴ㄟ^(guò)這些A.I.技術(shù)的加持,現(xiàn)在的聽(tīng)障孩子們與陌生人、與世界溝通的能力也開(kāi)始越來(lái)越好了。能讓他們?cè)诶斫饽芰蜏贤芰ι吓c普通人更接近?!睆埦┙蚋眻F(tuán)長(zhǎng)如是說(shuō)。