【成果應(yīng)用】科大訊飛“聽見A.I.的聲音”走進中國殘疾人藝術(shù)團 ?——訊飛聽見云會議、錄音寶M1助力殘疾人遠程教學(xué)
- 文章來源:
無障礙智庫
- 發(fā)布時間:2020.07.24

科大訊飛“聽見A.I.的聲音”
走進中國殘疾人藝術(shù)團
——訊飛聽見云會議、錄音寶M1助力殘疾人遠程教學(xué)
為了阻斷疫情向校園蔓延,確保師生生命安全和身體健康,教育部明確2020年春季延期開學(xué),并提出“停課不停學(xué)”。目前,各地學(xué)校陸續(xù)開始行動,老師們紛紛通過開設(shè)網(wǎng)絡(luò)直播給學(xué)生上課。受疫情影響,殘疾人藝術(shù)團的線下教學(xué)工作也受到了一定的阻礙,在“停課不停學(xué)”上,因為大多網(wǎng)絡(luò)學(xué)習(xí)課件沒和直播課程有字幕及手語解釋,聽障學(xué)生其實更應(yīng)當收到社會更多的關(guān)注與幫助。

2019年5月15日,第二十九個全國助殘日上,中國聾協(xié)聯(lián)合科大訊飛正式發(fā)起了“聽見A.I.的聲音”關(guān)愛聽障人士公益行動。訊飛聽見APP承諾向所有聽障用戶提供終身免費轉(zhuǎn)寫服務(wù)。適逢“聽見A.I.的聲音”關(guān)愛行動一周年之際,科大訊飛于2020年5月15日再次來到中國殘疾人藝術(shù)團,為藝術(shù)團的80余名聽障同學(xué)進行了一場“云捐贈”,包含訊飛聽見云會議產(chǎn)品及近百臺訊飛聽見錄音寶M1,并通過線下+線上連線的新方式為同學(xué)們進行培訓(xùn),手把手教會大家使用。網(wǎng)絡(luò)授課方式顯著降低了講課聽課的門檻,多種學(xué)習(xí)軟件、學(xué)習(xí)視頻、網(wǎng)絡(luò)課堂APP層出不窮,讓普通人隨時隨地都可以在線學(xué)習(xí),獲取前沿知識。然而,聽力不同的觀眾,對字幕詳細程度的需求差別很大。聽力沒有損失的觀眾,只要畫面上有幻燈片或者關(guān)鍵詞,他們已經(jīng)能輕松地聽明白全部細節(jié)。對有聽力損失的觀眾來說,視頻和直播中所有的言語信息要逐字展示,與畫面同步,才是一個完整的、可以理解的信息結(jié)構(gòu)。對于有更嚴重的聽力損失的觀眾來說,有時還需要提示背景環(huán)境音,使看不見的聲音能夠被“看”到:比如日本的一些信息無障礙電影中,甚至汽車鳴笛的背景音都要通過文字顯現(xiàn)。最受聽障人士歡迎的,還是配有字幕的網(wǎng)絡(luò)課程。無論是電視、電話,還是視頻、音頻,傳輸?shù)穆曇粜盘柖加幸欢ǖ淖冃?,這讓聽障人士,特別是中重度聽障者,辨聽電子聲多少有一定的困難。而帶有字幕的視頻,能夠幫助他們實時對接聲音與畫面。可見,言語信息的逐字字幕是通用無障礙設(shè)施的一部分,可以覆蓋到最多人群的需要,和建筑物門口的無障礙斜坡性質(zhì)是一樣的,它是聲音世界里的坡道。對于聽障學(xué)生來說,“云課堂”下的信息無障礙需求,主要體現(xiàn)在搭配字幕。網(wǎng)絡(luò)遠程教學(xué)的字幕呈現(xiàn),應(yīng)該滿足以下幾個原則:1、制作盡量自動化,不需要額外雇用翻譯(速錄師)來同步轉(zhuǎn)錄,或者要求親戚朋友長時間做兼職的同聲傳譯。4、位置最好在屏幕下方或者右方,并帶有延時交替性(類似卡拉OK那樣,后一句話出現(xiàn)時,前一句話不要馬上消失,逐句頂替)。一些老師講課語速較快,聽障學(xué)生低頭記筆記的時候,注意力難以一心二用,很容易錯過老師沒有強調(diào)的重點。5、上手簡單快捷,對老師和學(xué)生雙方來說,學(xué)習(xí)成本都很低。6、不容易引起教學(xué)內(nèi)容方面的知識產(chǎn)權(quán)爭議,授課者也更愿意配合。為此,科大訊飛利用聽見云會議產(chǎn)品為殘疾人遠程教學(xué)提供“軟件+硬件”全套無障礙教學(xué)解決方案,軟件服務(wù)包括:多方音視頻通信、實時語音轉(zhuǎn)寫、中英文互譯等;硬件終端包括:一款以多功能視頻通信、實時語音轉(zhuǎn)寫及翻譯為核心功能,可放置在老師講桌上或辦公桌的高端智能教學(xué)設(shè)備訊飛聽見L1;提供各類軟件客戶端(IOS,ANDROID,WINDOWS,MAC端),聽障可使用各種設(shè)備(手機、電腦、訊飛聽見L1等)開啟教學(xué)進行即時溝通,通過業(yè)界領(lǐng)先的語音轉(zhuǎn)寫、翻譯及基于云架構(gòu)多系統(tǒng)兼容的視頻通信技術(shù),實現(xiàn)視頻教學(xué)語音轉(zhuǎn)寫、遠程課件分享、教學(xué)全程記錄、教學(xué)成果沉淀、內(nèi)容快速分享等獨特功能。

5月15日,殘疾人藝術(shù)團80余名聽障同學(xué)體驗了這種學(xué)習(xí)新的形式,使用訊飛聽見云會議進行授課,現(xiàn)場通過訊飛聽見云會議遠程連線了身處外地暫時無法復(fù)課的同學(xué),產(chǎn)品對發(fā)言人提供實時語音轉(zhuǎn)文字的服務(wù),將字幕呈現(xiàn)在屏幕端,幫助每一位聽障學(xué)生進行實時的溝通,變聽為看,成為他們與世界溝通的小耳朵。


上圖:運用聽見云會議進行遠程教學(xué)培訓(xùn)

“大多數(shù)的人會認為聽障群體通過手語就能進行準確的溝通和理解,其實不然。普通人的語言表達其實是非常豐富的,除了肢體表情,還有文字的描述,相近的詞語在不同的語境下表達的意思可能千差萬別。對于他們來說,唇語、手語加文字,如此立體的三方理解培養(yǎng),至關(guān)重要。而隨著技術(shù)的不斷成熟,尤其是像訊飛聽見的語音轉(zhuǎn)文字技術(shù),對于聽障群體來說,是一件幫助他們與世界溝通的有效手段。”中國殘疾人藝術(shù)團張京津副團長說道。殘疾人藝術(shù)團日常會使用訊飛聽見云會議進行遠程教學(xué),同學(xué)們不僅能看見手語,同時還可以看到實時的字幕出現(xiàn)在屏幕下方。藝術(shù)團內(nèi)80余名聽障學(xué)生還會使用訊飛聽見錄音寶M1連接手機中的訊飛聽見APP進行日常的溝通、學(xué)習(xí)。如今A.I.正在持續(xù)助力社會的無障礙建設(shè),通過人工智能技術(shù)把語音轉(zhuǎn)化成文字,變聽為看、看聽結(jié)合,讓聽障人士通過文字去感受世界、與人溝通交流、順利完成工作學(xué)習(xí),建立起與聽障人士溝通的橋梁?!巴ㄟ^這些A.I.技術(shù)的加持,現(xiàn)在的聽障孩子們與陌生人、與世界溝通的能力也開始越來越好了。能讓他們在理解能力和溝通能力上與普通人更接近?!睆埦┙蚋眻F長如是說。