AI賦能特殊教育 讓聾生“聽得見”盲生“看得見”


來源:中國產(chǎn)業(yè)經(jīng)濟(jì)信息網(wǎng)   時(shí)間:2019-05-30





  “一看這個(gè)圖案我們就想到東北,是吧?為什么這個(gè)圖案是這種感覺的呢?背后一定是有原因的……”在北京聯(lián)合大學(xué)特殊教育學(xué)院的一堂藝術(shù)設(shè)計(jì)專業(yè)課上,老師講話的所有語音內(nèi)容借助人工智能技術(shù)逐字逐句轉(zhuǎn)換成文字顯示在屏幕上。臺下,聾生們在“PPT+手語+字幕”三種信息接收環(huán)境下,不僅“聽得”津津有味,還時(shí)不時(shí)地與老師進(jìn)行互動(dòng),這是人工智能技術(shù)進(jìn)入特殊教育課堂所帶來的改變。
藝術(shù)設(shè)計(jì)專業(yè)教師正在授課

  AI助力教學(xué)難點(diǎn)突破 提升特教生學(xué)習(xí)效率

  北京聯(lián)合大學(xué)特殊教育學(xué)院是北京市唯一一所集中開展殘疾人高等教育的學(xué)院。目前學(xué)院學(xué)生有70%為殘疾學(xué)生,殘疾學(xué)生中的70%為聽力殘疾。

  北京聯(lián)合大學(xué)特殊教育學(xué)院教學(xué)副院長徐娟介紹,過去學(xué)校針對聾生教學(xué)時(shí),采用的教學(xué)方式主要是手語加PPT,存在一定的局限性。比如,一些抽象名詞、專業(yè)術(shù)語通過手語很難表達(dá)出來,而且手語像方言一樣具有一定的地域差異,學(xué)生來自全國各地,對有些詞匯的理解可能是不一樣的,在溝通交流上容易產(chǎn)生一些誤解。“此外,手語表達(dá)傳輸?shù)男氏鄬^低,老師邊講課邊打手語,一節(jié)課能夠傳遞的信息量非常有限,引入了人工智能語音轉(zhuǎn)換之后,在授課過程中,老師同樣要用手語,但是提供了多種信息接收渠道,可以讓學(xué)生更加高效、準(zhǔn)確地把握到學(xué)習(xí)的信息。”

  同時(shí),人工智能語音轉(zhuǎn)換功能的引入也能夠照顧到個(gè)體差異,滿足不同學(xué)生的需要,徐娟介紹,學(xué)生聽力殘疾的程度不一樣,語言理解能力也存在一定的差別。“全聾的孩子比較喜歡看手語,語言能力相對來說弱一些,你讓他們看整篇文字未必能看得懂,但是他們可以結(jié)合字幕上的一些關(guān)鍵詞對應(yīng)相應(yīng)的講課內(nèi)容。對于一些語言能力比較好的孩子來說,通過字幕他們接收到的信息則是相對完整和豐富的。”另外,這些字幕都可以在課后下載下來作為學(xué)生的學(xué)習(xí)資源再度利用。

  聾生是把語音轉(zhuǎn)換成字幕來看,盲生對人工智能語音轉(zhuǎn)換的需求則正好相反,需要把文字轉(zhuǎn)換成語音來聽。北京聯(lián)合大學(xué)特殊教育學(xué)院為每位盲生都配備了閱讀終端產(chǎn)品,幫助盲生暢聽任何電子書籍。同時(shí)為每位盲生都配備一臺專用電腦,并安裝了讀屏軟件,學(xué)生可以聽到屏幕上的信息進(jìn)而開始相關(guān)操作。

  學(xué)校針灸推拿專業(yè)主要面向視力障礙人群開設(shè),實(shí)踐教學(xué)中心主任張琳介紹,視力障礙人群學(xué)習(xí)時(shí)通常有三方面的障礙:首先,他們的學(xué)習(xí)材料非常厚重,不便于攜帶,而且普通的一本書翻譯成盲文書就會是四五本、五六本,查閱起來很不方便;第二個(gè)障礙是,他們通過觸摸所掌握的信息有時(shí)候是不全的,需要翻書才能和觸摸到的東西形成一種聯(lián)系;第三個(gè)障礙是,盲生對于圖形圖像的學(xué)習(xí)存在一定困難。人工智能技術(shù)的引入使得該專業(yè)當(dāng)中的很多教學(xué)難點(diǎn)都可以得到突破。
藥斗上的語音二維碼點(diǎn)讀功能示意圖

  眾所周知,盲生除了看不見以外,他們的聽覺和觸覺都是比較靈敏的,因而學(xué)校開發(fā)制作了一系列教具,將觸覺和聽覺有效聯(lián)系起來。在大量的學(xué)習(xí)資料和教具上,北京聯(lián)合大學(xué)特殊教育學(xué)院都進(jìn)行了語音二維碼的鋪設(shè),例如在中藥藥斗上設(shè)置二維碼標(biāo)識,通過點(diǎn)讀筆即可讀出該藥物的名稱、產(chǎn)地、炮制方法、功效等,為學(xué)生的預(yù)習(xí)、復(fù)習(xí)和自學(xué)提供支持,這些語音庫都由學(xué)校自己來開發(fā)。針灸推拿專業(yè)研一學(xué)生韓濤表示:“我們需要學(xué)好幾百種中藥,有了這個(gè)智能的儀器設(shè)備之后,我們就可以提高學(xué)習(xí)效率,更清楚地認(rèn)識這些藥材的性能和形態(tài)。”
2D心電圖示意圖

  針對盲生學(xué)習(xí)圖形圖表存在障礙這一難點(diǎn),學(xué)院也借助相關(guān)軟件對這些平面圖像進(jìn)行了立體化建模,將圖像形成2D凸圖,并輔以點(diǎn)讀技術(shù)進(jìn)行圖像內(nèi)容解釋。“假設(shè)學(xué)習(xí)心電圖,過去跟醫(yī)學(xué)專業(yè)的學(xué)生講一些知識點(diǎn)的時(shí)候,他們理解起來其實(shí)非常困難,我們現(xiàn)在把心電圖做成了類似盲文那種2D凸起的圖,通過觸摸,他們就知道大概是什么形狀,怎么樣的起伏和波動(dòng)。”徐娟說。

  用AI點(diǎn)亮特殊教育 為特教生打造無障礙求學(xué)環(huán)境

  徐娟認(rèn)為,人工智能在特殊教育中最重要的體現(xiàn)就是解決了信息轉(zhuǎn)換的障礙,讓盲生的看不見和聾生的聽不見都能夠通過相應(yīng)的補(bǔ)償手段來有所補(bǔ)充,根據(jù)他們的不同,借助人工智能的力量來助力于教育,讓他們的看不見和聽不見不再是影響學(xué)習(xí)的一個(gè)障礙。”

  張琳也表示,人工智能技術(shù)使得特教生能更好地使用現(xiàn)在的很多電子設(shè)備,電腦、手機(jī)等已經(jīng)成為他們獲取信息的一個(gè)重要來源,不僅對學(xué)生的學(xué)習(xí)起到非常重要的作用,也對老師的教學(xué)起到了非常重要的作用,避免了以前的“滿堂灌”,老師在上面講,學(xué)生在下面被動(dòng)地聽,學(xué)習(xí)效率比較低,教學(xué)的效果也弱一些,現(xiàn)在通過許多人工智能方式,可以讓學(xué)生在有限時(shí)間內(nèi)學(xué)習(xí)到更多、更深的知識,也有更多的時(shí)間進(jìn)行技能的訓(xùn)練。

  如何將人工智能更好地應(yīng)用于特殊教育,怎么讓學(xué)生借助人工智能受益得更好,這是北京聯(lián)合大學(xué)特殊教育學(xué)院不斷在探索思考的問題。徐娟舉例說:“接收信息的途徑不一樣,輸入的效果也會有很大的區(qū)別,對我們來說,一條線的粗細(xì)是很好辨認(rèn)的,但是轉(zhuǎn)換成摸的時(shí)候,教具需要制作多細(xì)和多粗盲生才能夠分辨出來,前期其實(shí)需要做很多的測試和科學(xué)研究。”她表示,其實(shí)在引入人工智能的時(shí)候,很多技術(shù)都是開源的,我們需要做的就是如何將這些技術(shù)與特殊教育能更好地結(jié)合在一起。

  目前針對聾生的語音轉(zhuǎn)換文字功能仍待進(jìn)一步完善。徐娟認(rèn)為,“對于聾生來說,他們的語言習(xí)慣、語言水平可能還沒有達(dá)到我們想象的高度,我們也會對相關(guān)部門予以一些反饋,比如說,如果對語音進(jìn)行分詞處理的話,學(xué)生閱讀起來會不會更加便捷。”此外,她提出還需要進(jìn)一步探索觀察各類人工智能相關(guān)應(yīng)用更適合哪些課程和專業(yè)。

  人工智能逐漸深入特教生的學(xué)習(xí)當(dāng)中,會不會對特教生的職業(yè)選擇帶來改變呢?徐娟認(rèn)為,“目前其實(shí)針對特殊孩子的專業(yè)其實(shí)是比較有限的,大家都知道,我們針對盲生的專業(yè)主要是針灸推拿以及音樂學(xué),因?yàn)樗麄兛床灰?,所以很多專業(yè)學(xué)習(xí)都會有困難,但是我覺得借助人工智能包括AI技術(shù)還有一些人工體驗(yàn)的技術(shù),也許他們的專業(yè)選擇面可以更高。”

  事實(shí)上,人工智能帶給特教生的不僅僅是學(xué)習(xí)方式上的改變,對他們生活上的影響也非常深遠(yuǎn)。“包括智能手機(jī)的出現(xiàn),使盲生可以借助于手機(jī)APP來淘寶、點(diǎn)外賣、訂火車票,這些過去他們都需要去借助別人的支持,但是現(xiàn)在有了一些軟件之后,尤其是軟件的無障礙、讀屏功能出現(xiàn)之后,學(xué)生就可以很好地利用。學(xué)生也反映說,過去有些軟件使用起來不太人性化、不太注重?zé)o障礙,后來通過給相關(guān)網(wǎng)站提供建議,他們也進(jìn)行了無障礙的一些改造,界面對盲生來說更加友好,盲生可以通過語音功能和軟件實(shí)現(xiàn)一些交互。”徐娟在采訪中也呼吁,希望未來社會的方方面面都能考慮到無障礙的問題,考慮到特殊人群。(郭亞麗)


  轉(zhuǎn)自:新華網(wǎng)

  【版權(quán)及免責(zé)聲明】凡本網(wǎng)所屬版權(quán)作品,轉(zhuǎn)載時(shí)須獲得授權(quán)并注明來源“中國產(chǎn)業(yè)經(jīng)濟(jì)信息網(wǎng)”,違者本網(wǎng)將保留追究其相關(guān)法律責(zé)任的權(quán)力。凡轉(zhuǎn)載文章及企業(yè)宣傳資訊,僅代表作者個(gè)人觀點(diǎn),不代表本網(wǎng)觀點(diǎn)和立場。版權(quán)事宜請聯(lián)系:010-65367254。

延伸閱讀

熱點(diǎn)視頻

中國經(jīng)濟(jì):韌性十足 潛力巨大 中國經(jīng)濟(jì):韌性十足 潛力巨大

熱點(diǎn)新聞

熱點(diǎn)輿情

特色小鎮(zhèn)

?

微信公眾號

版權(quán)所有:中國產(chǎn)業(yè)經(jīng)濟(jì)信息網(wǎng)京ICP備11041399號-2京公網(wǎng)安備11010502035964