微軟5日於官方的部落格發(fā)表用AI技術(shù)協(xié)助失聰學(xué)生學(xué)習(xí)的成果Presentation Translator，透過(guò)語(yǔ)音辨識(shí)技術(shù)，將課堂上教授的演講內(nèi)容轉(zhuǎn)為文字，來(lái)幫助失聰?shù)膶W(xué)生可以同步得到最完整且準(zhǔn)確的資訊，并透過(guò)AI技術(shù)來(lái)實(shí)現(xiàn)翻譯，目前可超過(guò)支援60種語(yǔ)言，系統(tǒng)能夠即時(shí)翻譯成不同的語(yǔ)言，讓學(xué)生選擇自己較熟悉的語(yǔ)言來(lái)學(xué)習(xí)。
微軟團(tuán)隊(duì)在去年開(kāi)始，與美國(guó)紐約州羅徹斯特理工大學(xué)的美國(guó)國(guó)家聾人技術(shù)學(xué)院合作，為了打造出能夠正確辨識(shí)課堂上學(xué)術(shù)名詞的模型，研究團(tuán)隊(duì)收集了該學(xué)院超過(guò)10年的課堂講座資料，包含教授在簡(jiǎn)報(bào)中的文字和注解，透過(guò)AI技術(shù)辨識(shí)每個(gè)特定領(lǐng)域?qū)Ｓ忻~的念法，當(dāng)教授在課堂上說(shuō)出專(zhuān)有名詞，系統(tǒng)就能成功自動(dòng)識(shí)別，并即時(shí)提供文字。
通常課堂上有聽(tīng)力障礙的學(xué)生時(shí)，學(xué)院會(huì)聘請(qǐng)一位手語(yǔ)翻譯，將教授在課堂上所講述的內(nèi)容，轉(zhuǎn)換成手語(yǔ)，以幫助學(xué)生理解上課的內(nèi)容，但是也因?yàn)榭谡Z(yǔ)和手語(yǔ)之間的轉(zhuǎn)換，讓學(xué)生沒(méi)辦法即時(shí)跟上教授上課的內(nèi)容，常常學(xué)生還在透過(guò)手語(yǔ)翻譯了解方程式的資訊時(shí)，教授的投影片已經(jīng)換到下一頁(yè)，再加上有些學(xué)生其實(shí)不太熟悉手語(yǔ)，導(dǎo)致在課堂上的學(xué)習(xí)困難重重。
而微軟與羅徹斯特理工大學(xué)的美國(guó)國(guó)家聾人技術(shù)學(xué)院合作，該理工學(xué)院大約有1,500名聽(tīng)力受損的學(xué)生，微軟在簡(jiǎn)報(bào)軟體Power Point中加入即時(shí)上字幕（Real-time captions）的功能，透過(guò)語(yǔ)音辨識(shí)的技術(shù)，將教授所說(shuō)的話，包括術(shù)語(yǔ)、口語(yǔ)的話，轉(zhuǎn)成有標(biāo)點(diǎn)符號(hào)的文句，呈現(xiàn)在投影幕上，現(xiàn)在可支援超過(guò)60種翻譯語(yǔ)言，學(xué)生也可以在自己的電腦或平板上，選擇自己較熟悉的語(yǔ)言來(lái)學(xué)習(xí)。
學(xué)院中一名一年級(jí)的學(xué)生Joseph Adjei就表示，剛進(jìn)到學(xué)校上課時(shí)，花了很多心力在手語(yǔ)上，當(dāng)他第一次在課堂上接觸到這套即時(shí)語(yǔ)音轉(zhuǎn)文字的服務(wù)時(shí)，他認(rèn)為，透過(guò)這語(yǔ)音轉(zhuǎn)文字，可以跟聽(tīng)得見(jiàn)的同學(xué)在同一時(shí)間接收到資訊，舉例來(lái)說(shuō)，在生物課堂上，能夠讓他跟上課程，并且還能學(xué)習(xí)正確地拼寫(xiě)那些課堂上的專(zhuān)有名詞。
除此之外，Joseph Adjei認(rèn)為語(yǔ)音轉(zhuǎn)文字的服務(wù)是額外輔助學(xué)習(xí)的工具，當(dāng)他看不懂手語(yǔ)或是從手語(yǔ)翻譯那端漏掉訊息後，還可以看語(yǔ)音轉(zhuǎn)文字來(lái)輔助。不過(guò)，他指出，目前還是有些字會(huì)辨識(shí)錯(cuò)誤，像是「I」和「Eye」，但是有文字可以參考總比沒(méi)有好。
此外，Joseph Adjei還在智慧型手機(jī)上使用了微軟的翻譯App，當(dāng)課堂討論時(shí)，有時(shí)候同學(xué)講話太快，不容易讀唇語(yǔ)，微軟翻譯App則可以顯示出同學(xué)講話的內(nèi)容，讓他更能夠參與課堂上的討論。
