
唇語(yǔ)翻譯算法設(shè)計(jì)是針對(duì)偏復(fù)雜的模式識(shí)別,深層神經(jīng)網(wǎng)絡(luò)DNN通過(guò)測(cè)量舌頭、下顎、軟腭和嘴唇的協(xié)調(diào)動(dòng)作來(lái)識(shí)別嘴正在發(fā)音的某個(gè)詞語(yǔ)。系統(tǒng)會(huì)對(duì)測(cè)量出來(lái)的數(shù)據(jù)進(jìn)行訓(xùn)練,把發(fā)音語(yǔ)音信號(hào)轉(zhuǎn)換成為聲學(xué)語(yǔ)音信號(hào),方便其他用戶獲取到準(zhǔn)確的信息,不會(huì)影響溝通的效果。
通過(guò)解碼皮層語(yǔ)言相關(guān)活動(dòng),能實(shí)時(shí)控制語(yǔ)音合成器,從而幫助有嚴(yán)重發(fā)聲障礙的人恢復(fù)交流,科學(xué)家會(huì)根據(jù)發(fā)生障礙者的特征來(lái)進(jìn)行大腦信號(hào)解碼,將其翻譯成語(yǔ)音。
除了唇語(yǔ)翻譯,系統(tǒng)還能進(jìn)行其他語(yǔ)言翻譯,并且具備自我學(xué)習(xí)到能力。通過(guò)人工智能訓(xùn)練學(xué)習(xí),系統(tǒng)掌握了語(yǔ)言的特征之后,就能立即自動(dòng)掌握從X到Z語(yǔ)言的翻譯。
開(kāi)發(fā)唇語(yǔ)翻譯APP能夠幫助失語(yǔ)者恢復(fù)交流,讓他們的生活更加順暢,擁有更多樂(lè)趣。