應(yīng)用

技術(shù)

物聯(lián)網(wǎng)世界 >> 物聯(lián)網(wǎng)新聞 >> 物聯(lián)網(wǎng)熱點(diǎn)新聞
企業(yè)注冊(cè)個(gè)人注冊(cè)登錄

科學(xué)家研發(fā)人工智能聲吶眼鏡:可識(shí)別唇語,準(zhǔn)確率達(dá) 95%

2023-04-11 09:50 IT之家

導(dǎo)讀:美國康奈爾大學(xué)的研究人員開發(fā)了一種新技術(shù),可以通過聲吶眼鏡進(jìn)行無聲溝通。這種眼鏡利用微型揚(yáng)聲器和麥克風(fēng)來讀取佩戴者默念的單詞,從而可以在不需要物理輸入的情況下執(zhí)行各種任務(wù)。

4 月 10 日消息,美國康奈爾大學(xué)的研究人員開發(fā)了一種新技術(shù),可以通過聲吶眼鏡進(jìn)行無聲溝通。這種眼鏡利用微型揚(yáng)聲器和麥克風(fēng)來讀取佩戴者默念的單詞,從而可以在不需要物理輸入的情況下執(zhí)行各種任務(wù)。

image.png

這項(xiàng)技術(shù)由康奈爾大學(xué)的博士生張瑞東(音譯)領(lǐng)導(dǎo)開發(fā),是在一個(gè)類似的項(xiàng)目的基礎(chǔ)上進(jìn)行的改進(jìn),該項(xiàng)目使用了一個(gè)無線耳機(jī),而之前的模型則依賴于攝像頭。

該聲吶眼鏡使用一種名為 EchoSpeech 的無聲語音識(shí)別接口,利用聲吶來感知嘴部運(yùn)動(dòng),同時(shí)使用一個(gè)深度學(xué)習(xí)算法實(shí)時(shí)分析回波特征。這使得系統(tǒng)能夠以約 95% 的準(zhǔn)確率識(shí)別佩戴者默念的單詞。

這項(xiàng)技術(shù)最令人興奮的前景之一是,對(duì)于有語言障礙的人來說,可以使用它來無聲地將對(duì)話輸入到語音合成器中,然后將單詞大聲說出來。眼鏡也可以用來在安靜的圖書館中控制音樂播放,或者在嘈雜的音樂會(huì)上口述信息。

該技術(shù)既小巧又低功耗,也不會(huì)侵犯隱私,因?yàn)闆]有數(shù)據(jù)離開用戶的手機(jī)。這樣,就不會(huì)有隱私方面的擔(dān)憂。眼鏡佩戴非常方便,比其他可用的無聲語音識(shí)別技術(shù)更實(shí)用、更可行。

研究人員表示,該系統(tǒng)只需要幾分鐘的訓(xùn)練數(shù)據(jù)來學(xué)習(xí)用戶的語音模式,學(xué)習(xí)完成后,就可以朝用戶的臉上發(fā)送和接收聲波,感知嘴部運(yùn)動(dòng),同時(shí)使用深度學(xué)習(xí)算法分析回波特征。該系統(tǒng)目前能夠識(shí)別 31 個(gè)孤立的命令和一串連續(xù)的數(shù)字,并且錯(cuò)誤率低于 10%。

該系統(tǒng)目前的版本提供了大約 10 小時(shí)的電池續(xù)航,并且可以通過藍(lán)牙無線地與用戶的智能手機(jī)通信。智能手機(jī)負(fù)責(zé)處理和預(yù)測(cè)所有數(shù)據(jù),并將結(jié)果傳輸?shù)揭恍皠?dòng)作鍵”,讓它可以播放音樂、與智能設(shè)備交互或激活語音助手。

康奈爾大學(xué)智能計(jì)算機(jī)接口未來交互(SciFi)實(shí)驗(yàn)室正在利用康奈爾大學(xué)的一個(gè)資助計(jì)劃來探索將這項(xiàng)技術(shù)商業(yè)化的可能性。