浙江大學(xué)李光獲國(guó)家專利權(quán)
買專利賣專利找龍圖騰,真高效! 查專利查商標(biāo)用IPTOP,全免費(fèi)!專利年費(fèi)監(jiān)控用IP管家,真方便!
龍圖騰網(wǎng)獲悉浙江大學(xué)申請(qǐng)的專利一種基于發(fā)聲表面肌電信號(hào)的無(wú)聲語(yǔ)音重建方法獲國(guó)家發(fā)明授權(quán)專利權(quán),本發(fā)明授權(quán)專利權(quán)由國(guó)家知識(shí)產(chǎn)權(quán)局授予,授權(quán)公告號(hào)為:CN114530165B 。
龍圖騰網(wǎng)通過(guò)國(guó)家知識(shí)產(chǎn)權(quán)局官網(wǎng)在2025-09-23發(fā)布的發(fā)明授權(quán)授權(quán)公告中獲悉:該發(fā)明授權(quán)的專利申請(qǐng)?zhí)?專利號(hào)為:202111625746.8,技術(shù)領(lǐng)域涉及:G10L25/30;該發(fā)明授權(quán)一種基于發(fā)聲表面肌電信號(hào)的無(wú)聲語(yǔ)音重建方法是由李光;王酉;李卉艷;林皓泓;高晗設(shè)計(jì)研發(fā)完成,并于2021-12-28向國(guó)家知識(shí)產(chǎn)權(quán)局提交的專利申請(qǐng)。
本一種基于發(fā)聲表面肌電信號(hào)的無(wú)聲語(yǔ)音重建方法在說(shuō)明書摘要公布了:本發(fā)明公開(kāi)了一種基于發(fā)聲表面肌電信號(hào)的無(wú)聲語(yǔ)音重建方法,利用電極采集發(fā)聲時(shí)發(fā)聲相關(guān)表面肌電信號(hào)與語(yǔ)音信號(hào),并在無(wú)聲情況下采集發(fā)聲相關(guān)表面肌電信號(hào),并且通過(guò)深度學(xué)習(xí)網(wǎng)絡(luò)獲得無(wú)聲表面肌電信號(hào)與相同文本的語(yǔ)音信號(hào)的聯(lián)系,完成無(wú)聲情況下語(yǔ)音信號(hào)的重建,完成無(wú)聲情況信息內(nèi)容的傳遞,完成無(wú)聲傳遞信息的任務(wù),可直接進(jìn)行無(wú)聲情況的信息傳遞。對(duì)于一些無(wú)法發(fā)聲的場(chǎng)合(例如軍事,警方的秘密潛伏任務(wù)),聲帶不振動(dòng),以默讀的形式完成信息傳遞的過(guò)程。
本發(fā)明授權(quán)一種基于發(fā)聲表面肌電信號(hào)的無(wú)聲語(yǔ)音重建方法在權(quán)利要求書中公布了:1.一種基于發(fā)聲表面肌電信號(hào)的無(wú)聲語(yǔ)音重建方法,基于語(yǔ)音重建模型,其特征在于,包括模型訓(xùn)練過(guò)程和重建過(guò)程,模型訓(xùn)練過(guò)程如下: S1、被試者正常朗讀文本內(nèi)容,貼在人體表面的電極陣列采集有聲朗讀時(shí)的有聲表面肌電信號(hào),麥克風(fēng)同時(shí)采集朗讀的語(yǔ)音信號(hào); S2、被試者無(wú)聲默讀與步驟1中相同的文本內(nèi)容,電極陣列采集無(wú)聲默讀時(shí)的無(wú)聲表面肌電信號(hào); S3、對(duì)有聲表面肌電信號(hào)、無(wú)聲表面肌電信號(hào)以及語(yǔ)音信號(hào)進(jìn)行預(yù)處理及分幀,有聲表面肌電信號(hào)分幀后得到的有聲表面肌電特征記為x1:M,M為有聲表面肌電特征的總幀數(shù);語(yǔ)音信號(hào)分幀后得到的語(yǔ)音特征記為Y1:M,語(yǔ)音特征的幀數(shù)和有聲表面肌電特征相同;無(wú)聲表面肌電信號(hào)分幀后得到的無(wú)聲表面肌電特征記為X1:N,N為無(wú)聲表面肌電特征的總幀數(shù); S4、根據(jù)語(yǔ)音信號(hào)及其對(duì)應(yīng)的文本,通過(guò)強(qiáng)制對(duì)齊獲得語(yǔ)音信號(hào)對(duì)應(yīng)的真實(shí)音素ph1:M; S5、通過(guò)有聲表面肌電信號(hào)與無(wú)聲表面肌電信號(hào)計(jì)算第i幀無(wú)聲表面肌電信號(hào)的持續(xù)長(zhǎng)度di,第i幀無(wú)聲表面肌電信號(hào)X1:N[i]對(duì)應(yīng)語(yǔ)音信號(hào)中的[Y1:M[j],…,Y1:M[j+p-1]],di=p,d1:N是di的集合; S6、將無(wú)聲表面肌電特征X1:N輸入至編碼器得到編碼隱變量h1:N; S7、將編碼隱變量h1:N輸入至持續(xù)長(zhǎng)度預(yù)測(cè)器中得到預(yù)測(cè)的持續(xù)長(zhǎng)度計(jì)算預(yù)測(cè)的持續(xù)長(zhǎng)度與真實(shí)幀持續(xù)長(zhǎng)度d1:N的均方誤差損失; S8、將編碼隱變量h1:N與真實(shí)幀持續(xù)長(zhǎng)度d1:N輸入至長(zhǎng)度調(diào)整器,進(jìn)行幀數(shù)調(diào)整以得到解碼隱變量h1:M; S9、將解碼隱變量h1:M輸入至音素分類器中,輸出預(yù)測(cè)音素計(jì)算預(yù)測(cè)音素與真實(shí)音素ph1:M的交叉熵?fù)p失; S10、將解碼隱變量h1:M輸入至有聲表面肌電特征重建器中,輸出預(yù)測(cè)有聲表面肌電特征計(jì)算預(yù)測(cè)有聲表面肌電特征與有聲表面肌電特征x1:M的均方誤差損失; S11、將解碼隱變量h1:M輸入至解碼器得到預(yù)測(cè)語(yǔ)音特征再將預(yù)測(cè)語(yǔ)音特征經(jīng)過(guò)后處理網(wǎng)絡(luò)得到殘差M幀語(yǔ)音特征將預(yù)測(cè)的M幀語(yǔ)音特征和殘差M幀語(yǔ)音特征分別與實(shí)際的語(yǔ)音特征Y1:M計(jì)算平均絕對(duì)誤差損失; S12、根據(jù)損失函數(shù)進(jìn)行反向傳播以更新語(yǔ)音重建模型的訓(xùn)練權(quán)重,直至語(yǔ)音重建模型收斂,損失函數(shù)公式為: 式中,λph為音素分類損失權(quán)重,λrecons為有聲信號(hào)重建損失權(quán)重; 重建過(guò)程為將采集到的無(wú)聲表面肌電信號(hào)輸入到語(yǔ)音重建模型中,得到重建后的語(yǔ)音信號(hào)。
如需購(gòu)買、轉(zhuǎn)讓、實(shí)施、許可或投資類似專利技術(shù),可聯(lián)系本專利的申請(qǐng)人或?qū)@麢?quán)人浙江大學(xué),其通訊地址為:310013 浙江省杭州市西湖區(qū)余杭塘路866號(hào);或者聯(lián)系龍圖騰網(wǎng)官方客服,聯(lián)系龍圖騰網(wǎng)可撥打電話0551-65771310或微信搜索“龍圖騰網(wǎng)”。
1、本報(bào)告根據(jù)公開(kāi)、合法渠道獲得相關(guān)數(shù)據(jù)和信息,力求客觀、公正,但并不保證數(shù)據(jù)的最終完整性和準(zhǔn)確性。
2、報(bào)告中的分析和結(jié)論僅反映本公司于發(fā)布本報(bào)告當(dāng)日的職業(yè)理解,僅供參考使用,不能作為本公司承擔(dān)任何法律責(zé)任的依據(jù)或者憑證。
- 漢海信息技術(shù)(上海)有限公司左凱獲國(guó)家專利權(quán)
- 邁恩醫(yī)療解決方案有限公司M·伯格巴爾獲國(guó)家專利權(quán)
- 鄭州市明銳電子科技有限公司蔡仲志獲國(guó)家專利權(quán)
- 通用汽車巡航控股有限公司M·科克斯獲國(guó)家專利權(quán)
- 蘇州圣美特壓鑄科技有限公司肖秀梅獲國(guó)家專利權(quán)
- 中興通訊股份有限公司李衛(wèi)敏獲國(guó)家專利權(quán)
- 中芯國(guó)際集成電路制造(上海)有限公司趙猛獲國(guó)家專利權(quán)
- 蘇州嘉德魯機(jī)電科技有限公司楊大明獲國(guó)家專利權(quán)
- 歌爾科技有限公司蔡曉東獲國(guó)家專利權(quán)
- 日本電信電話株式會(huì)社守谷健弘獲國(guó)家專利權(quán)


熱門推薦
- 上海派能能源科技股份有限公司裘強(qiáng)獲國(guó)家專利權(quán)
- 羅伯特·博世有限公司A.伊姆雷獲國(guó)家專利權(quán)
- 帝舍智能科技(武漢)有限公司戚大周獲國(guó)家專利權(quán)
- 庫(kù)柏西安熔斷器有限公司王永剛獲國(guó)家專利權(quán)
- 賽普拉斯半導(dǎo)體公司汪先敏獲國(guó)家專利權(quán)
- LG 電子株式會(huì)社張炯文獲國(guó)家專利權(quán)
- 廣東新昇電業(yè)科技股份有限公司陳少波獲國(guó)家專利權(quán)
- 浙江開(kāi)山凱文螺桿機(jī)械有限公司湯炎獲國(guó)家專利權(quán)
- 蘇州澤璟生物制藥股份有限公司呂彬華獲國(guó)家專利權(quán)
- 中山市檸檬環(huán)境科技有限公司潘安順獲國(guó)家專利權(quán)