谷歌有限責(zé)任公司威廉·常獲國家專利權(quán)
買專利賣專利找龍圖騰,真高效! 查專利查商標(biāo)用IPTOP,全免費(fèi)!專利年費(fèi)監(jiān)控用IP管家,真方便!
龍圖騰網(wǎng)獲悉谷歌有限責(zé)任公司申請的專利使用插補(bǔ)的序列建模獲國家發(fā)明授權(quán)專利權(quán),本發(fā)明授權(quán)專利權(quán)由國家知識產(chǎn)權(quán)局授予,授權(quán)公告號為:CN115053235B 。
龍圖騰網(wǎng)通過國家知識產(chǎn)權(quán)局官網(wǎng)在2025-08-29發(fā)布的發(fā)明授權(quán)授權(quán)公告中獲悉:該發(fā)明授權(quán)的專利申請?zhí)?專利號為:202180012954.2,技術(shù)領(lǐng)域涉及:G06N3/04;該發(fā)明授權(quán)使用插補(bǔ)的序列建模是由威廉·常;基特萬·薩哈里亞;杰弗里·E·欣頓;穆罕默德·諾勞茲;納夫迪普·賈伊特利設(shè)計(jì)研發(fā)完成,并于2021-02-08向國家知識產(chǎn)權(quán)局提交的專利申請。
本使用插補(bǔ)的序列建模在說明書摘要公布了:一種用于序列建模的方法、系統(tǒng)和裝置,包括在計(jì)算機(jī)存儲介質(zhì)上編碼的計(jì)算機(jī)程序。這些方法之一包括:接收具有多個輸入位置的輸入序列;確定連續(xù)輸入位置的多個塊;使用神經(jīng)網(wǎng)絡(luò)處理輸入序列以生成潛在對準(zhǔn),在多個輸入時間步中的每個輸入時間步包括:從先前輸入時間步接收部分潛在對準(zhǔn);選擇每個塊中的輸入位置,其中在每個塊中的部分潛在對準(zhǔn)的所選擇的輸入位置處的語言符號是掩碼語言符號;以及使用神經(jīng)網(wǎng)絡(luò)來處理部分潛在對準(zhǔn)和輸入序列以生成新潛在對準(zhǔn),其中新潛在對準(zhǔn)在每個塊中的所選擇的輸入位置處包括輸出語言符號或空白語言符號;以及使用潛在對準(zhǔn)來生成輸出序列。
本發(fā)明授權(quán)使用插補(bǔ)的序列建模在權(quán)利要求書中公布了:1.一種從在多個輸入位置中的每個輸入位置處具有相應(yīng)輸入語言符號的輸入序列生成在多個輸出位置中的每個輸出位置處具有來自輸出語言符號的詞匯的相應(yīng)輸出語言符號的輸出序列的方法,所述方法包括: 接收所述輸入序列; 確定多個塊,其中每個塊包括具有來自所述多個輸入位置的多個連續(xù)輸入位置的多個輸入語言符號,其中,所述輸入語言符號包括與音頻語言符號、文本語言符號或圖像語言符號相關(guān)聯(lián)的第一語言符號模態(tài); 使用神經(jīng)網(wǎng)絡(luò)處理所述輸入序列以生成所述輸入序列的潛在對準(zhǔn),其中,所述潛在對準(zhǔn)在所述多個輸入位置中的每個輸入位置處包括來自所述輸出語言符號的詞匯的輸出語言符號或空白語言符號,所述處理在多個輸入時間步中的每個輸入時間步包括: 接收來自先前輸入時間步的部分潛在對準(zhǔn),其中所述部分潛在對準(zhǔn)在所述多個輸入位置中的每個輸入位置處包括以下之一:輸出語言符號、空白語言符號或掩碼語言符號; 選擇在每個塊中的輸入位置,其中在每個塊中的部分潛在對準(zhǔn)的所選擇的輸入位置處的語言符號是掩碼語言符號;以及 使用所述神經(jīng)網(wǎng)絡(luò)來處理i所述部分潛在對準(zhǔn)和ii所述輸入序列以生成所述潛在對準(zhǔn),其中所述潛在對準(zhǔn)在每個塊中的所選擇的輸入位置處包括輸出語言符號或空白語言符號;以及 使用所述潛在對準(zhǔn)來生成所述輸出序列,其中,所述輸出語言符號包括與音頻語言符號、文本語言符號或圖像語言符號相關(guān)聯(lián)的第二語言符號模態(tài)。
如需購買、轉(zhuǎn)讓、實(shí)施、許可或投資類似專利技術(shù),可聯(lián)系本專利的申請人或?qū)@麢?quán)人谷歌有限責(zé)任公司,其通訊地址為:美國加利福尼亞州;或者聯(lián)系龍圖騰網(wǎng)官方客服,聯(lián)系龍圖騰網(wǎng)可撥打電話0551-65771310或微信搜索“龍圖騰網(wǎng)”。
1、本報(bào)告根據(jù)公開、合法渠道獲得相關(guān)數(shù)據(jù)和信息,力求客觀、公正,但并不保證數(shù)據(jù)的最終完整性和準(zhǔn)確性。
2、報(bào)告中的分析和結(jié)論僅反映本公司于發(fā)布本報(bào)告當(dāng)日的職業(yè)理解,僅供參考使用,不能作為本公司承擔(dān)任何法律責(zé)任的依據(jù)或者憑證。