買(mǎi)專(zhuān)利賣(mài)專(zhuān)利找龍圖騰，真高效！ 查專(zhuān)利查商標(biāo)用IPTOP,全免費(fèi)！專(zhuān)利年費(fèi)監(jiān)控用IP管家,真方便！

龍圖騰網(wǎng)獲悉哈爾濱理工大學(xué)申請(qǐng)的專(zhuān)利一種基于特征關(guān)聯(lián)表示的圖文檢索方法獲國(guó)家發(fā)明授權(quán)專(zhuān)利權(quán)，本發(fā)明授權(quán)專(zhuān)利權(quán)由國(guó)家知識(shí)產(chǎn)權(quán)局授予，授權(quán)公告號(hào)為：CN116932806B 。

龍圖騰網(wǎng)通過(guò)國(guó)家知識(shí)產(chǎn)權(quán)局官網(wǎng)在2025-08-29發(fā)布的發(fā)明授權(quán)授權(quán)公告中獲悉：該發(fā)明授權(quán)的專(zhuān)利申請(qǐng)?zhí)?專(zhuān)利號(hào)為：202310754589.3，技術(shù)領(lǐng)域涉及：G06F16/583；該發(fā)明授權(quán)一種基于特征關(guān)聯(lián)表示的圖文檢索方法是由李驁;王澤寧;孫悅恭;程媛設(shè)計(jì)研發(fā)完成，并于2023-06-25向國(guó)家知識(shí)產(chǎn)權(quán)局提交的專(zhuān)利申請(qǐng)。

本一種基于特征關(guān)聯(lián)表示的圖文檢索方法在說(shuō)明書(shū)摘要公布了：一種基于特征關(guān)聯(lián)表示的圖文檢索方法，屬于跨模態(tài)檢索技術(shù)領(lǐng)域，該方法是利用圖像和文本特征構(gòu)造特征關(guān)聯(lián)矩陣。然后，利用神經(jīng)網(wǎng)絡(luò)學(xué)習(xí)生成哈希函數(shù)。最后，聯(lián)合設(shè)計(jì)的損失函數(shù)幫助學(xué)習(xí)生成哈希碼，以此來(lái)促進(jìn)模型的自適應(yīng)性，與其他方法相比，精確度更高，性能更加穩(wěn)健。

本發(fā)明授權(quán)一種基于特征關(guān)聯(lián)表示的圖文檢索方法在權(quán)利要求書(shū)中公布了：1.一種基于特征關(guān)聯(lián)表示的圖文檢索方法，所述方法包括步驟： 用VGG-19網(wǎng)絡(luò)提取圖像特征，用BOW方法提取文本特征，并將兩種特征劃分為訓(xùn)練集和測(cè)試集； 將訓(xùn)練集中的各模態(tài)特征，通過(guò)余弦相似計(jì)算算法分別構(gòu)建圖像余弦相似矩陣Cv和文本余弦相似矩陣Ct，進(jìn)而構(gòu)建基礎(chǔ)關(guān)聯(lián)矩陣Cbase； 劃分Cbase中各對(duì)象間的相似程度，根據(jù)相似程度的不同，劃分為強(qiáng)相關(guān)相似矩陣Cs和弱相關(guān)矩陣Cw，與Cbase通過(guò)加權(quán)計(jì)算得到特征關(guān)聯(lián)矩陣Ca； 分別構(gòu)造三層感知機(jī)網(wǎng)絡(luò)fxv；θv、fxt；θt學(xué)習(xí)哈希碼，其中xv表示輸入為一個(gè)圖像樣本，xt表示輸入為一個(gè)文本樣本，θv、θt表示待更新的網(wǎng)絡(luò)參數(shù)，將提取的圖像文本特征輸入各自哈希學(xué)習(xí)網(wǎng)絡(luò)，生成二進(jìn)制的哈希碼Zv,Zt，利用特征關(guān)聯(lián)矩陣Ca構(gòu)造模態(tài)內(nèi)和模態(tài)間的相似損失幫助網(wǎng)絡(luò)學(xué)習(xí)，隨后，定義優(yōu)化函數(shù)L，L通過(guò)反向傳播更新網(wǎng)絡(luò)參數(shù)θv、θt； 將哈希函數(shù)fxv；θv、fxt；θt學(xué)習(xí)到的Zv，Zt通過(guò)余弦相似計(jì)算，并用Ca進(jìn)行輔助學(xué)習(xí)，即得所述模態(tài)內(nèi)和模態(tài)間的損失函數(shù)L1、L2為： L1＝||CZv,Zv-Ca||F+||CZv,Zt-Ca||F+||CZt,Zt-Ca||F L2＝||CZv,Zv-CZt,Zt||F+||CZv,Zv-CZv,Zt||F+||CZt,Zt-CZv,Zt||F 其中，||·||F代表Frobenius范數(shù)，優(yōu)化函數(shù)為： L＝L1+L2 檢索時(shí)，將測(cè)試集中的模態(tài)特征輸入至對(duì)應(yīng)的哈希學(xué)習(xí)網(wǎng)絡(luò)，將得到哈希碼與數(shù)據(jù)庫(kù)中的哈希碼進(jìn)行比對(duì)，距離最小的即為所查詢的實(shí)例類(lèi)別。

如需購(gòu)買(mǎi)、轉(zhuǎn)讓、實(shí)施、許可或投資類(lèi)似專(zhuān)利技術(shù)，可聯(lián)系本專(zhuān)利的申請(qǐng)人或?qū)＠麢?quán)人哈爾濱理工大學(xué)，其通訊地址為：150080 黑龍江省哈爾濱市南崗區(qū)學(xué)府路52號(hào)；或者聯(lián)系龍圖騰網(wǎng)官方客服，聯(lián)系龍圖騰網(wǎng)可撥打電話0551-65771310或微信搜索“龍圖騰網(wǎng)”。