買專利賣專利找龍圖騰，真高效！ 查專利查商標用IPTOP,全免費！專利年費監(jiān)控用IP管家,真方便！

龍圖騰網(wǎng)獲悉哈爾濱工程大學申請的專利一種基于場景圖的圖像內(nèi)容檢索方法獲國家發(fā)明授權(quán)專利權(quán)，本發(fā)明授權(quán)專利權(quán)由國家知識產(chǎn)權(quán)局授予，授權(quán)公告號為：CN115952306B 。

龍圖騰網(wǎng)通過國家知識產(chǎn)權(quán)局官網(wǎng)在2025-09-09發(fā)布的發(fā)明授權(quán)授權(quán)公告中獲悉：該發(fā)明授權(quán)的專利申請?zhí)?專利號為：202211550485.2，技術(shù)領(lǐng)域涉及：G06F16/432；該發(fā)明授權(quán)一種基于場景圖的圖像內(nèi)容檢索方法是由張智;李金星;王立鵬;尚曉兵;孫杰設(shè)計研發(fā)完成，并于2022-12-05向國家知識產(chǎn)權(quán)局提交的專利申請。

本一種基于場景圖的圖像內(nèi)容檢索方法在說明書摘要公布了：本發(fā)明公開了一種基于場景圖的圖像內(nèi)容檢索方法，本發(fā)明通過結(jié)構(gòu)化的方式，檢索出符合描述的圖片集。基于場景圖的圖像檢索方法從圖像整體的內(nèi)容入手，更加注重于目標與目標之間的視覺關(guān)系。這種視覺關(guān)系，以圖的形式組成，將圖像以一種結(jié)構(gòu)化描述的形式展現(xiàn)出來，利用這種復雜的結(jié)構(gòu)化形式完成檢索任務(wù)，通過這種更加細致地描述提升了基于圖像內(nèi)容檢索的準確度，也滿足了人們對于細粒度的圖像檢索任務(wù)的要求。本發(fā)明并不局限于檢索出單目標或多目標的名稱與特點，更在于對多目標之間的相互作用關(guān)系進行檢索。

本發(fā)明授權(quán)一種基于場景圖的圖像內(nèi)容檢索方法在權(quán)利要求書中公布了：1.一種基于場景圖的圖像內(nèi)容檢索方法，其特征在于：具體步驟為： 步驟一：場景圖嵌入； 圖卷積神經(jīng)網(wǎng)絡(luò)處理輸入場景圖，生成與圖中目標節(jié)點對應(yīng)的嵌入圖；利用特征提取網(wǎng)絡(luò)對圖像的深層視覺特征進行提取，得到圖像的整體特征圖；根據(jù)需要檢測和推理的主語，關(guān)系，賓語選取三元組區(qū)域；對目標的區(qū)域特征進行處理得到預(yù)測的目標和關(guān)系； 所述場景圖嵌入具體為：對所有對象oi∈O，所有邊oi,r,oj∈E給定輸入向量利用gs,gp和go三種圖卷積函數(shù)來生成對于所有計算節(jié)點與邊的輸出向量將一條邊的三元組向量vi,vr,vj作為輸入，分別輸出組組新向量主語oi，謂語r，賓語oj； 設(shè)v'r＝gpvi,vr,vj，一個對象oi的輸出向量v'i應(yīng)該依賴oi通過圖邊連接到的對象的所有向量vj，以及這些邊的向量vr；對于每條從oi開始的邊，使用gs來計算一個候選向量，在集合中收集所有這樣的候選向量，同樣使用go去計算終止與oi的所有邊的一組候選向量 對象oi的v'i的輸出向量計算為h是一種對稱函數(shù)，它將向量的輸入集合池化到單個輸出向量； 步驟二：布局預(yù)測模型； 單例目標嵌入作為網(wǎng)絡(luò)模型下一階段的輸入，預(yù)測模型第二階段的輸出被用作帶有目標定位的場景布局，利用這種目標嵌入形成一系列三元組主語，謂語、賓語嵌入向量；將三元組嵌入向量通過一個三元掩膜預(yù)測網(wǎng)絡(luò)標記出目標對象屬于主語還是賓語，這一目的在于標定出多目標之間的主謂關(guān)系；通過一個三元組回歸網(wǎng)絡(luò)傳遞三元組嵌入向量，在這個回歸網(wǎng)絡(luò)中，訓練網(wǎng)絡(luò)在主體和對象的邊界框上進行連接定位；框被定義為主體和對象的邊界框； 所述布局預(yù)測模型具體為：對象布局網(wǎng)絡(luò)接受一個嵌入向量vi形狀D對象oi，并將它傳遞到一個掩膜回歸網(wǎng)絡(luò)去預(yù)測一個形狀M×M的軟二分類掩膜一個邊界回歸網(wǎng)絡(luò)去預(yù)測邊界回歸框的位置將嵌入向量vi與掩膜相乘，得到形狀為D×M×M的掩膜嵌入，然后使用雙線性插值將其彎曲到邊界框的位置，給出對象布局，對象布局是上面所有對象布局的總和； 步驟三：目標匹配； 查詢數(shù)據(jù)庫，從一個學習過的場景圖嵌入的對象嵌入形成結(jié)構(gòu)化查詢；通過多種形式的結(jié)構(gòu)化查詢，同樣包括視覺語義的方式；從COCO-Stuff數(shù)據(jù)集上標注的測試場景圖中提取了3100個視覺關(guān)系數(shù)據(jù)庫；按照各自的嵌入空間表示使用相似度度量S對檢索到的圖像進行排序；展示出前N張符合檢索要求圖片供其篩選。

如需購買、轉(zhuǎn)讓、實施、許可或投資類似專利技術(shù)，可聯(lián)系本專利的申請人或?qū)＠麢?quán)人哈爾濱工程大學，其通訊地址為：150001 黑龍江省哈爾濱市南崗區(qū)南通大街145號哈爾濱工程大學科技處知識產(chǎn)權(quán)辦公室；或者聯(lián)系龍圖騰網(wǎng)官方客服，聯(lián)系龍圖騰網(wǎng)可撥打電話0551-65771310或微信搜索“龍圖騰網(wǎng)”。