買專利賣專利找龍圖騰，真高效！ 查專利查商標用IPTOP,全免費！專利年費監控用IP管家,真方便！

龍圖騰網獲悉國網河北省電力有限公司信息通信分公司;華瑞新智科技(北京)有限公司;國家電網有限公司申請的專利圖文跨模態檢索方法、裝置、電子設備及存儲介質獲國家發明授權專利權，本發明授權專利權由國家知識產權局授予，授權公告號為：CN117076695B 。

龍圖騰網通過國家知識產權局官網在2025-09-05發布的發明授權授權公告中獲悉：該發明授權的專利申請號/專利號為：202311020332.1，技術領域涉及：G06F16/432；該發明授權圖文跨模態檢索方法、裝置、電子設備及存儲介質是由辛銳;歐中洪;陳曦;路欣;劉明碩;王少影;姜丹;張博;尹曉宇;章涵宇;田子敬設計研發完成，并于2023-08-14向國家知識產權局提交的專利申請。

本圖文跨模態檢索方法、裝置、電子設備及存儲介質在說明書摘要公布了：本發明提供一種圖文跨模態檢索方法、裝置、電子設備及存儲介質。該方法包括：在預設圖片庫和預設文本庫中進行樣本篩選，得到圖片樣本和文本樣本；圖片樣本與文本樣本中包括至少同一種實體目標；對文本樣本進行實體抽取，得到文本樣本的實體目標；對圖片樣本進行分割，得到圖片樣本的M×N個區塊；分別計算實體目標在每個區塊內的權重，根據權重確定圖片樣本的高頻實體目標；提取每個區塊的文本提示信息，并將文本提示信息添加到實體目標對應的文本后；分別提取各區塊和添加信息后的實體目標對應的文本的特征向量，并基于特征向量和高頻實體目標進行合并。本發明能夠確定實體的相對位置，進一步提高跨模態檢索的準確性。

本發明授權圖文跨模態檢索方法、裝置、電子設備及存儲介質在權利要求書中公布了：1.一種圖文跨模態檢索方法，其特征在于，包括：在預設圖片庫和預設文本庫中進行樣本篩選，得到圖片樣本和文本樣本；所述圖片樣本與所述文本樣本中包括至少同一種實體目標； 對所述文本樣本進行實體抽取，得到所述文本樣本的實體目標；對所述圖片樣本進行分割，得到所述圖片樣本的M×N個區塊；分別計算所述實體目標在每個區塊內的權重，根據所述權重確定所述圖片樣本的高頻實體目標； 提取各區塊的文本提示信息，并將所述文本提示信息添加到所述實體目標對應的文本后；其中，所述文本提示信息包括所屬區塊的標識以及區塊生成的對象標記；分別提取各區塊和所述添加信息后的實體目標對應的文本的特征向量，并基于所述特征向量和所述高頻實體目標進行合并； 其中，所述分別提取各區塊和所述添加信息后的實體目標對應的文本的特征向量，基于所述特征向量和所述高頻實體目標進行合并，包括： 采用圖片編碼器分別對各區塊進行特征提取，得到各區塊的第一特征向量； 采用文本編碼器對所述添加信息后的實體目標對應的文本進行特征提取，得到第二特征向量； 將所述第一特征向量和所述第二特征向量進行編碼處理，并將編碼處理后的第一特征向量和第二特征向量映射到預設的共享子空間； 根據構建的張量將所述共享子空間中編碼處理后的所述第一特征向量和所述第二特征向量進行乘積，得到跨模態融合后的各區塊和所述實體目標對應的文本； 基于所述跨模態融合后的各區塊和所述實體目標對應的文本以及所述高頻實體目標進行合并。

如需購買、轉讓、實施、許可或投資類似專利技術，可聯系本專利的申請人或專利權人國網河北省電力有限公司信息通信分公司;華瑞新智科技(北京)有限公司;國家電網有限公司，其通訊地址為：050026 河北省石家莊市裕華區富強大街10號；或者聯系龍圖騰網官方客服，聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。