買專利賣專利找龍圖騰，真高效！ 查專利查商標用IPTOP,全免費！專利年費監控用IP管家,真方便！

龍圖騰網獲悉深圳友朋智能商業科技有限公司申請的專利基于多模態數據處理的多目標商品識別方法、裝置及系統獲國家發明授權專利權，本發明授權專利權由國家知識產權局授予，授權公告號為：CN120236155B 。

龍圖騰網通過國家知識產權局官網在2025-09-02發布的發明授權授權公告中獲悉：該發明授權的專利申請號/專利號為：202510728593.1，技術領域涉及：G06V10/764；該發明授權基于多模態數據處理的多目標商品識別方法、裝置及系統是由邱俊波;黃超群;陳俏鋒設計研發完成，并于2025-06-03向國家知識產權局提交的專利申請。

本基于多模態數據處理的多目標商品識別方法、裝置及系統在說明書摘要公布了：本發明涉及智能售貨技術領域，解決了現有技術中無法在多目標場景下準確地進行商品識別的問題，提供了一種基于多模態數據處理的多目標商品識別方法、裝置及系統。該方法包括：獲取商品交易場景下多幀實時圖像；對實時圖像進行預處理和標簽信息提取，確定目標圖像和商品標簽對應的文字信息；對目標圖像進行實例分割，確定商品位置信息；對目標圖像進行特征提取，確定商品圖像特征信息；根據預收集的智能售貨場景下的多源私有化數據，對開源多模態視覺語言模型進行微調與優化處理，得到多模態大模型；將商品圖像特征信息和文字信息輸入多模態大模型中進行信息融合，確定商品目標識別結果。本發明能夠在多目標場景下準確地進行商品識別。

本發明授權基于多模態數據處理的多目標商品識別方法、裝置及系統在權利要求書中公布了：1.一種基于多模態數據處理的多目標商品識別方法，其特征在于，所述方法包括： 獲取商品交易場景下的實時視頻數據，將所述實時視頻數據分解為多幀實時圖像； 對所述實時圖像進行預處理和標簽信息提取，確定預處理后的目標圖像和商品標簽對應的文字信息； 對所述目標圖像進行實例分割，確定商品位置信息； 根據所述商品位置信息，對所述目標圖像進行特征提取，確定商品圖像特征信息； 根據預收集的智能售貨場景下的多源私有化數據，對開源多模態視覺語言模型進行微調與優化處理，得到用于商品識別的多模態大模型； 將所述商品圖像特征信息和所述文字信息輸入所述多模態大模型中進行信息融合，根據融合特征信息，確定商品目標識別結果； 所述將所述商品圖像特征信息和所述文字信息輸入所述多模態大模型中進行信息融合，根據融合特征信息，確定商品目標識別結果包括： 將所述商品圖像特征信息和所述文字信息輸入所述多模態大模型中，得到融合圖像特征和文字語義的融合特征信息； 將所述融合特征信息輸入預訓練的商品分類模型中，得到初始商品類別； 根據所述初始商品類別，判斷當前初始商品類別中是否存在相似商品； 當存在相似商品時，根據所述初始商品類別，獲取待提取特征的局部區域和待提取的目標特征； 根據所述局部區域和所述目標特征，對所述目標圖像進行特征提取，得到局部區域特征信息； 根據所述局部區域特征信息，對所述初始商品類別進行分類，得到目標商品類別作為所述商品目標識別結果； 所述當存在相似商品時，根據所述初始商品類別，獲取待提取特征的局部區域和待提取的目標特征包括： 根據所述初始商品類別，從預設的商品圖像數據庫中選取該類別下的多個子類別分別對應的樣本圖像； 將各所述樣本圖像輸入預訓練的顯著性檢測模型中，得到顯著性熱圖，其中，所述顯著性熱圖用于表征樣本圖像中對視覺特征注意力最集中的區域； 對所述顯著性熱圖進行閾值分割，得到多個候選區域； 對各所述候選區域進行綜合評分，根據評分結果，從各所述候選區域中篩選得到所述局部區域； 對所述局部區域進行候選特征提取和特征評估，根據特征評估結果，從提取的候選特征中篩選得到所述目標特征。

如需購買、轉讓、實施、許可或投資類似專利技術，可聯系本專利的申請人或專利權人深圳友朋智能商業科技有限公司，其通訊地址為：518000 廣東省深圳市寶安區航城街道三圍社區索佳科技園A棟A103；或者聯系龍圖騰網官方客服，聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。