北京銳安科技有限公司蔣維獲國家專利權
買專利賣專利找龍圖騰,真高效! 查專利查商標用IPTOP,全免費!專利年費監控用IP管家,真方便!
龍圖騰網獲悉北京銳安科技有限公司申請的專利一種數據融合處理方法、裝置、設備及存儲介質獲國家發明授權專利權,本發明授權專利權由國家知識產權局授予,授權公告號為:CN113971160B 。
龍圖騰網通過國家知識產權局官網在2025-08-29發布的發明授權授權公告中獲悉:該發明授權的專利申請號/專利號為:202111281668.4,技術領域涉及:G06F16/13;該發明授權一種數據融合處理方法、裝置、設備及存儲介質是由蔣維;謝永恒;程強;萬月亮設計研發完成,并于2021-11-01向國家知識產權局提交的專利申請。
本一種數據融合處理方法、裝置、設備及存儲介質在說明書摘要公布了:本發明實施例公開了一種數據融合處理方法、裝置、設備及存儲介質,該方法包括:根據預設分區規則對新增數據進行分區處理,獲得至少一個目標分區,其中,目標分區的個數與歷史分區個數相同;獲取設定的數據輸出形式,其中,數據輸出形式包括增量數據輸出形式和全量數據輸出形式;根據數據輸出形式,對每個目標分區中數據進行融合處理,獲得處理后的結果數據并輸出。相比于現有技術中每次都是將數據進行全量輸出,本發明實施例提供的技術方案將數據輸出分為全量數據輸出與多次增量數據輸出,針對不用的數據輸出形式,利用不同的數據融合處理方式,獲得處理后的結果數據并輸出,提高了數據融合處理效率,降低了資源消耗。
本發明授權一種數據融合處理方法、裝置、設備及存儲介質在權利要求書中公布了:1.一種數據融合處理方法,其特征在于,包括: 根據預設分區規則對新增數據進行分區處理,獲得至少一個目標分區,其中,目標分區的個數與歷史分區個數相同; 獲取設定的數據輸出形式,其中,所述數據輸出形式包括增量數據輸出形式和全量數據輸出形式; 根據所述數據輸出形式,對每個目標分區中數據進行融合處理,獲得處理后的結果數據并輸出; 所述根據預設分區規則對新增數據進行分區處理,獲得至少一個目標分區,包括: 從分布式文件系統中讀取新增數據序列;其中,通過使用分布式計算框架從分布式文件系統讀取本次新增數據序列; 根據預設處理規則對所述新增數據序列進行處理,生成一組鍵值對數據,其中,所述鍵值對數據包括鍵值對標識; 根據哈希分區規則對各所述鍵值對數據進行分區,獲得至少一個初始分區; 在每個初始分區中,按照所包括各鍵值對標識對相應鍵值對數據進行排序,將排序后的初始分區確定為目標分區; 所述根據所述數據輸出形式,對每個目標分區中數據進行融合處理,獲得處理后的結果數據并輸出,包括: 針對每個目標分區,對所包含各鍵值對數據進行合并處理,獲取至少一個新鍵值對數據; 獲取分區序號與所述目標分區相同的歷史分區; 基于所述歷史分區及目標分區中各鍵值對數據的鍵值對標識,結合所述數據輸出形式,將所述歷史分區與目標分區中數據進行數據融合處理; 獲得各所述目標分區對應的結果數據并輸出。
如需購買、轉讓、實施、許可或投資類似專利技術,可聯系本專利的申請人或專利權人北京銳安科技有限公司,其通訊地址為:100044 北京市海淀區西小口路66號中關村東升科技園北領地B-2號樓七層;或者聯系龍圖騰網官方客服,聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。
1、本報告根據公開、合法渠道獲得相關數據和信息,力求客觀、公正,但并不保證數據的最終完整性和準確性。
2、報告中的分析和結論僅反映本公司于發布本報告當日的職業理解,僅供參考使用,不能作為本公司承擔任何法律責任的依據或者憑證。