買專利賣專利找龍圖騰，真高效！ 查專利查商標(biāo)用IPTOP,全免費！專利年費監(jiān)控用IP管家,真方便！

龍圖騰網(wǎng)獲悉國網(wǎng)吉林省電力有限公司;國網(wǎng)吉林省電力有限公司信息通信公司;吉林東北電力大學(xué)科技開發(fā)有限責(zé)任公司申請的專利一種基于強(qiáng)化學(xué)習(xí)的電力通信網(wǎng)路由規(guī)劃方法獲國家發(fā)明授權(quán)專利權(quán)，本發(fā)明授權(quán)專利權(quán)由國家知識產(chǎn)權(quán)局授予，授權(quán)公告號為：CN119854196B 。

龍圖騰網(wǎng)通過國家知識產(chǎn)權(quán)局官網(wǎng)在2025-09-26發(fā)布的發(fā)明授權(quán)授權(quán)公告中獲悉：該發(fā)明授權(quán)的專利申請?zhí)?專利號為：202510007936.5，技術(shù)領(lǐng)域涉及：H04L45/02；該發(fā)明授權(quán)一種基于強(qiáng)化學(xué)習(xí)的電力通信網(wǎng)路由規(guī)劃方法是由劉丹妮;李玉彤;張松;姜萬昌;胡冰;王濤;蘇偉佳;叢犁;徐晗;祁晗;姜秀紅設(shè)計研發(fā)完成，并于2025-01-03向國家知識產(chǎn)權(quán)局提交的專利申請。

本一種基于強(qiáng)化學(xué)習(xí)的電力通信網(wǎng)路由規(guī)劃方法在說明書摘要公布了：一種基于強(qiáng)化學(xué)習(xí)的電力通信網(wǎng)路由規(guī)劃方法，涉及電力通信網(wǎng)絡(luò)技術(shù)領(lǐng)域，解決現(xiàn)有電力通信網(wǎng)路由規(guī)劃方法考慮因素單一，導(dǎo)致不能準(zhǔn)確實現(xiàn)電力通信網(wǎng)路由規(guī)劃負(fù)載和風(fēng)險均衡的問題，本發(fā)明通過構(gòu)建電力通信網(wǎng)拓?fù)淠Ｐ虶和電力通信網(wǎng)業(yè)務(wù)模型H；構(gòu)建電力通信網(wǎng)負(fù)載均衡和風(fēng)險均衡優(yōu)化模型；構(gòu)建PDQN網(wǎng)絡(luò)模型，在Pareto最優(yōu)解集合中進(jìn)行路徑選擇；對PDQN網(wǎng)絡(luò)模型進(jìn)行訓(xùn)練，最終輸出業(yè)務(wù)需求的路由決策。本方法避免了傳統(tǒng)方法主要關(guān)注單一目標(biāo)的局限性，可以有效降低網(wǎng)絡(luò)負(fù)載均衡度和風(fēng)險均衡度，滿足電力通信網(wǎng)業(yè)務(wù)路由規(guī)劃需求，旨在提升網(wǎng)絡(luò)的整體性能和可靠性。

本發(fā)明授權(quán)一種基于強(qiáng)化學(xué)習(xí)的電力通信網(wǎng)路由規(guī)劃方法在權(quán)利要求書中公布了：1.一種基于強(qiáng)化學(xué)習(xí)的電力通信網(wǎng)路由規(guī)劃方法，其特征是：該方法由以下步驟實現(xiàn)： 步驟一、構(gòu)建電力通信網(wǎng)拓?fù)淠Ｐ虶和電力通信網(wǎng)業(yè)務(wù)模型H； 步驟二、構(gòu)建電力通信網(wǎng)負(fù)載均衡和風(fēng)險均衡優(yōu)化模型； 步驟三、根據(jù)步驟一構(gòu)建的電力通信網(wǎng)拓?fù)淠Ｐ虶和電力通信網(wǎng)業(yè)務(wù)模型H以及步驟二構(gòu)建的電力通信網(wǎng)負(fù)載均衡和風(fēng)險均衡優(yōu)化模型，構(gòu)建PDQN網(wǎng)絡(luò)模型，定義狀態(tài)空間S和動作空間A，在每個決策時刻，系統(tǒng)根據(jù)當(dāng)前狀態(tài)從動作空間A中選擇路由動作，在Pareto最優(yōu)解集合中進(jìn)行路徑選擇，最終實現(xiàn)負(fù)載均衡和風(fēng)險均衡的路由策略；具體過程為： 步驟三一、構(gòu)造PDQN網(wǎng)絡(luò)模型的初始環(huán)境；初始環(huán)境包括狀態(tài)空間S、動作空間A以及獎勵函數(shù)PR； 步驟三二、設(shè)計獨立輸出層的PDQN網(wǎng)絡(luò)模型； 步驟三三、動作選擇策略； 根據(jù)當(dāng)前狀態(tài)s，對當(dāng)前業(yè)務(wù)請求vko,vkf,ck進(jìn)行動作選擇，最終實現(xiàn)在Pareto最優(yōu)解集合中進(jìn)行路徑選擇；vko為第k個通信業(yè)務(wù)需求的源節(jié)點，vkf為第k個通信業(yè)務(wù)需求的目的節(jié)點；ck為第k個通信業(yè)務(wù)需求所需的帶寬容量； 首先，進(jìn)行路徑可行性檢驗，根據(jù)當(dāng)前狀態(tài)s下對每個執(zhí)行動作a，計算分配帶寬后的負(fù)載均衡度Ls,a和風(fēng)險均衡度Rs,a； 其次，構(gòu)建Pareto最優(yōu)解集合； 定義動作a的解向量S_a，對于當(dāng)前狀態(tài)s下的任意動作a1,a2∈A，若滿足：Ls,a1≥Ls,a2和Rs,a1≥Rs,a2，且至少有一個不等號成立，則稱動作a1的值支配動作a2的值； 然后，定義Pareto最優(yōu)解集合為當(dāng)前狀態(tài)s下所有非支配值Fs的集合： 采用ε-greedy策略表示為： 式中，As是在狀態(tài)s下選擇的動作；argmaxQs,a是狀態(tài)s下最大Qs,a值對應(yīng)的動作a，ε是探索概率； 最后，在Pareto最優(yōu)解集合中進(jìn)行路徑選擇； 步驟四、對所述PDQN網(wǎng)絡(luò)模型進(jìn)行訓(xùn)練，最終輸出業(yè)務(wù)需求的路由決策。

如需購買、轉(zhuǎn)讓、實施、許可或投資類似專利技術(shù)，可聯(lián)系本專利的申請人或?qū)＠麢?quán)人國網(wǎng)吉林省電力有限公司;國網(wǎng)吉林省電力有限公司信息通信公司;吉林東北電力大學(xué)科技開發(fā)有限責(zé)任公司，其通訊地址為：130000 吉林省長春市南關(guān)區(qū)人民大街10388號；或者聯(lián)系龍圖騰網(wǎng)官方客服，聯(lián)系龍圖騰網(wǎng)可撥打電話0551-65771310或微信搜索“龍圖騰網(wǎng)”。