浙江大學;中國電子科技集團公司第五十四研究所施之煜獲國家專利權(quán)
買專利賣專利找龍圖騰,真高效! 查專利查商標用IPTOP,全免費!專利年費監(jiān)控用IP管家,真方便!
龍圖騰網(wǎng)獲悉浙江大學;中國電子科技集團公司第五十四研究所申請的專利一種基于深度強化學習的無人機多跳SPMA網(wǎng)絡智能退避方法獲國家發(fā)明授權(quán)專利權(quán),本發(fā)明授權(quán)專利權(quán)由國家知識產(chǎn)權(quán)局授予,授權(quán)公告號為:CN116133153B 。
龍圖騰網(wǎng)通過國家知識產(chǎn)權(quán)局官網(wǎng)在2025-09-05發(fā)布的發(fā)明授權(quán)授權(quán)公告中獲悉:該發(fā)明授權(quán)的專利申請?zhí)?專利號為:202211676257.X,技術(shù)領域涉及:H04W74/0816;該發(fā)明授權(quán)一種基于深度強化學習的無人機多跳SPMA網(wǎng)絡智能退避方法是由施之煜;雷鳴;肖哲;趙民建;王嬋設計研發(fā)完成,并于2022-12-26向國家知識產(chǎn)權(quán)局提交的專利申請。
本一種基于深度強化學習的無人機多跳SPMA網(wǎng)絡智能退避方法在說明書摘要公布了:本發(fā)明提出一種基于深度強化學習的無人機多跳SPMA網(wǎng)絡智能退避方法,包括,將信道狀態(tài)信息作為多跳SPMA網(wǎng)絡中智能退避網(wǎng)絡的輸入,其中,信道狀態(tài)信息包括信道占用率及其歷史值、各優(yōu)先級隊列中的需轉(zhuǎn)發(fā)數(shù)據(jù)包個數(shù);根據(jù)智能退避網(wǎng)絡輸出退避時長,并更新智能退避網(wǎng)絡的信道狀態(tài);根據(jù)更新后的信道占用率情況評估退避效果,根據(jù)更新后的各優(yōu)先級隊列中需轉(zhuǎn)發(fā)數(shù)據(jù)包數(shù)目評估數(shù)據(jù)包轉(zhuǎn)發(fā)成功率,并根據(jù)退避效果和數(shù)據(jù)包轉(zhuǎn)發(fā)成功率得到回報值;通過智能退避網(wǎng)絡計算不同動作對應的最大回報值,選取回報值最大的動作作為當前的輸入,訓練智能退避網(wǎng)絡直至收斂;獲取目標信道狀態(tài)信息,將目標信道狀態(tài)信息輸入訓練好的智能退避網(wǎng)絡,得到最優(yōu)的退避策略。
本發(fā)明授權(quán)一種基于深度強化學習的無人機多跳SPMA網(wǎng)絡智能退避方法在權(quán)利要求書中公布了:1.一種基于深度強化學習的無人機多跳SPMA網(wǎng)絡智能退避方法,其特征在于,包括以下步驟: 將信道狀態(tài)信息作為多跳SPMA網(wǎng)絡中智能退避網(wǎng)絡的輸入,其中,所述信道狀態(tài)信息包括信道占用率及其歷史值、各優(yōu)先級隊列中的需轉(zhuǎn)發(fā)數(shù)據(jù)包個數(shù); 根據(jù)所述智能退避網(wǎng)絡輸出退避時長,并更新智能退避網(wǎng)絡的信道狀態(tài); 根據(jù)更新后的信道占用率情況評估退避效果,根據(jù)更新后的各優(yōu)先級隊列中需轉(zhuǎn)發(fā)數(shù)據(jù)包數(shù)目評估數(shù)據(jù)包轉(zhuǎn)發(fā)成功率,并根據(jù)所述退避效果和所述數(shù)據(jù)包轉(zhuǎn)發(fā)成功率得到回報值; 通過所述智能退避網(wǎng)絡計算不同動作對應的最大回報值,選取回報值最大的動作作為當前的輸入,訓練所述智能退避網(wǎng)絡直至收斂; 獲取目標信道狀態(tài)信息,將所述目標信道狀態(tài)信息輸入訓練好的智能退避網(wǎng)絡,得到最優(yōu)的退避策略; 其中,所述智能退避網(wǎng)絡的獎勵函數(shù)定義為: 其中,C為退避開始時優(yōu)先級隊列中所有數(shù)據(jù)包的數(shù)目;ΔN為退避前后轉(zhuǎn)發(fā)數(shù)據(jù)包的數(shù)目變化;B表示退避之后數(shù)據(jù)包是否可以發(fā)送,1表示可以發(fā)送,0表示不可以發(fā)送;t表示退避完成時刻;ts表示退避開始時刻;Tth表示獲得上限獎勵的退避時間閾值;ρ為衰減系數(shù)。
如需購買、轉(zhuǎn)讓、實施、許可或投資類似專利技術(shù),可聯(lián)系本專利的申請人或?qū)@麢?quán)人浙江大學;中國電子科技集團公司第五十四研究所,其通訊地址為:310027 浙江省杭州市西湖區(qū)浙大路38號;或者聯(lián)系龍圖騰網(wǎng)官方客服,聯(lián)系龍圖騰網(wǎng)可撥打電話0551-65771310或微信搜索“龍圖騰網(wǎng)”。
1、本報告根據(jù)公開、合法渠道獲得相關(guān)數(shù)據(jù)和信息,力求客觀、公正,但并不保證數(shù)據(jù)的最終完整性和準確性。
2、報告中的分析和結(jié)論僅反映本公司于發(fā)布本報告當日的職業(yè)理解,僅供參考使用,不能作為本公司承擔任何法律責任的依據(jù)或者憑證。