買專利賣專利找龍圖騰，真高效！ 查專利查商標(biāo)用IPTOP,全免費(fèi)！專利年費(fèi)監(jiān)控用IP管家,真方便！

龍圖騰網(wǎng)獲悉南京大學(xué)申請的專利基于強(qiáng)化學(xué)習(xí)的智能被動監(jiān)聽方法獲國家發(fā)明授權(quán)專利權(quán)，本發(fā)明授權(quán)專利權(quán)由國家知識產(chǎn)權(quán)局授予，授權(quán)公告號為：CN114567885B 。

龍圖騰網(wǎng)通過國家知識產(chǎn)權(quán)局官網(wǎng)在2025-09-19發(fā)布的發(fā)明授權(quán)授權(quán)公告中獲悉：該發(fā)明授權(quán)的專利申請?zhí)?專利號為：202210304913.7，技術(shù)領(lǐng)域涉及：H04W12/80；該發(fā)明授權(quán)基于強(qiáng)化學(xué)習(xí)的智能被動監(jiān)聽方法是由唐嵐;王家尉設(shè)計(jì)研發(fā)完成，并于2022-03-24向國家知識產(chǎn)權(quán)局提交的專利申請。

本基于強(qiáng)化學(xué)習(xí)的智能被動監(jiān)聽方法在說明書摘要公布了：本發(fā)明公開了一種基于強(qiáng)化學(xué)習(xí)的智能被動監(jiān)聽方法，包括如下步驟：在監(jiān)聽器端，基于監(jiān)聽器所能預(yù)先計(jì)算出的等效信道與干擾協(xié)方差矩陣，使用第一DQN生成模擬波束成形矩陣，并將模擬波束成形矩陣輸入到最小均方誤差模塊，計(jì)算出數(shù)字波束成形矩陣；利用模擬和數(shù)字波束成形矩陣計(jì)算出監(jiān)聽器端的接收信號的信干噪比，并將信干噪比作為第二DQN的輸入；基于監(jiān)聽器的位置、電量和接收信號的信干噪比信息，利用第二DQN生成監(jiān)聽器的移動方向和移動速度，當(dāng)電量到達(dá)返回所需電量的臨界時，監(jiān)聽器返回基地充電；重復(fù)上述學(xué)習(xí)過程，最終監(jiān)聽器將學(xué)習(xí)到一條平均監(jiān)聽率最大的軌跡。本發(fā)明保證監(jiān)聽器在非合作的環(huán)境中獲得更高的監(jiān)聽率并成功實(shí)現(xiàn)監(jiān)聽。

本發(fā)明授權(quán)基于強(qiáng)化學(xué)習(xí)的智能被動監(jiān)聽方法在權(quán)利要求書中公布了：1.一種基于強(qiáng)化學(xué)習(xí)的智能被動監(jiān)聽方法，包含以下步驟： 1在監(jiān)聽器端，基于監(jiān)聽器所能預(yù)先計(jì)算出的等效信道與干擾協(xié)方差矩陣，使用第一DQN生成模擬波束成形矩陣，并將所述模擬波束成形矩陣輸入到最小均方誤差模塊，計(jì)算出數(shù)字波束成形矩陣； 2利用所述模擬波束成形矩陣和數(shù)字波束成形矩陣計(jì)算出監(jiān)聽器端的接收信號的信干噪比，并將所述信干噪比作為第二DQN的輸入； 3基于監(jiān)聽器的位置、電量和接收信號的所述信干噪比信息，利用第二DQN生成監(jiān)聽器的移動方向和移動速度，當(dāng)電量到達(dá)返回所需電量的臨界時，監(jiān)聽器返回基地充電； 4重復(fù)上述的學(xué)習(xí)過程，最終監(jiān)聽器將學(xué)習(xí)到一條平均監(jiān)聽率最大的軌跡；所述步驟1中包括如下步驟： 1在監(jiān)聽器端，使用第一DQN基于生成監(jiān)聽器在t時刻的模擬波束成形矩陣a1t＝{WE，rft}，其中s1t表示狀態(tài)空間，HE，ktfkt表示基站與監(jiān)聽器之間第k個子載波的等效合成信道，Ckt表示在第k個子載波上監(jiān)聽器收到的其他基站干擾的協(xié)方差矩陣，表示分配給可疑用戶的所有子載波集合；a1t表示動作空間，WE，rft表示監(jiān)聽器從候選基向量中選擇的模擬波束成形矩陣； 2當(dāng)監(jiān)聽器通過第一DQN輸出模擬波束成形矩陣WE，rft后，將WE，rft代入到最小均方誤差算法模塊中，計(jì)算監(jiān)聽器端對第k個子載波的數(shù)字波束成形矩陣為 其中Xkt＝WE，rftHE，ktfkt，pk是發(fā)送信號功率，σ2是噪聲功率，上標(biāo)H表示共軛轉(zhuǎn)置；所述步驟2中包括如下步驟： 利用所述模擬波束成形矩陣WE，rft和數(shù)字波束成形矩陣計(jì)算出監(jiān)聽器端在t時刻第k個子載波上的接收信號的信干噪比γkt為 其中I表示單位矩陣，并將作為第二DQN的輸入；所述步驟3中包括如下步驟： 在監(jiān)聽器端，使用第二DQN基于生成監(jiān)聽器的移動方向和速度a2t＝{θt，vt}，其中a2t表示第二DQN的動作空間，s2t表示第二DQN的狀態(tài)空間，xt和yt共同表示監(jiān)聽器在t時刻的位置信息，Et表示監(jiān)聽器在t時刻的剩余電量，θt和vt分別表示監(jiān)聽器的移動方向和距離，xt，yt，θt和vt滿足關(guān)系xt+1＝xt+vtTcosθt和yt+1＝y(tǒng)t+vtfsinθt，其中T表示每個時隙的持續(xù)時間，xt+1和yt+1共同表示監(jiān)聽器在t+1時刻的位置信息；監(jiān)聽器每次前進(jìn)方向有8個，分別是向上、向下、向左、向右、向左上、向左下、向右下、向右上；此外，監(jiān)聽器還能選擇懸停以在原位置處監(jiān)聽，此時vt＝0，當(dāng)監(jiān)聽器懸停時，所消耗的電量要小于移動時的電量消耗；監(jiān)聽器的剩余電量滿足Et+1＝max0，Et-BtT，其中Bt表示監(jiān)聽器在t時刻消耗的電量，max表示求最大值；由于電池容量的限制，監(jiān)聽器在每個時刻t都需要決定是否移動到一個新的位置或懸停在原來的位置進(jìn)行監(jiān)聽，同時還要保證有足夠的電量返回基地，所以監(jiān)聽器學(xué)習(xí)的目標(biāo)是找到一條平均監(jiān)聽率最大的軌跡。

如需購買、轉(zhuǎn)讓、實(shí)施、許可或投資類似專利技術(shù)，可聯(lián)系本專利的申請人或?qū)＠麢?quán)人南京大學(xué)，其通訊地址為：210093 江蘇省南京市鼓樓區(qū)漢口路22號；或者聯(lián)系龍圖騰網(wǎng)官方客服，聯(lián)系龍圖騰網(wǎng)可撥打電話0551-65771310或微信搜索“龍圖騰網(wǎng)”。