本發(fā)明公開(kāi)了一種基于深度強(qiáng)化學(xué)習(xí)架構(gòu)的低軌衛(wèi)星路由策略方法,屬于無(wú)線(xiàn)通信領(lǐng)域。首先建立銥星星座網(wǎng)絡(luò),結(jié)合馬爾可夫決策過(guò)程搭建深度強(qiáng)化學(xué)習(xí)架構(gòu);針對(duì)某個(gè)衛(wèi)星節(jié)點(diǎn)A,周期性向鄰居節(jié)點(diǎn)發(fā)送HELLO包,尋找與當(dāng)前節(jié)點(diǎn)A的鏈路狀態(tài)相通的鄰接節(jié)點(diǎn)。通過(guò)輸入目的節(jié)點(diǎn)坐標(biāo),當(dāng)前節(jié)點(diǎn)以及鄰居節(jié)點(diǎn)的鏈路狀態(tài)到深度強(qiáng)化學(xué)習(xí)架構(gòu)中,得到當(dāng)前節(jié)點(diǎn)的下一跳節(jié)點(diǎn),同理繼續(xù)得到下一跳節(jié)點(diǎn);當(dāng)出現(xiàn)特殊路由情況(如斷路、環(huán)路、擁塞)時(shí),采取相應(yīng)的解決策略,將鏈路狀態(tài)重復(fù)輸入到深度強(qiáng)化學(xué)習(xí)架構(gòu)中,直至到達(dá)目的節(jié)點(diǎn),完成路徑規(guī)劃過(guò)程。本發(fā)明在降低系統(tǒng)復(fù)雜度和存儲(chǔ)開(kāi)銷(xiāo)的同時(shí)達(dá)到實(shí)時(shí)探測(cè)衛(wèi)星鏈路狀態(tài)的效果,衛(wèi)星路由更具穩(wěn)定性和可靠性。
聲明:
“基于深度強(qiáng)化學(xué)習(xí)架構(gòu)的低軌衛(wèi)星路由策略方法” 該技術(shù)專(zhuān)利(論文)所有權(quán)利歸屬于技術(shù)(論文)所有人。僅供學(xué)習(xí)研究,如用于商業(yè)用途,請(qǐng)聯(lián)系該技術(shù)所有人。
我是此專(zhuān)利(論文)的發(fā)明人(作者)