本發(fā)明涉及一種隱蔽通信系統(tǒng)中基于強(qiáng)化學(xué)習(xí)的波束掃描方法。具體地，在一個(gè)支持毫米波的隱蔽通信場(chǎng)景里，無人機(jī)作為發(fā)射機(jī)不知道監(jiān)測(cè)者的確切位置，這種情況下，無人機(jī)采用多天線波束掃描的方法，在不同時(shí)隙中沿著不同的方向?qū)Φ孛嫔隙鄠€(gè)合法接收機(jī)進(jìn)行波束形成傳輸。此時(shí)，發(fā)射機(jī)在一定程度上會(huì)產(chǎn)生信息泄露，為了避免被監(jiān)測(cè)者檢測(cè)到泄露的信息，需要優(yōu)化波束掃描的波束數(shù)及發(fā)射功率，使其在滿足隱蔽約束的條件下達(dá)到最大化平均吞吐量。為了提高發(fā)射機(jī)傳輸?shù)臏?zhǔn)確性與高效性，本發(fā)明采用軟動(dòng)作?評(píng)價(jià)（Soft Actor?Critic，SAC）算法來約束發(fā)射功率和波束數(shù)量，引入最大化帶熵的累計(jì)獎(jiǎng)勵(lì)，使平均吞吐量達(dá)到最大。