本發(fā)明公開了一種結(jié)合視頻和音頻進行天氣判別的方法，涉及多模融合分析技術(shù)領(lǐng)域，包括以下步驟：S1、天氣數(shù)據(jù)采集；S2、分類數(shù)據(jù)；S3、數(shù)據(jù)匯總；S4、分析判別；S5、結(jié)果驗證。該結(jié)合視頻和音頻進行天氣判別的方法，通過采集高速公路的視頻天氣及音頻，可以對高速公路的天氣作出判別，通過數(shù)據(jù)采集設(shè)備的定時清理，確保采集數(shù)據(jù)的有效性，將音頻數(shù)據(jù)與視頻數(shù)據(jù)進行區(qū)分整理，實現(xiàn)系統(tǒng)雙通道的處理方式，確保數(shù)據(jù)處理效率的同時，避免數(shù)據(jù)之間出現(xiàn)混淆導(dǎo)致數(shù)據(jù)失效的情況，配合對比歷史數(shù)據(jù)再進行天氣的判別，確保對于天氣判別的準確性，通過對判別后的天氣進行驗證比對，配合深度神經(jīng)網(wǎng)絡(luò)算法使得系統(tǒng)具有很好的自我學習能力。