本發(fā)明公開了一種多模態(tài)融合的鋪絲機復(fù)合材料表面缺陷檢測系統(tǒng)，包括多模態(tài)神經(jīng)網(wǎng)絡(luò)數(shù)據(jù)加載模塊、多模態(tài)神經(jīng)網(wǎng)絡(luò)算法訓(xùn)練模塊、多模態(tài)神經(jīng)網(wǎng)絡(luò)缺陷檢測模塊和表面缺陷檢測系統(tǒng)結(jié)果反饋模塊。多模態(tài)神經(jīng)網(wǎng)絡(luò)數(shù)據(jù)加載模塊導(dǎo)入用于多模態(tài)神經(jīng)網(wǎng)絡(luò)算法訓(xùn)練模塊所需要的訓(xùn)練數(shù)據(jù)，包含兩種類型：圖像類型數(shù)據(jù)和點云類型數(shù)據(jù)，生成算法模塊訓(xùn)練所需的格式化數(shù)據(jù)。多模態(tài)神經(jīng)網(wǎng)絡(luò)算法訓(xùn)練模塊以格式化圖像數(shù)據(jù)和點云數(shù)據(jù)作為輸入，訓(xùn)練后多模態(tài)神經(jīng)網(wǎng)絡(luò)缺陷檢測模塊以現(xiàn)場獲取的鋪絲機復(fù)合材料表面圖像和點云數(shù)據(jù)作為輸入，輸出缺陷分析圖像，標注出缺陷所在位置。本發(fā)明能夠滿足實際飛機復(fù)合材料生產(chǎn)精度的檢測效率和檢測精度，具有高效、可靠等優(yōu)勢。