本發(fā)明公開了屬于視覺跟蹤技術(shù)領(lǐng)域的一種基于神經(jīng)網(wǎng)絡(luò)的視覺跟蹤失效檢測(cè)系統(tǒng)及其訓(xùn)練方法。建立基于神經(jīng)網(wǎng)絡(luò)的視覺跟蹤失效檢測(cè)系統(tǒng)，該系統(tǒng)由相關(guān)濾波模塊和跟蹤異常感知模塊串聯(lián)連接組成；該視覺跟蹤失效檢測(cè)系統(tǒng)利用深度神經(jīng)網(wǎng)絡(luò)強(qiáng)大的視覺感知能力，根據(jù)相關(guān)濾波器生成的結(jié)果圖，判斷目標(biāo)跟蹤是否失效；相關(guān)濾波模塊根據(jù)跟蹤異常感知模塊的結(jié)果進(jìn)行模型參數(shù)更新。鑒于神經(jīng)網(wǎng)絡(luò)方法具有很好的分類精度，但是需要大量的樣本進(jìn)行訓(xùn)練，所述訓(xùn)練需要大量的樣本包括正樣本和負(fù)樣本，由此設(shè)計(jì)了相應(yīng)的大規(guī)模訓(xùn)練樣本生成方法，主要用于深度神經(jīng)網(wǎng)絡(luò)模型的訓(xùn)練；并在公開數(shù)據(jù)集上進(jìn)行了測(cè)試。本發(fā)明可以支撐深度神經(jīng)網(wǎng)絡(luò)的訓(xùn)練。