一種結(jié)合視頻場景特征感知的多目標(biāo)跟蹤方法

基本信息

申請?zhí)?/td> CN201910924481.8 申請日 -
公開（公告）號 CN110660083A 公開（公告）日 2020-01-07
申請公布號 CN110660083A 申請公布日 2020-01-07
分類號 G06T7/246（2017.01）; G06N3/08（2006.01） 分類 計算；推算；計數(shù);
發(fā)明人 陳勇; 劉迪; 杜長青; 謝洪平; 黃濤; 吳威; 王昊; 陳磊 申請（專利權(quán)）人 金卯新能源集團(tuán)有限公司
代理機(jī)構(gòu) 南京匯盛專利商標(biāo)事務(wù)所（普通合伙） 代理人 國網(wǎng)江蘇省電力工程咨詢有限公司; 金卯新能源集團(tuán)有限公司; 東南大學(xué); 國網(wǎng)江蘇省電力有限公司
地址 210000 江蘇省南京市鼓樓區(qū)北京西路22號
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種結(jié)合視頻場景特征感知的多目標(biāo)跟蹤方法，包括如下步驟：采用深度網(wǎng)絡(luò)檢測初始視頻幀中的目標(biāo)，確定目標(biāo)的位置、尺寸等信息；將目標(biāo)圖像輸入到特征提取網(wǎng)絡(luò)提取目標(biāo)的外觀特征，同時將視頻圖像輸入CNN進(jìn)行場景感知，結(jié)合場景特征和檢測目標(biāo)的信息，通過LSTM網(wǎng)絡(luò)預(yù)測目標(biāo)的運(yùn)動狀態(tài)；根據(jù)目標(biāo)的外觀特征和運(yùn)動特征分別計算檢測目標(biāo)與已跟蹤目標(biāo)的外觀相似度和運(yùn)動匹配度，融合得到最終的距離度量；根據(jù)距離度量采用匈牙利方法進(jìn)行檢測目標(biāo)和軌跡的匹配；采用上述方法進(jìn)行下一幀視頻的處理，直至視頻結(jié)束。所述方法克服了已有多目標(biāo)跟蹤方法在復(fù)雜場景下跟蹤精度低的問題，因此具有更加廣泛的適用性，同時具有實(shí)時跟蹤的能力。