一種基于融合神經(jīng)網(wǎng)絡的視頻中人體行為識別方法

基本信息

申請?zhí)?/td> CN201911310123.4 申請日 -
公開（公告）號 CN111079655A 公開（公告）日 2020-04-28
申請公布號 CN111079655A 申請公布日 2020-04-28
分類號 G06K9/00;G06K9/46;G06K9/62;G06N3/04;G06N3/08 分類 計算；推算；計數(shù);
發(fā)明人 張澍裕;汪淑夢;楊霄;李靜;張曉蓓 申請（專利權(quán)）人 航天物聯(lián)網(wǎng)技術(shù)有限公司
代理機構(gòu) 北京凱特來知識產(chǎn)權(quán)代理有限公司 代理人 鄭立明;陳亮
地址 100094 北京市海淀區(qū)豐瀅東路1號
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種基于融合神經(jīng)網(wǎng)絡的視頻中人體行為識別方法，首先對原始視頻的圖像幀做預處理，構(gòu)建訓練樣本數(shù)據(jù)集；通過改進的VGG神經(jīng)網(wǎng)絡模型，提取所述訓練樣本數(shù)據(jù)集中的圖像空間信息特征；利用iDT算法提取預處理后的原始視頻序列中人體運動軌跡特征；構(gòu)建帶有門控循環(huán)單元GRU網(wǎng)絡的seq2seq模型，將VGG的輸出向量和iDT算法提取的特征向量分別輸入GRU網(wǎng)絡中進行特征提取，得到輸出預測結(jié)果；將輸出的兩種預測結(jié)果加權(quán)融合，實現(xiàn)所述原始視頻中人體行為的識別。上述方法可實現(xiàn)人體行為的準確識別，且對環(huán)境的光照變化適應性較好，能達到高效精確的識別結(jié)果。