無人機視角下端到端的人員動作識別方法、設備及介質

基本信息

申請?zhí)?/td> CN202210076711.1 申請日 -
公開（公告）號 CN114155475A 公開（公告）日 2022-03-08
申請公布號 CN114155475A 申請公布日 2022-03-08
分類號 G06V20/40（2022.01）I;G06V40/20（2022.01）I;G06V10/46（2022.01）I;G06N3/08（2006.01）I 分類 計算；推算；計數(shù);
發(fā)明人 周斯忠;鄭成俊;蔣祁 申請（專利權）人 杭州晨鷹軍泰科技有限公司
代理機構 北京集佳知識產權代理有限公司 代理人 呂鑫
地址 310000浙江省杭州市濱江區(qū)西興街道物聯(lián)網(wǎng)街277號901室
法律狀態(tài) -

摘要

摘要 本申請公開了一種無人機視角下端到端的人員動作識別方法、設備及介質，包括：構建并訓練人員動作識別網(wǎng)絡模型；該模型包括特征提取網(wǎng)絡、人員目標檢測子網(wǎng)絡、多目標跟蹤子網(wǎng)絡和人員動作識別子網(wǎng)絡；將待測圖像輸入至該模型中，利用特征提取網(wǎng)絡進行特征提取，提取到的特征圖由三個子網(wǎng)絡共享；利用人員目標檢測子網(wǎng)絡以包圍框檢測出當前幀中的目標；利用多目標跟蹤子網(wǎng)絡根據(jù)目標的外觀特征向量和包圍框進行幀間多目標跟蹤；利用人員動作識別子網(wǎng)絡整合同一目標在不同幀之間的運動信息，識別該目標在當前幀的動作類型。這樣將檢測、跟蹤、識別這三個子任務集成到同一個神經網(wǎng)絡中，避免大量重復的特征提取計算冗余，達到實時行為識別的效果。