細粒度行為識別模型構建方法及系統(tǒng)

基本信息

申請?zhí)?/td> CN202111197488.8 申請日 -
公開(公告)號 CN113920583A 公開(公告)日 2022-01-11
申請公布號 CN113920583A 申請公布日 2022-01-11
分類號 G06V40/20(2022.01)I;G06V20/40(2022.01)I;G06V20/52(2022.01)I;G06V10/764(2022.01)I;G06N3/04(2006.01)I;G06N3/08(2006.01)I 分類 計算;推算;計數(shù);
發(fā)明人 王海濱;紀文峰 申請(專利權)人 根尖體育科技(北京)有限公司
代理機構 濟南圣達知識產(chǎn)權代理有限公司 代理人 李圣梅
地址 100081北京市海淀區(qū)中關村大街22號五層A座529
法律狀態(tài) -

摘要

摘要 本發(fā)明提出了細粒度行為識別模型構建方法及系統(tǒng),包括:對獲得的視頻數(shù)據(jù)的幀序列進行關鍵點預測,每幀中包含人體的多個關鍵點坐標信息;針對幀序列,按照得到的關鍵點坐標為中心進行裁剪,每幀圖像得到多個圖像分塊;將同一關鍵點對應的圖像分塊按照時序進行拼接操作,將拼接后的圖像分塊,按照每個圖像分塊對應的關鍵點坐標作為位置嵌入,得到處理結果;將處理結果輸入至深度自注意變換網(wǎng)絡中,通過損失函數(shù)測量真實分類結果與預測分類結果之間的誤差大小,然后基于該誤差對網(wǎng)絡權值進行優(yōu)化和修正,獲得細粒度行為識別模型。本發(fā)明實現(xiàn)了更精確地預測。