基于骨架視頻的行為識(shí)別方法

基本信息

申請(qǐng)?zhí)?/td> CN201910511925.5 申請(qǐng)日 -
公開（公告）號(hào) CN110309732A 公開（公告）日 2019-10-08
申請(qǐng)公布號(hào) CN110309732A 申請(qǐng)公布日 2019-10-08
分類號(hào) G06K9/00;G06N3/04;G06N3/08 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 葉帆帆;唐慧明;陳明芽 申請(qǐng)（專利權(quán)）人 華雁智科（杭州）信息技術(shù)有限公司
代理機(jī)構(gòu) 杭州宇信知識(shí)產(chǎn)權(quán)代理事務(wù)所（普通合伙） 代理人 王健
地址 310058 浙江省杭州市西湖區(qū)余杭塘路866號(hào)
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種基于骨架視頻的行為識(shí)別方法，方法流程包括：通過對(duì)數(shù)據(jù)集中的每一段視頻抽幀得到視頻訓(xùn)練樣本，并提取各幀的骨架關(guān)節(jié)點(diǎn)信息；根據(jù)骨架關(guān)節(jié)點(diǎn)物理連接關(guān)系初始化骨架關(guān)節(jié)點(diǎn)連接關(guān)系矩陣，以初步訓(xùn)練空間域圖卷積神經(jīng)網(wǎng)絡(luò)；在空間域圖卷積神經(jīng)網(wǎng)絡(luò)的參數(shù)固定之后，通過空間域圖卷積神經(jīng)網(wǎng)絡(luò)訓(xùn)練骨架關(guān)節(jié)點(diǎn)關(guān)系推理網(wǎng)絡(luò)，得到新的骨架關(guān)節(jié)點(diǎn)連接關(guān)系矩陣；通過新的骨架關(guān)節(jié)點(diǎn)連接關(guān)系矩陣更新空間域圖卷積神經(jīng)網(wǎng)絡(luò)的參數(shù)；應(yīng)用時(shí)，對(duì)待識(shí)視頻抽幀和提取骨架關(guān)節(jié)點(diǎn)信息后送入骨架關(guān)節(jié)點(diǎn)關(guān)系推理網(wǎng)絡(luò)得到骨架關(guān)節(jié)點(diǎn)連接關(guān)系矩陣，將抽幀后的視頻和骨架關(guān)節(jié)點(diǎn)連接關(guān)系矩陣送入更新后的空間域圖卷積神經(jīng)網(wǎng)絡(luò)，以得到行人行為類別。