一種基于深度學(xué)習(xí)的智能冰箱存取動(dòng)作識(shí)別方法

基本信息

申請(qǐng)?zhí)?/td> CN201911089592.8 申請(qǐng)日 -
公開(kāi)（公告）號(hào) CN111126133A 公開(kāi)（公告）日 2020-05-08
申請(qǐng)公布號(hào) CN111126133A 申請(qǐng)公布日 2020-05-08
分類號(hào) G06K9/00;G06K9/62 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 白燕;樓燚航;張永祥;陳杰 申請(qǐng)（專利權(quán)）人 博云視覺(jué)（北京）科技有限公司
代理機(jī)構(gòu) 北京眾澤信達(dá)知識(shí)產(chǎn)權(quán)代理事務(wù)所（普通合伙） 代理人 博云視覺(jué)（北京）科技有限公司
地址 100085 北京市海淀區(qū)中關(guān)村軟件園二期未名視通研發(fā)樓303
法律狀態(tài) -

摘要

摘要 本發(fā)明公開(kāi)了一種基于深度學(xué)習(xí)的智能冰箱存取動(dòng)作識(shí)別方法，包括以下步驟：S1、通過(guò)攝像頭獲得視頻數(shù)據(jù)進(jìn)行輸入；S2、采用當(dāng)前先進(jìn)的目標(biāo)檢測(cè)器對(duì)輸入的視頻按幀切分圖像并檢測(cè)圖像中的手部信息；S3、當(dāng)檢測(cè)出手部信息位于裁剪區(qū)域內(nèi)時(shí)，裁剪手部信息圖片并送入食材分類網(wǎng)絡(luò)進(jìn)行食材分類，并獲得食材分類結(jié)果；S4、當(dāng)檢測(cè)出手部信息位于跟蹤區(qū)域內(nèi)時(shí)，將手部信息送入Staple目標(biāo)跟蹤算法，獲得手部動(dòng)作的跟蹤軌跡；S5、利用存取狀態(tài)判斷規(guī)則對(duì)跟蹤軌跡內(nèi)的手部狀態(tài)進(jìn)行判斷，獲得用戶的存取狀態(tài)；S6、將用戶的存取狀態(tài)與食材分類結(jié)果相結(jié)合并輸出存取動(dòng)作結(jié)果；S7、重新初始化，等待進(jìn)入下一輪動(dòng)作識(shí)別檢測(cè)。