一種單目魯棒實時多人3D動捕方法、裝置及計算機設(shè)備

基本信息

申請?zhí)?/td> CN202111470825.6 申請日 -
公開(公告)號 CN114120313A 公開(公告)日 2022-03-01
申請公布號 CN114120313A 申請公布日 2022-03-01
分類號 G06V20/64(2022.01)I;G06V40/20(2022.01)I;G06V10/764(2022.01)I;G06V10/82(2022.01)I;G06K9/62(2022.01)I;G06T13/40(2011.01)I;G06T15/00(2011.01)I;G06N3/04(2006.01)N;G06N3/08(2006.01)N 分類 計算;推算;計數(shù);
發(fā)明人 王俊翔 申請(專利權(quán))人 北京影譜科技股份有限公司
代理機構(gòu) 北京知呱呱知識產(chǎn)權(quán)代理有限公司 代理人 丁彥峰
地址 100125北京市朝陽區(qū)朝陽公園南路3號樓6層601內(nèi)702室
法律狀態(tài) -

摘要

摘要 本發(fā)明實施例公開了一種單目魯棒實時多人3D動捕方法、裝置及計算機設(shè)備,以解決現(xiàn)有技術(shù)存在的需要動作人穿上特定的設(shè)備、實施成本較高等問題。通過卷積神經(jīng)網(wǎng)絡(luò)估計每個人的2D和3D姿態(tài)特征,再通過全連接的神經(jīng)網(wǎng)絡(luò)將遮擋部分2D姿態(tài)和3D姿態(tài)特征推理成完整的3D姿態(tài),然后應(yīng)用時空骨架模型擬合每個人預(yù)測的2D和3D姿態(tài),最終渲染得到目標場景中的人形動畫,實現(xiàn)對目標場景中多人的動作捕捉,從而無需動作人穿戴輔助設(shè)備,動作人運動不設(shè)限制,且僅依賴于單目攝像頭作為采集設(shè)備,即可實現(xiàn)對多人體運動的實時準確捕捉,實施成本較低。