一種單目魯棒實時多人3D動捕方法、裝置及計算機設(shè)備

基本信息

申請?zhí)?/td> CN202111470825.6 申請日 -
公開（公告）號 CN114120313A 公開（公告）日 2022-03-01
申請公布號 CN114120313A 申請公布日 2022-03-01
分類號 G06V20/64（2022.01）I;G06V40/20（2022.01）I;G06V10/764（2022.01）I;G06V10/82（2022.01）I;G06K9/62（2022.01）I;G06T13/40（2011.01）I;G06T15/00（2011.01）I;G06N3/04（2006.01）N;G06N3/08（2006.01）N 分類 計算；推算；計數(shù);
發(fā)明人 王俊翔 申請（專利權(quán)）人 北京影譜科技股份有限公司
代理機構(gòu) 北京知呱呱知識產(chǎn)權(quán)代理有限公司 代理人 丁彥峰
地址 100125北京市朝陽區(qū)朝陽公園南路3號樓6層601內(nèi)702室
法律狀態(tài) -

摘要

摘要 本發(fā)明實施例公開了一種單目魯棒實時多人3D動捕方法、裝置及計算機設(shè)備，以解決現(xiàn)有技術(shù)存在的需要動作人穿上特定的設(shè)備、實施成本較高等問題。通過卷積神經(jīng)網(wǎng)絡(luò)估計每個人的2D和3D姿態(tài)特征，再通過全連接的神經(jīng)網(wǎng)絡(luò)將遮擋部分2D姿態(tài)和3D姿態(tài)特征推理成完整的3D姿態(tài)，然后應(yīng)用時空骨架模型擬合每個人預(yù)測的2D和3D姿態(tài)，最終渲染得到目標場景中的人形動畫，實現(xiàn)對目標場景中多人的動作捕捉，從而無需動作人穿戴輔助設(shè)備，動作人運動不設(shè)限制，且僅依賴于單目攝像頭作為采集設(shè)備，即可實現(xiàn)對多人體運動的實時準確捕捉，實施成本較低。