一種單目魯棒實(shí)時(shí)多人3D動(dòng)捕方法、裝置及計(jì)算機(jī)設(shè)備

基本信息

申請(qǐng)?zhí)?/td> CN202111470825.6 申請(qǐng)日 -
公開（公告）號(hào) CN114120313A 公開（公告）日 2022-03-01
申請(qǐng)公布號(hào) CN114120313A 申請(qǐng)公布日 2022-03-01
分類號(hào) G06V20/64（2022.01）I;G06V40/20（2022.01）I;G06V10/764（2022.01）I;G06V10/82（2022.01）I;G06K9/62（2022.01）I;G06T13/40（2011.01）I;G06T15/00（2011.01）I;G06N3/04（2006.01）N;G06N3/08（2006.01）N 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 王俊翔 申請(qǐng)（專利權(quán)）人 北京影譜科技股份有限公司
代理機(jī)構(gòu) 北京知呱呱知識(shí)產(chǎn)權(quán)代理有限公司 代理人 丁彥峰
地址 100125北京市朝陽區(qū)朝陽公園南路3號(hào)樓6層601內(nèi)702室
法律狀態(tài) -

摘要

摘要 本發(fā)明實(shí)施例公開了一種單目魯棒實(shí)時(shí)多人3D動(dòng)捕方法、裝置及計(jì)算機(jī)設(shè)備，以解決現(xiàn)有技術(shù)存在的需要?jiǎng)幼魅舜┥咸囟ǖ脑O(shè)備、實(shí)施成本較高等問題。通過卷積神經(jīng)網(wǎng)絡(luò)估計(jì)每個(gè)人的2D和3D姿態(tài)特征，再通過全連接的神經(jīng)網(wǎng)絡(luò)將遮擋部分2D姿態(tài)和3D姿態(tài)特征推理成完整的3D姿態(tài)，然后應(yīng)用時(shí)空骨架模型擬合每個(gè)人預(yù)測(cè)的2D和3D姿態(tài)，最終渲染得到目標(biāo)場(chǎng)景中的人形動(dòng)畫，實(shí)現(xiàn)對(duì)目標(biāo)場(chǎng)景中多人的動(dòng)作捕捉，從而無需動(dòng)作人穿戴輔助設(shè)備，動(dòng)作人運(yùn)動(dòng)不設(shè)限制，且僅依賴于單目攝像頭作為采集設(shè)備，即可實(shí)現(xiàn)對(duì)多人體運(yùn)動(dòng)的實(shí)時(shí)準(zhǔn)確捕捉，實(shí)施成本較低。