多視點(diǎn)實(shí)時(shí)人體運(yùn)動(dòng)、手勢(shì)、表情、紋理重建系統(tǒng)

基本信息

申請(qǐng)?zhí)?/td> CN202010810382.X 申請(qǐng)日 -
公開（公告）號(hào) CN111932678B 公開（公告）日 2021-05-14
申請(qǐng)公布號(hào) CN111932678B 申請(qǐng)公布日 2021-05-14
分類號(hào) G06T17/20;G06N3/04;G06N3/08;G06T7/80;G06T7/73;G06T7/90;G06T15/04;G06T15/20 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 張宇翔;安亮;戴翹楚;于濤 申請(qǐng)（專利權(quán)）人 北京未瀾科技有限公司
代理機(jī)構(gòu) - 代理人 -
地址 100086 北京市海淀區(qū)成府路45號(hào)中關(guān)村智造大街A座四層419
法律狀態(tài) -

摘要

摘要 本發(fā)明提供了一種多視點(diǎn)實(shí)時(shí)人體運(yùn)動(dòng)、手勢(shì)、表情、紋理重建系統(tǒng)，該多視點(diǎn)實(shí)時(shí)人體運(yùn)動(dòng)、手勢(shì)、表情、紋理重建系統(tǒng)包括：將多個(gè)相機(jī)架圍出捕捉區(qū)域，通過相機(jī)標(biāo)定方法標(biāo)定所述多個(gè)相機(jī)的相機(jī)內(nèi)參和相機(jī)外參；通過標(biāo)定后的所述多個(gè)相機(jī)采集人體圖像，并對(duì)所述人體圖像進(jìn)行處理以使所述人體圖像轉(zhuǎn)碼成RGB圖像，然后完成單目的人體姿態(tài)估計(jì)；通過單目的所述人體姿態(tài)估計(jì)得到人體各個(gè)關(guān)節(jié)的熱點(diǎn)圖和關(guān)節(jié)親和度，對(duì)關(guān)節(jié)熱點(diǎn)圖進(jìn)行非極大值抑制得到各個(gè)關(guān)節(jié)坐標(biāo)；從而得到人體三維關(guān)節(jié)坐標(biāo)，從而得到人體三維重建模型。本系統(tǒng)利用深度學(xué)習(xí)來完成人體姿態(tài)的估計(jì)，在試驗(yàn)環(huán)境下，可以實(shí)時(shí)對(duì)多人的人體模型進(jìn)行擬合與渲染。