多視點實時人體運動、手勢、表情、紋理重建系統(tǒng)

基本信息

申請?zhí)?/td> CN202010810382.X 申請日 -
公開（公告）號 CN111932678A 公開（公告）日 2020-11-13
申請公布號 CN111932678A 申請公布日 2020-11-13
分類號 G06T17/20;G06N3/04;G06N3/08;G06T7/80;G06T7/73;G06T7/90;G06T15/04;G06T15/20 分類 計算；推算；計數(shù);
發(fā)明人 張宇翔;安亮;戴翹楚;于濤 申請（專利權）人 北京未瀾科技有限公司
代理機構 - 代理人 -
地址 100086 北京市海淀區(qū)成府路45號中關村智造大街A座四層419
法律狀態(tài) -

摘要

摘要 本發(fā)明提供了一種多視點實時人體運動、手勢、表情、紋理重建系統(tǒng)，該多視點實時人體運動、手勢、表情、紋理重建系統(tǒng)包括：將多個相機架圍出捕捉區(qū)域，通過相機標定方法標定所述多個相機的相機內參和相機外參；通過標定后的所述多個相機采集人體圖像，并對所述人體圖像進行處理以使所述人體圖像轉碼成RGB圖像，然后完成單目的人體姿態(tài)估計；通過單目的所述人體姿態(tài)估計得到人體各個關節(jié)的熱點圖和關節(jié)親和度，對關節(jié)熱點圖進行非極大值抑制得到各個關節(jié)坐標；從而得到人體三維關節(jié)坐標，從而得到人體三維重建模型。本系統(tǒng)利用深度學習來完成人體姿態(tài)的估計，在試驗環(huán)境下，可以實時對多人的人體模型進行擬合與渲染。