一種引入反饋機(jī)制的多RGB相機(jī)實(shí)時(shí)人體動(dòng)作捕捉系統(tǒng)

基本信息

申請(qǐng)?zhí)?/td> CN202110194157.2 申請(qǐng)日 -
公開（公告）號(hào) CN112907631A 公開（公告）日 2021-06-04
申請(qǐng)公布號(hào) CN112907631A 申請(qǐng)公布日 2021-06-04
分類號(hào) G06T7/246;G06T7/292;G06T7/80;G06T17/00;G06T5/30 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 于濤;張宇翔;戴翹楚 申請(qǐng)（專利權(quán)）人 北京未瀾科技有限公司
代理機(jī)構(gòu) - 代理人 -
地址 100083 北京市海淀區(qū)橡樹灣一期一號(hào)樓一單元1703室
法律狀態(tài) -

摘要

摘要 本發(fā)明提出了一種引入反饋機(jī)制的多RGB相機(jī)實(shí)時(shí)人體動(dòng)作捕捉系統(tǒng)，主要包括平臺(tái)搭建、數(shù)據(jù)處理、姿態(tài)重建及反饋優(yōu)化等步驟，結(jié)合深度學(xué)習(xí)的技術(shù)來完成人體姿態(tài)的估計(jì)，通過引入人體線性蒙皮模型以及人手檢測(cè)器，對(duì)于末端交互關(guān)節(jié)的檢測(cè)分辨率大大提升，從而提高了嚴(yán)重遮擋下的交互性能。通過引入反饋機(jī)制，將上一幀的人體模型渲染到當(dāng)前幀并進(jìn)行腐蝕膨脹處理，得到當(dāng)前幀的啟發(fā)式算法的一個(gè)合理初值，并且引入了三維的可見性信息，避免了歧義性，從而可以提高算法的收斂速度和精度，從而完成一個(gè)實(shí)時(shí)的無佩戴標(biāo)記的人體重建系統(tǒng)，并且對(duì)于繁雜環(huán)境也具有魯棒性。