一種基于多視點(diǎn)RGBD相機(jī)高分辨率人體三維重建方法

基本信息

申請(qǐng)?zhí)?/td> CN202110193747.3 申請(qǐng)日 -
公開(kāi)(公告)號(hào) CN112927348A 公開(kāi)(公告)日 2021-06-08
申請(qǐng)公布號(hào) CN112927348A 申請(qǐng)公布日 2021-06-08
分類(lèi)號(hào) G06T17/00;G06T15/04;G06K9/62;G06N3/04 分類(lèi) 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 于濤;吉朝南;戴翹楚 申請(qǐng)(專(zhuān)利權(quán))人 北京未瀾科技有限公司
代理機(jī)構(gòu) - 代理人 -
地址 100083 北京市海淀區(qū)中關(guān)村大街18號(hào)8層04-895
法律狀態(tài) -

摘要

摘要 本發(fā)明提出了一種基于多視點(diǎn)RGBD相機(jī)高分辨率人體三維重建方法,該方法包括如下步驟:準(zhǔn)備數(shù)據(jù)訓(xùn)練集;提取圖像特征;對(duì)空間點(diǎn)進(jìn)行采樣;計(jì)算每個(gè)采樣點(diǎn)投影在多視點(diǎn)相機(jī)采集到的圖像上的位置,并計(jì)算所對(duì)應(yīng)的特征;結(jié)合深度攝像機(jī)的空間點(diǎn)深度信息,計(jì)算每個(gè)采樣點(diǎn)的psdf作為該采樣點(diǎn)對(duì)應(yīng)不同圖像特征值融合的權(quán)重;利用每個(gè)采樣點(diǎn)的psdf作為權(quán)重對(duì)采樣點(diǎn)的特征值進(jìn)行融合,并作為MLP神經(jīng)網(wǎng)絡(luò)的輸入;通過(guò)MLP神經(jīng)網(wǎng)絡(luò)預(yù)測(cè)每個(gè)采樣點(diǎn)在空間中處于模型表面的概率,從而能完成人體三維模型幾何表面重建,采用相同的步驟同樣可完成人體三維模型表面紋理重建,從而得到具有高分辨的的人體三維重建模型,該技術(shù)可應(yīng)用于AR/VR交互與遠(yuǎn)距離交流等領(lǐng)域。