一種基于級聯(lián)回歸網(wǎng)絡(luò)的單張圖片三維人臉重建方法

基本信息

申請?zhí)?/td> CN201810179206.3 申請日 -
公開（公告）號 CN108399649B 公開（公告）日 2021-07-20
申請公布號 CN108399649B 申請公布日 2021-07-20
分類號 G06T15/20;G06T3/40 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 張剛;韓琥;張杰;山世光;陳熙霖 申請（專利權(quán)）人 中科視拓（北京）科技有限公司
代理機(jī)構(gòu) - 代理人 -
地址 100086 北京市海淀區(qū)科學(xué)院南路6號中科院計(jì)算所科研綜合樓550室
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種基于級聯(lián)回歸網(wǎng)絡(luò)的單張圖片三維人臉重建方法，整體步驟為：一、數(shù)據(jù)準(zhǔn)備：采集三維人臉數(shù)據(jù)，獲取人臉圖片的三維人臉形狀點(diǎn)云；二、模型設(shè)計(jì)：構(gòu)建包含兩級多任務(wù)卷積神經(jīng)網(wǎng)絡(luò)的網(wǎng)絡(luò)模型，并逐級回歸人臉特征，然后提取改進(jìn)形狀特征；三、模型訓(xùn)練：分別對兩級多任務(wù)卷積神經(jīng)網(wǎng)絡(luò)進(jìn)行訓(xùn)練，獲得多任務(wù)級聯(lián)回歸卷積神經(jīng)網(wǎng)絡(luò)M；四、模型測試：將圖像I輸入到多任務(wù)級聯(lián)回歸卷積神經(jīng)網(wǎng)絡(luò)M中，進(jìn)行模型測試。本發(fā)明采用多任務(wù)級聯(lián)回歸卷積神經(jīng)網(wǎng)絡(luò)，逐級回歸三維人臉形狀、人臉特征點(diǎn)以及人臉姿態(tài)，同時(shí)改進(jìn)了傳統(tǒng)的特征提取方法，通過計(jì)算特征點(diǎn)的可見性，消除了二維人臉圖片上特征點(diǎn)的混淆性，使得該方法對大姿態(tài)更加魯棒。