一種端到端的高分辨率多特征提取的人臉交換方法

基本信息

申請(qǐng)?zhí)?/td> CN201911127533.5 申請(qǐng)日 -
公開(kāi)(公告)號(hào) CN111080511B 公開(kāi)(公告)日 2020-04-28
申請(qǐng)公布號(hào) CN111080511B 申請(qǐng)公布日 2020-04-28
分類號(hào) G06T3/00(2006.01)I;G06K9/00(2006.01)I 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 陳奕;葉凱威 申請(qǐng)(專利權(quán))人 浙江時(shí)光坐標(biāo)科技股份有限公司
代理機(jī)構(gòu) 杭州求是專利事務(wù)所有限公司 代理人 杭州時(shí)光坐標(biāo)影視傳媒股份有限公司
地址 310012浙江省杭州市西湖區(qū)靈鳳街鳳凰創(chuàng)意大廈4號(hào)樓2單元4樓
法律狀態(tài) -

摘要

摘要 本發(fā)明公開(kāi)了一種端到端的高分辨率多特征提取的人臉交換方法。其步驟為:1)對(duì)輸入視頻進(jìn)行解幀,圖像人臉對(duì)齊并提取面部特征點(diǎn);2)構(gòu)建網(wǎng)絡(luò)模型;3)訓(xùn)練網(wǎng)絡(luò)和更新參數(shù);4)對(duì)生成人臉進(jìn)行融合替換。本發(fā)明具有以下優(yōu)點(diǎn):使用了一種端到端的高分辨率多特征提取的人臉交換方法,能夠生成目標(biāo)神態(tài)表情;采用自編碼器模型和殘差結(jié)構(gòu)對(duì)人臉的特征進(jìn)行學(xué)習(xí),可以提升人臉的細(xì)節(jié);采用多特征的卷積神經(jīng)網(wǎng)絡(luò)的方法,能夠捕捉到人臉的的更多特征,構(gòu)造的神經(jīng)網(wǎng)絡(luò)模型中使用LeakyReLU激活函數(shù)提升網(wǎng)絡(luò)性能;對(duì)于產(chǎn)生的結(jié)果,使用泊松融合顏色轉(zhuǎn)換等方法使效果更加自然。??