一種端到端的高分辨率多特征提取的人臉交換方法

基本信息

申請?zhí)?/td> CN201911127533.5 申請日 -
公開(公告)號 CN111080511A 公開(公告)日 2020-04-28
申請公布號 CN111080511A 申請公布日 2020-04-28
分類號 G06T3/00;G06K9/00 分類 計算;推算;計數(shù);
發(fā)明人 陳奕;葉凱威 申請(專利權(quán))人 浙江時光坐標(biāo)科技股份有限公司
代理機(jī)構(gòu) 杭州求是專利事務(wù)所有限公司 代理人 杭州時光坐標(biāo)影視傳媒股份有限公司
地址 310012 浙江省杭州市西湖區(qū)靈鳳街鳳凰創(chuàng)意大廈4號樓2單元4樓
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種端到端的高分辨率多特征提取的人臉交換方法。其步驟為:1)對輸入視頻進(jìn)行解幀,圖像人臉對齊并提取面部特征點;2)構(gòu)建網(wǎng)絡(luò)模型;3)訓(xùn)練網(wǎng)絡(luò)和更新參數(shù);4)對生成人臉進(jìn)行融合替換。本發(fā)明具有以下優(yōu)點:使用了一種端到端的高分辨率多特征提取的人臉交換方法,能夠生成目標(biāo)神態(tài)表情;采用自編碼器模型和殘差結(jié)構(gòu)對人臉的特征進(jìn)行學(xué)習(xí),可以提升人臉的細(xì)節(jié);采用多特征的卷積神經(jīng)網(wǎng)絡(luò)的方法,能夠捕捉到人臉的的更多特征,構(gòu)造的神經(jīng)網(wǎng)絡(luò)模型中使用LeakyReLU激活函數(shù)提升網(wǎng)絡(luò)性能;對于產(chǎn)生的結(jié)果,使用泊松融合顏色轉(zhuǎn)換等方法使效果更加自然。