一種基于對(duì)抗學(xué)習(xí)的人臉圖像合成方法和裝置

基本信息

申請(qǐng)?zhí)?/td> CN201910097890.5 申請(qǐng)日 -
公開(公告)號(hào) CN109815928B 公開(公告)日 2021-05-11
申請(qǐng)公布號(hào) CN109815928B 申請(qǐng)公布日 2021-05-11
分類號(hào) G06K9/00 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 張婷;張招亮;唐文杰;廖歡;梁雅萌;李慧 申請(qǐng)(專利權(quán))人 中國(guó)電子進(jìn)出口有限公司
代理機(jī)構(gòu) 北京君尚知識(shí)產(chǎn)權(quán)代理有限公司 代理人 邱曉鋒
地址 100036 北京市海淀區(qū)復(fù)興路17號(hào)A座6-23層
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及一種基于對(duì)抗學(xué)習(xí)的人臉圖像合成方法和裝置。該方法提供一種新型的生成對(duì)抗網(wǎng)絡(luò)(FC?GAN),旨在從遮擋的人臉圖像合成標(biāo)準(zhǔn)光照下的正面人臉圖像。FC?GAN使用一個(gè)編碼器?解碼器的卷積神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu)作為生成器,同時(shí)引入了兩個(gè)判別器:一個(gè)是全局判別器,用于區(qū)分整張人臉圖像的真實(shí)性,同時(shí)保持人的身份信息不變;另一個(gè)是局部判別器,用于區(qū)分人臉中遮擋區(qū)域的真實(shí)性。此外引入一個(gè)人臉語義分割網(wǎng)絡(luò)強(qiáng)化生成圖像中人臉五官的一致性。通過對(duì)比合成人臉圖像和真實(shí)人臉圖像的語義標(biāo)簽,反傳梯度給生成器調(diào)整合成人臉圖像的五官?;鶞?zhǔn)數(shù)據(jù)集Multi?PIE上的實(shí)驗(yàn)結(jié)果表明,F(xiàn)C?GAN的性能優(yōu)于現(xiàn)有的大多數(shù)方法。