一種基于深度學(xué)習(xí)的3D角色面部表情動(dòng)畫實(shí)時(shí)生成方法

基本信息

申請(qǐng)?zhí)?/td> CN202110316439.5 申請(qǐng)日 -
公開(公告)號(hào) CN112700524A 公開(公告)日 2021-07-02
申請(qǐng)公布號(hào) CN112700524A 申請(qǐng)公布日 2021-07-02
分類號(hào) G06T13/40;G06N3/04;G06N3/08 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 趙銳;侯志迎 申請(qǐng)(專利權(quán))人 江蘇原力數(shù)字科技股份有限公司
代理機(jī)構(gòu) 南京常青藤知識(shí)產(chǎn)權(quán)代理有限公司 代理人 高遠(yuǎn)
地址 210000 江蘇省南京市建鄴區(qū)白龍江東街8號(hào)科技創(chuàng)新綜合體A3號(hào)4-7層
法律狀態(tài) -

摘要

摘要 本發(fā)明提供一種基于深度學(xué)習(xí)的3D角色面部表情動(dòng)畫實(shí)時(shí)生成方法,包括:獲取訓(xùn)練數(shù)據(jù),并對(duì)獲取的訓(xùn)練數(shù)據(jù)進(jìn)行增強(qiáng)處理;搭建生成模型,生成模型包括1個(gè)編碼器與3個(gè)解碼器,編碼器用于將訓(xùn)練數(shù)據(jù)的圖片數(shù)據(jù)編碼至一個(gè)隱含空間,3個(gè)解碼器用于將隱含空間的數(shù)據(jù)解碼成演員的面部動(dòng)作圖片、動(dòng)畫文件的拍屏圖片、動(dòng)畫文件的拍屏圖片對(duì)應(yīng)的控制器的值;對(duì)搭建的生成模型進(jìn)行訓(xùn)練,獲得編碼器與解碼器的最優(yōu)權(quán)重值,得到最佳模型;將演員的圖片輸入至訓(xùn)練好的生成模型中,編碼器對(duì)圖片進(jìn)行編碼至隱含空間,再通過對(duì)應(yīng)的解碼器對(duì)隱含空間中的數(shù)據(jù)進(jìn)行解碼得到對(duì)應(yīng)的控制器的值;將控制器的值輸入到動(dòng)畫軟件中,生成模型的面部動(dòng)作。