一種語音信號驅(qū)動(dòng)的臉部動(dòng)畫生成方法

基本信息

申請?zhí)?/td> CN201911366799.5 申請日 -
公開(公告)號 CN111243065A 公開(公告)日 2020-06-05
申請公布號 CN111243065A 申請公布日 2020-06-05
分類號 G06T13/40(2011.01)I 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 周昆;柴宇進(jìn);翁彥琳;王律迪 申請(專利權(quán))人 杭州相芯科技有限公司
代理機(jī)構(gòu) 杭州求是專利事務(wù)所有限公司 代理人 浙江大學(xué);杭州相芯科技有限公司
地址 310058浙江省杭州市西湖區(qū)余杭塘路866號
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種語音信號驅(qū)動(dòng)的臉部動(dòng)畫生成方法,該方法主要分為六個(gè)步驟:提取語音特征、收集頻率信息、匯總時(shí)間信息、解碼動(dòng)作特征、驅(qū)動(dòng)臉部模型以及滑動(dòng)信號窗口。本發(fā)明可以根據(jù)輸入的語音音頻信號,在一定延時(shí)下實(shí)時(shí)地驅(qū)動(dòng)任意臉部模型,生成動(dòng)畫;動(dòng)畫質(zhì)量達(dá)到當(dāng)前最先進(jìn)的語音動(dòng)畫技術(shù)水平,并且有輕量化、魯棒性好的特點(diǎn)。本發(fā)明可以用于生成不同場景下的語音動(dòng)畫,如VR虛擬社交、虛擬語音助手以及游戲。??