基于UE4的真實(shí)感虛擬人多模態(tài)交互實(shí)現(xiàn)方法

基本信息

申請?zhí)?/td> CN202010168192.2 申請日 -
公開(公告)號 CN111724457A 公開(公告)日 2020-09-29
申請公布號 CN111724457A 申請公布日 2020-09-29
分類號 G06T13/40 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 郭松睿;賀志武;高春鳴 申請(專利權(quán))人 長沙千博信息技術(shù)有限公司
代理機(jī)構(gòu) 北京市浩東律師事務(wù)所 代理人 李瓊
地址 410000 湖南省長沙市開福區(qū)月湖街道鴨子鋪路1號255房1室
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了基于UE4的真實(shí)感虛擬人多模態(tài)交互實(shí)現(xiàn)方法,其中方法包括:資源制作、資源組裝和功能制作。系統(tǒng)包括資源制作模塊:用于進(jìn)行角色模型制作、面部表情BlendShape制作、骨骼蒙皮綁定、動(dòng)作制作、貼圖制作以及材質(zhì)調(diào)整;資源組裝模塊:用于進(jìn)行場景搭建、燈光設(shè)計(jì)以及UI界面搭建;功能制作模塊:用于識(shí)別用戶語音輸入,根據(jù)輸入進(jìn)行智能回答,并能播放語音、口唇動(dòng)畫、表情動(dòng)畫、肢體動(dòng)作,體現(xiàn)出交互的多模態(tài)性。此模塊具體包括語音識(shí)別模塊、智能問答模塊、中文自然語言處理模塊、語音合成模塊、口唇動(dòng)畫模塊、表情動(dòng)畫模塊和肢體動(dòng)作模塊。該系統(tǒng)具備類似真人的親和力,能夠更容易被用戶接受;更符合人類的交互習(xí)慣,能讓應(yīng)用有更大的普及范圍;能夠使應(yīng)用真正具備“智能”,使應(yīng)用的響應(yīng)更合乎人類邏輯。