一種無綠幕摳圖渲染方法

基本信息

申請(qǐng)?zhí)?/td> CN202110557371.X 申請(qǐng)日 -
公開(公告)號(hào) CN113160358A 公開(公告)日 2021-07-23
申請(qǐng)公布號(hào) CN113160358A 申請(qǐng)公布日 2021-07-23
分類號(hào) G06T11/60;G06T15/00;G06T19/00 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 譚彬 申請(qǐng)(專利權(quán))人 上海隨幻智能科技有限公司
代理機(jī)構(gòu) 上海精晟知識(shí)產(chǎn)權(quán)代理有限公司 代理人 孫永智
地址 200000 上海市浦東新區(qū)自由貿(mào)易試驗(yàn)區(qū)張衡路200號(hào)2幢3層
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種無綠幕摳圖渲染方法,所述方法包括:數(shù)據(jù)集的構(gòu)建:在渲染引擎中,構(gòu)建出relighting加摳圖的ground truth、隨機(jī)加了光照和3D場(chǎng)景背景的數(shù)據(jù)集;模型訓(xùn)練:利用深度學(xué)習(xí)網(wǎng)絡(luò)從數(shù)據(jù)集中提取預(yù)測(cè)模型;輸出到合成引擎中:輸入實(shí)時(shí)的無綠幕視頻流,輸出摳圖和relighting后的視頻流。本發(fā)明實(shí)現(xiàn)了一種端到端的2D無綠幕扣圖加relighting渲染方法,可以將綠棚存在的必要性和其約束同時(shí)去除,跟進(jìn)一步的大幅度降低了高質(zhì)量AR場(chǎng)景的生產(chǎn)成本。