一種從單張設(shè)計圖片建模3D場景系統(tǒng)

基本信息

申請?zhí)?/td> CN202110564613.8 申請日 -
公開（公告）號 CN113144615A 公開（公告）日 2021-07-23
申請公布號 CN113144615A 申請公布日 2021-07-23
分類號 A63F13/60（2014.01）I;G06T17/10（2006.01）I;G06T7/10（2017.01）I;G06K9/62（2006.01）I;G06N3/08（2006.01）I;G06N3/04（2006.01）I 分類 運動；游戲；娛樂活動;
發(fā)明人 譚彬 申請（專利權(quán)）人 上海隨幻智能科技有限公司
代理機構(gòu) 上海精晟知識產(chǎn)權(quán)代理有限公司 代理人 孫永智
地址 200000上海市浦東新區(qū)自由貿(mào)易試驗區(qū)張衡路200號2幢3層
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及計算機視覺技術(shù)領(lǐng)域，具體地說，涉及一種從單張設(shè)計圖片建模3D場景系統(tǒng)。其包括：渲染：在渲染引擎中，隨機排布物體，得到渲染結(jié)果圖和每個物體3D物體變換矩陣的數(shù)據(jù)集；提取模型：利用深度學(xué)習(xí)網(wǎng)絡(luò)從數(shù)據(jù)集中提取預(yù)測模型；實例分割：輸入單張場景設(shè)計圖片，預(yù)測出實例分割的結(jié)果和每個實例的3D物體的變換矩陣；建模：將單個實例對應(yīng)的物體，以變換矩陣的指導(dǎo)放置到場景中，完成結(jié)果建模。本發(fā)明中通過利用深度神經(jīng)網(wǎng)絡(luò)MaskR?CNN進行實例分割，得到2D物體包圍盒和包圍盒區(qū)域的圖像，并根據(jù)實例分割結(jié)果對應(yīng)一個3D物體的2D平面映射，使單張設(shè)計圖片自動化完成3D場景布置，從而可以大幅度降低場景的構(gòu)建時間，加快了場景的構(gòu)建速度。