一種時空超分辨率實時重建方法及系統(tǒng)

基本信息

申請?zhí)?/td> CN202111513205.6 申請日 -
公開(公告)號 CN114170085A 公開(公告)日 2022-03-11
申請公布號 CN114170085A 申請公布日 2022-03-11
分類號 G06T3/40(2006.01)I;G06T5/50(2006.01)I;G06V10/774(2022.01)I;G06N3/04(2006.01)I;G06N3/08(2006.01)I 分類 計算;推算;計數(shù);
發(fā)明人 敖海;朱文康;李源昕;馮雨 申請(專利權)人 芯動微電子科技(珠海)有限公司
代理機構 - 代理人 -
地址 519000廣東省珠海市高新區(qū)唐家灣鎮(zhèn)港灣一號創(chuàng)意云端B棟905芯動科技
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種時空超分辨率實時重建方法及系統(tǒng)。該方法包括:構建網(wǎng)絡模型;構建網(wǎng)絡模型包括:對輸入幀進行特征提取和特征拼接,得到輸入幀的特征圖以及輸入幀的拼接特征圖;基于輸入幀的特征圖以及輸入幀的拼接特征圖進行偏移場補償,得到偏移場補償之后的特征圖;基于偏移場補償之后的特征圖和輸入幀的特征圖進行特征融合,得到融合之后的特征圖;基于融合之后的特征圖,生成超分辨率重構圖像。本發(fā)明能有效解決當前VFI+VSR的“兩步法”應用場景下,兩個網(wǎng)絡計算量龐大、實時性差、人為割裂VFI和VSR內在聯(lián)系的問題,最后可以實時得到高分辨率、高幀率的視頻輸出。