半監(jiān)督視頻目標(biāo)分割方法及裝置

基本信息

申請(qǐng)?zhí)?/td> CN202110838594.3 申請(qǐng)日 -
公開(kāi)（公告）號(hào) CN113436199B 公開(kāi)（公告）日 2022-02-22
申請(qǐng)公布號(hào) CN113436199B 申請(qǐng)公布日 2022-02-22
分類號(hào) G06T7/10（2017.01）I;G06V10/46（2022.01）I;G06V10/774（2022.01）I;G06K9/62（2022.01）I;G06N3/04（2006.01）I;G06N3/08（2006.01）I;CN 111210446 A,2020.05.29;CN 111161306 A,2020.05.15;US 2021150728 A1,2021.05.20;US 2019311202 A1,2019.10.10 Fanchao Lin etal..Query-Memory Re-Aggregation forWeakly-supervised Video Object Segmentation.《The Thirty-Fifth AAAI Conference on Artificial Intelligence （AAAI-21）》.2021,第35卷（第03期）,;Fanchao Lin etal..Query-Memory Re-Aggregation forWeakly-supervised Video Object Segmentation.《The Thirty-Fifth AAAI Conference on Artificial Intelligence （AAAI-21）》.2021,第35卷（第3期）,;Ziqin Wang etal..RANet: Ranking Attention Network for Fast Video Object Segmentation.《2019 IEEE/CVF International Conference on Computer Vision （ICCV）》.2020,;陳加等.深度學(xué)習(xí)在視頻對(duì)象分割中的應(yīng)用與展望.《計(jì)算機(jī)學(xué)報(bào)》.2021,第44卷（第3期）, 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 靳國(guó)慶;楊松;郭俊波;石里男;林凡超;謝洪濤;張勇東 申請(qǐng)（專利權(quán)）人 人民網(wǎng)股份有限公司
代理機(jī)構(gòu) 北京市浩天知識(shí)產(chǎn)權(quán)代理事務(wù)所（普通合伙） 代理人 陳翠
地址 100026北京市西城區(qū)新街口外大街28號(hào)B座234號(hào)
法律狀態(tài) -

摘要

摘要 本發(fā)明公開(kāi)了一種半監(jiān)督視頻目標(biāo)分割方法及裝置，該方法包括：獲取待分割視頻的模板幀圖像、模板幀圖像分割標(biāo)簽及待查詢幀圖像；將模板幀圖像及模板幀圖像分割標(biāo)簽輸入至第一編碼器提取特征，得到復(fù)合特征；將待查詢幀圖像輸入至第二編碼器提取特征，得到圖像特征；將復(fù)合特征及圖像特征輸入至預(yù)先訓(xùn)練的時(shí)序推斷模塊進(jìn)行分割結(jié)果預(yù)測(cè)，得到待查詢幀圖像對(duì)應(yīng)的預(yù)測(cè)分割結(jié)果。本發(fā)明提供的方案，基于預(yù)測(cè)分割結(jié)果的循環(huán)一致性進(jìn)行半監(jiān)督訓(xùn)練，在僅需要一段視頻中第一幀圖像及第一幀圖像分割標(biāo)簽的前提下，能高效地進(jìn)行訓(xùn)練，基于此所進(jìn)行的視頻目標(biāo)分割仍然具有較高的預(yù)測(cè)精度，從而無(wú)需人工一一進(jìn)行標(biāo)注，節(jié)省了時(shí)間成本，同時(shí)提高了分割效率。