基于語義空間約束和注意力機制的場景圖生成方法

基本信息

申請?zhí)?/td> CN201910250400.0 申請日 -
公開（公告）號 CN110084128B 公開（公告）日 2021-12-14
申請公布號 CN110084128B 申請公布日 2021-12-14
分類號 G06K9/00（2006.01）I;G06K9/62（2006.01）I;G06N3/04（2006.01）I;G06N3/08（2006.01）I 分類 計算；推算；計數(shù);
發(fā)明人 汪從玲 申請（專利權(quán)）人 安徽省科億信息科技有限公司
代理機構(gòu) 合肥市上嘉專利代理事務(wù)所（普通合伙） 代理人 李璐;郭華俊
地址 230000 安徽省合肥市高新區(qū)黃山路602號國家大學(xué)科技園創(chuàng)業(yè)孵化中心
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種基于語義空間約束和注意力機制的場景圖生成方法，包括以下步驟：S1：采用VG數(shù)據(jù)集，隨機選取若干張圖像作為驗證集，在剩余圖像中按比例隨機選取，分別作為訓(xùn)練集和測試集；S2：基于深度學(xué)習(xí)的方法和VG數(shù)據(jù)集，構(gòu)建目標(biāo)檢測網(wǎng)絡(luò)；S3：建立關(guān)系推理網(wǎng)絡(luò)；S4：根據(jù)關(guān)系推理網(wǎng)絡(luò)得到的語義約束信息和注意力網(wǎng)絡(luò)，得到突出可能存在相關(guān)關(guān)系的區(qū)域和通道特征，進行關(guān)系推理分類。本發(fā)明無需使用圖相關(guān)信息流傳遞機制，基于語義空間的約束和注意力機制推測兩兩物體之間的相關(guān)關(guān)系，沒有引入更多的噪聲，網(wǎng)絡(luò)比較簡單，提供了更高的關(guān)系推理精度，能夠更有效提取出存在物體相關(guān)關(guān)系的特征。