一種跨模態(tài)武器檢索方法及系統(tǒng)

基本信息

申請(qǐng)?zhí)?/td> CN202011411876.7 申請(qǐng)日 -
公開(kāi)(公告)號(hào) CN112528062A 公開(kāi)(公告)日 2021-03-19
申請(qǐng)公布號(hào) CN112528062A 申請(qǐng)公布日 2021-03-19
分類號(hào) G06K9/62(2006.01)I;G06F16/583(2019.01)I;G06F16/332(2019.01)I 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 王開(kāi)業(yè);范波;譚啟濤;方能煒;譚董;敬龍兒;崔斌;蔣登位 申請(qǐng)(專利權(quán))人 成都航天科工大數(shù)據(jù)研究院有限公司
代理機(jī)構(gòu) 成都頂峰專利事務(wù)所(普通合伙) 代理人 曾凱
地址 610000四川省成都市天府新區(qū)華陽(yáng)街道天府大道南段846號(hào)
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及武器檢索技術(shù)領(lǐng)域,公開(kāi)一種跨模態(tài)武器檢索方法,包括:獲取被檢索文本數(shù)據(jù)和被檢索圖像數(shù)據(jù);基于BERT特征提取模型,在所述被檢索文本數(shù)據(jù)中提取文本特征數(shù)據(jù),并根據(jù)所述文本特征數(shù)據(jù)計(jì)算文本低維向量;基于ResNet特征提取模型,在所述被檢索圖像數(shù)據(jù)中提取圖像特征數(shù)據(jù),并根據(jù)所述圖像特征數(shù)據(jù)計(jì)算圖像低維向量;基于Attention融合和雙判別器對(duì)抗網(wǎng)絡(luò)的復(fù)合特征融合模型,對(duì)所述文本低維向量和所述圖像低維向量進(jìn)行特征融合以獲得特征融合結(jié)果基于BM25F算法模型對(duì)所述特征融合結(jié)果進(jìn)行檢索,并將檢索結(jié)果返回至人機(jī)交互界面。本發(fā)明不僅能實(shí)現(xiàn)跨模態(tài)數(shù)據(jù)的無(wú)縫融合,而且提高了武器裝備的檢索速度,進(jìn)一步提高了軍事領(lǐng)域的機(jī)動(dòng)化、智能化水平。??