一種基于樣本生成和模態(tài)融合的跨域無線動(dòng)作識(shí)別方法

基本信息

申請(qǐng)?zhí)?/td> CN202111456132.1 申請(qǐng)日 -
公開（公告）號(hào) CN114444534A 公開（公告）日 2022-05-06
申請(qǐng)公布號(hào) CN114444534A 申請(qǐng)公布日 2022-05-06
分類號(hào) G06K9/00（2022.01）I;G06N3/04（2006.01）I;G06N3/08（2006.01）I 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 周保;周瑞;羅悅;程宇;林建旋;胡思林;方劍平;王佳昊 申請(qǐng)（專利權(quán)）人 廈門智小金智能科技有限公司
代理機(jī)構(gòu) 電子科技大學(xué)專利中心 代理人 鄒裕蓉
地址 611731四川省成都市高新區(qū)（西區(qū)）西源大道2006號(hào)
法律狀態(tài) -

摘要

摘要 本發(fā)明提供了一種基于樣本生成和模態(tài)融合的跨域無線動(dòng)作識(shí)別方法，為了以少量數(shù)據(jù)實(shí)現(xiàn)高精度跨域動(dòng)作識(shí)別，將源域和目標(biāo)域的同動(dòng)作類別數(shù)據(jù)進(jìn)行線性變換得到包含源域和目標(biāo)域環(huán)境信息的新數(shù)據(jù)，然后利用生成編碼器和生成解碼器去除源域的環(huán)境信息并增強(qiáng)目標(biāo)域的環(huán)境信息，通過不斷訓(xùn)練，生成大量目標(biāo)域的虛擬幅值數(shù)據(jù)和虛擬相位數(shù)據(jù)。為了進(jìn)一步提升跨域動(dòng)作識(shí)別精度，對(duì)虛擬幅值和虛擬相位進(jìn)行特征融合。通過融合編碼器從幅值和相位中提取出動(dòng)作特征，并通過相似度損失使不同模態(tài)的動(dòng)作特征一致，然后利用融合解碼器增強(qiáng)動(dòng)作特征提取能力。最后對(duì)不同模態(tài)的動(dòng)作特征進(jìn)行通道拼接，采用動(dòng)作分類器對(duì)拼接的動(dòng)作特征進(jìn)行分類，得到動(dòng)作識(shí)別結(jié)果。