一種卷積自編碼器及基于該編碼器的詞嵌入向量壓縮方法

基本信息

申請(qǐng)?zhí)?/td> CN202010036928.0 申請(qǐng)日 -
公開(kāi)(公告)號(hào) CN111507100A 公開(kāi)(公告)日 2020-08-07
申請(qǐng)公布號(hào) CN111507100A 申請(qǐng)公布日 2020-08-07
分類號(hào) G06F40/289;G06N3/04;G06N3/08;G06F16/33;G06F16/35;G06F40/58 分類 -
發(fā)明人 劉星辰;陳曉峰;麻沁甜 申請(qǐng)(專利權(quán))人 上海勃池信息技術(shù)有限公司
代理機(jī)構(gòu) 上海驍象知識(shí)產(chǎn)權(quán)代理有限公司 代理人 上海勃池信息技術(shù)有限公司
地址 201815 上海市嘉定區(qū)匯源路55號(hào)8幢5層517室
法律狀態(tài) -

摘要

摘要 本發(fā)明公開(kāi)了一種卷積自編碼器,包括:編碼層,用于將輸入卷積自編碼器的向量進(jìn)行卷積編碼,并表示為中間層特征圖;解碼層,用于將編碼層輸出的中間層特征圖反卷積重構(gòu),并輸出重構(gòu)后的重構(gòu)向量。編碼層對(duì)輸入的向量進(jìn)行卷積。本發(fā)明提供了一種卷積自編碼器,能夠進(jìn)行無(wú)監(jiān)督訓(xùn)練,同時(shí)對(duì)卷積自編碼器的中間層特征圖及重構(gòu)向量進(jìn)行對(duì)比計(jì)算,直到二者之間沒(méi)有誤差,防止數(shù)據(jù)出現(xiàn)錯(cuò)誤?;诰矸e自編碼器的詞嵌入向量進(jìn)行壓縮方法,對(duì)卷積自編碼器輸出的中間層特征圖最大化處理,能夠?qū)υ~嵌入向量進(jìn)行壓縮,可以將對(duì)詞嵌入向量與多個(gè)嵌入模型融合,并獲得較低維度的詞嵌入向量,從而顯著降低計(jì)算機(jī)的計(jì)算量。