基于指針生成網(wǎng)絡(luò)的數(shù)據(jù)到文本的生成模型
基本信息
申請(qǐng)?zhí)?/td> | CN201910573445.1 | 申請(qǐng)日 | - |
公開(公告)號(hào) | CN110298436A | 公開(公告)日 | 2019-10-01 |
申請(qǐng)公布號(hào) | CN110298436A | 申請(qǐng)公布日 | 2019-10-01 |
分類號(hào) | G06N3/04;G06N3/08;G06F17/28 | 分類 | 計(jì)算;推算;計(jì)數(shù); |
發(fā)明人 | 琚生根;孫萌欣;劉實(shí);賴星宇;王霞 | 申請(qǐng)(專利權(quán))人 | 樂山金蜜工業(yè)衛(wèi)士服務(wù)股份有限公司 |
代理機(jī)構(gòu) | 成都三誠(chéng)知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) | 代理人 | 樂山金蜜工業(yè)衛(wèi)士服務(wù)股份有限公司 |
地址 | 614399 四川省樂山市峨邊縣沙坪鎮(zhèn)新村路143號(hào) | ||
法律狀態(tài) | - |
摘要
摘要 | 本發(fā)明公開了基于指針生成網(wǎng)絡(luò)的數(shù)據(jù)到文本的生成模型,包括(1)建立輸入層;(2)建立屬性注意力機(jī)制;(3)建立指針生成網(wǎng)絡(luò);(4)建立覆蓋機(jī)制;(5)建立注意力分布門控;(6)進(jìn)行訓(xùn)練等步驟。本發(fā)明提供基于指針生成網(wǎng)絡(luò)的數(shù)據(jù)到文本的生成模型,能夠提供基于指針生成網(wǎng)絡(luò)的數(shù)據(jù)到文本的生成模型,利用指針生成網(wǎng)絡(luò)中的拷貝機(jī)制解決數(shù)據(jù)到文本生成中的嚴(yán)重的未登錄詞和稀有詞問題,且引入槽?值對(duì)數(shù)據(jù)的結(jié)構(gòu)語(yǔ)義知識(shí)從而更好地對(duì)齊屬性和值,在此基礎(chǔ)上,不僅引入覆蓋機(jī)制使模型更多地關(guān)注未表達(dá)的屬性值在一定程度上保證表達(dá)的完整性,還引入注意力分布門控調(diào)整注意力分布的尖銳度,更好地對(duì)齊槽?值對(duì)數(shù)據(jù)與生成的文本。 |
