抽取新知識點的方法

基本信息

申請?zhí)?/td> CN201810473799.4 申請日 -
公開(公告)號 CN108763368A 公開(公告)日 2018-11-06
申請公布號 CN108763368A 申請公布日 2018-11-06
分類號 G06F17/30;G06F17/27 分類 計算;推算;計數(shù);
發(fā)明人 韓警;鐘翰廷;吳金龍;王守崑 申請(專利權(quán))人 愛因互動科技發(fā)展(北京)有限公司
代理機(jī)構(gòu) 北京卓孚知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 代理人 愛因互動科技發(fā)展(北京)有限公司
地址 100095 北京市海淀區(qū)北清路68號院24號樓D座4層017
法律狀態(tài) -

摘要

摘要 提供一種抽取新知識點的方法。該方法包括:針對待抽取文檔進(jìn)行文檔內(nèi)容解析;對于解析出的文檔內(nèi)容進(jìn)行段落結(jié)構(gòu)化處理;基于段落預(yù)測模型,預(yù)測段落包含新知識點的概率值,根據(jù)預(yù)測的概率值定位新知識點所處于的段落;基于知識點抽取模型,在定位的段落中抽取有關(guān)新知識點的內(nèi)容。知識點包括字、詞、詞組、短句、長句等。段落預(yù)測模型是通過針對新增知識點進(jìn)行標(biāo)注而更新的。知識點抽取模型是基于已有知識點的通用抽取模型,通過對新增知識點進(jìn)行標(biāo)注而更新的。該抽取方法結(jié)合了文檔結(jié)構(gòu)化信息,從而縮小了抽取范圍,獲得更高抽取準(zhǔn)確率。同時,通過引入遷移學(xué)習(xí)技術(shù)和少量標(biāo)注,可以有效利用已有模型,實現(xiàn)抽取系統(tǒng)升級維護(hù)的自動化。