一種基于最大熵模型建模和命名實(shí)體識(shí)別的方法及裝置

基本信息

申請?zhí)?/td> CN200710098635.X 申請日 -
公開(公告)號(hào) CN101295292B 公開(公告)日 2016-07-20
申請公布號(hào) CN101295292B 申請公布日 2016-07-20
分類號(hào) G06F17/27(2006.01)I 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 王學(xué)武;彭學(xué)政;楊建武;肖建國 申請(專利權(quán))人 北京北大方正技術(shù)研究院有限公司
代理機(jī)構(gòu) 北京同達(dá)信恒知識(shí)產(chǎn)權(quán)代理有限公司 代理人 北大方正集團(tuán)有限公司;北京大學(xué);北京北大方正技術(shù)研究院有限公司
地址 100871 北京市海淀區(qū)成府路298號(hào)中關(guān)村方正大廈513
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種基于最大熵模型建模和命名實(shí)體識(shí)別的方法,該方法包括:輸入標(biāo)注命名實(shí)體的訓(xùn)練文本;對(duì)所述訓(xùn)練文本中的字符進(jìn)行角色標(biāo)注,得到訓(xùn)練文本的字符角色標(biāo)注;根據(jù)字符角色標(biāo)注,建立所述字符的特征項(xiàng);將所述字符的特征項(xiàng)輸入到最大熵的建模工具中,得到基于字符角色標(biāo)注的數(shù)據(jù)模型。該方法不需分詞,因此解決了進(jìn)行命名實(shí)體識(shí)別時(shí),分詞錯(cuò)誤和它導(dǎo)致的信息丟失而影響識(shí)別效果的問題。