建立分詞模型的方法及裝置

基本信息

申請(qǐng)?zhí)?/td> CN201610881290.4 申請(qǐng)日 -
公開（公告）號(hào) CN106407186B 公開（公告）日 2019-04-30
申請(qǐng)公布號(hào) CN106407186B 申請(qǐng)公布日 2019-04-30
分類號(hào) G06F17/28（2006.01）I; G06F17/27（2006.01）I 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 田亮 申請(qǐng)（專利權(quán)）人 新譯信息科技（深圳）有限公司
代理機(jī)構(gòu) 北京同立鈞成知識(shí)產(chǎn)權(quán)代理有限公司 代理人 新譯信息科技（深圳）有限公司
地址 518057 廣東省深圳市高新技術(shù)產(chǎn)業(yè)園清華信息港科研樓909室
法律狀態(tài) -

摘要

摘要 本發(fā)明實(shí)施例提供一種建立分詞模型的方法及裝置，其中，該方法包括：將第一語料中的每個(gè)字符與第二語料中的單詞進(jìn)行對(duì)齊，獲得第一語料和所述第二語料之間的對(duì)齊關(guān)系，其中所述第一語料為詞與詞之間沒有空格劃分邊界的語料；根據(jù)所述第一語料和所述第二語料之間的對(duì)齊關(guān)系，確定所述第一語料中詞的邊界信息；根據(jù)所述第一語料中詞的邊界信息，訓(xùn)練生成分詞模型。本發(fā)明實(shí)施例提供的建立分詞模型的方法及裝置，能夠提高分詞準(zhǔn)確性。特別是詞與詞之間沒有空格區(qū)分邊界的語料的分詞準(zhǔn)確性。