分離詞典的構(gòu)建方法、基于分離詞典的分詞方法及設(shè)備

基本信息

申請(qǐng)?zhí)?/td> CN202110513880.2 申請(qǐng)日 -
公開(kāi)（公告）號(hào) CN113111655A 公開(kāi)（公告）日 2021-07-13
申請(qǐng)公布號(hào) CN113111655A 申請(qǐng)公布日 2021-07-13
分類號(hào) G06F40/289（2020.01）I;G06F40/242（2020.01）I 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 賈寧 申請(qǐng)（專利權(quán)）人 數(shù)庫(kù)（上海）科技有限公司
代理機(jī)構(gòu) 上海十蕙一蘭知識(shí)產(chǎn)權(quán)代理有限公司 代理人 劉秋蘭
地址 201112上海市閔行區(qū)陳行路2388號(hào)9號(hào)樓8層801室
法律狀態(tài) -

摘要

摘要 本發(fā)明屬于語(yǔ)言處理技術(shù)領(lǐng)域，具體涉及一種分離詞典的構(gòu)建方法、一種基于分離詞典的分詞方法及相關(guān)設(shè)備。其中分詞方法，包括：獲取待分詞的文字S，調(diào)用初始化后的分離詞典，在分離詞典內(nèi)查找是否存在文字S內(nèi)的字串，若找到，則保存字串；使用預(yù)設(shè)的分詞工具segger，根據(jù)已保存的字串對(duì)文字S進(jìn)行分詞。本發(fā)明與現(xiàn)有技術(shù)相比，采用索引和分離式詞典來(lái)存儲(chǔ)和使用用戶詞典，節(jié)省了內(nèi)存空間。