一種建立分詞索引庫的方法和裝置

基本信息

申請?zhí)?/td> CN201810102258.0 申請日 -
公開(公告)號 CN108197315A 公開(公告)日 2018-06-22
申請公布號 CN108197315A 申請公布日 2018-06-22
分類號 G06F17/30;G06F17/27 分類 計算;推算;計數;
發(fā)明人 劉明;姚杰 申請(專利權)人 中控技術(西安)有限公司
代理機構 北京集佳知識產權代理有限公司 代理人 中控技術(西安)有限公司
地址 陜西省西安市高新區(qū)科技二路72號零壹廣場裙樓C-101
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種建立分詞索引庫的方法和裝置,該方法包括:首先,根據待分詞文本中的標點符號,獲取待分詞語句;然后,采用反向最大分詞匹配算法拆分所述待分詞語句,獲得拆分后的詞語作為索引項;最后,根據所述索引項和對應的索引信息,建立分詞索引庫,所述索引信息為索引項所屬待分詞文本的信息。由此可見,相較于利用IKAnalyzer進行分詞,利用反向最大分詞匹配算法對待分詞語句進行分詞處理,拆分出的詞語既具有實際含義,且數量較少,即,生成的索引項少而精確,從而在后續(xù)全文檢索時,對由上述方式建立的索引項少而精確的索引庫進行檢索,能夠大大提升全文檢索的速度,極大地提高檢索結果準確率。