一種基于Lucene的大索引快速分裂方法
基本信息
申請?zhí)?/td> | CN201911026343.4 | 申請日 | - |
公開(公告)號 | CN110716942A | 公開(公告)日 | 2020-01-21 |
申請公布號 | CN110716942A | 申請公布日 | 2020-01-21 |
分類號 | G06F16/22 | 分類 | 計算;推算;計數(shù); |
發(fā)明人 | 王帥 | 申請(專利權)人 | 南京錄信軟件技術有限公司 |
代理機構 | - | 代理人 | - |
地址 | 210000 江蘇省南京市江寧區(qū)濱江經(jīng)濟開發(fā)區(qū)盛安大道739號 | ||
法律狀態(tài) | - |
摘要
摘要 | 本發(fā)明公開了一種基于Lucene的大索引快速分裂方法,包括以下步驟:利用Linux下文件的軟連接原理,在當前新建索引分片目錄上進行標記,標記出當前文件所指向的原索引文件存儲位置;借助于Lucene的delete from特性,在當前新建索引分片上刪除一半指定的索引數(shù)據(jù),在另一塊索引分片上刪除相反的另一半數(shù)據(jù),完成索引文件由一分裂為二的過程;完成索引分裂后,根據(jù)刪除操作時所使用的刪除條件決定當前索引數(shù)據(jù)定位的存儲目錄,將后續(xù)數(shù)據(jù)進行重新入庫;本發(fā)明提供的方法分裂過程無需額外copy開銷,刪除指定索引數(shù)據(jù)時效率高,加快了索引分裂的過程;索引分裂過程完成后,后續(xù)數(shù)據(jù)入庫索引數(shù)據(jù)定位規(guī)則與上述刪除操作的刪除條件有關,無需額外算法,簡便快捷。 |
