一種面向單機(jī)的海量小記錄高效存儲(chǔ)管理方法
基本信息
申請(qǐng)?zhí)?/td> | CN201410617251.4 | 申請(qǐng)日 | - |
公開(kāi)(公告)號(hào) | CN104536908B | 公開(kāi)(公告)日 | 2017-12-29 |
申請(qǐng)公布號(hào) | CN104536908B | 申請(qǐng)公布日 | 2017-12-29 |
分類(lèi)號(hào) | G06F12/0866(2016.01)I;G06F12/0895(2016.01)I | 分類(lèi) | 計(jì)算;推算;計(jì)數(shù); |
發(fā)明人 | 戴林;邊彬彬;夏明雙;曹正德;于中徐;厲雅潔;張浩;陳永紅 | 申請(qǐng)(專(zhuān)利權(quán))人 | 中安威士(北京)科技有限公司 |
代理機(jī)構(gòu) | - | 代理人 | - |
地址 | 100085 北京市海淀區(qū)上地三街9號(hào)嘉華大廈F座1006 | ||
法律狀態(tài) | - |
摘要
摘要 | 本發(fā)明涉及一種面向單機(jī)的海量小記錄高效存儲(chǔ)管理方法,屬于信息存儲(chǔ)技術(shù)領(lǐng)域。包括:(1)數(shù)據(jù)接收及緩存:接收小記錄數(shù)據(jù),并存儲(chǔ)在內(nèi)存緩沖區(qū)中;(2)自動(dòng)分塊:當(dāng)內(nèi)存緩沖區(qū)滿(mǎn)時(shí),將緩沖區(qū)內(nèi)的數(shù)據(jù)寫(xiě)入到文件中,為防止單個(gè)文件太大影響性能,每個(gè)文件有大小限制,當(dāng)單個(gè)文件達(dá)到分塊大小時(shí),自動(dòng)新建文件;(3)樹(shù)狀目錄生成:為防止當(dāng)個(gè)目錄下文件太多影響性能,限制每個(gè)文件夾下面的文件總數(shù),以簡(jiǎn)化的樹(shù)管理算法實(shí)現(xiàn)文件夾和分塊文件的樹(shù)狀組織;(4)記錄標(biāo)識(shí):采用特殊標(biāo)識(shí)直接記錄記錄的物理地址,方便記錄的訪(fǎng)問(wèn)。對(duì)比現(xiàn)有技術(shù),本發(fā)明方法能夠在單機(jī)環(huán)境下以更低的硬件性能要求獲得更高性能的管理海量小記錄數(shù)據(jù)的能力。 |
