一種基于hadoop異構(gòu)存儲(chǔ)的數(shù)據(jù)存儲(chǔ)方法及系統(tǒng)

基本信息

申請(qǐng)?zhí)?/td> CN201510529487.7 申請(qǐng)日 -
公開(kāi)（公告）號(hào) CN105138476B 公開(kāi)（公告）日 2017-11-28
申請(qǐng)公布號(hào) CN105138476B 申請(qǐng)公布日 2017-11-28
分類(lèi)號(hào) G06F3/06(2006.01)I 分類(lèi) 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 柴滿(mǎn);徐健;王國(guó)輝 申請(qǐng)（專(zhuān)利權(quán)）人 廣東創(chuàng)我科技發(fā)展有限公司
代理機(jī)構(gòu) 深圳市君勝知識(shí)產(chǎn)權(quán)代理事務(wù)所（普通合伙） 代理人 廣東創(chuàng)我科技發(fā)展有限公司
地址 519080 廣東省珠海市唐家灣鎮(zhèn)軟件園路1號(hào)生產(chǎn)加工中心4#樓二層2、4單元
法律狀態(tài) -

摘要

摘要 本發(fā)明所提供一種基于hadoop異構(gòu)存儲(chǔ)的數(shù)據(jù)存儲(chǔ)方法及系統(tǒng)，其首先，獲取數(shù)據(jù)在一段時(shí)間內(nèi)被訪問(wèn)頻率；其次，根據(jù)所述被訪問(wèn)頻率，查找預(yù)先設(shè)置與所述被訪問(wèn)頻率對(duì)應(yīng)的數(shù)據(jù)存儲(chǔ)硬盤(pán)，確定為所述被訪問(wèn)頻率數(shù)據(jù)的存儲(chǔ)硬盤(pán)；最后，根據(jù)所述被訪問(wèn)頻率數(shù)據(jù)的存儲(chǔ)硬盤(pán)，將所述數(shù)據(jù)遷移至所述數(shù)據(jù)存儲(chǔ)硬盤(pán)。通過(guò)獲取數(shù)據(jù)在最近一段時(shí)間內(nèi)使用頻率，根椐數(shù)據(jù)的使用頻率不同，自動(dòng)將hadoop數(shù)據(jù)分級(jí)存儲(chǔ)，將使用頻率高的數(shù)據(jù)存放在SSD高速硬盤(pán)，將使用頻率高中等的數(shù)據(jù)放在高速機(jī)械硬盤(pán)上，將使用頻率低的數(shù)據(jù)存放在低速機(jī)械硬盤(pán)上，提升系統(tǒng)的整體性能。