一種Hadoop集群中數(shù)據(jù)備份的方法、設(shè)備及系統(tǒng)

基本信息

申請(qǐng)?zhí)?/td> CN201380002586.9 申請(qǐng)日 -
公開(kāi)（公告）號(hào) CN105052110B 公開(kāi)（公告）日 2018-10-30
申請(qǐng)公布號(hào) CN105052110B 申請(qǐng)公布日 2018-10-30
分類號(hào) H04L29/08 分類 電通信技術(shù);
發(fā)明人 王朱珍 申請(qǐng)（專利權(quán)）人 惠民壹繩壹網(wǎng)信息科技有限公司
代理機(jī)構(gòu) 深圳市深佳知識(shí)產(chǎn)權(quán)代理事務(wù)所（普通合伙） 代理人 王仲凱
地址 518129 廣東省深圳市龍崗區(qū)坂田華為總部辦公樓
法律狀態(tài) -

摘要

摘要 本發(fā)明公開(kāi)了一種Hadoop集群中數(shù)據(jù)備份的方法，包括：獲取每個(gè)計(jì)算節(jié)點(diǎn)所具有的各種應(yīng)用能力值，確定所述各種應(yīng)用能力值中對(duì)待調(diào)整數(shù)據(jù)塊的處理效率影響最大的應(yīng)用能力值，以及所述待調(diào)整數(shù)據(jù)塊的備份數(shù)量N，所述N為大于1的整數(shù)，確定所述每個(gè)計(jì)算節(jié)點(diǎn)中所述影響最大的應(yīng)用能力值最強(qiáng)的前N個(gè)可用計(jì)算節(jié)點(diǎn)，將所述待調(diào)整數(shù)據(jù)塊備份到確定的所述前N個(gè)可用計(jì)算節(jié)點(diǎn)上。本發(fā)明實(shí)施例提供的方法，可以將數(shù)據(jù)塊備份到處理該數(shù)據(jù)塊能力最強(qiáng)的計(jì)算節(jié)點(diǎn)上，從而提高了數(shù)據(jù)處理的效率。