一種面向綠色云計算的重復(fù)數(shù)據(jù)刪除方法及系統(tǒng)

基本信息

申請?zhí)?/td> CN201810271309.2 申請日 -
公開(公告)號 CN108415671B 公開(公告)日 2021-04-27
申請公布號 CN108415671B 申請公布日 2021-04-27
分類號 G06F3/06 分類 計算;推算;計數(shù);
發(fā)明人 徐小龍;王泊;牟亦奇;朱潔;王俊昌;劉茜萍;張潔;胥備 申請(專利權(quán))人 上交所技術(shù)有限責(zé)任公司
代理機構(gòu) 上海三方專利事務(wù)所(普通合伙) 代理人 吳瑋;李美立
地址 200131 上海市浦東新區(qū)中國(上海)自由貿(mào)易試驗區(qū)臺中北路8號
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及云計算和數(shù)據(jù)處理方法及系統(tǒng)技術(shù)領(lǐng)域,具體來說是一種面向綠色云計算的重復(fù)數(shù)據(jù)刪除方法及系統(tǒng),將文件劃分為若干個數(shù)據(jù)塊,并采用至少兩個Hash函數(shù)分別對文件中的每個數(shù)據(jù)塊進(jìn)行指紋提取,將得到的每個數(shù)據(jù)塊的至少兩個指紋值作為數(shù)據(jù)塊的唯一指紋,并將每個數(shù)據(jù)塊的唯一指紋相結(jié)合作為文件的指紋序列,并對文件進(jìn)行Hash運算,得到文件的指紋值,將文件的指紋序列和文件的指紋值相結(jié)合作為所述文件的唯一指紋。本發(fā)明同現(xiàn)有技術(shù)相比其優(yōu)點在于對重復(fù)數(shù)據(jù)進(jìn)行刪除,降低了云環(huán)境中數(shù)據(jù)的冗余性,且解決了文件指紋之間的重復(fù)沖突問題,重復(fù)數(shù)據(jù)刪除速度快,占用存儲空間小,有效減低云環(huán)境的存儲、電力資源開銷,有助于系統(tǒng)實現(xiàn)綠色云計算。