跨數(shù)據(jù)中心的數(shù)據(jù)傳輸處理方法及系統(tǒng)

基本信息

申請?zhí)?/td> CN201410662799.0 申請日 -
公開(公告)號 CN104378234B 公開(公告)日 2018-09-07
申請公布號 CN104378234B 申請公布日 2018-09-07
分類號 H04L12/24;H04L29/08;G06F17/30 分類 電通信技術;
發(fā)明人 秦剛;唐玉芳;柳楊;江舟;孔祥鵬;張紅意 申請(專利權)人 蘇州數(shù)匠科技有限公司
代理機構 北京三友知識產權代理有限公司 代理人 北京數(shù)介科技有限公司
地址 101111 北京市西城區(qū)新街口外大街28號A座408號
法律狀態(tài) -

摘要

摘要 本發(fā)明公開一種跨數(shù)據(jù)中心的數(shù)據(jù)傳輸處理方法及系統(tǒng),其中方法包括:數(shù)據(jù)產生層產生日志數(shù)據(jù)并傳輸至數(shù)據(jù)中轉層;數(shù)據(jù)中轉層在從數(shù)據(jù)處理層獲得的字典庫中查找日志數(shù)據(jù)的標識,用查找到的標識對日志數(shù)據(jù)進行替換,字典庫中存儲日志數(shù)據(jù)與標識的唯一對應關系;數(shù)據(jù)中轉層將標識替換后的日志數(shù)據(jù)傳輸至數(shù)據(jù)處理層。進一步的,若數(shù)據(jù)中轉層在字典庫中未查找到日志數(shù)據(jù)的標識,則保留原日志數(shù)據(jù)并傳輸至數(shù)據(jù)處理層;數(shù)據(jù)處理層將未進行標識替換的日志數(shù)據(jù)補充至字典庫中,并為該日志數(shù)據(jù)分配標識,存儲該日志數(shù)據(jù)與標識的唯一對應關系,將更新后的字典庫同步至數(shù)據(jù)中轉層。本發(fā)明可以減少日志數(shù)據(jù)的傳輸量,節(jié)省傳輸帶寬和傳輸耗時。