一種防止數(shù)據(jù)二次污染的數(shù)據(jù)治理方法
基本信息
| 申請?zhí)?/td> | CN202011619060.3 | 申請日 | - |
| 公開（公告）號 | CN112650744A | 公開（公告）日 | 2021-04-13 |
| 申請公布號 | CN112650744A | 申請公布日 | 2021-04-13 |
| 分類號 | G06F16/215;G06F16/25;G06F16/28 | 分類 | 計算；推算；計數(shù); |
| 發(fā)明人 | 黃遠新;余宗偉;黃開輝 | 申請（專利權(quán)）人 | 廣州晟能軟件科技有限公司 |
| 代理機構(gòu) | 廣州海石專利代理事務所（普通合伙） | 代理人 | 邵穗娟 |
| 地址 | 510670 廣東省廣州市黃埔區(qū)科學大道182號C2棟502房 | ||
| 法律狀態(tài) | - | ||
摘要
| 摘要 | 本發(fā)明提供一種防止數(shù)據(jù)二次污染的數(shù)據(jù)治理方法，包括以下階段：第一階段，建立鏡像庫，針對每個生產(chǎn)系統(tǒng)建立鏡像庫；第二階段，識別數(shù)據(jù)變化，生產(chǎn)系統(tǒng)采集的數(shù)據(jù)和鏡像庫的數(shù)據(jù)對比；第三階段，數(shù)據(jù)融合處理，將第二階段新增的部份和變化的部份，和數(shù)據(jù)倉庫中的主題數(shù)據(jù)進行對比；第四階段，發(fā)布數(shù)據(jù)倉庫數(shù)據(jù)變動事件，將數(shù)據(jù)倉庫的主題數(shù)據(jù)的變動部份，以數(shù)據(jù)事件方式發(fā)布到事件總線，采取數(shù)據(jù)一致性處理或丟棄處理。僅針對數(shù)據(jù)清理過程中，思路同樣放在僅處理生產(chǎn)系統(tǒng)數(shù)據(jù)變化部份，對臟數(shù)據(jù)二次污染的過程進行治理，具有簡單、易行、通用的特點，有效提升數(shù)據(jù)治理效率，降低數(shù)據(jù)融合成本。 |
