一種數(shù)據(jù)加載清洗引擎、調(diào)度與存儲(chǔ)系統(tǒng)

基本信息

申請(qǐng)?zhí)?/td> CN201610524292.8 申請(qǐng)日 -
公開(kāi)(公告)號(hào) CN106202346B 公開(kāi)(公告)日 2019-11-01
申請(qǐng)公布號(hào) CN106202346B 申請(qǐng)公布日 2019-11-01
分類(lèi)號(hào) G06F16/25(2019.01)I 分類(lèi) 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 孫永劍; 鄭書(shū)禮; 裘鑫芳; 董磊 申請(qǐng)(專(zhuān)利權(quán))人 廣東省信息網(wǎng)絡(luò)有限公司
代理機(jī)構(gòu) 新余市渝星知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 代理人 何國(guó)強(qiáng)
地址 510030 廣東省廣州市越秀區(qū)東風(fēng)中路305號(hào)9號(hào)樓第2、5樓
法律狀態(tài) -

摘要

摘要 本發(fā)明公開(kāi)了一種數(shù)據(jù)加載清洗引擎、調(diào)度與存儲(chǔ)系統(tǒng),包括數(shù)據(jù)源、數(shù)據(jù)倉(cāng)庫(kù)和用戶展現(xiàn)模塊,數(shù)據(jù)倉(cāng)庫(kù)連接有ETL管理模塊,ETL管理模塊包括ETL調(diào)度模塊、ETL監(jiān)控模塊、數(shù)據(jù)質(zhì)量模塊和ETL任務(wù)模塊,數(shù)據(jù)倉(cāng)庫(kù)包括接口文件區(qū)、細(xì)節(jié)數(shù)據(jù)暫存區(qū)SSA、細(xì)節(jié)數(shù)據(jù)SOR、數(shù)據(jù)集市、數(shù)據(jù)總結(jié)模塊、反饋模塊和元數(shù)據(jù)存儲(chǔ)MDR。本發(fā)明具有實(shí)用性強(qiáng),數(shù)據(jù)管理便捷,靈活性高,易于推廣,高效能數(shù)據(jù)處理,大吞吐量,能夠應(yīng)對(duì)添加更多的數(shù)據(jù)源,支持更多分析需求的優(yōu)點(diǎn)。