一種數(shù)據(jù)加載清洗引擎、調(diào)度與存儲(chǔ)系統(tǒng)

基本信息

申請?zhí)?/td> CN201610524292.8 申請日 -
公開(公告)號 CN106202346A 公開(公告)日 2016-12-07
申請公布號 CN106202346A 申請公布日 2016-12-07
分類號 G06F17/30(2006.01)I 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 孫永劍;鄭書禮;裘鑫芳;董磊 申請(專利權(quán))人 廣東省信息網(wǎng)絡(luò)有限公司
代理機(jī)構(gòu) 常州佰業(yè)騰飛專利代理事務(wù)所(普通合伙) 代理人 黃杭飛
地址 310018 浙江省杭州市江干區(qū)下沙高教園區(qū)2號大街928號
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種數(shù)據(jù)加載清洗引擎、調(diào)度與存儲(chǔ)系統(tǒng),包括數(shù)據(jù)源、數(shù)據(jù)倉庫和用戶展現(xiàn)模塊,數(shù)據(jù)倉庫連接有ETL管理模塊,ETL管理模塊包括ETL調(diào)度模塊、ETL監(jiān)控模塊、數(shù)據(jù)質(zhì)量模塊和ETL任務(wù)模塊,數(shù)據(jù)倉庫包括接口文件區(qū)、細(xì)節(jié)數(shù)據(jù)暫存區(qū)SSA、細(xì)節(jié)數(shù)據(jù)SOR、數(shù)據(jù)集市、數(shù)據(jù)總結(jié)模塊、反饋模塊和元數(shù)據(jù)存儲(chǔ)MDR。本發(fā)明具有實(shí)用性強(qiáng),數(shù)據(jù)管理便捷,靈活性高,易于推廣,高效能數(shù)據(jù)處理,大吞吐量,能夠應(yīng)對添加更多的數(shù)據(jù)源,支持更多分析需求的優(yōu)點(diǎn)。