一種增量數(shù)據(jù)卸載和裝載的實(shí)施工具

基本信息

申請(qǐng)?zhí)?/td> CN201110360934.2 申請(qǐng)日 -
公開（公告）號(hào) CN102375891A 公開（公告）日 2012-03-14
申請(qǐng)公布號(hào) CN102375891A 申請(qǐng)公布日 2012-03-14
分類號(hào) G06F17/30(2006.01)I 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 張家重;宋凱;把余詠;李衍珠;于海泉;祝鵬 申請(qǐng)（專利權(quán)）人 山東浪潮云網(wǎng)信息系統(tǒng)有限公司
代理機(jī)構(gòu) - 代理人 -
地址 250101 山東省濟(jì)南市高新區(qū)舜雅路1036號(hào)
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種增量數(shù)據(jù)卸載和裝載的實(shí)施工具，屬于一種數(shù)據(jù)管理的應(yīng)用技術(shù)，通過配置文件結(jié)合SHELL腳本和數(shù)據(jù)庫(kù)自帶ETL工具實(shí)現(xiàn)了數(shù)據(jù)源的增量-全量判斷抽取和裝載處理；步驟如下：（1）設(shè)置配置文件、公共參數(shù)：通過配置文件對(duì)源數(shù)據(jù)庫(kù)中待抽取表的內(nèi)容和抽取方式進(jìn)行描述；（2）運(yùn)行抽取程序、狀態(tài)記錄：由抽取程序統(tǒng)一調(diào)度進(jìn)行數(shù)據(jù)抽取，同時(shí)由狀態(tài)記錄程序記錄抽取狀態(tài)、抽取數(shù)據(jù)量的信息，抽取過程支持中斷繼續(xù)和自動(dòng)壓縮；（3）數(shù)據(jù)裝載：由裝載程序?qū)?shù)據(jù)進(jìn)行裝載，數(shù)據(jù)裝載過程中進(jìn)行增量-全量的判斷并作全量處理和數(shù)據(jù)量核對(duì)檢查。本發(fā)明方便了應(yīng)用系統(tǒng)的運(yùn)維管理，并降低了實(shí)施難度。