一種對(duì)數(shù)據(jù)文件的數(shù)據(jù)清洗方法和數(shù)據(jù)文件處理方法

基本信息

申請(qǐng)?zhí)?/td> CN201911077291.3 申請(qǐng)日 -
公開(公告)號(hào) CN111026722A 公開(公告)日 2020-04-17
申請(qǐng)公布號(hào) CN111026722A 申請(qǐng)公布日 2020-04-17
分類號(hào) G06F16/174;G06F16/215 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 李亞萍;張亮;侯林勇;楊坤;袁率;方程;王俊;劉婉瑩 申請(qǐng)(專利權(quán))人 貴州小叮當(dāng)信息技術(shù)有限公司
代理機(jī)構(gòu) 重慶百潤洪知識(shí)產(chǎn)權(quán)代理有限公司 代理人 貴州小叮當(dāng)信息技術(shù)有限公司
地址 550008 貴州省貴陽市國家高新技術(shù)產(chǎn)業(yè)開發(fā)區(qū)科技產(chǎn)業(yè)園標(biāo)準(zhǔn)廠房輔助用房B303室
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了對(duì)數(shù)據(jù)文件的數(shù)據(jù)清洗方法和數(shù)據(jù)文件處理方法,步驟一:確定待清洗數(shù)據(jù),生成清洗隊(duì)列;步驟二:制定多個(gè)清洗規(guī)則,編制清洗配置文件,生成源鏡像數(shù)據(jù)文件;步驟三:進(jìn)行數(shù)據(jù)清洗,并生成清洗日志文件及清洗后鏡像數(shù)據(jù)文件;步驟四:將生成的文件各自單獨(dú)進(jìn)行壓縮處理;步驟五:將各個(gè)壓縮包發(fā)送至各個(gè)單獨(dú)的數(shù)據(jù)庫;步驟六:第一臨時(shí)數(shù)據(jù)庫和第二臨時(shí)數(shù)據(jù)庫設(shè)置時(shí)間自動(dòng)刪除壓縮包,該發(fā)明一次性制定多個(gè)清洗規(guī)則,后期清洗直接根據(jù)多個(gè)清洗規(guī)則依次自動(dòng)進(jìn)行清洗,較傳統(tǒng)手動(dòng)的一個(gè)一個(gè)清洗效率大大提高,且可避免操作失誤后文件丟失,無法找回的情況。