一種數(shù)據(jù)清洗方法

基本信息

申請?zhí)?/td> CN201810959495.9 申請日 -
公開(公告)號 CN109388633A 公開(公告)日 2019-02-26
申請公布號 CN109388633A 申請公布日 2019-02-26
分類號 G06F16/215 分類 計算;推算;計數(shù);
發(fā)明人 輔小紅;唐誠 申請(專利權(quán))人 鹽城優(yōu)易數(shù)據(jù)有限公司
代理機構(gòu) 南京蘇高專利商標事務(wù)所(普通合伙) 代理人 鹽城優(yōu)易數(shù)據(jù)有限公司
地址 224001 江蘇省鹽城市城南新區(qū)大數(shù)據(jù)產(chǎn)業(yè)園八號樓三層
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種數(shù)據(jù)清洗方法,包括:確定二維數(shù)據(jù)表中預(yù)設(shè)區(qū)域分別對應(yīng)的區(qū)域坐標;其中,所述預(yù)設(shè)區(qū)域包括:行表頭所在區(qū)域和列表頭所在區(qū)域;通過預(yù)設(shè)自然語言處理算法對所述區(qū)域坐標對應(yīng)區(qū)域內(nèi)的內(nèi)容進行讀取解析;并根據(jù)解析結(jié)果,確定所述預(yù)設(shè)區(qū)域內(nèi)容分別歸屬的表頭屬性;將各表頭屬性的值和對應(yīng)數(shù)據(jù)值作為一行或一列寫入所述一維數(shù)據(jù)表中,得到清洗后的一維數(shù)據(jù)表。本發(fā)明自動化程度高,人力成本低,且可處理海量復(fù)雜格式的年鑒數(shù)據(jù),效果更好。