基于電子表格的分割去重導(dǎo)入方法及相關(guān)產(chǎn)品

基本信息

申請?zhí)?/td> 2020111955492 申請日 -
公開(公告)號 CN112256685A 公開(公告)日 2021-01-22
申請公布號 CN112256685A 申請公布日 2021-01-22
分類號 G06F16/215(2019.01)I; 分類 計算;推算;計數(shù);
發(fā)明人 岳湘黔;胡棟;羅利娟;姚傲雪;江涌 申請(專利權(quán))人 深圳物訊科技有限公司
代理機(jī)構(gòu) 深圳壹舟知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 代理人 寇闖
地址 518000廣東省深圳市南山區(qū)粵海街道高新區(qū)社區(qū)科技南十二路007號九洲電器大廈901-1室
法律狀態(tài) -

摘要

摘要 本申請公開提供一種基于電子表格的分割去重導(dǎo)入方法,所述方法包括如下步驟:批量導(dǎo)入表格數(shù)據(jù),獲取表格數(shù)據(jù)的數(shù)據(jù)集合;判斷所述數(shù)據(jù)集合中是否具有重復(fù)數(shù)據(jù),獲取所述數(shù)據(jù)集合的重復(fù)量;當(dāng)所述重復(fù)量不為0時,將所述數(shù)據(jù)集合劃分為多個子數(shù)據(jù)集合,同時對所述子數(shù)據(jù)集合執(zhí)行數(shù)據(jù)去重操作;將所述子數(shù)據(jù)集合匯總后導(dǎo)入數(shù)據(jù)庫中。通過將一個大的數(shù)據(jù)集合分割為多個子數(shù)據(jù)集合,每個數(shù)據(jù)集合用一個異步線程處理去重,各自處理完后合并結(jié)果集返回,提高數(shù)據(jù)去重導(dǎo)入效率。??