一種數(shù)據(jù)清洗方法、裝置、電子設(shè)備和介質(zhì)

基本信息

申請?zhí)?/td> CN202110713685.4 申請日 -
公開(公告)號 CN113535696A 公開(公告)日 2021-10-22
申請公布號 CN113535696A 申請公布日 2021-10-22
分類號 G06F16/215;G06F9/50 分類 計算;推算;計數(shù);
發(fā)明人 羅京;潘廣進;何鵬;周禮;劉小林 申請(專利權(quán))人 中國民生銀行股份有限公司
代理機構(gòu) 北京潤澤恒知識產(chǎn)權(quán)代理有限公司 代理人 莎日娜
地址 100031 北京市西城區(qū)復興門內(nèi)大街2號
法律狀態(tài) -

摘要

摘要 本發(fā)明實施例提供了一種數(shù)據(jù)清洗方法、裝置、電子設(shè)備和可讀存儲介質(zhì),所述方法包括:在數(shù)據(jù)處理平臺對業(yè)務數(shù)據(jù)進行清洗之前,獲取所述業(yè)務數(shù)據(jù)的數(shù)據(jù)信息,獲取用戶輸入的針對所述業(yè)務數(shù)據(jù)的數(shù)據(jù)清洗策略,以及獲取用戶根據(jù)當前可用集群資源分配的用于清洗所述業(yè)務數(shù)據(jù)的第一計算資源信息;根據(jù)所述業(yè)務數(shù)據(jù)的數(shù)據(jù)信息確定清洗所述業(yè)務數(shù)據(jù)所需分配的第二計算資源信息;根據(jù)所述數(shù)據(jù)清洗策略,從所述第一計算資源信息和所述第二計算資源信息中確定最優(yōu)計算資源信息;采用所述最優(yōu)計算資源信息申請集群資源后,按照所述集群資源和所述數(shù)據(jù)清洗策略對所述業(yè)務數(shù)據(jù)進行清洗。根據(jù)本發(fā)明實施例,可以避免由于開發(fā)人員導致的計算資源預估失誤問題。