用于垃圾回收的全流程管理方法、系統(tǒng)和可讀存儲(chǔ)介質(zhì)

基本信息

申請(qǐng)?zhí)?/td> CN202110985709.1 申請(qǐng)日 -
公開（公告）號(hào) CN113779007A 公開（公告）日 2021-12-10
申請(qǐng)公布號(hào) CN113779007A 申請(qǐng)公布日 2021-12-10
分類號(hào) G06F16/215（2019.01）I;G06F16/22（2019.01）I;G06F16/28（2019.01）I;G06F16/25（2019.01）I;G06F16/23（2019.01）I;G06Q10/06（2012.01）I;G06Q10/00（2012.01）I;G06Q50/26（2012.01）I 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 唐偉忠;王紅軍;高姍姍 申請(qǐng)（專利權(quán)）人 浙江虎哥數(shù)字科技有限公司
代理機(jī)構(gòu) 杭州華知專利事務(wù)所（普通合伙） 代理人 束曉前
地址 311100浙江省杭州市余杭區(qū)良渚街道莫干山路2602號(hào)5幢
法律狀態(tài) -

摘要

摘要 本發(fā)明公開的一種用于垃圾回收的全流程管理方法、系統(tǒng)和可讀存儲(chǔ)介質(zhì)，其中所述系統(tǒng)包括：數(shù)據(jù)治理模塊，用于構(gòu)建非標(biāo)數(shù)據(jù)的標(biāo)準(zhǔn)化、統(tǒng)一化、準(zhǔn)確化以及復(fù)用化；數(shù)據(jù)計(jì)算模塊，用于采用Spark作為數(shù)據(jù)計(jì)算核心，結(jié)合Hadoop集群的分布式存儲(chǔ)與計(jì)算來(lái)實(shí)現(xiàn)對(duì)數(shù)據(jù)的運(yùn)算；數(shù)據(jù)存儲(chǔ)模塊，用于按照數(shù)據(jù)類型對(duì)各業(yè)務(wù)數(shù)據(jù)進(jìn)行分類存儲(chǔ)；數(shù)據(jù)資產(chǎn)模塊，用于提供支持服務(wù)以支撐各種數(shù)據(jù)的應(yīng)用以及拓展服務(wù)接口；數(shù)據(jù)共享模塊，用于提供外部需求數(shù)據(jù)的API接口。本發(fā)明將非標(biāo)的垃圾數(shù)據(jù)采用統(tǒng)一標(biāo)準(zhǔn)、標(biāo)簽等進(jìn)行存儲(chǔ)，降低人員學(xué)習(xí)成本，提高數(shù)據(jù)的復(fù)用性，減少重復(fù)開發(fā)量，通過(guò)數(shù)據(jù)共享實(shí)現(xiàn)不同業(yè)務(wù)需求的輸入和API的開發(fā)、監(jiān)控及維護(hù)，并且在出現(xiàn)異常時(shí)可以及時(shí)報(bào)警。