用于垃圾回收的全流程管理方法、系統(tǒng)和可讀存儲介質(zhì)

基本信息

申請?zhí)?/td> CN202110985709.1 申請日 -
公開(公告)號 CN113779007A 公開(公告)日 2021-12-10
申請公布號 CN113779007A 申請公布日 2021-12-10
分類號 G06F16/215(2019.01)I;G06F16/22(2019.01)I;G06F16/28(2019.01)I;G06F16/25(2019.01)I;G06F16/23(2019.01)I;G06Q10/06(2012.01)I;G06Q10/00(2012.01)I;G06Q50/26(2012.01)I 分類 計算;推算;計數(shù);
發(fā)明人 唐偉忠;王紅軍;高姍姍 申請(專利權)人 浙江虎哥數(shù)字科技有限公司
代理機構 杭州華知專利事務所(普通合伙) 代理人 束曉前
地址 311100浙江省杭州市余杭區(qū)良渚街道莫干山路2602號5幢
法律狀態(tài) -

摘要

摘要 本發(fā)明公開的一種用于垃圾回收的全流程管理方法、系統(tǒng)和可讀存儲介質(zhì),其中所述系統(tǒng)包括:數(shù)據(jù)治理模塊,用于構建非標數(shù)據(jù)的標準化、統(tǒng)一化、準確化以及復用化;數(shù)據(jù)計算模塊,用于采用Spark作為數(shù)據(jù)計算核心,結合Hadoop集群的分布式存儲與計算來實現(xiàn)對數(shù)據(jù)的運算;數(shù)據(jù)存儲模塊,用于按照數(shù)據(jù)類型對各業(yè)務數(shù)據(jù)進行分類存儲;數(shù)據(jù)資產(chǎn)模塊,用于提供支持服務以支撐各種數(shù)據(jù)的應用以及拓展服務接口;數(shù)據(jù)共享模塊,用于提供外部需求數(shù)據(jù)的API接口。本發(fā)明將非標的垃圾數(shù)據(jù)采用統(tǒng)一標準、標簽等進行存儲,降低人員學習成本,提高數(shù)據(jù)的復用性,減少重復開發(fā)量,通過數(shù)據(jù)共享實現(xiàn)不同業(yè)務需求的輸入和API的開發(fā)、監(jiān)控及維護,并且在出現(xiàn)異常時可以及時報警。