一種輿情數(shù)據(jù)處理系統(tǒng)

基本信息

申請?zhí)?/td> CN202011264118.7 申請日 -
公開(公告)號 CN112380852A 公開(公告)日 2021-02-19
申請公布號 CN112380852A 申請公布日 2021-02-19
分類號 G06F40/284(2020.01)I; 分類 計算;推算;計數(shù);
發(fā)明人 齊中祥 申請(專利權(quán))人 沃民高新科技(北京)股份有限公司
代理機構(gòu) 北京知呱呱知識產(chǎn)權(quán)代理有限公司 代理人 丁彥峰
地址 100086北京市海淀區(qū)中關(guān)村大街甲28號海淀文化藝術(shù)大廈B座14層西
法律狀態(tài) -

摘要

摘要 本發(fā)明提供一種輿情數(shù)據(jù)處理系統(tǒng),包括:數(shù)據(jù)規(guī)范化模塊、數(shù)據(jù)倉庫構(gòu)建模塊、存儲及計算引擎選擇模塊;數(shù)據(jù)規(guī)范化模塊用于對系統(tǒng)的數(shù)據(jù)按照統(tǒng)一標(biāo)準(zhǔn)進行規(guī)范化處理;數(shù)據(jù)倉庫構(gòu)建模塊包括ODS層、數(shù)據(jù)明細層、數(shù)據(jù)匯總層和應(yīng)用層;ODS層用于對各類數(shù)據(jù)源的實時消息隊列,離線數(shù)據(jù)的文件進行快照和備份;數(shù)據(jù)明細層用于對備份的數(shù)據(jù)進行實時的維度檢索;數(shù)據(jù)匯總層用于對明細數(shù)據(jù)層的數(shù)據(jù)涉及的共性指標(biāo)進行寬度匯總;應(yīng)用層用于通過RPC框架對外提供服務(wù)。本發(fā)明通過規(guī)范化來縮短研發(fā)時間及精力成本;通過數(shù)據(jù)倉庫的建設(shè),降低使用門檻、統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)、支撐上層更合理的架構(gòu)在使用上構(gòu)建能發(fā)揮到最大性能的場景,從而支撐應(yīng)用層上的快速響應(yīng)。??