一種基于大數(shù)據(jù)建模的BI應(yīng)用系統(tǒng)

基本信息

申請?zhí)?/td> CN201911360296.7 申請日 -
公開（公告）號 CN111126852A 公開（公告）日 2020-05-08
申請公布號 CN111126852A 申請公布日 2020-05-08
分類號 G06Q10/06;G06F8/20;G06F16/21;G06F16/215;G06F16/2458 分類 計算；推算；計數(shù);
發(fā)明人 陸洋 申請（專利權(quán)）人 江蘇三六五網(wǎng)絡(luò)股份有限公司
代理機構(gòu) 南京常青藤知識產(chǎn)權(quán)代理有限公司 代理人 仲暉
地址 210000 江蘇省南京市新城科技園云龍山路99號省建大廈B座16樓
法律狀態(tài) -

摘要

摘要 本發(fā)明提供一種基于大數(shù)據(jù)建模的BI應(yīng)用系統(tǒng)，包括：數(shù)據(jù)采集存儲模塊，DPI、業(yè)務(wù)側(cè)、網(wǎng)元側(cè)數(shù)據(jù)通過文件接口方式發(fā)送到Flume?NG集群，將接收到的數(shù)據(jù)實時的通過hdfs方式匯聚到大數(shù)據(jù)分析平臺；數(shù)據(jù)清洗模塊，通過編寫HQL腳本對數(shù)據(jù)進行清洗、轉(zhuǎn)換，形成特征寬表；數(shù)據(jù)挖掘模塊，基于特征寬表的數(shù)據(jù)建模進行模型開發(fā)、模型評估和模型應(yīng)用；分析結(jié)果發(fā)布，模型應(yīng)用的結(jié)果集存儲在HBase中，數(shù)據(jù)的調(diào)用通過HBase API實現(xiàn)，數(shù)據(jù)的展現(xiàn)通過ECharts技術(shù)實現(xiàn)。本發(fā)明統(tǒng)一進行數(shù)據(jù)建模，建設(shè)集中的數(shù)據(jù)處理中心，提供強大的數(shù)據(jù)處理能力，保障系統(tǒng)的穩(wěn)定運行，構(gòu)建統(tǒng)一的BI應(yīng)用中心，滿足業(yè)務(wù)需求，體現(xiàn)數(shù)據(jù)價值。