一種主機(jī)運(yùn)維分析方法

基本信息

申請?zhí)?/td> CN201810123762.9 申請日 -
公開(公告)號 CN110119343A 公開(公告)日 2019-08-13
申請公布號 CN110119343A 申請公布日 2019-08-13
分類號 G06F11/34 分類 計算;推算;計數(shù);
發(fā)明人 沈杰華 申請(專利權(quán))人 上海鼎茂信息技術(shù)有限公司
代理機(jī)構(gòu) 上海宏京知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 代理人 上海鼎茂信息技術(shù)有限公司
地址 201501 上海市金山區(qū)楓涇商城芙蓉一村6號樓206室
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及一種主機(jī)運(yùn)維分析方法,服務(wù)器包括數(shù)據(jù)采集模塊、實時流處理模塊、數(shù)據(jù)存儲檢索分析模塊、WEB服務(wù)模塊,數(shù)據(jù)采集模塊包括Flume數(shù)據(jù)采集傳輸模塊、Kafka數(shù)據(jù)采集分發(fā)模塊,包括過程:Flume數(shù)據(jù)采集傳輸模塊采集主機(jī)的SMF數(shù)據(jù)、日志類數(shù)據(jù)經(jīng)聚合后傳輸給HDFS分布式文件系統(tǒng),Kafka數(shù)據(jù)采集分發(fā)模塊將收到的數(shù)據(jù)經(jīng)實時流處理后傳送給HBase數(shù)據(jù)庫,數(shù)據(jù)存儲檢索分析模塊將收到的主機(jī)運(yùn)維數(shù)據(jù)進(jìn)行分析、整理后創(chuàng)建數(shù)據(jù)搜索引擎供WEB服務(wù)模塊調(diào)取使用。本發(fā)明采用Flume結(jié)合Kafka的數(shù)據(jù)采集和分發(fā)模式,具有數(shù)據(jù)整合以及運(yùn)維效率高的特點(diǎn)。