一種主機(jī)運(yùn)維分析方法
基本信息
申請?zhí)?/td> | CN201810123762.9 | 申請日 | - |
公開(公告)號 | CN110119343A | 公開(公告)日 | 2019-08-13 |
申請公布號 | CN110119343A | 申請公布日 | 2019-08-13 |
分類號 | G06F11/34 | 分類 | 計算;推算;計數(shù); |
發(fā)明人 | 沈杰華 | 申請(專利權(quán))人 | 上海鼎茂信息技術(shù)有限公司 |
代理機(jī)構(gòu) | 上海宏京知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) | 代理人 | 上海鼎茂信息技術(shù)有限公司 |
地址 | 201501 上海市金山區(qū)楓涇商城芙蓉一村6號樓206室 | ||
法律狀態(tài) | - |
摘要
摘要 | 本發(fā)明涉及一種主機(jī)運(yùn)維分析方法,服務(wù)器包括數(shù)據(jù)采集模塊、實時流處理模塊、數(shù)據(jù)存儲檢索分析模塊、WEB服務(wù)模塊,數(shù)據(jù)采集模塊包括Flume數(shù)據(jù)采集傳輸模塊、Kafka數(shù)據(jù)采集分發(fā)模塊,包括過程:Flume數(shù)據(jù)采集傳輸模塊采集主機(jī)的SMF數(shù)據(jù)、日志類數(shù)據(jù)經(jīng)聚合后傳輸給HDFS分布式文件系統(tǒng),Kafka數(shù)據(jù)采集分發(fā)模塊將收到的數(shù)據(jù)經(jīng)實時流處理后傳送給HBase數(shù)據(jù)庫,數(shù)據(jù)存儲檢索分析模塊將收到的主機(jī)運(yùn)維數(shù)據(jù)進(jìn)行分析、整理后創(chuàng)建數(shù)據(jù)搜索引擎供WEB服務(wù)模塊調(diào)取使用。本發(fā)明采用Flume結(jié)合Kafka的數(shù)據(jù)采集和分發(fā)模式,具有數(shù)據(jù)整合以及運(yùn)維效率高的特點(diǎn)。 |
