一種日志實(shí)時(shí)分析方法及系統(tǒng)

基本信息

申請(qǐng)?zhí)?/td> CN201610460349.2 申請(qǐng)日 -
公開(kāi)（公告）號(hào) CN106055703B 公開(kāi)（公告）日 2020-01-14
申請(qǐng)公布號(hào) CN106055703B 申請(qǐng)公布日 2020-01-14
分類號(hào) G06F16/18（2019.01）; G06F16/21（2019.01） 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 魏瑋 申請(qǐng)（專利權(quán)）人 北京科摩仕捷科技有限公司
代理機(jī)構(gòu) 北京市盛峰律師事務(wù)所 代理人 北京科摩仕捷科技有限公司
地址 100080 北京市海淀區(qū)丹棱街3號(hào)B座11層1115、1116
法律狀態(tài) -

摘要

摘要 本發(fā)明公開(kāi)了一種日志實(shí)時(shí)分析方法及系統(tǒng)，涉及數(shù)據(jù)處理領(lǐng)域。所述方法：日志解析客戶端判斷當(dāng)前工作節(jié)點(diǎn)為已注冊(cè)節(jié)點(diǎn)，獲取當(dāng)前工作節(jié)點(diǎn)需要分析的日志目錄；判斷所述日志目錄下存在更新的日志文件，啟動(dòng)線程池并發(fā)更新日志文件的解析，按照系統(tǒng)標(biāo)示進(jìn)行數(shù)據(jù)垂直拆分后存儲(chǔ)到不同的數(shù)據(jù)表中，最后將所述數(shù)據(jù)表存儲(chǔ)到日志數(shù)據(jù)庫(kù)中。所述系統(tǒng)包括：日志記錄模塊和日志分析模塊。本發(fā)明在不影響實(shí)時(shí)監(jiān)控功能的前提下，降低日志存儲(chǔ)量；從系統(tǒng)方法的執(zhí)行，到能從界面反映出執(zhí)行結(jié)果的變化，中間的耗時(shí)要小于1分鐘；監(jiān)控系統(tǒng)可水平擴(kuò)展，只要簡(jiǎn)單的部署就可以完成性能擴(kuò)展。