日志數(shù)據(jù)的處理方法、裝置、系統(tǒng)以及介質(zhì)

基本信息

申請?zhí)?/td> CN202111537067.5 申請日 -
公開（公告）號 CN114168672A 公開（公告）日 2022-03-11
申請公布號 CN114168672A 申請公布日 2022-03-11
分類號 G06F16/25（2019.01）I;G06F16/28（2019.01）I;G06F16/248（2019.01）I;G06F40/174（2020.01）I;G06Q10/06（2012.01）I;G06Q40/08（2012.01）I 分類 計算；推算；計數(shù);
發(fā)明人 周凱;李巍;張榮兵;李康;王健;石林;周政卓;陶華君 申請（專利權(quán)）人 明覺科技（北京）有限公司
代理機構(gòu) 北京奉思知識產(chǎn)權(quán)代理有限公司 代理人 鄒軼鮫;石紅艷
地址 100124北京市朝陽區(qū)高碑店鄉(xiāng)半壁店村惠河南街1008號B座5層5009
法律狀態(tài) -

摘要

摘要 本發(fā)明提供了一種日志數(shù)據(jù)的處理方法、裝置、系統(tǒng)以及介質(zhì)。所述方法包括：獲取步驟，獲取車輛保險的日志數(shù)據(jù)；預(yù)處理步驟，基于服務(wù)類型，利用Flink引擎對獲取的日志數(shù)據(jù)進行預(yù)處理，以生成具有預(yù)定格式的半結(jié)構(gòu)化日志數(shù)據(jù)；結(jié)構(gòu)化處理步驟，根據(jù)日志數(shù)據(jù)的類型，對半結(jié)構(gòu)化日志數(shù)據(jù)進行結(jié)構(gòu)化處理，以將半結(jié)構(gòu)化日志數(shù)據(jù)轉(zhuǎn)換為適于數(shù)據(jù)統(tǒng)計分析的結(jié)構(gòu)化日志數(shù)據(jù)；以及加載步驟，將結(jié)構(gòu)化日志數(shù)據(jù)加載到數(shù)據(jù)庫中。本發(fā)明的上述方法能夠針對車輛保險的日志數(shù)據(jù)能夠進行有效地解析及存儲，從而能夠支持多維度且深層次的報表生成、數(shù)據(jù)分析等數(shù)據(jù)統(tǒng)計業(yè)務(wù)。