一種實時分布式數(shù)據(jù)監(jiān)聽方法

基本信息

申請?zhí)?/td> CN202010910210.X 申請日 -
公開（公告）號 CN112068933A 公開（公告）日 2021-08-10
申請公布號 CN112068933A 申請公布日 2021-08-10
分類號 G06F9/455;G06F11/30;G06F16/2458 分類 計算；推算；計數(shù);
發(fā)明人 朱帥;劉博;張鑫;于開進(jìn) 申請（專利權(quán)）人 成都魚泡科技有限公司
代理機構(gòu) 北京天奇智新知識產(chǎn)權(quán)代理有限公司 代理人 許馳
地址 610000 四川省成都市中國（四川）自由貿(mào)易試驗區(qū)成都高新區(qū)益州大道中段1858號3F
法律狀態(tài) -

摘要

摘要 本發(fā)明提供了一種實時分布式數(shù)據(jù)監(jiān)聽方法，所述方法包括：在掃描階段對所收到的部分事務(wù)數(shù)據(jù)執(zhí)行分類處理。對多個事務(wù)數(shù)據(jù)進(jìn)行統(tǒng)計產(chǎn)生各數(shù)據(jù)項的累計次數(shù)，判斷各數(shù)據(jù)項是否為頻繁項；若確定某項數(shù)據(jù)為頻繁項，將數(shù)據(jù)項及累計次數(shù)寫入分布式區(qū)塊文件；通過分布式區(qū)塊文件記錄所有頻繁項及累計次數(shù)；在分析挖掘階段從分布式區(qū)塊文件中選擇部分頻繁項來建立特定數(shù)量的節(jié)點；根據(jù)分布式區(qū)塊文件判斷否為頻繁序列模式數(shù)據(jù)。本發(fā)明提出了一種實時分布式數(shù)據(jù)監(jiān)聽方法，通過高實時性的應(yīng)用和服務(wù)提高了分布式海量異構(gòu)數(shù)據(jù)的分析挖掘處理性能。