一種基于消息隊(duì)列的數(shù)據(jù)處理方法、裝置、計算機(jī)設(shè)備和存儲介質(zhì)

基本信息

申請?zhí)?/td> CN202110910953.1 申請日 -
公開（公告）號 CN113609429A 公開（公告）日 2021-11-05
申請公布號 CN113609429A 申請公布日 2021-11-05
分類號 G06F16/958（2019.01）I 分類 計算；推算；計數(shù);
發(fā)明人 曾文清;劉翔;虞孝偉 申請（專利權(quán)）人 廣州至真信息科技有限公司
代理機(jī)構(gòu) 廣州佳睿知識產(chǎn)權(quán)代理事務(wù)所（普通合伙） 代理人 徐燕萍
地址 510000廣東省廣州市天河區(qū)建工路4號5樓（僅限辦公用途）
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及一種基于消息隊(duì)列的數(shù)據(jù)處理方法、裝置、計算機(jī)設(shè)備和存儲介質(zhì)，該方法包括：服務(wù)端獲取待統(tǒng)計網(wǎng)站在預(yù)設(shè)周期內(nèi)的各頁面瀏覽量、各頁面點(diǎn)擊量的動作流數(shù)據(jù)總量；服務(wù)端根據(jù)各頁面瀏覽量以及各頁面點(diǎn)擊量，獲取消息隊(duì)列主題名稱；將消息隊(duì)列主題名稱，以及動作流數(shù)據(jù)總量與預(yù)設(shè)抽樣統(tǒng)計規(guī)則進(jìn)行匹配，得到匹配的數(shù)據(jù)壓縮比例；根據(jù)該數(shù)據(jù)壓縮比例，對動作流數(shù)據(jù)總量執(zhí)行數(shù)據(jù)抽樣，得到統(tǒng)計結(jié)果數(shù)據(jù)發(fā)送到消費(fèi)端；消費(fèi)端接收統(tǒng)計結(jié)果數(shù)據(jù)，根據(jù)結(jié)果數(shù)據(jù)中的數(shù)據(jù)壓縮比例復(fù)原統(tǒng)計結(jié)果數(shù)據(jù)，并存儲在預(yù)設(shè)數(shù)據(jù)庫中。實(shí)現(xiàn)對動作流數(shù)據(jù)實(shí)時分析和處理，從而減少消息隊(duì)列生產(chǎn)和消費(fèi)數(shù)據(jù)的量級，達(dá)到降低成本的效果。