一種毫秒級時序流數(shù)據(jù)精準(zhǔn)切片方法

基本信息

申請?zhí)?/td> CN202110703269.6 申請日 -
公開（公告）號 CN113434547A 公開（公告）日 2021-09-24
申請公布號 CN113434547A 申請公布日 2021-09-24
分類號 G06F16/2455;G06F16/27 分類 計算；推算；計數(shù);
發(fā)明人 王新根;王新宇;黃滔;魯萍;陳偉;史昊宸 申請（專利權(quán)）人 浙江邦盛科技股份有限公司
代理機(jī)構(gòu) 杭州求是專利事務(wù)所有限公司 代理人 劉靜
地址 310012 浙江省杭州市西湖區(qū)西斗門路3號天堂軟件園D幢17層ABCD座
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種毫秒級時序流數(shù)據(jù)精準(zhǔn)切片方法。該方法分為四個部分：精準(zhǔn)切片的創(chuàng)建、精準(zhǔn)切片的聚合、聚合數(shù)據(jù)的持久化存儲和毫秒級切片的查詢。首先對時序流數(shù)據(jù)的處理，包括毫秒級精準(zhǔn)切片的創(chuàng)建以及毫秒級精準(zhǔn)切片內(nèi)聚合計算和存儲，其次是對時序流數(shù)據(jù)的查詢。本發(fā)明提出的毫秒級時序流數(shù)據(jù)精準(zhǔn)切片方法能夠在毫秒級時間范圍內(nèi)精準(zhǔn)地實(shí)時處理用戶流式數(shù)據(jù)，利用不同時序下的切片聚合技術(shù)提升系統(tǒng)吞吐量和應(yīng)對海量數(shù)據(jù)的高可用性，并根據(jù)時間局部性原則將切片聚合數(shù)據(jù)存入分布式數(shù)據(jù)庫從而高效利用內(nèi)存空間，最后優(yōu)化設(shè)計了針對時序流數(shù)據(jù)的查詢接口。