一種高性能的海量數(shù)據(jù)同步方法及裝置

基本信息

申請?zhí)?/td> 2020111602965 申請日 -
公開(公告)號 CN112269831A 公開(公告)日 2021-01-26
申請公布號 CN112269831A 申請公布日 2021-01-26
分類號 G06F16/27(2019.01)I; 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 蔡永亮;廖陽春;鄭廣彬 申請(專利權(quán))人 廣州助蜂網(wǎng)絡(luò)科技有限公司
代理機(jī)構(gòu) 廣州睿金澤專利代理事務(wù)所(普通合伙) 代理人 宋偉文
地址 510635廣東省廣州市天河區(qū)龍口橫街28號東塔26樓自編2601單元
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種高性能的海量數(shù)據(jù)同步方法,包括:獲取物聯(lián)網(wǎng)卡的過去狀態(tài)數(shù)據(jù);根據(jù)所述過去狀態(tài)數(shù)據(jù),配置數(shù)據(jù)同步策略;根據(jù)所述過去狀態(tài)數(shù)據(jù)和數(shù)據(jù)同步策略,計(jì)算同步頻率,得到同步頻率列表;根據(jù)所述同步頻率列表,通過運(yùn)營商接口獲取所述物聯(lián)網(wǎng)卡的實(shí)時(shí)狀態(tài)數(shù)據(jù);所述實(shí)時(shí)狀態(tài)數(shù)據(jù)通過Redis進(jìn)行數(shù)據(jù)過濾,將過濾后的所述實(shí)時(shí)狀態(tài)數(shù)據(jù)寫入數(shù)據(jù)庫。還公開了使用該方法的一種裝置。本發(fā)明通過配置不同的同步策略和緩沖策略,提高數(shù)據(jù)的同步效率、靈活性和實(shí)時(shí)性,大幅度降低同步數(shù)據(jù)對業(yè)務(wù)系統(tǒng)和數(shù)據(jù)庫的壓力。??