一種基于數(shù)據(jù)庫物理日志的跨公安邊界的大數(shù)據(jù)傳輸方法

基本信息

申請?zhí)?/td> CN201910623323.9 申請日 -
公開（公告）號 CN110334062A 公開（公告）日 2019-10-15
申請公布號 CN110334062A 申請公布日 2019-10-15
分類號 G06F16/16;G06F16/17 分類 計算；推算；計數(shù);
發(fā)明人 岳湘黔;胡棟;姚傲雪 申請（專利權(quán)）人 深圳物訊科技有限公司
代理機(jī)構(gòu) - 代理人 -
地址 518000 廣東省深圳市粵海街道科技南十二路九洲電器大廈B901室
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種基于數(shù)據(jù)庫物理日志的跨公安邊界的大數(shù)據(jù)傳輸方法，包括如下步驟：oplog導(dǎo)入時間確認(rèn)，oplog文件壓縮、oplog文件掃描和上傳和oplog文件下載和保存；本發(fā)明的有益效果在于，首先，本發(fā)明的大數(shù)據(jù)傳輸方法，通過手工解析MongoDB物理日志，按照時間偏移量，每數(shù)分鐘讀取MongoDB集群的新增物理日志；并針對數(shù)據(jù)可能丟失的情況，實現(xiàn)了同一份數(shù)據(jù)的多次投遞；其次，本發(fā)明的大數(shù)據(jù)傳輸方法通過設(shè)計一個緩沖帶，使得物理日志達(dá)到額度時，會自動導(dǎo)出到指定的緩沖帶，所有的數(shù)據(jù)都從緩沖帶高效的導(dǎo)入到公安內(nèi)網(wǎng)。