海量數(shù)據(jù)處理方法及其系統(tǒng)

基本信息

申請?zhí)?/td> CN201711009275.1 申請日 -
公開（公告）號 CN107861723A 公開（公告）日 2018-03-30
申請公布號 CN107861723A 申請公布日 2018-03-30
分類號 G06F8/41;G06F8/61 分類 計算；推算；計數(shù);
發(fā)明人 官輝;顧正;范長春 申請（專利權）人 深圳市華成峰科技有限公司
代理機構 深圳市精英專利事務所 代理人 深圳市華成峰科技有限公司
地址 518000 廣東省深圳市南山區(qū)高新南七道16號德維森大廈五樓
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及海量數(shù)據(jù)處理方法及其系統(tǒng)，該方法包括配置Protocol Buffer運行環(huán)境；獲取海量數(shù)據(jù)，構建Protocol Buffer消息對象的模型；將模型應用至具體平臺，獲取海量數(shù)據(jù)處理結果。本發(fā)明通過設置Protocol Buffer，形成對需要存儲的數(shù)據(jù)進行處理，轉換為與應用平臺對應的代碼文件，植入平臺的項目內，進行序列化處理，形成海量數(shù)據(jù)處理結果，編譯過程利用cli對象以及后端代碼生成器實現(xiàn)快速完成數(shù)據(jù)格式的轉換，序列化過程采用位移的方式節(jié)約消息本身的大小，位移運算過程簡單，實現(xiàn)高效處理海量數(shù)據(jù)，文件格式簡單，文件小，無需使用大量代碼解析，服務器端與客戶端的代碼易于維護且兼容性好。