一種基于HBase的卡口數(shù)據(jù)處理方法

基本信息

申請?zhí)?/td> CN201410284598.1 申請日 -
公開（公告）號 CN104050271A 公開（公告）日 2014-09-17
申請公布號 CN104050271A 申請公布日 2014-09-17
分類號 G06F17/30(2006.01)I 分類 計算；推算；計數(shù);
發(fā)明人 周海波;鄭兆妙;蔡懿博 申請（專利權(quán)）人 桂林長?？萍加邢挢?zé)任公司
代理機構(gòu) 北京輕創(chuàng)知識產(chǎn)權(quán)代理有限公司 代理人 楊立
地址 541001 廣西壯族自治區(qū)桂林市秀峰區(qū)長海路3號
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及一種基于HBase的卡口數(shù)據(jù)處理方法，包括獲取待存儲的數(shù)據(jù)記錄，判斷數(shù)據(jù)量大小，如果是少量臨時性數(shù)據(jù)，將少量臨時性數(shù)據(jù)通過關(guān)系數(shù)據(jù)庫SQL?server進行存儲；如果是海量數(shù)據(jù)，判斷海量數(shù)據(jù)的結(jié)構(gòu)狀態(tài)，如果為結(jié)構(gòu)化數(shù)據(jù)，通過分布式數(shù)據(jù)庫Hbase進行存儲，如果為非結(jié)構(gòu)化數(shù)據(jù)，通過文件系統(tǒng)HDFS進行存儲。相對現(xiàn)有技術(shù)，本發(fā)明可以快速訪問數(shù)據(jù)，提升數(shù)據(jù)處理效率，解決海量數(shù)據(jù)處理難題。