一種基于分布式數(shù)據(jù)庫(kù)消息數(shù)據(jù)管理方法及系統(tǒng)

基本信息

申請(qǐng)?zhí)?/td> CN201510750569.4 申請(qǐng)日 -
公開(kāi)(公告)號(hào) CN105426442A 公開(kāi)(公告)日 2016-03-23
申請(qǐng)公布號(hào) CN105426442A 申請(qǐng)公布日 2016-03-23
分類號(hào) G06F17/30(2006.01)I 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 林浩 申請(qǐng)(專利權(quán))人 廣東湛數(shù)大數(shù)據(jù)有限公司
代理機(jī)構(gòu) 廣東廣和律師事務(wù)所 代理人 努比亞技術(shù)有限公司;廣東湛數(shù)大數(shù)據(jù)有限公司
地址 518000 廣東省深圳市南山區(qū)高新區(qū)北環(huán)大道9018號(hào)大族創(chuàng)新大廈A區(qū)6-8層、10-11層、B區(qū)6層、C區(qū)6-10層
法律狀態(tài) -

摘要

摘要 本發(fā)明公開(kāi)了一種基于分布式數(shù)據(jù)庫(kù)消息數(shù)據(jù)管理方法及系統(tǒng),所述方法包括:基于分布式數(shù)據(jù)庫(kù),利用數(shù)據(jù)庫(kù)對(duì)象集合設(shè)計(jì)對(duì)結(jié)構(gòu)化消息數(shù)據(jù)進(jìn)行存儲(chǔ)的步驟、通過(guò)數(shù)據(jù)塊的方式對(duì)非結(jié)構(gòu)化消息數(shù)據(jù)進(jìn)行存儲(chǔ)的步驟、通過(guò)主鍵方式對(duì)結(jié)構(gòu)化消息數(shù)據(jù)進(jìn)行查詢的步驟、通過(guò)過(guò)濾器方式對(duì)非結(jié)構(gòu)化消息數(shù)據(jù)進(jìn)行查詢的步驟。本發(fā)明采用Hadoop和HBase作為底層存儲(chǔ)支撐技術(shù),利用它們的高擴(kuò)展性以支持大型消息數(shù)據(jù)高性能存儲(chǔ)管理,克服了現(xiàn)有RDBMS管理消息數(shù)據(jù)技術(shù)無(wú)法支持大并發(fā)快速讀寫的不足,同時(shí)可存儲(chǔ)管理數(shù)據(jù)類型包括了結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù),滿足了具有大數(shù)據(jù)、時(shí)序性強(qiáng)、結(jié)構(gòu)簡(jiǎn)單等特點(diǎn)的消息系統(tǒng)的數(shù)據(jù)管理需求。