應(yīng)用于實(shí)時(shí)大數(shù)據(jù)場(chǎng)景下的數(shù)據(jù)庫系統(tǒng)

基本信息

申請(qǐng)?zhí)?/td> CN201510237342.X 申請(qǐng)日 -
公開（公告）號(hào) CN104834719A 公開（公告）日 2015-08-12
申請(qǐng)公布號(hào) CN104834719A 申請(qǐng)公布日 2015-08-12
分類號(hào) G06F17/30(2006.01)I 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 劉彤 申請(qǐng)（專利權(quán)）人 北京比酷天地文化股份有限公司
代理機(jī)構(gòu) 北京世譽(yù)鑫誠專利代理事務(wù)所（普通合伙） 代理人 北京比酷天地文化股份有限公司
地址 102200 北京市昌平區(qū)科技園區(qū)振興路28號(hào)2號(hào)樓218
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種應(yīng)用于實(shí)時(shí)大數(shù)據(jù)場(chǎng)景下的數(shù)據(jù)庫系統(tǒng)，其特征在于，包括：用于限定抓取數(shù)據(jù)源的范圍，自動(dòng)抓取網(wǎng)頁數(shù)據(jù)，并進(jìn)行內(nèi)容抽取、排重、上下文分析工作的數(shù)據(jù)抓取模塊；用于保存Cookie數(shù)據(jù)、廣告位數(shù)據(jù)和鏈接數(shù)據(jù)的特征數(shù)據(jù)庫模塊；用于對(duì)特征數(shù)據(jù)庫模塊中的數(shù)據(jù)進(jìn)行索引和分片存儲(chǔ)的實(shí)時(shí)數(shù)據(jù)庫模塊；以及用于從實(shí)時(shí)數(shù)據(jù)庫模塊中獲得廣告特征數(shù)據(jù)，與特征數(shù)據(jù)庫模塊中的數(shù)據(jù)進(jìn)行匹配，最終決定是否投放廣告給特定用戶以及投放哪一條廣告給用戶的廣告投放模塊。本發(fā)明的有益之處在于：由于采用了內(nèi)存－SSD－硬盤三級(jí)存儲(chǔ)結(jié)構(gòu)，所以本發(fā)明的系統(tǒng)不僅提供了高速的實(shí)時(shí)數(shù)據(jù)訪問能力，而且能夠有效應(yīng)對(duì)超大規(guī)模的數(shù)據(jù)存儲(chǔ)和容災(zāi)能力。