一種基于數(shù)據(jù)挖掘技術(shù)的輿情監(jiān)測(cè)系統(tǒng)

基本信息

申請(qǐng)?zhí)?/td> CN201610507203.9 申請(qǐng)日 -
公開(kāi)(公告)號(hào) CN106202278B 公開(kāi)(公告)日 2019-08-13
申請(qǐng)公布號(hào) CN106202278B 申請(qǐng)公布日 2019-08-13
分類(lèi)號(hào) G06F16/951 分類(lèi) 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 劉麗君;李成華 申請(qǐng)(專(zhuān)利權(quán))人 武漢泰迪智慧科技有限公司
代理機(jī)構(gòu) 武漢智嘉聯(lián)合知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 代理人 武漢泰迪智慧科技有限公司
地址 430000 湖北省武漢市東湖新技術(shù)開(kāi)發(fā)區(qū)高新大道999號(hào)A5北2-509
法律狀態(tài) -

摘要

摘要 一種基于數(shù)據(jù)挖掘技術(shù)的輿情監(jiān)測(cè)系統(tǒng),包括:數(shù)據(jù)獲取單元,用于通過(guò)網(wǎng)絡(luò)爬蟲(chóng)程序爬取互聯(lián)網(wǎng)輿情初始數(shù)據(jù);分片單元,用于將互聯(lián)網(wǎng)輿情初始數(shù)據(jù)進(jìn)行輸入分片;計(jì)算單元,用于合并中間文件中的重復(fù)鍵值,以降低映射輸出文件冗余;緩存單元,用于在內(nèi)存中開(kāi)辟環(huán)形內(nèi)存緩沖區(qū),環(huán)形內(nèi)存緩沖區(qū)用于映射輸出文件輸出;輸出單元,用于將所有的映射輸出文件并存儲(chǔ)到分布式文件存儲(chǔ)系統(tǒng)上;建模單元,用于建立網(wǎng)絡(luò)輿情預(yù)測(cè)模型;預(yù)測(cè)單元,用于從分布式文件存儲(chǔ)系統(tǒng)上讀取映射輸出文件并通過(guò)網(wǎng)絡(luò)輿情預(yù)測(cè)模型進(jìn)行輿情預(yù)測(cè)。