一種基于分布式爬蟲技術(shù)的政策資訊采集管理系統(tǒng)

基本信息

申請?zhí)?/td> CN201911095926.2 申請日 -
公開（公告）號 CN111030994A 公開（公告）日 2020-04-17
申請公布號 CN111030994A 申請公布日 2020-04-17
分類號 H04L29/06;H04L9/08;H04L9/06 分類 電通信技術(shù);
發(fā)明人 侯林勇;張亮;方程;劉婉瑩;袁率;楊坤;李亞萍;王俊 申請（專利權(quán)）人 貴州小叮當信息技術(shù)有限公司
代理機構(gòu) 重慶百潤洪知識產(chǎn)權(quán)代理有限公司 代理人 貴州小叮當信息技術(shù)有限公司
地址 550008 貴州省貴陽市國家高新技術(shù)產(chǎn)業(yè)開發(fā)區(qū)科技產(chǎn)業(yè)園標準廠房輔助用房B303室
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種基于分布式爬蟲技術(shù)的政策資訊采集管理系統(tǒng)，包括政策資訊數(shù)據(jù)采集單元、數(shù)據(jù)預處理單元、數(shù)據(jù)特征提取單元、控制單元和網(wǎng)絡(luò)爬蟲系統(tǒng)，政策資訊數(shù)據(jù)采集單元輸入端連接網(wǎng)絡(luò)爬蟲系統(tǒng)，輸出端通過數(shù)據(jù)預處理單元連接數(shù)據(jù)特征提取單元，數(shù)據(jù)特征提取單元連接控制單元，控制單元分別連接數(shù)據(jù)加密單元、數(shù)據(jù)存儲單元，控制單元通過數(shù)傳單元連接后臺管理終端，本發(fā)明通過分布式爬蟲技術(shù)能夠?qū)崿F(xiàn)對政策資訊的精確采集，同時能夠?qū)崿F(xiàn)對數(shù)據(jù)的特征提取、加密，還能夠?qū)崿F(xiàn)對數(shù)據(jù)的加密傳輸，確保了管理系統(tǒng)的安全性。