用于安全產(chǎn)業(yè)鏈的智能垂直搜索裝置和方法

基本信息

申請?zhí)?/td> CN201410078014.5 申請日 -
公開（公告）號 CN103886033B 公開（公告）日 2017-02-08
申請公布號 CN103886033B 申請公布日 2017-02-08
分類號 G06F17/30(2006.01)I;G06F9/46(2006.01)I 分類 計算；推算；計數(shù);
發(fā)明人 劉欣毅;李昂生 申請（專利權(quán)）人 北京洞悉網(wǎng)絡(luò)有限公司
代理機(jī)構(gòu) 北京中恒高博知識產(chǎn)權(quán)代理有限公司 代理人 無錫香象生物科技有限公司;北京洞悉網(wǎng)絡(luò)有限公司
地址 214000 江蘇省無錫市錫山經(jīng)濟(jì)開發(fā)區(qū)芙蓉中三路99號瑞云5座502室
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種用于安全產(chǎn)業(yè)鏈的智能垂直搜索裝置和方法，用于安全產(chǎn)業(yè)鏈的智能垂直搜索裝置包括，爬行器引擎即搜索器引擎；調(diào)度；下載器：下載器抓取網(wǎng)頁并將網(wǎng)頁內(nèi)容返還給蜘蛛；蜘蛛：蜘蛛是爬行器用戶自己定義用來解析網(wǎng)頁并抓取制定URL返回的內(nèi)容的類，每個蜘蛛能處理一個域名或一組域名，即用來定義特定網(wǎng)站的抓取和解析規(guī)則；搜素因子庫；項目管道；下載器中間件；蜘蛛中間件；調(diào)度中間件：調(diào)度中間件是介于爬行器引擎和調(diào)度之間的中間件，負(fù)責(zé)處理從爬行器引擎發(fā)送到調(diào)度的請求和響應(yīng)，并提供了一個自定義的代碼來拓展爬行器的功能。實現(xiàn)可靠、準(zhǔn)確、實時且智能搜索的優(yōu)點。