數(shù)據(jù)抓取系統(tǒng)、方法

基本信息

申請?zhí)?/td> CN202011485713.3 申請日 -
公開(公告)號 CN112637049A 公開(公告)日 2021-04-09
申請公布號 CN112637049A 申請公布日 2021-04-09
分類號 H04L12/46(2006.01)I;G06F9/455(2006.01)I;H04L12/64(2006.01)I 分類 電通信技術(shù);
發(fā)明人 石忠民;周錦裕 申請(專利權(quán))人 廣州索答信息科技有限公司
代理機(jī)構(gòu) 廣州市越秀區(qū)哲力專利商標(biāo)事務(wù)所(普通合伙) 代理人 曾令軍
地址 510000廣東省廣州市高新技術(shù)產(chǎn)業(yè)開發(fā)區(qū)科學(xué)城天泰一路1號第四層自編431房
法律狀態(tài) -

摘要

摘要 本發(fā)明提供一種數(shù)據(jù)抓取系統(tǒng)、方法,該數(shù)據(jù)抓取系統(tǒng)包括:服務(wù)器分別與交換機(jī)、客戶端連接;交換機(jī)與撥號網(wǎng)絡(luò)連接,且每個撥號網(wǎng)絡(luò)在交換機(jī)上的對應(yīng)VLAN號不同;服務(wù)器安裝有至少兩個虛擬操作系統(tǒng),服務(wù)器通過虛擬操作系統(tǒng)與撥號網(wǎng)絡(luò)連接,且每個虛擬操作系統(tǒng)連接的撥號網(wǎng)絡(luò)不同,通過撥號網(wǎng)絡(luò)訪問數(shù)據(jù)源;客戶端存儲有動態(tài)IP池,服務(wù)器控制虛擬操作系統(tǒng)根據(jù)動態(tài)IP池中的IP串聯(lián)訪問數(shù)據(jù)源以進(jìn)行數(shù)據(jù)抓取。本發(fā)明通過服務(wù)器上的多個虛擬操作系統(tǒng)分別連接不同的撥號網(wǎng)絡(luò),并利用動態(tài)IP池中的IP進(jìn)行串聯(lián)訪問數(shù)據(jù)源,無需使用多個服務(wù)器擴(kuò)展撥號網(wǎng)絡(luò),減少了服務(wù)運行的成本費用,且能夠?qū)Σ煌逆溄邮褂锰囟ǖ逆溌愤M(jìn)行訪問,提高了數(shù)據(jù)抓取的效率。??