數(shù)據(jù)抓取系統(tǒng)、方法
基本信息
申請?zhí)?/td> | CN202011485713.3 | 申請日 | - |
公開(公告)號 | CN112637049A | 公開(公告)日 | 2021-04-09 |
申請公布號 | CN112637049A | 申請公布日 | 2021-04-09 |
分類號 | H04L12/46(2006.01)I;G06F9/455(2006.01)I;H04L12/64(2006.01)I | 分類 | 電通信技術(shù); |
發(fā)明人 | 石忠民;周錦裕 | 申請(專利權(quán))人 | 廣州索答信息科技有限公司 |
代理機(jī)構(gòu) | 廣州市越秀區(qū)哲力專利商標(biāo)事務(wù)所(普通合伙) | 代理人 | 曾令軍 |
地址 | 510000廣東省廣州市高新技術(shù)產(chǎn)業(yè)開發(fā)區(qū)科學(xué)城天泰一路1號第四層自編431房 | ||
法律狀態(tài) | - |
摘要
摘要 | 本發(fā)明提供一種數(shù)據(jù)抓取系統(tǒng)、方法,該數(shù)據(jù)抓取系統(tǒng)包括:服務(wù)器分別與交換機(jī)、客戶端連接;交換機(jī)與撥號網(wǎng)絡(luò)連接,且每個撥號網(wǎng)絡(luò)在交換機(jī)上的對應(yīng)VLAN號不同;服務(wù)器安裝有至少兩個虛擬操作系統(tǒng),服務(wù)器通過虛擬操作系統(tǒng)與撥號網(wǎng)絡(luò)連接,且每個虛擬操作系統(tǒng)連接的撥號網(wǎng)絡(luò)不同,通過撥號網(wǎng)絡(luò)訪問數(shù)據(jù)源;客戶端存儲有動態(tài)IP池,服務(wù)器控制虛擬操作系統(tǒng)根據(jù)動態(tài)IP池中的IP串聯(lián)訪問數(shù)據(jù)源以進(jìn)行數(shù)據(jù)抓取。本發(fā)明通過服務(wù)器上的多個虛擬操作系統(tǒng)分別連接不同的撥號網(wǎng)絡(luò),并利用動態(tài)IP池中的IP進(jìn)行串聯(lián)訪問數(shù)據(jù)源,無需使用多個服務(wù)器擴(kuò)展撥號網(wǎng)絡(luò),減少了服務(wù)運行的成本費用,且能夠?qū)Σ煌逆溄邮褂锰囟ǖ逆溌愤M(jìn)行訪問,提高了數(shù)據(jù)抓取的效率。?? |
