一種易擴(kuò)展可配置的網(wǎng)絡(luò)數(shù)據(jù)收集方法、系統(tǒng)及存儲介質(zhì)
基本信息
| 申請?zhí)?/td> | CN202011231059.3 | 申請日 | - |
| 公開（公告）號 | CN112422332A | 公開（公告）日 | 2021-02-26 |
| 申請公布號 | CN112422332A | 申請公布日 | 2021-02-26 |
| 分類號 | H04L12/24(2006.01)I | 分類 | 電通信技術(shù); |
| 發(fā)明人 | 張德祥;陳棟;孟凡朋;青志力 | 申請（專利權(quán)）人 | 深圳市吉屋網(wǎng)絡(luò)技術(shù)有限公司 |
| 代理機(jī)構(gòu) | 深圳市添源知識產(chǎn)權(quán)代理事務(wù)所（普通合伙） | 代理人 | 羅志偉 |
| 地址 | 518000廣東省深圳市南山區(qū)西麗街道西麗社區(qū)興科一街萬科云城一期七棟C座2404研發(fā)用房 | ||
| 法律狀態(tài) | - | ||
摘要
| 摘要 | 本發(fā)明提供了一種易擴(kuò)展可配置的網(wǎng)絡(luò)數(shù)據(jù)收集方法、系統(tǒng)及存儲介質(zhì)，該網(wǎng)絡(luò)數(shù)據(jù)收集方法包括收集任務(wù)模板配置步驟、模板上傳步驟、記錄入庫步驟、設(shè)置任務(wù)的定時規(guī)則和運(yùn)行機(jī)制步驟、收集任務(wù)生成到總?cè)蝿?wù)表步驟、總?cè)蝿?wù)表的數(shù)據(jù)推送到數(shù)據(jù)庫步驟、工作機(jī)器向主機(jī)請求任務(wù)步驟、判斷步驟和保存步驟。本發(fā)明的有益效果是：1.針對任務(wù)多機(jī)器部署的復(fù)雜性，實現(xiàn)了一種可快捷高效的部署方式，減輕部署和維護(hù)的壓力。2.針對任務(wù)代碼過多的痛點(diǎn)，本發(fā)明通過將數(shù)據(jù)解析方式抽離為單獨(dú)模塊，只需對不同網(wǎng)站配置不同的數(shù)據(jù)解析文件，即可實現(xiàn)網(wǎng)站數(shù)據(jù)的收集存取。?? |
