一種數(shù)據(jù)抓取方法及系統(tǒng)

基本信息

申請?zhí)?/td> 2020110985772 申請日 -
公開（公告）號 CN112256940A 公開（公告）日 2021-01-22
申請公布號 CN112256940A 申請公布日 2021-01-22
分類號 G06F16/951(2019.01)I 分類 計算；推算；計數(shù);
發(fā)明人 熊濤;房輝 申請（專利權(quán)）人 深圳市天維大數(shù)據(jù)技術(shù)有限公司
代理機構(gòu) 成都魚爪智云知識產(chǎn)權(quán)代理有限公司 代理人 趙晨宇
地址 518000廣東省深圳市羅湖區(qū)桂園街道寶安南路3083號蔡屋圍發(fā)展大廈205#
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種數(shù)據(jù)抓取方法，包括以下步驟：獲取并發(fā)送數(shù)據(jù)抓取請求；根據(jù)數(shù)據(jù)抓取請求生成并發(fā)送數(shù)據(jù)抓取規(guī)則；根據(jù)數(shù)據(jù)抓取規(guī)則建立數(shù)據(jù)抓取任務(wù)；根據(jù)數(shù)據(jù)抓取任務(wù)設(shè)定一個或多個數(shù)據(jù)抓取節(jié)點；將數(shù)據(jù)抓取任務(wù)下發(fā)到各個數(shù)據(jù)抓取節(jié)點，通過數(shù)據(jù)抓取節(jié)點抓取數(shù)據(jù)，并將抓取的數(shù)據(jù)發(fā)送至終端。本發(fā)明還公開了一種數(shù)據(jù)抓取系統(tǒng)。本發(fā)明具有可對數(shù)據(jù)進(jìn)行準(zhǔn)確抓取，保證數(shù)據(jù)抓取精確度，提高數(shù)據(jù)抓取效率優(yōu)點。??