基于瀏覽器的數(shù)據(jù)獲取方法、裝置和系統(tǒng)
基本信息
申請(qǐng)?zhí)?/td> | CN202110965104.6 | 申請(qǐng)日 | - |
公開(kāi)(公告)號(hào) | CN113742550A | 公開(kāi)(公告)日 | 2021-12-03 |
申請(qǐng)公布號(hào) | CN113742550A | 申請(qǐng)公布日 | 2021-12-03 |
分類(lèi)號(hào) | G06F16/951(2019.01)I;G06F16/958(2019.01)I;G06F8/30(2018.01)I | 分類(lèi) | 計(jì)算;推算;計(jì)數(shù); |
發(fā)明人 | 揭鵬;萬(wàn)友先;李文輝;張?chǎng)?陳帥 | 申請(qǐng)(專利權(quán))人 | 廣州市易工品科技有限公司 |
代理機(jī)構(gòu) | 廣州智斧知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) | 代理人 | 孔德超 |
地址 | 510000廣東省廣州市海珠區(qū)閱江中路686號(hào)410 | ||
法律狀態(tài) | - |
摘要
摘要 | 本發(fā)明實(shí)施例涉及信息獲取技術(shù)領(lǐng)域,公開(kāi)了一種基于瀏覽器的數(shù)據(jù)獲取方法、裝置和系統(tǒng)。該方法包括:使用WebKit創(chuàng)建瀏覽器,并編寫(xiě)自動(dòng)化js腳本,存儲(chǔ)到目標(biāo)文件夾目錄中;接收目標(biāo)任務(wù),并基于所述目標(biāo)任務(wù)使所述瀏覽器跳轉(zhuǎn)至目標(biāo)頁(yè)面;根據(jù)所述目標(biāo)任務(wù)調(diào)取目標(biāo)js腳本獲取第一數(shù)據(jù);對(duì)所述第一數(shù)據(jù)進(jìn)行解析和清洗,得到目標(biāo)數(shù)據(jù)并入庫(kù);返回目標(biāo)任務(wù)結(jié)果狀態(tài)。實(shí)施本發(fā)明實(shí)施例,可以通過(guò)自制WebKit瀏覽器以及自動(dòng)化js腳本,快速自動(dòng)爬取相關(guān)數(shù)據(jù)。 |
