基于瀏覽器的數(shù)據(jù)獲取方法、裝置和系統(tǒng)

基本信息

申請(qǐng)?zhí)?/td> CN202110965104.6 申請(qǐng)日 -
公開(kāi)(公告)號(hào) CN113742550A 公開(kāi)(公告)日 2021-12-03
申請(qǐng)公布號(hào) CN113742550A 申請(qǐng)公布日 2021-12-03
分類(lèi)號(hào) G06F16/951(2019.01)I;G06F16/958(2019.01)I;G06F8/30(2018.01)I 分類(lèi) 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 揭鵬;萬(wàn)友先;李文輝;張?chǎng)?陳帥 申請(qǐng)(專利權(quán))人 廣州市易工品科技有限公司
代理機(jī)構(gòu) 廣州智斧知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 代理人 孔德超
地址 510000廣東省廣州市海珠區(qū)閱江中路686號(hào)410
法律狀態(tài) -

摘要

摘要 本發(fā)明實(shí)施例涉及信息獲取技術(shù)領(lǐng)域,公開(kāi)了一種基于瀏覽器的數(shù)據(jù)獲取方法、裝置和系統(tǒng)。該方法包括:使用WebKit創(chuàng)建瀏覽器,并編寫(xiě)自動(dòng)化js腳本,存儲(chǔ)到目標(biāo)文件夾目錄中;接收目標(biāo)任務(wù),并基于所述目標(biāo)任務(wù)使所述瀏覽器跳轉(zhuǎn)至目標(biāo)頁(yè)面;根據(jù)所述目標(biāo)任務(wù)調(diào)取目標(biāo)js腳本獲取第一數(shù)據(jù);對(duì)所述第一數(shù)據(jù)進(jìn)行解析和清洗,得到目標(biāo)數(shù)據(jù)并入庫(kù);返回目標(biāo)任務(wù)結(jié)果狀態(tài)。實(shí)施本發(fā)明實(shí)施例,可以通過(guò)自制WebKit瀏覽器以及自動(dòng)化js腳本,快速自動(dòng)爬取相關(guān)數(shù)據(jù)。