基于瀏覽器的數(shù)據(jù)獲取方法、裝置和系統(tǒng)

基本信息

申請?zhí)?/td> CN202110965104.6 申請日 -
公開(公告)號 CN113742550A 公開(公告)日 2021-12-03
申請公布號 CN113742550A 申請公布日 2021-12-03
分類號 G06F16/951(2019.01)I;G06F16/958(2019.01)I;G06F8/30(2018.01)I 分類 計算;推算;計數(shù);
發(fā)明人 揭鵬;萬友先;李文輝;張鑫;陳帥 申請(專利權(quán))人 廣州市易工品科技有限公司
代理機構(gòu) 廣州智斧知識產(chǎn)權(quán)代理事務所(普通合伙) 代理人 孔德超
地址 510000廣東省廣州市海珠區(qū)閱江中路686號410
法律狀態(tài) -

摘要

摘要 本發(fā)明實施例涉及信息獲取技術(shù)領(lǐng)域,公開了一種基于瀏覽器的數(shù)據(jù)獲取方法、裝置和系統(tǒng)。該方法包括:使用WebKit創(chuàng)建瀏覽器,并編寫自動化js腳本,存儲到目標文件夾目錄中;接收目標任務,并基于所述目標任務使所述瀏覽器跳轉(zhuǎn)至目標頁面;根據(jù)所述目標任務調(diào)取目標js腳本獲取第一數(shù)據(jù);對所述第一數(shù)據(jù)進行解析和清洗,得到目標數(shù)據(jù)并入庫;返回目標任務結(jié)果狀態(tài)。實施本發(fā)明實施例,可以通過自制WebKit瀏覽器以及自動化js腳本,快速自動爬取相關(guān)數(shù)據(jù)。