基于瀏覽器的數(shù)據(jù)獲取方法、裝置和系統(tǒng)
基本信息
申請?zhí)?/td> | CN202110965104.6 | 申請日 | - |
公開(公告)號 | CN113742550A | 公開(公告)日 | 2021-12-03 |
申請公布號 | CN113742550A | 申請公布日 | 2021-12-03 |
分類號 | G06F16/951(2019.01)I;G06F16/958(2019.01)I;G06F8/30(2018.01)I | 分類 | 計算;推算;計數(shù); |
發(fā)明人 | 揭鵬;萬友先;李文輝;張鑫;陳帥 | 申請(專利權(quán))人 | 廣州市易工品科技有限公司 |
代理機構(gòu) | 廣州智斧知識產(chǎn)權(quán)代理事務所(普通合伙) | 代理人 | 孔德超 |
地址 | 510000廣東省廣州市海珠區(qū)閱江中路686號410 | ||
法律狀態(tài) | - |
摘要
摘要 | 本發(fā)明實施例涉及信息獲取技術(shù)領(lǐng)域,公開了一種基于瀏覽器的數(shù)據(jù)獲取方法、裝置和系統(tǒng)。該方法包括:使用WebKit創(chuàng)建瀏覽器,并編寫自動化js腳本,存儲到目標文件夾目錄中;接收目標任務,并基于所述目標任務使所述瀏覽器跳轉(zhuǎn)至目標頁面;根據(jù)所述目標任務調(diào)取目標js腳本獲取第一數(shù)據(jù);對所述第一數(shù)據(jù)進行解析和清洗,得到目標數(shù)據(jù)并入庫;返回目標任務結(jié)果狀態(tài)。實施本發(fā)明實施例,可以通過自制WebKit瀏覽器以及自動化js腳本,快速自動爬取相關(guān)數(shù)據(jù)。 |
