邊緣計算的云環(huán)境分布式Web頁面提取分析系統(tǒng)和方法

基本信息

申請?zhí)?/td> CN201911301759.2 申請日 -
公開（公告）號 CN110941788A 公開（公告）日 2020-03-31
申請公布號 CN110941788A 申請公布日 2020-03-31
分類號 G06F16/958(2019.01)I;G06F16/951(2019.01)I 分類 計算；推算；計數(shù);
發(fā)明人 張宏巍;張弋;蘭志超;張森瑋;王帥琪;李兆國 申請（專利權(quán)）人 山西云時代技術(shù)有限公司
代理機構(gòu) 太原晉科知識產(chǎn)權(quán)代理事務(wù)所（特殊普通合伙） 代理人 山西云時代技術(shù)有限公司
地址 030006山西省太原市小店區(qū)山西示范區(qū)太原學府園區(qū)長治路345號
法律狀態(tài) -

摘要

摘要 本發(fā)明屬于網(wǎng)絡(luò)通信技術(shù)領(lǐng)域；云計算存在數(shù)據(jù)丟失與泄露、共享技術(shù)漏洞、不安全的應(yīng)用程序接口等安全風險，網(wǎng)頁爬取效率低下，導致后續(xù)漏洞掃描需要大量時間，本發(fā)明提供一種邊緣計算的云環(huán)境分布式Web頁面提取分析系統(tǒng)和方法，中心管理節(jié)點根據(jù)歷史爬取效率調(diào)度計算節(jié)點完成工作任務(wù)，提高資源的合理配置，對爬取策略和深度進行分析并去重，在保證漏洞掃描結(jié)果正確前提下，有效提高網(wǎng)站的爬取速度，便于掃描能力的橫向擴展和計算資源的合理利用，邊緣計算帶來了更快的傳輸和響應(yīng)速度，解決了傳統(tǒng)云計算系統(tǒng)中節(jié)點的計算資源浪費問題，提高產(chǎn)能比，資源利用率明顯提高。??