一種衛(wèi)星物聯(lián)網(wǎng)Spark數(shù)據(jù)處理方法、系統(tǒng)、終端及存儲介質(zhì)

基本信息

申請?zhí)?/td> CN202210238071.X 申請日 -
公開(公告)號 CN114625794A 公開(公告)日 2022-06-14
申請公布號 CN114625794A 申請公布日 2022-06-14
分類號 G06F16/25(2019.01)I;G06F16/27(2019.01)I;H04L67/12(2022.01)I 分類 計算;推算;計數(shù);
發(fā)明人 呂強;賈霞;唐堯;宋博;譚宇;田方;劉亮;王新蕾;趙金波;信子昂;閆少文 申請(專利權(quán))人 北京國電高科科技有限公司
代理機構(gòu) 北京維正專利代理有限公司 代理人 -
地址 100089北京市海淀區(qū)北清路68號院2號樓1層59室
法律狀態(tài) -

摘要

摘要 本申請涉及一種衛(wèi)星物聯(lián)網(wǎng)Spark數(shù)據(jù)處理方法、系統(tǒng)、終端及存儲介質(zhì),其屬于數(shù)據(jù)處理領(lǐng)域,其中,一種衛(wèi)星物聯(lián)網(wǎng)Spark數(shù)據(jù)處理方法包括獲取地面采集數(shù)據(jù)并將地面采集數(shù)據(jù)存入數(shù)據(jù)庫中;調(diào)用Spark計算引擎對存入數(shù)據(jù)庫中的地面采集數(shù)據(jù)進行并行處理;生成RDD模型,并利用RDD模型將主機資源分配至Spark計算引擎中。本申請具有提高了數(shù)據(jù)處理效率的效果。