針對(duì)大數(shù)據(jù)中MPI數(shù)據(jù)接口的信息壓縮傳輸方法

基本信息

申請(qǐng)?zhí)?/td> CN202110310147.0 申請(qǐng)日 -
公開(kāi)(公告)號(hào) CN112988871B 公開(kāi)(公告)日 2021-11-16
申請(qǐng)公布號(hào) CN112988871B 申請(qǐng)公布日 2021-11-16
分類號(hào) G06F16/25(2019.01)I;G06F16/22(2019.01)I 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 楊曉凡 申請(qǐng)(專利權(quán))人 重慶飛唐網(wǎng)景科技有限公司
代理機(jī)構(gòu) 濟(jì)南尚本知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 代理人 張笑
地址 250100 山東省濟(jì)南市高新區(qū)漢峪金谷A7-5-1101
法律狀態(tài) -

摘要

摘要 本發(fā)明提出了一種針對(duì)大數(shù)據(jù)中MPI數(shù)據(jù)接口的信息壓縮傳輸方法,包括如下步驟:S1,獲取云端數(shù)據(jù)中心的海量數(shù)據(jù),將海量數(shù)據(jù)根據(jù)數(shù)據(jù)特征進(jìn)行離散化處理,對(duì)處理后的數(shù)據(jù)進(jìn)行屬性賦值;S2,屬性賦值完畢后,進(jìn)行數(shù)據(jù)融合完成過(guò)程模板構(gòu)建,通過(guò)矢量要素對(duì)海量數(shù)據(jù)進(jìn)行數(shù)據(jù)索引;S3,通過(guò)MPI環(huán)境下對(duì)數(shù)據(jù)索引進(jìn)行緩沖操作,并對(duì)緩沖后的數(shù)據(jù)索引進(jìn)行劃分操作,S4,對(duì)劃分后的數(shù)據(jù)索引指向?qū)?yīng)的海量數(shù)據(jù),對(duì)海量數(shù)據(jù)通過(guò)壓縮算法進(jìn)行數(shù)據(jù)壓縮,將壓縮的數(shù)據(jù)通過(guò)MPI環(huán)境下數(shù)據(jù)接口進(jìn)行傳輸。