一種大數(shù)據(jù)的處理系統(tǒng)

基本信息

申請(qǐng)?zhí)?/td> CN201811304161.4 申請(qǐng)日 -
公開(公告)號(hào) CN111143393A 公開(公告)日 2020-05-12
申請(qǐng)公布號(hào) CN111143393A 申請(qǐng)公布日 2020-05-12
分類號(hào) G06F16/242 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 祁建明;徐繼峰;周峻松 申請(qǐng)(專利權(quán))人 廣州市明領(lǐng)信息科技有限公司
代理機(jī)構(gòu) - 代理人 -
地址 510610 廣東省廣州市天河區(qū)林和東路281號(hào)天倫控股大廈17層
法律狀態(tài) -

摘要

摘要 本發(fā)明公開一種大數(shù)據(jù)的處理系統(tǒng),包括數(shù)據(jù)庫單元,用于存儲(chǔ)結(jié)果數(shù)據(jù);接收單元,接收待分析的數(shù)據(jù);切分處理單元,用于將待分析的數(shù)據(jù)切分為多個(gè)數(shù)據(jù)分片;分析單元組,具有多個(gè)的處理節(jié)點(diǎn),用于分析數(shù)據(jù)分片并形成子結(jié)果數(shù)據(jù);分配單元,將切分處理單元生成的多個(gè)數(shù)據(jù)分片并依次分配給分析單元組的多個(gè)處理節(jié)點(diǎn)進(jìn)行處理;接收單元,依次接收分析單元組的各個(gè)處理節(jié)點(diǎn)處理后的子結(jié)果數(shù)據(jù);合并寫入單元,用于收集的各個(gè)子結(jié)果數(shù)據(jù)進(jìn)行合并,形成結(jié)果數(shù)據(jù)并寫入到數(shù)據(jù)庫單元內(nèi);該大數(shù)據(jù)的處理系統(tǒng)數(shù)據(jù)處理速度快。