一種海量數(shù)據(jù)的收集與交換系統(tǒng)及方法

基本信息

申請(qǐng)?zhí)?/td> CN201510843249.3 申請(qǐng)日 -
公開（公告）號(hào) CN105447146A 公開（公告）日 2016-03-30
申請(qǐng)公布號(hào) CN105447146A 申請(qǐng)公布日 2016-03-30
分類號(hào) G06F17/30(2006.01)I 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 朱志祥;梁小江;肖躍雷;于金良 申請(qǐng)（專利權(quán)）人 陜西艾特智慧信息技術(shù)有限公司
代理機(jī)構(gòu) - 代理人 -
地址 712000 陜西省咸陽市西咸新區(qū)灃西新城西部云谷A座14層
法律狀態(tài) -

摘要

摘要 本發(fā)明提拱一種海量數(shù)據(jù)的收集與交換系統(tǒng)，該系統(tǒng)采用代理模式，該系統(tǒng)的代理包括數(shù)據(jù)收集器、傳輸通道、接收器；所述數(shù)據(jù)收集器負(fù)責(zé)將數(shù)據(jù)源的數(shù)據(jù)收集，經(jīng)過加工轉(zhuǎn)化為事件，以事件（包括事件頭信息和數(shù)據(jù)兩個(gè)部分）的形式發(fā)送的傳輸通道上，支持多種數(shù)據(jù)接收器；所述傳輸通道用來緩存數(shù)據(jù)收集器發(fā)送過來的事件；所述接收器抽取傳輸通道中的事件，根據(jù)相應(yīng)配置將文件存儲(chǔ)到文件系統(tǒng)、數(shù)據(jù)庫，或者提交到遠(yuǎn)程服務(wù)器或下一級(jí)的代理中。本發(fā)明中各個(gè)代理之間相互獨(dú)立，可以對(duì)多個(gè)數(shù)據(jù)源進(jìn)行并行交換，實(shí)現(xiàn)數(shù)據(jù)讀入和寫出的分離，使得系統(tǒng)架構(gòu)更加靈活、輕量、高效。