一種海量數(shù)據(jù)的收集與交換系統(tǒng)及方法

基本信息

申請?zhí)?/td> CN201510843249.3 申請日 -
公開（公告）號 CN105447146A 公開（公告）日 2016-03-30
申請公布號 CN105447146A 申請公布日 2016-03-30
分類號 G06F17/30(2006.01)I 分類 計算；推算；計數(shù);
發(fā)明人 朱志祥;梁小江;肖躍雷;于金良 申請（專利權(quán)）人 陜西艾特智慧信息技術(shù)有限公司
代理機構(gòu) - 代理人 -
地址 712000 陜西省咸陽市西咸新區(qū)灃西新城西部云谷A座14層
法律狀態(tài) -

摘要

摘要 本發(fā)明提拱一種海量數(shù)據(jù)的收集與交換系統(tǒng)，該系統(tǒng)采用代理模式，該系統(tǒng)的代理包括數(shù)據(jù)收集器、傳輸通道、接收器；所述數(shù)據(jù)收集器負(fù)責(zé)將數(shù)據(jù)源的數(shù)據(jù)收集，經(jīng)過加工轉(zhuǎn)化為事件，以事件（包括事件頭信息和數(shù)據(jù)兩個部分）的形式發(fā)送的傳輸通道上，支持多種數(shù)據(jù)接收器；所述傳輸通道用來緩存數(shù)據(jù)收集器發(fā)送過來的事件；所述接收器抽取傳輸通道中的事件，根據(jù)相應(yīng)配置將文件存儲到文件系統(tǒng)、數(shù)據(jù)庫，或者提交到遠程服務(wù)器或下一級的代理中。本發(fā)明中各個代理之間相互獨立，可以對多個數(shù)據(jù)源進行并行交換，實現(xiàn)數(shù)據(jù)讀入和寫出的分離，使得系統(tǒng)架構(gòu)更加靈活、輕量、高效。