一種流式運算系統(tǒng)、方法、可讀介質(zhì)和存儲控制器

基本信息

申請?zhí)?/td> CN201810466470.5 申請日 -
公開（公告）號 CN108845794B 公開（公告）日 2021-09-10
申請公布號 CN108845794B 申請公布日 2021-09-10
分類號 G06F8/30 分類 計算；推算；計數(shù);
發(fā)明人 宮若瑜;程林;楊培強 申請（專利權(quán)）人 山東浪潮商用系統(tǒng)有限公司
代理機構(gòu) 濟南信達(dá)專利事務(wù)所有限公司 代理人 李世喆
地址 250100 山東省濟南市高新區(qū)浪潮路1036號浪潮科技園
法律狀態(tài) -

摘要

摘要 本發(fā)明提供了一種流式運算框架、方法、可讀介質(zhì)和存儲控制器，該流式運算框架包括：訂閱消息系統(tǒng)、流式數(shù)據(jù)處理系統(tǒng)和處理模塊；其中，所述處理模塊，用于將所述訂閱消息系統(tǒng)與所述流式數(shù)據(jù)處理系統(tǒng)進行封裝，生成數(shù)據(jù)轉(zhuǎn)換工具；當(dāng)接收到所述訂閱消息系統(tǒng)發(fā)送的至少一個數(shù)據(jù)流時，利用所述數(shù)據(jù)轉(zhuǎn)換工具對所述至少一個數(shù)據(jù)流的格式進行標(biāo)準(zhǔn)化處理，并將標(biāo)準(zhǔn)化處理后的所述至少一個數(shù)據(jù)流發(fā)送給所述流式數(shù)據(jù)處理系統(tǒng)；所述訂閱消息系統(tǒng)，用于從外部的至少一個數(shù)據(jù)源中抽取至少一個數(shù)據(jù)流，并將所述至少一個數(shù)據(jù)流發(fā)送給所述處理模塊；所述流式數(shù)據(jù)處理系統(tǒng)，用于對標(biāo)準(zhǔn)化處理后的所述至少一個數(shù)據(jù)流進行業(yè)務(wù)處理。本方案能提高數(shù)據(jù)處理效率。