一種基于Storm的流數(shù)據(jù)實(shí)時(shí)智能化處理框架

基本信息

申請(qǐng)?zhí)?/td> CN201510625570.4 申請(qǐng)日 -
公開(公告)號(hào) CN105512162A 公開(公告)日 2016-04-20
申請(qǐng)公布號(hào) CN105512162A 申請(qǐng)公布日 2016-04-20
分類號(hào) G06F17/30(2006.01)I 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 金蒼宏;劉澤民;吳明暉;應(yīng)晶 申請(qǐng)(專利權(quán))人 杭州圓橙科技有限公司
代理機(jī)構(gòu) 杭州宇信知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 代理人 杭州圓橙科技有限公司
地址 310016 浙江省杭州市上城區(qū)海潮路53號(hào)274室
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及一種基于Storm的流數(shù)據(jù)實(shí)時(shí)智能化處理框架,包括如下步驟:需求配置層完成前端數(shù)據(jù)結(jié)構(gòu)及過(guò)濾條件的設(shè)定;數(shù)據(jù)結(jié)構(gòu)解析層完成包括SQL指令等的配置文件中數(shù)據(jù)的解析;算子功能拓?fù)鋵油瓿蒘torm的Topology的功能算子解析;系統(tǒng)完成層完成代碼生成及編譯打包等功能,并把最終的Topology提交執(zhí)行;數(shù)據(jù)畫像層完成結(jié)果數(shù)據(jù)在數(shù)據(jù)倉(cāng)庫(kù)中的存儲(chǔ),及數(shù)據(jù)畫像的實(shí)時(shí)生成并展示給決策者。本發(fā)明的實(shí)施具有以下有益效果:能夠很好地與上層決策者交互,并依照復(fù)雜數(shù)據(jù)處理功能的設(shè)定動(dòng)態(tài)智能的生成相關(guān)Topology,提高代碼復(fù)用性,并使得開發(fā)周期和成本大大降低,提升系統(tǒng)智能化和可執(zhí)行效率,并實(shí)時(shí)的展示用戶畫像,為前端決策人員的決策提供快速且強(qiáng)有力的支持。