一種基于Storm的流數(shù)據(jù)實(shí)時(shí)智能化處理框架
基本信息
申請(qǐng)?zhí)?/td> | CN201510625570.4 | 申請(qǐng)日 | - |
公開(公告)號(hào) | CN105512162A | 公開(公告)日 | 2016-04-20 |
申請(qǐng)公布號(hào) | CN105512162A | 申請(qǐng)公布日 | 2016-04-20 |
分類號(hào) | G06F17/30(2006.01)I | 分類 | 計(jì)算;推算;計(jì)數(shù); |
發(fā)明人 | 金蒼宏;劉澤民;吳明暉;應(yīng)晶 | 申請(qǐng)(專利權(quán))人 | 杭州圓橙科技有限公司 |
代理機(jī)構(gòu) | 杭州宇信知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) | 代理人 | 杭州圓橙科技有限公司 |
地址 | 310016 浙江省杭州市上城區(qū)海潮路53號(hào)274室 | ||
法律狀態(tài) | - |
摘要
摘要 | 本發(fā)明涉及一種基于Storm的流數(shù)據(jù)實(shí)時(shí)智能化處理框架,包括如下步驟:需求配置層完成前端數(shù)據(jù)結(jié)構(gòu)及過(guò)濾條件的設(shè)定;數(shù)據(jù)結(jié)構(gòu)解析層完成包括SQL指令等的配置文件中數(shù)據(jù)的解析;算子功能拓?fù)鋵油瓿蒘torm的Topology的功能算子解析;系統(tǒng)完成層完成代碼生成及編譯打包等功能,并把最終的Topology提交執(zhí)行;數(shù)據(jù)畫像層完成結(jié)果數(shù)據(jù)在數(shù)據(jù)倉(cāng)庫(kù)中的存儲(chǔ),及數(shù)據(jù)畫像的實(shí)時(shí)生成并展示給決策者。本發(fā)明的實(shí)施具有以下有益效果:能夠很好地與上層決策者交互,并依照復(fù)雜數(shù)據(jù)處理功能的設(shè)定動(dòng)態(tài)智能的生成相關(guān)Topology,提高代碼復(fù)用性,并使得開發(fā)周期和成本大大降低,提升系統(tǒng)智能化和可執(zhí)行效率,并實(shí)時(shí)的展示用戶畫像,為前端決策人員的決策提供快速且強(qiáng)有力的支持。 |
