基于海量用戶(hù)行為數(shù)據(jù)的高速計(jì)算分析方法

基本信息

申請(qǐng)?zhí)?/td> CN201410345089.5 申請(qǐng)日 -
公開(kāi)（公告）號(hào) CN105302831A 公開(kāi)（公告）日 2016-02-03
申請(qǐng)公布號(hào) CN105302831A 申請(qǐng)公布日 2016-02-03
分類(lèi)號(hào) G06F17/30(2006.01)I 分類(lèi) 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 李馥岑;孫鑫;張旭明 申請(qǐng)（專(zhuān)利權(quán)）人 上海星紅安數(shù)據(jù)科技有限公司
代理機(jī)構(gòu) - 代理人 -
地址 200241 上海市閔行區(qū)東川路555號(hào)乙樓B2054
法律狀態(tài) -

摘要

摘要 本發(fā)明主要解決的是面對(duì)越來(lái)越靈活的雙向新媒體業(yè)務(wù)，面對(duì)百萬(wàn)級(jí)，甚至千萬(wàn)級(jí)用戶(hù)的海量行為數(shù)據(jù)，將采集到的用戶(hù)行為數(shù)據(jù)進(jìn)行HDFS分布式存儲(chǔ)，經(jīng)過(guò)ETL模塊對(duì)數(shù)據(jù)進(jìn)行提取、轉(zhuǎn)換和加載之后，由符合傳媒行業(yè)特點(diǎn)的優(yōu)化組合算法模塊，將海量的用戶(hù)行為數(shù)據(jù)進(jìn)行高效的數(shù)據(jù)預(yù)處理，形成一系列的中間結(jié)果數(shù)據(jù)，再通過(guò)不同的WEB應(yīng)用程序調(diào)用相關(guān)的中間結(jié)果數(shù)據(jù)集，以實(shí)現(xiàn)對(duì)海量用戶(hù)行為數(shù)據(jù)的高速分析運(yùn)算，為運(yùn)營(yíng)商提供秒級(jí)的實(shí)時(shí)計(jì)算分析。