一種基于大數(shù)據(jù)的服務(wù)平臺(tái)整合方法

基本信息

申請(qǐng)?zhí)?/td> CN201610254729.0 申請(qǐng)日 -
公開（公告）號(hào) CN105956015A 公開（公告）日 2016-09-21
申請(qǐng)公布號(hào) CN105956015A 申請(qǐng)公布日 2016-09-21
分類號(hào) G06F17/30(2006.01)I 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 向富強(qiáng);曾逸;楊雪琴 申請(qǐng)（專利權(quán)）人 四川中軟科技有限公司
代理機(jī)構(gòu) 成都頂峰專利事務(wù)所（普通合伙） 代理人 楊俊華
地址 610000 四川省成都市錦江區(qū)工業(yè)園區(qū)墨香路87號(hào)14棟1層1號(hào)
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種基于大數(shù)據(jù)的服務(wù)平臺(tái)整合方法，包括以下步驟：（1）采集多源異構(gòu)數(shù)據(jù)；（2）對(duì)所采集的多源異構(gòu)數(shù)據(jù)進(jìn)行整合，并將整合后的數(shù)據(jù)存入Hbase數(shù)據(jù)庫；（3）利用Hive對(duì)整合后存入Hbase數(shù)據(jù)庫的數(shù)據(jù)進(jìn)行ETL處理，并存入Hbase數(shù)據(jù)庫，對(duì)存儲(chǔ)在Hbase數(shù)據(jù)庫中的數(shù)據(jù)進(jìn)行清洗得到干凈的數(shù)據(jù)，并將干凈數(shù)據(jù)存儲(chǔ)在Hbase數(shù)據(jù)庫中；（4）基于Hadoop技術(shù)對(duì)得到的干凈數(shù)據(jù)進(jìn)行建模分析，并將分析結(jié)果存儲(chǔ)在Hive數(shù)據(jù)庫中；（5）采用基于SOA的服務(wù)架構(gòu)建立數(shù)據(jù)交換與共享服務(wù)總線，然后基于服務(wù)總線建立數(shù)據(jù)交換架構(gòu)，通過數(shù)據(jù)交換架構(gòu)將存儲(chǔ)在Hive數(shù)據(jù)庫中的分析結(jié)果推送至業(yè)務(wù)應(yīng)用系統(tǒng)數(shù)據(jù)庫中。本方法有效地減少了溝通成本和時(shí)間成本，提高了數(shù)據(jù)的有效利用率。