一種圖指標流批一體化處理方法及裝置

基本信息

申請?zhí)?/td> CN202110365349.5 申請日 -
公開（公告）號 CN112732727A 公開（公告）日 2021-06-18
申請公布號 CN112732727A 申請公布日 2021-06-18
分類號 G06F16/22;G06F16/901;G06F16/174;G06F16/182 分類 計算；推算；計數(shù);
發(fā)明人 顧凌云;郭志攀;王偉;張曉豐 申請（專利權(quán)）人 南京冰鑒信息科技有限公司
代理機構(gòu) 成都頂峰專利事務(wù)所（普通合伙） 代理人 李崧巖
地址 210000 江蘇省南京市鼓樓區(qū)中山北路99號11層
法律狀態(tài) -

摘要

摘要 本申請的一種圖指標流批一體化處理方法及裝置，根據(jù)全圖數(shù)據(jù)得到邊表和點表并存儲到Hive數(shù)據(jù)庫中，將邊表和點表輸入到計算模型生成第一連通圖表，將邊表、點表以及第一連通圖表輸入到預(yù)設(shè)程序中得到圖數(shù)據(jù)庫底層文件，調(diào)用圖指標的計算模型以及參數(shù)列表的參數(shù)組合，在圖數(shù)據(jù)庫底層文件中查找與參數(shù)組合匹配的目標數(shù)據(jù)，根據(jù)計算模型對目標數(shù)據(jù)進行圖指標計算得到圖指標計算結(jié)果，通過調(diào)用HBase的api將圖指標計算結(jié)果存入Hbase。將全圖數(shù)據(jù)進行拆分得到不同連通圖的數(shù)據(jù)分別精確的生成了不同的圖數(shù)據(jù)庫底層文件，在指標計算時不必跨網(wǎng)絡(luò)拉取數(shù)據(jù)，性能更高，能夠?qū)⒂嬎憬Y(jié)果進行精確存儲。