基于Spark GraphX的社交網(wǎng)絡(luò)分析系統(tǒng)及其實(shí)現(xiàn)方法

基本信息

申請(qǐng)?zhí)?/td> CN201911297714.2 申請(qǐng)日 -
公開(kāi)(公告)號(hào) CN110727836B 公開(kāi)(公告)日 2020-04-07
申請(qǐng)公布號(hào) CN110727836B 申請(qǐng)公布日 2020-04-07
分類(lèi)號(hào) G06F16/901;G06F16/906;G06F16/182;G06Q50/00 分類(lèi) 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 閻星娥;楊昆;嚴(yán)榮明;張林;袁勇斌;余祥慧;張明星;謝俊 申請(qǐng)(專(zhuān)利權(quán))人 南京華飛數(shù)據(jù)技術(shù)有限公司
代理機(jī)構(gòu) 南京品智知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 代理人 南京華飛數(shù)據(jù)技術(shù)有限公司
地址 210019 江蘇省南京市建鄴區(qū)嘉陵江東街18號(hào)國(guó)家廣告產(chǎn)業(yè)園4棟12層
法律狀態(tài) -

摘要

摘要 本發(fā)明基于Spark GraphX的社交網(wǎng)絡(luò)分析系統(tǒng)及其實(shí)現(xiàn)方法,尤其涉及一種基于Spark GraphX實(shí)現(xiàn)對(duì)指定數(shù)據(jù)進(jìn)行社交網(wǎng)絡(luò)關(guān)系圖計(jì)算系統(tǒng)。模型,包括依次相連的數(shù)據(jù)存儲(chǔ)模塊、分析請(qǐng)求解析模塊、圖計(jì)算模塊和圖數(shù)據(jù)庫(kù)存儲(chǔ)模塊。整個(gè)算法實(shí)現(xiàn)流程包括對(duì)輸入數(shù)據(jù)以自定義的文件格式入庫(kù)存儲(chǔ)到Hdfs;客戶(hù)端提交分析請(qǐng)求,服務(wù)端解析后提交到圖計(jì)算模塊;最終分析結(jié)果存儲(chǔ)到圖數(shù)據(jù)庫(kù)。該算法適用于社交網(wǎng)絡(luò)分析模型的開(kāi)發(fā);基于Spark GraphX通過(guò)復(fù)雜圖計(jì)算,可以描繪出社交網(wǎng)絡(luò)關(guān)系的部分特征,挖掘出指定特征的社團(tuán)。解決了海量數(shù)據(jù)圖計(jì)算的問(wèn)題。