一種基于網(wǎng)絡(luò)環(huán)境下的大數(shù)據(jù)的處理方法和系統(tǒng)

基本信息

申請(qǐng)?zhí)?/td> CN201710546811.5 申請(qǐng)日 -
公開(kāi)（公告）號(hào) CN107402980A 公開(kāi)（公告）日 2017-11-28
申請(qǐng)公布號(hào) CN107402980A 申請(qǐng)公布日 2017-11-28
分類號(hào) G06F17/30(2006.01)I;H04L29/08(2006.01)I 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 徐振超 申請(qǐng)（專利權(quán)）人 北京億賽通網(wǎng)絡(luò)安全技術(shù)有限公司
代理機(jī)構(gòu) 北京金律言科知識(shí)產(chǎn)權(quán)代理事務(wù)所（普通合伙） 代理人 北京億賽通網(wǎng)絡(luò)安全技術(shù)有限公司
地址 100085 北京市海淀區(qū)西二旗大街39號(hào)3層301-1
法律狀態(tài) -

摘要

摘要 本發(fā)明實(shí)施例提供了一種基于網(wǎng)絡(luò)環(huán)境下的大數(shù)據(jù)的處理方法和系統(tǒng)，其中，所述方法包括：獲取符合預(yù)定條件的多條具有會(huì)話標(biāo)識(shí)的第一會(huì)話數(shù)據(jù)；將具有相同的會(huì)話標(biāo)識(shí)的第一會(huì)話數(shù)據(jù)進(jìn)行合并，分別得到與會(huì)話標(biāo)識(shí)各自對(duì)應(yīng)的第二會(huì)話數(shù)據(jù)；如果當(dāng)前到達(dá)緩存合并周期，則將所述第二會(huì)話數(shù)據(jù)與已緩存的具有相同的會(huì)話標(biāo)識(shí)的第三會(huì)話數(shù)據(jù)進(jìn)行合并，得到與會(huì)話標(biāo)識(shí)各自對(duì)應(yīng)的第四會(huì)話數(shù)據(jù)；以及/或者，如果當(dāng)前到達(dá)緩存清空周期，則將所述第二會(huì)話數(shù)據(jù)、已緩存的第三會(huì)話數(shù)據(jù)、第四會(huì)話數(shù)據(jù)的至少之一寫入輸出文件，以用于輸出展示。本發(fā)明實(shí)施例降低了網(wǎng)絡(luò)環(huán)境下大數(shù)據(jù)合并的資源占用，緩解了合并的壓力，節(jié)省了合并的時(shí)間，實(shí)現(xiàn)合并的動(dòng)態(tài)調(diào)節(jié)。