一種大數(shù)據(jù)處理流程的執(zhí)行計(jì)劃生成方法

基本信息

申請(qǐng)?zhí)?/td> CN201910985525.8 申請(qǐng)日 -
公開(公告)號(hào) CN110765163A 公開(公告)日 2020-02-07
申請(qǐng)公布號(hào) CN110765163A 申請(qǐng)公布日 2020-02-07
分類號(hào) G06F16/2455;G06F16/2458;G06F16/25 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 袁思靜 申請(qǐng)(專利權(quán))人 廣州金融科技股份有限公司
代理機(jī)構(gòu) 北京和信華成知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 代理人 胡劍輝
地址 511400 廣東省廣州市南沙區(qū)香江金融商務(wù)中心南沙街金隆37號(hào)1801房011號(hào)
法律狀態(tài) -

摘要

摘要 本發(fā)明實(shí)施例公開了一種大數(shù)據(jù)處理流程的執(zhí)行計(jì)劃生成方法,包括如下步驟:對(duì)每個(gè)數(shù)據(jù)采集終端匹配獨(dú)立且唯一的數(shù)據(jù)傳輸路徑;數(shù)據(jù)流以隊(duì)列方式順次通過數(shù)據(jù)傳輸路徑進(jìn)行數(shù)據(jù)預(yù)處理,定義字符串Data_ID參數(shù)統(tǒng)計(jì)通過數(shù)據(jù)傳輸路徑的數(shù)據(jù)流數(shù)量;定義每個(gè)預(yù)處理流程的序號(hào)Manage_ID,數(shù)據(jù)流每通過一個(gè)處理流程,則數(shù)據(jù)流上新增表示處理流程序號(hào)的Manage_ID屬性;對(duì)數(shù)據(jù)流的Manage_ID檢測(cè),判斷數(shù)據(jù)處理的正確流程;每個(gè)數(shù)據(jù)流的獨(dú)立數(shù)據(jù)上新增傳輸路徑Port_ID屬性和隊(duì)列序號(hào)Data_ID屬性;本方案既保證大數(shù)據(jù)處理過程中的統(tǒng)一性,又提供了大數(shù)據(jù)處理過程中的對(duì)比關(guān)聯(lián)性。