一種大數(shù)據(jù)加工方法及系統(tǒng)

基本信息

申請?zhí)?/td> CN202010299719.5 申請日 -
公開（公告）號 CN111651507A 公開（公告）日 2020-09-11
申請公布號 CN111651507A 申請公布日 2020-09-11
分類號 G06F16/25(2019.01)I 分類 計算；推算；計數(shù);
發(fā)明人 饒貴翔;陳忠;陳細平 申請（專利權(quán)）人 杭州半云科技有限公司
代理機構(gòu) 北京工信聯(lián)合知識產(chǎn)權(quán)代理有限公司 代理人 杭州半云科技有限公司
地址 310024浙江省杭州市西湖區(qū)轉(zhuǎn)塘科技經(jīng)濟區(qū)塊16號3幢296室
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種大數(shù)據(jù)加工方法及系統(tǒng)，所述方法包括：根據(jù)應(yīng)用需求，提取所需最終目標(biāo)數(shù)據(jù)；根據(jù)預(yù)設(shè)規(guī)則創(chuàng)建數(shù)據(jù)匯聚流向模型，所述數(shù)據(jù)匯聚流向模型為以最終目標(biāo)數(shù)據(jù)為中心按照最簡加工原則逐層列出生成目標(biāo)數(shù)據(jù)所需的來源數(shù)據(jù)、加工單元以及數(shù)據(jù)流向關(guān)系；整理合并相近的加工單元，確定加工類型，創(chuàng)建數(shù)據(jù)加工模型；將所述數(shù)據(jù)加工模型發(fā)布到對應(yīng)的數(shù)據(jù)加工引擎，執(zhí)行數(shù)據(jù)加工；所述方法可以有效簡化大數(shù)據(jù)加工的難度，提高大數(shù)據(jù)加工計算效率，提高軟件研發(fā)效率；有效提高數(shù)據(jù)加工單元的復(fù)用程度，降低軟件研發(fā)成本；實現(xiàn)從原始數(shù)據(jù)到目標(biāo)數(shù)據(jù)加工的全流程建模與運行，實現(xiàn)大數(shù)據(jù)加工全流程可見、可控、可管。??