批量與流式結(jié)合的數(shù)據(jù)處理方法及裝置
基本信息
申請?zhí)?/td> | CN202011529842.8 | 申請日 | - |
公開(公告)號 | CN112597200A | 公開(公告)日 | 2021-04-02 |
申請公布號 | CN112597200A | 申請公布日 | 2021-04-02 |
分類號 | G06F16/21(2019.01)I;G06F16/27(2019.01)I;G06F16/2455(2019.01)I | 分類 | 計算;推算;計數(shù); |
發(fā)明人 | 陳卓;孫啟明;汪利鵬;李延明;李侃;郭顯寬;胡鵬 | 申請(專利權(quán))人 | 南京三眼精靈信息技術(shù)有限公司 |
代理機(jī)構(gòu) | 北京中政聯(lián)科專利代理事務(wù)所(普通合伙) | 代理人 | 鄭久興 |
地址 | 211100江蘇省南京市江寧開發(fā)區(qū)迎翠路7號 | ||
法律狀態(tài) | - |
摘要
摘要 | 本申請實施例提供一種批量與流式結(jié)合的數(shù)據(jù)處理方法及裝置,方法包括:根據(jù)需要執(zhí)行計算的數(shù)據(jù)節(jié)點類型和數(shù)據(jù)節(jié)點數(shù)量,確定對應(yīng)的計算模型,其中,所述數(shù)據(jù)節(jié)點類型包括批量數(shù)據(jù)節(jié)點和流式數(shù)據(jù)節(jié)點,若所述數(shù)據(jù)節(jié)點數(shù)量為單個,則執(zhí)行單源計算模型,否則執(zhí)行多源計算模型;根據(jù)所述計算模型根據(jù)預(yù)設(shè)執(zhí)行模式進(jìn)行數(shù)據(jù)處理;本申請能夠有效組合批量數(shù)據(jù)和流式數(shù)據(jù),提高數(shù)據(jù)處理效率。?? |
