一種支持多主機(jī)分布式數(shù)據(jù)處理的批處理方法及系統(tǒng)
基本信息
申請?zhí)?/td> | CN201210362479.4 | 申請日 | - |
公開(公告)號 | CN102929585B | 公開(公告)日 | 2016-01-13 |
申請公布號 | CN102929585B | 申請公布日 | 2016-01-13 |
分類號 | G06F9/38(2006.01)I;G06F9/46(2006.01)I | 分類 | 計(jì)算;推算;計(jì)數(shù); |
發(fā)明人 | 陳即憶;武劍鋒;王泊;黃俊杰;劉經(jīng)緯;何希圣;黃寅飛;鄭剛;陸素源;白碩 | 申請(專利權(quán))人 | 上海證券交易所 |
代理機(jī)構(gòu) | 上海三方專利事務(wù)所 | 代理人 | 吳干權(quán) |
地址 | 200120 上海市浦東新區(qū)上海市浦東南路528號 | ||
法律狀態(tài) | - |
摘要
摘要 | 本發(fā)明涉及信息數(shù)據(jù)處理技術(shù)領(lǐng)域,具體是一種支持多主機(jī)分布式數(shù)據(jù)處理的批處理方法及系統(tǒng)。批處理系統(tǒng)中設(shè)有批處理框架,批處理框架主要包括批處理引擎程序,批處理管理和監(jiān)控程序,批處理流程控制文件以及批處理批步驟定義文件,其中,流程控制文件和批步驟定義文件為兩個(gè)配置文件,當(dāng)批處理引擎啟動后,就會遍歷流程控制文件,獲得下一步需要處理批步驟代碼,然后根據(jù)批處理代碼,從批步驟定義文件獲得需要執(zhí)行的腳本信息,然后執(zhí)行該腳本來完成該批步驟。本發(fā)明同現(xiàn)有技術(shù)相比,具有較大的突破和優(yōu)勢,解決了現(xiàn)有技術(shù)中的諸多不足和缺陷,本發(fā)明中的批處理系統(tǒng)是一套有高并發(fā)性、高可用性、高可擴(kuò)展性的系統(tǒng)。 |
