一種基于多隊(duì)列和多優(yōu)先級(jí)的大數(shù)據(jù)任務(wù)管理系統(tǒng)和方法

基本信息

申請(qǐng)?zhí)?/td> CN201510110586.1 申請(qǐng)日 -
公開(公告)號(hào) CN104657214A 公開(公告)日 2015-05-27
申請(qǐng)公布號(hào) CN104657214A 申請(qǐng)公布日 2015-05-27
分類號(hào) G06F9/48(2006.01)I;G06F9/50(2006.01)I 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 倪巍 申請(qǐng)(專利權(quán))人 華存數(shù)據(jù)信息技術(shù)有限公司
代理機(jī)構(gòu) 上海信好專利代理事務(wù)所(普通合伙) 代理人 華存數(shù)據(jù)信息技術(shù)有限公司
地址 200127 上海市浦東新區(qū)峨山路91弄20號(hào)陸家嘴軟件園區(qū)9號(hào)南塔樓5樓西
法律狀態(tài) -

摘要

摘要 一種基于多隊(duì)列和多優(yōu)先級(jí)的大數(shù)據(jù)任務(wù)管理系統(tǒng),以及利用該系統(tǒng)實(shí)現(xiàn)大數(shù)據(jù)任務(wù)管理的方法。該方法包含:S1、客戶端發(fā)起任務(wù)請(qǐng)求,并對(duì)該任務(wù)設(shè)定任務(wù)隊(duì)列標(biāo)簽和優(yōu)先級(jí);S2、資源管理器接收由客戶端發(fā)起的任務(wù)請(qǐng)求,將其分配至對(duì)應(yīng)任務(wù)隊(duì)列中;S3、每個(gè)節(jié)點(diǎn)資源管理器將其所在的分布式節(jié)點(diǎn)所擁有的資源上報(bào)給資源管理器以形成資源池,資源管理器對(duì)各個(gè)任務(wù)隊(duì)列分配資源;S4、資源管理器依次將多個(gè)任務(wù)隊(duì)列中當(dāng)前需要執(zhí)行的任務(wù)分配給節(jié)點(diǎn)資源管理器,節(jié)點(diǎn)資源管理器在接收任務(wù)指令后,調(diào)度容器單元執(zhí)行該任務(wù)。本發(fā)明能夠進(jìn)行資源的統(tǒng)一管理和調(diào)配,并且基于多隊(duì)列和多優(yōu)先級(jí)進(jìn)行任務(wù)調(diào)度執(zhí)行,提高資源的利用率,加快任務(wù)執(zhí)行的速度。