分布式任務(wù)計(jì)算調(diào)度框架搭建的方法、裝置及計(jì)算機(jī)設(shè)備

基本信息

申請(qǐng)?zhí)?/td> CN202011512271.7 申請(qǐng)日 -
公開(kāi)(公告)號(hào) CN112667393B 公開(kāi)(公告)日 2021-10-29
申請(qǐng)公布號(hào) CN112667393B 申請(qǐng)公布日 2021-10-29
分類(lèi)號(hào) G06F9/50(2006.01)I 分類(lèi) 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 陳定瑋;周景鋒 申請(qǐng)(專(zhuān)利權(quán))人 飛算數(shù)智科技(深圳)有限公司
代理機(jī)構(gòu) 深圳卓正專(zhuān)利代理事務(wù)所(普通合伙) 代理人 吳思瑩;萬(wàn)正平
地址 518000廣東省深圳市前海深港合作區(qū)前灣一路1號(hào)A棟201室(入駐深圳市前海商務(wù)秘書(shū)有限公司)
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及分布式任務(wù)計(jì)算調(diào)度框架搭建的方法、裝置及計(jì)算機(jī)設(shè)備,該方法包括:選擇對(duì)應(yīng)的目標(biāo)計(jì)算框架類(lèi)型;獲取對(duì)應(yīng)的目標(biāo)分布式任務(wù)部署策略;搭建分布式資源數(shù)據(jù)處理框架;根據(jù)所述目標(biāo)分布式任務(wù)部署策略獲取對(duì)應(yīng)的目標(biāo)資源調(diào)度策略,根據(jù)所述目標(biāo)資源調(diào)度策略建立分布式任務(wù)消息隊(duì)列;將所述分布式任務(wù)消息隊(duì)列中各個(gè)任務(wù)管理元素與所述分布式資源數(shù)據(jù)處理框架的各個(gè)分布式數(shù)據(jù)層對(duì)應(yīng)連接;基于所述目標(biāo)資源調(diào)度策略調(diào)用所述分布式資源數(shù)據(jù)處理框架中的分布式數(shù)據(jù)進(jìn)行數(shù)據(jù)計(jì)算處理。本發(fā)明提供了一種高效、高性能,高可用的分布式大數(shù)據(jù)計(jì)算框架搭建方案。