Spark應用程序控制方法及控制裝置

基本信息

申請?zhí)?/td> CN201811580726.1 申請日 -
公開（公告）號 CN109634784A 公開（公告）日 2019-04-16
申請公布號 CN109634784A 申請公布日 2019-04-16
分類號 G06F11/14（2006.01）I 分類 計算；推算；計數(shù);
發(fā)明人 文燕軍; 盧春洋; 吳文鈞 申請（專利權）人 康成投資（中國）有限公司
代理機構 上海盈盛知識產權代理事務所（普通合伙） 代理人 康成投資（中國）有限公司
地址 200436 上海市共和新路3318號
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及通信技術領域，尤其涉及一種Spark應用程序控制方法及控制裝置。所述Spark應用程序控制方法，包括如下步驟：判斷Spark應用程序的歷史狀態(tài)參數(shù)是否有效，若是，則將所述歷史狀態(tài)參數(shù)加入所述Spark應用程序的運行環(huán)境；根據獲取的歷史狀態(tài)參數(shù)運行所述Spark應用程序；判斷所述Spark應用程序是否出現(xiàn)運行異常，若是，則保留所述Spark應用程序的當前狀態(tài)參數(shù)；存儲所述當前狀態(tài)參數(shù)于管理員中，以更新所述歷史狀態(tài)參數(shù)。本發(fā)明確保Spark應用程序運行的可承接性，避免因狀態(tài)的不連續(xù)造成數(shù)據缺失、數(shù)據重復消費等問題，提高了程序的可用性。