Spark應用程序控制方法及控制裝置

基本信息

申請?zhí)?/td> CN201811580726.1 申請日 -
公開（公告）號 CN109634784B 公開（公告）日 2021-02-26
申請公布號 CN109634784B 申請公布日 2021-02-26
分類號 G06F11/14(2006.01)I 分類 計算；推算；計數;
發(fā)明人 文燕軍;盧春洋;吳文鈞 申請（專利權）人 康成投資（中國）有限公司
代理機構 上海盈盛知識產權代理事務所（普通合伙） 代理人 孫佳胤;陳麗麗
地址 200436上海市共和新路3318號
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及通信技術領域，尤其涉及一種Spark應用程序控制方法及控制裝置。所述Spark應用程序控制方法，包括如下步驟：判斷Spark應用程序的歷史狀態(tài)參數是否有效，若是，則將所述歷史狀態(tài)參數加入所述Spark應用程序的運行環(huán)境；根據獲取的歷史狀態(tài)參數運行所述Spark應用程序；判斷所述Spark應用程序是否出現運行異常，若是，則保留所述Spark應用程序的當前狀態(tài)參數；存儲所述當前狀態(tài)參數于管理員中，以更新所述歷史狀態(tài)參數。本發(fā)明確保Spark應用程序運行的可承接性，避免因狀態(tài)的不連續(xù)造成數據缺失、數據重復消費等問題，提高了程序的可用性。??