PK體系下基于容器化技術(shù)構(gòu)建和監(jiān)控Hadoop集群與告警的方法

基本信息

申請?zhí)?/td> CN202010978399.6 申請日 -
公開（公告）號 CN112084009A 公開（公告）日 2020-12-15
申請公布號 CN112084009A 申請公布日 2020-12-15
分類號 G06F9/455;G06F11/30 分類 計算；推算；計數(shù);
發(fā)明人 高曉飛;杜變霞;曹科寧;聶芳華;張航 申請（專利權(quán)）人 湖南長城科技信息有限公司
代理機構(gòu) 長沙市護航專利代理事務(wù)所（特殊普通合伙） 代理人 莫曉齊
地址 410000 湖南省長沙市高新區(qū)尖山路中電軟件園19棟5樓
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了PK體系下基于容器化技術(shù)構(gòu)建和監(jiān)控Hadoop集群與告警的方法，包括：S1，在基于PK體系的節(jié)點服務(wù)器上搭建k8s并部署應(yīng)用的鏡像倉庫服務(wù)；S2，在k8s上部署Prometheus，包括創(chuàng)建Prometheus的自定義對象Alertmanager、PrometheusRule、Prometheus、PodMonitor和ServiceMonitor及其他Prometheus組件，并配置Grafana進行圖形化界面顯示；S3，在k8s上搭建Hadoop集群，包括部署Hadoop集群的HDFS集群和YARN集群；S4，在節(jié)點服務(wù)器上部署Hadoop_exporter并采集Hadoop集群的監(jiān)控數(shù)據(jù)按照容器監(jiān)控平臺規(guī)定的格式提供數(shù)據(jù)接口，容器監(jiān)控平臺調(diào)用Hadoop_exporter數(shù)據(jù)接口獲取采集的監(jiān)控數(shù)據(jù)；S5，通過PrometheusRule對象創(chuàng)建告警規(guī)則，Alertmanager接收Prometheus的告警信息并通知用戶。本發(fā)明整個部署可一鍵部署，快速簡潔，滿足數(shù)據(jù)分析人員、測試人員、運維人員在軟件開發(fā)、應(yīng)用和管理工作中的需求。