https://blog.csdn.net/weixin_46560589/article/details/128675441 文章【Kubernetes 企业项目实战】03、基于 Alertmanager 发送报警到多个接收方（下）中实验所需的文件资料！

Prometheus和Grafana是两种广泛使用的开源监控工具，在IT领域特别是大数据和云计算环境中非常关键。Prometheus是一款强大的时间序列数据库和监视系统，而Grafana则是一个优秀的数据可视化平台，能够将Prometheus等监控系统的数据以图表的形式展示出来，帮助运维人员更好地理解和分析系统性能。 在"spark_prometheus_metrics.json"这个文件中，我们可以推测它涉及到的是Apache Spark与Prometheus之间的集成，用于暴露Spark作业和集群的监控指标。Apache Spark是一个快速、通用且可扩展的大数据处理框架，它支持批处理、交互式查询、流处理和机器学习等多种工作负载。在大规模分布式计算环境中，监控Spark的性能和健康状况至关重要，这正是Prometheus的角色所在。 在Spark中集成Prometheus，通常会通过一个名为`spark-prometheus-exporter`的项目，它是一个Prometheus的客户端库，能够收集Spark作业和集群的JMX（Java Management Extensions）或HTTP端点上的度量数据，并将这些数据暴露给Prometheus服务器抓取。"spark_prometheus_metrics.json"可能是这个库的配置文件，用于定义哪些指标应被导出，以及如何导出。配置可能包括指标名称、指标类型、标签等信息。 例如，文件可能包含关于以下内容的配置： 1. **任务执行时间**：记录Spark作业中各个阶段的执行时间，如shuffle read time、shuffle write time、task time等。 2. **内存使用**：监控executor内存的分配和使用情况，包括executor total memory、used memory、peak memory等。 3. **CPU利用率**：追踪每个executor的CPU使用率，以及整个集群的CPU利用率。 4. **数据读写**：统计输入和输出的数据量，如bytes read、bytes written等。 5. **错误和异常**：监控作业中的错误事件，如task failures、application exceptions等。 集成完成后，Prometheus会定期拉取这些指标，并存储在自己的时序数据库中。Grafana可以通过Prometheus作为数据源，创建丰富的仪表板，展示Spark作业的实时状态和历史性能趋势。例如，可以创建图表展示任务执行时间的分布，内存和CPU的使用率变化，以及数据读写的速率等。 在"soft"这个文件或目录下，可能包含了安装或配置Prometheus和Grafana所需的软件包，比如Prometheus的二进制文件、配置文件，以及Grafana的安装包等。安装和配置过程中，需要注意以下几个步骤： 1. **安装Prometheus**：下载并解压Prometheus的最新版本，配置`prometheus.yml`以指向`spark-prometheus-exporter`的服务端点。 2. **安装spark-prometheus-exporter**：根据Spark版本选择合适的版本，将其部署到Spark集群节点上，配置相关参数以收集Spark指标。 3. **安装Grafana**：下载并启动Grafana，添加Prometheus为数据源，配置好URL和认证信息。 4. **创建Dashboard**：在Grafana中创建新的仪表板，选择合适的图表类型，利用Prometheus中的Spark指标构建监控视图。 5. **监控和报警**：设置Prometheus的规则文件，定义告警条件，当特定指标超过阈值时，触发报警通知。 通过这种方式，IT团队可以及时发现和解决Spark作业中的性能瓶颈，优化资源利用率，确保大数据处理的稳定性和效率。Prometheus和Grafana的组合提供了强大而灵活的监控能力，对于任何使用Spark的组织来说都是不可或缺的工具。

Prometheus+Grafana监控部署（基于ARM）

（二） prometheus + grafana + alertmanager 配置Mysql监控-附件资源

开发过程中应用到的安装包软件： alertmanager-0.25.0.linux-amd64.tar.gz alertmanager-0.25.0.windows-amd64.zip grafana-enterprise-9.3.6.windows-amd64.zip node_exporter-1.5.0.linux-amd64.tar.gz prometheus-2.41.0.linux-amd64.tar.gz prometheus-2.41.0.windows-amd64.zip windows_exporter-0.21.0-amd64.msi

https://blog.csdn.net/weixin_46560589/article/details/128636412 文章【Kubernetes 企业项目实战】02、基于 Prometheus 和 K8s 构建智能化监控告警系统（下）安装 grafana 所需的资源文件。

server-backup，是一个server的辅助工具，作用相当于agent，用于当server因为网络原因无法访问被监控的数据源、数据表、数通PING、 数通SNMP、服务接口时，将其(server-backup)部署到可访问的网络环境，接替server，实现扫描监测数据源、数据表、数通PING、数通SNMP、 服务接口，server-backup会定时给server上报监控状态数据。另外server-backup是兼容之前版本的，比如server-backup-v3.4.2-rc1就可以配合辅助server-v3.4.1、server-v3.4.2使用。 更多使用说明参考 http://www.wgstart.com

Prometheus是一个开源的系统监控和报警系统，现在已经加入到CNCF基金会，成为继k8s之后第二个在CNCF托管的项目，在kubernetes容器管理系统中，通常会搭配prometheus进行监控，同时也支持多种exporter采集数据，还支持pushgateway进行数据上报，Prometheus性能足够支撑上万台规模的集群。

node_exporter + prometheus + grafana 安装包。

资源包内容： prometheus-2.37.2 + grafana-9.2.0 + node_exporter-1.4.0 配套文章： 【RuoYi-Vue-Plus】扩展笔记 07 - CentOS 7 集成 Prometheus + Grafana 监控初体验（https://editor.csdn.net/md?articleId=127861378）