Docker环境搭建Prometheus实验环境

环境：
OS：Centos7
Docker: 20.10.9 - Community

Centos部署Docker
【Kubernetes】Centos中安装Docker和Minikube_云服务器安装docker和minikube_DivingKitten的博客-CSDN博客

一、拉取Prometheus镜像

## 拉取镜像
docker pull prom/prometheus
## 启动promtheus
docker run --name prometheus -p 9090:9090 -d prom/prometheus## copy 配置文件至本地
docker cp prometheus:/etc/prometheus/prometheus.yml ./

用浏览器访问Prometheus前端：http://192.168.56.110:9090
image.png

二、部署node_exporter

1、安装服务

从github下载发行版，通过systemd进行管理。
github:node_exporter

## 从github下载发行版
wget https://github.com/prometheus/node_exporter/releases/download/v1.6.1/node_exporter-1.6.1.linux-amd64.tar.gz## 解压文件
tar -xf node_exporter-1.6.1.linux-amd64.tar.gz## 创建软链接方便以后升级
ln -s ./node_exporter-1.6.1.linux-amd64 ./node_exporter

创建service文件，保存在/usr/lib/systemd/system/目录下

[Unit]
Description=Prometheus Node Exporter
After=network.target[Service]
Type=simple
User=root
Group=root
ExecStart=/root/docker/prometheus/node_exporter/node_exporter
Restart=on-failure[Install]
WantedBy=multi-user.target

1、ExecStart表示执行文件位置，根据实际情况具体修改
2、node_exporter默认监控端口是9100，如需修改端口，可以追加启动参数：
–web.listen-address=:8100

启动node_exporter服务，并设置为开机器自动启动

systemctl daemon-reload
systemctl start node-exporter
systemctl enable node-exporter## 检查端口
$ netstat -nltp | grep 9100
tcp6       0      0 :::9100                 :::*                    LISTEN      23431/node_exporter
## 检查监控可用性
$ curl http://127.0.0.1:9100/metrics
# HELP go_gc_duration_seconds A summary of the pause duration of garbage collection cycles.
# TYPE go_gc_duration_seconds summary
go_gc_duration_seconds{quantile="0"} 3.0135e-05
go_gc_duration_seconds{quantile="0.25"} 3.6243e-05
go_gc_duration_seconds{quantile="0.5"} 3.9298e-05
go_gc_duration_seconds{quantile="0.75"} 4.4272e-05
go_gc_duration_seconds{quantile="1"} 0.000111722
go_gc_duration_seconds_sum 0.080724852
go_gc_duration_seconds_count 1900
# HELP go_goroutines Number of goroutines that currently exist.
# TYPE go_goroutines gauge
go_goroutines 7
# HELP go_info Information about the Go environment.
# TYPE go_info gauge
go_info{version="go1.19.1"} 1
.....
....

2、配置target

在Prometheus配置scrape_configs中追加target

scrape_configs:- job_name: "node_exporter"static_configs:- targets: ["192.168.56.110:9100"]

由于Prometheus运行在容器中，所以不能通过127.0.0.1找到宿主机上的node_exporter，可以通过宿主机的网卡IP进行访问

然后将配置拷贝到容器中，重启Prometheus或者调用接口重载配置

## 覆盖配置
docker cp ./prometheus.yml prometheus:/etc/prometheus/prometheus.yml
## 重启Prometheus
docker restart prometheus

如果是将配置文件挂在到容器中，则不需要每次都copy配置至容器内

三、部署Blackbox_exporer

1、安装服务

流程和node_exporter部署相同，从github下载发行版，通过systemd进行管理。
github:blackbox_exporter

## 从github下载发行版
wget https://github.com/prometheus/blackbox_exporter/releases/download/v0.23.0/blackbox_exporter-0.23.0.linux-amd64.tar.gz## 解压文件
tar -xf blackbox_exporter-0.23.0.linux-amd64## 创建软链接方便以后升级
ln -s ./blackbox_exporter-0.23.0.linux-amd64 ./blackbox_exporter

创建service文件，保存在/usr/lib/systemd/system/目录下

[Unit]
Description=Prometheus blackbox Exporter
After=network.target[Service]
Type=simple
User=root
Group=root
ExecStart=/root/docker/prometheus/blackbox_exporter/blackbox_exporter --config.file=/root/docker/prometheus/blackbox_exporter/blackbox.yml
Restart=on-failure[Install]
WantedBy=multi-user.target

1、ExecStart表示执行文件位置，根据实际文件位置修改
2、–config.file根据实际blackbox_exporter配置配置修改
2、node_exporter默认监控端口是9115，如需修改端口，可以追加启动参数：
–web.listen-address=:9195

启动blackbox_exporter服务，并设置为开机器自动启动

systemctl daemon-reload
systemctl start node-exporter
systemctl enable node-exporter## 检查端口
[root@VM-8-11-centos system]# netstat -nltp | grep 9115
tcp6       0      0 :::9115                 :::*                    LISTEN      10150/blackbox_expo

2、配置target

在Prometheus配置scrape_configs中追加target

scrape_configs:- job_name: "blackbox_exporter"metrics_path: /probestatic_configs:- targets: ["192.168.56.110:9195"]relabel_configs:- source_labels: [__address__]target_label: __param_target- source_labels: [__param_target]target_label: instance

由于Prometheus运行在容器中，所以不能通过127.0.0.1找到宿主机上的node_exporter，可以通过宿主机的网卡IP进行访问

然后重启Prometheus或者调用接口重载配置

## 覆盖配置
docker cp ./prometheus.yml prometheus:/etc/prometheus/prometheus.yml
## 重启Prometheus
docker restart prometheus

四、部署Grafana

1、安装服务

拉取镜像并启动

docker pull grafana/grafana-ossdocker run -d -p 3000:3000 --name grafana grafana/grafana-oss

初次登录没有密码，然后设置数据源来自Prometheus，测试通过才会正式保存。
image.png
image.png
image.png
image.png

2、添加视图

在grafana的dashboard市场里有很多现成的视图，可以直接导入，node_exporter和blackbox_exporter都有现成的视图
官方dashboard市场：
Dashboards | Grafana Labs
Node_exporter视图：
Node Exporter Full | Grafana Labs
Blackbox_exporter视图：
Prometheus Blackbox Exporter | Grafana Labs

导航到Dashboard–> import ，填入从官网copy的ID，本地的grfana会自动到官网下载对应dashboard的json信息
image.png
image.png
选择好默认的数据源，点击import等待一会儿，就会自动跳转到对应的监控视图上
image.png
image.png
在search dashboard导航里也可以找到刚加的监控视图
image.png

五、部署Alertmanager

1、部署服务

alertmanager和Prometheus是独立发布的，使用前需要确认版本兼容关系，一般情况最新版之间都是兼容的

## 拉取镜像
docker pull prom/alertmanager## 启动容器
docker run --name alertmanager -d -p 9093:9093 prom/alertmanager

访问前端页面
image.png

2、配置Prometheus

在Prometheus配置中修改alertmanager的IP，由于alertmanager也运行在容器当中，因此也通过宿主机IP+端口的方式进行访问

alerting:alertmanagers:- static_configs:- targets:- 192.168.56.110:9093

3、添加告警规则

然后添加告警规则，创建rules.yml文件

groups:
- name: Instancerules:- alert: InstanceDownexpr: up != 1for: 1mlabels:severity: infoannotations:summary: "{{ $labels.instance }}"description: "{{ $labels.instance }} of job {{ $labels.job }} has been in an unhealthy state for more than 1 minutes."

然后将rules文件复制到容器中，确认Prometheus已添加rules文件，重启Prometheus

rule_files:- "/etc/prometheus/rules.yml"

docker cp ./rules.yml prometheus:/etc/prometheus/rules.yml
docker restart prometheus

然后可以在Prometheus前端查看到刚配置的告警规则和告警触发情况
image.png
image.png

五、模拟触发告警

前面添加的规则时当有一个target的监控任务指标up!=0触发，因此手动停止blackbox_exporter来触发一个告警。
停用blackbox_exporter之前，检索up

停用blackbox_exporter

systemctl stop blackbox-exporter

当blackbox_exporter停用后，可以看到带有lable：job="blackbox_exporter"的up数据变成0，触发了告警
image.png
image.png
由于告警规则中for: 1m1分钟后发送告警，因此alertmanager需要再触发告警规则(up!=1)一分钟后才会收到告警信息。
image.png
重新启动blackbox_exporter

systemctl start blackbox-exporter

image.png
告警已经关闭
image.png
image.png

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/63446.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

今天使用python进行开发

今天使用python进行开发

前言：相信看到这篇文章的小伙伴都或多或少有一些编程基础，懂得一些linux的基本命令了吧，本篇文章将带领大家服务器如何部署一个使用django框架开发的一个网站进行云服务器端的部署。 文章使用到的的工具 Python：一种编程语言&…
阅读更多...
OpenCV（十一）：图像仿射变换

OpenCV（十一）：图像仿射变换

目录 1.图像仿射变换介绍 仿射变换： 仿射变换矩阵： 仿射变换公式： 2.仿射变换函数 仿射变换函数：warpAffine() 图像旋转：getRotationMatrix2D() 计算仿射变换矩阵：getAffineTransform() 3.demo 1.…
阅读更多...
Java 枚举是什么？什么是枚举类？枚举类的用途？

Java 枚举是什么？什么是枚举类？枚举类的用途？

目录 1. 什么是枚举？ 2. 枚举类 3. 枚举类的用途 1. 什么是枚举？ 我们可以从字面意思来理解，枚：一枚一枚的，举：举例，举出，将二者意思结合起来可以理解为一个一个的举出。 这样听…
阅读更多...
浅谈城市轨道交通视频监控与AI视频智能分析解决方案

浅谈城市轨道交通视频监控与AI视频智能分析解决方案

一、背景分析 地铁作为重要的公共场所交通枢纽，流动性非常高、人员大量聚集，轨道交通需要利用视频监控系统来实现全程、全方位的安全防范，这也是保证地铁行车组织和安全的重要手段。调度员和车站值班员通过系统监管列车运行、客流情况、变电…
阅读更多...
ESLint 中的“ space-before-function-paren ”相关报错及其解决方案

ESLint 中的“ space-before-function-paren ”相关报错及其解决方案

ESLint 中的“ space-before-function-paren ”相关报错及其解决方案 出现的问题及其报错： 在 VScode 中，在使用带有 ESLint 工具的项目中，保存会发现报错，并且修改好代码格式后，保存会发现代码格式依然出现问题&…
阅读更多...
MySQL数据库学习【进阶篇】

MySQL数据库学习【进阶篇】

MySQL数据库学习进阶篇 MySQL进阶篇已经更新完毕，点击网址查看👉：MySQL数据库进阶篇
阅读更多...
十五、pikachu之CSRF

十五、pikachu之CSRF

文章目录 一、CSRF概述二、CSRF实战2.1 CSRF(get)2.2 CSRF之token 一、CSRF概述 Cross-site request forgery 简称为“CSRF”，在CSRF的攻击场景中攻击者会伪造一个请求（这个请求一般是一个链接），然后欺骗目标用户进行点击&#xf…
阅读更多...
基于白鲸算法优化的BP神经网络（预测应用） - 附代码

基于白鲸算法优化的BP神经网络（预测应用） - 附代码

基于白鲸算法优化的BP神经网络（预测应用） - 附代码 文章目录 基于白鲸算法优化的BP神经网络（预测应用） - 附代码1.数据介绍2.白鲸优化BP神经网络2.1 BP神经网络参数设置2.2 白鲸算法应用 4.测试结果：5.Matlab代码 摘要…
阅读更多...
k8s 启动和删除pod

k8s 启动和删除pod

k8s创建pod pod的启动流程 流程图 运维人员向kube-apiserver发出指令（我想干什么，我期望事情是什么状态） api响应命令,通过一系列认证授权,把pod数据存储到etcd,创建deployment资源并初始化。(期望状态） controller通过list-wa…
阅读更多...
jenkins 发布job切换不同的jdk版本/ maven版本

jenkins 发布job切换不同的jdk版本/ maven版本

1. 技术要求 因为有个新的项目需要使用jdk17 而旧的项目需要jdk1.8 这就需要jenkins在发布项目的时候可以指定jdk版本 2. 解决 jenkins全局工具配置页面 配置新的jdk 路径 系统管理-> 全局工具配置 如上新增个jdk 名称叫 jdk-17 然后配置jdk-17的根路径即可（这…
阅读更多...
强化自主可控，润开鸿发布基于RISC-V架构的开源鸿蒙终端新品

强化自主可控，润开鸿发布基于RISC-V架构的开源鸿蒙终端新品

2023 RISC-V中国峰会于8月23日至25日在北京召开,峰会以“RISC-V生态共建”为主题,结合当下全球新形势,把握全球新时机,呈现RISC-V全球新观点、新趋势。本次大会邀请了RISC-V国际基金会、业界专家、企业代表及社区伙伴等共同探讨RISC-V发展趋势与机遇,吸引超过百余家业界企业、高…
阅读更多...
【Go 基础篇】Go语言中的自定义错误处理

【Go 基础篇】Go语言中的自定义错误处理

错误是程序开发过程中不可避免的一部分，而Go语言以其简洁和高效的特性闻名。在Go中，自定义错误（Custom Errors）是一种强大的方式，可以为特定应用场景创建清晰的错误类型，以便更好地处理和调试问题。本文将详…
阅读更多...
关于Incapsula reese84加密的特征研究

关于Incapsula reese84加密的特征研究

最近研究了下reese84的加密算法，基本上两个参数的加密__utmvc和token，因为nodejs调用会有内存问题，没有采用补环境的方式解决，用python扣的算法 1:__utmvc参数的生成是一个ob混淆，ast处理之后调试难度不是很大 测试结…
阅读更多...
OpenCV（二）：认识Mat容器

OpenCV（二）：认识Mat容器

目录 1.什么是Mat类 2.Mat类能存储的数据 整数类型（有符号和无符号）： 浮点数类型： 布尔类型： 3.Mat类的创建 1.利用矩阵宽、高和类型参数创建Mat类 2.利用矩陈Size(结构和数据类型参数创建Mat类 3.利用已有Mat…
阅读更多...
红石外汇｜每日汇评：如非农数据疲软的情况下，黄金是否会突破1955美元的100日移动平均线？

红石外汇｜每日汇评：如非农数据疲软的情况下，黄金是否会突破1955美元的100日移动平均线？

1、金价已进入 1,950 美元下方盘整阶段，关注美国非农就业数据； 2、在关键就业数据和美国劳工节长周末之前，美元出现空头回补； 3、9月份开始，金价关注 100 日移动平均线 1955 美元； 金价交易接近一个月高点…
阅读更多...
Windows右键添加用 IDEA 打开

Windows右键添加用 IDEA 打开

1.安装IDEA时 安装时会有个选项来添加，如下： 勾选即可 2.修改注册表 安装时未勾选，可以把下面代码中程序路径改为自己的，保存为对应的 idea.reg文件，双击即可 Windows Registry Editor Version 5.00[HKEY_CLASSES…
阅读更多...
Golang单元测试举例

Golang单元测试举例

1.第一个例子 cal.go package mainfunc addUpper(n int) int {res : 0for i : 1; i < n; i {res i}return res }func getSub(n1 int, n2 int) int {return n1 - n2 }cal_test.go package main//测试文件名必须是_test.go结尾 //测试函数必须Test开头 import ("fmt…
阅读更多...
视频监控人员行为识别算法

视频监控人员行为识别算法

视频监控人员行为识别算法通过opencvpython网络模型框架算法&#xff0c;视频监控人员行为识别算法可以识别和判断员工的行为是否符合规范要求&#xff0c;一旦发现不符合规定的行为&#xff0c;视频监控人员行为识别算法将自动发送告警信息。OpenCV的全称是Open Source Comput…
阅读更多...
通过 Jetbrains GateWay实现Remote Development

通过 Jetbrains GateWay实现Remote Development

本次环境准备 环境准备&#xff1a;win10、一台安装有树莓派系统的树莓派&#xff08;也可以是其他的服务器&#xff09; 第一步&#xff1a;通过官网下载JetBrains Gateway 官网地址&#xff1a;https://www.jetbrains.com/remote-development/gateway/ 第二步&#xff1a;安装…
阅读更多...
python3+requests+unittest：接口自动化测试（一）

python3+requests+unittest：接口自动化测试（一）

简单介绍框架的实现逻辑&#xff0c;参考代码的git地址&#xff1a; GitHub - zhangying123456/python_unittest_interface: pythonunittest接口自动化测试脚本 1.环境准备 python3 pycharm编辑器 2.框架目录展示 &#xff08;该套代码只是简单入门&#xff0c;有兴趣的可…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023