Docker环境搭建Prometheus实验环境

环境：
OS：Centos7
Docker: 20.10.9 - Community

Centos部署Docker
【Kubernetes】Centos中安装Docker和Minikube_云服务器安装docker和minikube_DivingKitten的博客-CSDN博客

一、拉取Prometheus镜像

## 拉取镜像
docker pull prom/prometheus
## 启动promtheus
docker run --name prometheus -p 9090:9090 -d prom/prometheus## copy 配置文件至本地
docker cp prometheus:/etc/prometheus/prometheus.yml ./

用浏览器访问Prometheus前端：http://192.168.56.110:9090
image.png

二、部署node_exporter

1、安装服务

从github下载发行版，通过systemd进行管理。
github:node_exporter

## 从github下载发行版
wget https://github.com/prometheus/node_exporter/releases/download/v1.6.1/node_exporter-1.6.1.linux-amd64.tar.gz## 解压文件
tar -xf node_exporter-1.6.1.linux-amd64.tar.gz## 创建软链接方便以后升级
ln -s ./node_exporter-1.6.1.linux-amd64 ./node_exporter

创建service文件，保存在/usr/lib/systemd/system/目录下

[Unit]
Description=Prometheus Node Exporter
After=network.target[Service]
Type=simple
User=root
Group=root
ExecStart=/root/docker/prometheus/node_exporter/node_exporter
Restart=on-failure[Install]
WantedBy=multi-user.target

1、ExecStart表示执行文件位置，根据实际情况具体修改
2、node_exporter默认监控端口是9100，如需修改端口，可以追加启动参数：
–web.listen-address=:8100

启动node_exporter服务，并设置为开机器自动启动

systemctl daemon-reload
systemctl start node-exporter
systemctl enable node-exporter## 检查端口
$ netstat -nltp | grep 9100
tcp6       0      0 :::9100                 :::*                    LISTEN      23431/node_exporter
## 检查监控可用性
$ curl http://127.0.0.1:9100/metrics
# HELP go_gc_duration_seconds A summary of the pause duration of garbage collection cycles.
# TYPE go_gc_duration_seconds summary
go_gc_duration_seconds{quantile="0"} 3.0135e-05
go_gc_duration_seconds{quantile="0.25"} 3.6243e-05
go_gc_duration_seconds{quantile="0.5"} 3.9298e-05
go_gc_duration_seconds{quantile="0.75"} 4.4272e-05
go_gc_duration_seconds{quantile="1"} 0.000111722
go_gc_duration_seconds_sum 0.080724852
go_gc_duration_seconds_count 1900
# HELP go_goroutines Number of goroutines that currently exist.
# TYPE go_goroutines gauge
go_goroutines 7
# HELP go_info Information about the Go environment.
# TYPE go_info gauge
go_info{version="go1.19.1"} 1
.....
....

2、配置target

在Prometheus配置scrape_configs中追加target

scrape_configs:- job_name: "node_exporter"static_configs:- targets: ["192.168.56.110:9100"]

由于Prometheus运行在容器中，所以不能通过127.0.0.1找到宿主机上的node_exporter，可以通过宿主机的网卡IP进行访问

然后将配置拷贝到容器中，重启Prometheus或者调用接口重载配置

## 覆盖配置
docker cp ./prometheus.yml prometheus:/etc/prometheus/prometheus.yml
## 重启Prometheus
docker restart prometheus

如果是将配置文件挂在到容器中，则不需要每次都copy配置至容器内

三、部署Blackbox_exporer

1、安装服务

流程和node_exporter部署相同，从github下载发行版，通过systemd进行管理。
github:blackbox_exporter

## 从github下载发行版
wget https://github.com/prometheus/blackbox_exporter/releases/download/v0.23.0/blackbox_exporter-0.23.0.linux-amd64.tar.gz## 解压文件
tar -xf blackbox_exporter-0.23.0.linux-amd64## 创建软链接方便以后升级
ln -s ./blackbox_exporter-0.23.0.linux-amd64 ./blackbox_exporter

创建service文件，保存在/usr/lib/systemd/system/目录下

[Unit]
Description=Prometheus blackbox Exporter
After=network.target[Service]
Type=simple
User=root
Group=root
ExecStart=/root/docker/prometheus/blackbox_exporter/blackbox_exporter --config.file=/root/docker/prometheus/blackbox_exporter/blackbox.yml
Restart=on-failure[Install]
WantedBy=multi-user.target

1、ExecStart表示执行文件位置，根据实际文件位置修改
2、–config.file根据实际blackbox_exporter配置配置修改
2、node_exporter默认监控端口是9115，如需修改端口，可以追加启动参数：
–web.listen-address=:9195

启动blackbox_exporter服务，并设置为开机器自动启动

systemctl daemon-reload
systemctl start node-exporter
systemctl enable node-exporter## 检查端口
[root@VM-8-11-centos system]# netstat -nltp | grep 9115
tcp6       0      0 :::9115                 :::*                    LISTEN      10150/blackbox_expo

2、配置target

在Prometheus配置scrape_configs中追加target

scrape_configs:- job_name: "blackbox_exporter"metrics_path: /probestatic_configs:- targets: ["192.168.56.110:9195"]relabel_configs:- source_labels: [__address__]target_label: __param_target- source_labels: [__param_target]target_label: instance

由于Prometheus运行在容器中，所以不能通过127.0.0.1找到宿主机上的node_exporter，可以通过宿主机的网卡IP进行访问

然后重启Prometheus或者调用接口重载配置

## 覆盖配置
docker cp ./prometheus.yml prometheus:/etc/prometheus/prometheus.yml
## 重启Prometheus
docker restart prometheus

四、部署Grafana

1、安装服务

拉取镜像并启动

docker pull grafana/grafana-ossdocker run -d -p 3000:3000 --name grafana grafana/grafana-oss

初次登录没有密码，然后设置数据源来自Prometheus，测试通过才会正式保存。
image.png
image.png
image.png
image.png

2、添加视图

在grafana的dashboard市场里有很多现成的视图，可以直接导入，node_exporter和blackbox_exporter都有现成的视图
官方dashboard市场：
Dashboards | Grafana Labs
Node_exporter视图：
Node Exporter Full | Grafana Labs
Blackbox_exporter视图：
Prometheus Blackbox Exporter | Grafana Labs

导航到Dashboard–> import ，填入从官网copy的ID，本地的grfana会自动到官网下载对应dashboard的json信息
image.png
image.png
选择好默认的数据源，点击import等待一会儿，就会自动跳转到对应的监控视图上
image.png
image.png
在search dashboard导航里也可以找到刚加的监控视图
image.png

五、部署Alertmanager

1、部署服务

alertmanager和Prometheus是独立发布的，使用前需要确认版本兼容关系，一般情况最新版之间都是兼容的

## 拉取镜像
docker pull prom/alertmanager## 启动容器
docker run --name alertmanager -d -p 9093:9093 prom/alertmanager

访问前端页面
image.png

2、配置Prometheus

在Prometheus配置中修改alertmanager的IP，由于alertmanager也运行在容器当中，因此也通过宿主机IP+端口的方式进行访问

alerting:alertmanagers:- static_configs:- targets:- 192.168.56.110:9093

3、添加告警规则

然后添加告警规则，创建rules.yml文件

groups:
- name: Instancerules:- alert: InstanceDownexpr: up != 1for: 1mlabels:severity: infoannotations:summary: "{{ $labels.instance }}"description: "{{ $labels.instance }} of job {{ $labels.job }} has been in an unhealthy state for more than 1 minutes."

然后将rules文件复制到容器中，确认Prometheus已添加rules文件，重启Prometheus

rule_files:- "/etc/prometheus/rules.yml"

docker cp ./rules.yml prometheus:/etc/prometheus/rules.yml
docker restart prometheus

然后可以在Prometheus前端查看到刚配置的告警规则和告警触发情况
image.png
image.png

五、模拟触发告警

前面添加的规则时当有一个target的监控任务指标up!=0触发，因此手动停止blackbox_exporter来触发一个告警。
停用blackbox_exporter之前，检索up

停用blackbox_exporter

systemctl stop blackbox-exporter

当blackbox_exporter停用后，可以看到带有lable：job="blackbox_exporter"的up数据变成0，触发了告警
image.png
image.png
由于告警规则中for: 1m1分钟后发送告警，因此alertmanager需要再触发告警规则(up!=1)一分钟后才会收到告警信息。
image.png
重新启动blackbox_exporter

systemctl start blackbox-exporter

image.png
告警已经关闭
image.png
image.png

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.rhkb.cn/news/115704.html

如若内容造成侵权/违法违规/事实不符，请联系长河编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

【MySQL系列】索引的学习及理解

【MySQL系列】索引的学习及理解

「前言」文章内容大致是MySQL索引的学习。 「归属专栏」MySQL 「主页链接」个人主页 「笔者」枫叶先生(fy) 目录 一、索引概念二、从硬件角度理解2.1 磁盘2.2 结论 三、从软件角度理解四、共识五、索引的理解5.1 一个现象和结论5.2 对Page进行建模5.3 索引可以采用的数据结构5.…
阅读更多...
同创永益入选首批“金融数字韧性与混沌工程实践试点机构”

同创永益入选首批“金融数字韧性与混沌工程实践试点机构”

8月16日下午，由北京国家金融科技认证中心、北京国家金融标准化研究院联合主办的“传递信任 服务发展”金融科技标准认证生态大会在太原成功举办。中国金融电子化集团有限公司党委书记、董事长周逢民，中国科学院院士冯登国，中国工商银行首席技…
阅读更多...
STM32 RTC实验

STM32 RTC实验

RTC时钟简介 STM32F103的实时时钟（RTC）是一个独立的定时器。 STM32的RTC模块拥有一组连续计数的计数器，在相对应的软件配置下，可提供时钟日历的功能。 修改计数器的值可以重新设置系统的当前时间和日期。 RTC模块和时钟配置系统…
阅读更多...
DEAP库文档教程三-----创建类型

DEAP库文档教程三-----创建类型

本节将继续展示如何通过creator创建类型以及如何使用toolbox如何对复杂问题进行初始化。 Particle的初始化--粒子初始化 一个Particle是另一个特殊类型的个体，这是因为通常情况下它有一个速度，并且有一个最优的位置需要去记忆。这种类型个体的创建与通…
阅读更多...
Redis 7 第六讲 主从模式（replica）

Redis 7 第六讲 主从模式（replica）

🌹🌹🌹 此篇开始进入高级篇范围(❤艸｀❤) 理论 即主从复制，master以写为主，Slave以读为主。当master数据变化的时候，自动将新的数据异步同步到其它slave数据库。 使用场景 读写分离 容灾备份数据备份水平扩容主从架构 演示案例 注：masterauth、replicaof主…
阅读更多...
JDBC连接数据库

JDBC连接数据库

目录 一.什么是JDBC 二.JDBC的实现步骤 三.简单使用JDBC 一.什么是JDBC JDBC是Java数据库连接，是java中提供数据库访问的Java API,它为关系型数据库的提供了统一访问规范。 二.JDBC的实现步骤 1.创建数据库连接 这里有两种方式: DataSource创建，提…
阅读更多...
【Python从入门到进阶】34、selenium基本概念及安装流程

【Python从入门到进阶】34、selenium基本概念及安装流程

接上篇《33、使用bs4获取星巴克产品信息》 上一篇我们介绍了如何使用bs4来解析星巴克网站，获取其产品信息。本篇我们来了解selenium技术的基础。 一、什么是selenium？ Selenium是一种用于自动化Web浏览器操作的开源工具。它提供了一组API（应…
阅读更多...
go锁-互斥锁

go锁-互斥锁

go锁-互斥锁 sema初始值是0，waitershift等待协程的数量 正常枷锁： 尝试CAS直接加锁，通过原子包给lockerd 为枷锁 若无法直接获取，进行多次自旋尝试，未获取到的锁的g ，多次执行空语句，多次尝试…
阅读更多...
如何为 Flutter 应用程序创建环境变量

如何为 Flutter 应用程序创建环境变量

我们为什么需要环境变量？ 主要用于存储高级机密数据，如果泄露可能会危及您产品的安全性。这些变量本地存储在每个用户的本地系统中，不应该签入存储库。每个用户都有这些变量的副本。 配置 在根项目中创建一个名为 .env 的文件夹&#xff08…
阅读更多...
【UE 材质】模型部分透明

【UE 材质】模型部分透明

材质节点如下，这里简单解释一下。首先通过“Mask”节点将"Texture Coordinate" 节点中的“G”通道分离出来，然后通过“if”节点进行判断，当值小于0.5时为透明，当颜色不小于5时为不透明。可以通过一个参数来控制模型透明…
阅读更多...
四、MySQL(表操作)如何添加字段？修改表？删除字段？修改表名？删除表？格式化某张表？

四、MySQL(表操作)如何添加字段？修改表？删除字段？修改表名？删除表？格式化某张表？

1、添加字段 （1）基础语法： alter table 表名 add 字段名 类型名(长度) [comment注释] [约束]; （2）示例：添加nickname这个字段 2、修改表 修改表中某个字段的【数据类型】/【数据类型&字段名】 &…
阅读更多...
ArcGIS土地利用程度综合指数分析

ArcGIS土地利用程度综合指数分析

成图展示： 土地利用程度综合指数 第一步 准备数据 使用的数据为2010年河南省土地利用类型数据与其行政区划县级数据（为了节省操作，这里使用上次实验的部分数据[1]，各土地利用类型已被提取） 第二步 面积统计 水域为例…
阅读更多...
weblogic/CVE-2018-2894文件上传漏洞复现

weblogic/CVE-2018-2894文件上传漏洞复现

启动docker环境 查看帮助文档 环境启动后，访问http://your-ip:7001/console，即可看到后台登录页面。 执行docker-compose logs | grep password可查看管理员密码，管理员用户名为weblogic，密码为lFVAJ89F 登录后台页面，…
阅读更多...
openssh---Windows下git安装配置gitlab

openssh---Windows下git安装配置gitlab

安装openssh 1. 专业版Win10/11默认自带，可以查看是否开启 1. Get-WindowsCapability -Online | Where-Object Name -like OpenSSH* 2. Add-WindowsCapability -Online -Name OpenSSH.Client~~~~0.0.1.0 3. Add-WindowsCapability -Online -Name OpenSSH.Serve…
阅读更多...
合并区间【贪心算法】

合并区间【贪心算法】

合并区间 以数组 intervals 表示若干个区间的集合，其中单个区间为 intervals[i] [starti, endi] 。请你合并所有重叠的区间，并返回 一个不重叠的区间数组，该数组需恰好覆盖输入中的所有区间 。 class Solution {public int[][] merge(int[…
阅读更多...
2023年高教社杯 国赛数学建模思路 - 案例：异常检测

2023年高教社杯 国赛数学建模思路 - 案例：异常检测

文章目录 赛题思路一、简介 -- 关于异常检测异常检测监督学习 二、异常检测算法2. 箱线图分析3. 基于距离/密度4. 基于划分思想 建模资料 赛题思路 （赛题出来以后第一时间在CSDN分享） https://blog.csdn.net/dc_sinor?typeblog 一、简介 – 关于异常…
阅读更多...
安装配置mariadb

安装配置mariadb

记录下安装配置mariadb的经历。 环境：ubuntu22 一、apt在线安装 apt代理配置 APT是Ubuntu系统中用于安装和升级软件包的工具，如果本地没有可用的软件包，APT将会连接到远程软件包服务器下载软件包。在某些情况下，用户需要将APT的…
阅读更多...
java 浅谈ThreadLocal底层源码（通俗易懂）

java 浅谈ThreadLocal底层源码（通俗易懂）

目录 一、ThreadLocal类基本介绍 1.概述 : 2.作用及特定 : 二、ThreadLocal类源码解读 1.代码准备 : 1.1 图示 1.2 数据对象 1.3 测试类 1.4 运行测试 2.源码分析 : 2.1 set方法解读 2.2 get方法解读 一、ThreadLocal类基本介绍 1.概述 : (1) ThreadLocal，本…
阅读更多...
简单工厂模式概述和使用

简单工厂模式概述和使用

目录 一、简单工厂模式简介1. 定义2. 使用动机 二、简单工厂模式结构1.模式结构2. 时序图 三、简单工厂的使用实例四、简单工厂模式优缺点五、简单工厂模式在Java中的应用 一、简单工厂模式简介 原文链接 1. 定义 简单工厂模式(Simple Factory Pattern)：又称为静…
阅读更多...
stable diffusion实践操作-电脑硬件查看

stable diffusion实践操作-电脑硬件查看

本文专门开一节写电脑硬件相关的内容，在看之前，可以同步关注： stable diffusion实践操作 正文 1、检查电脑显存的方法（win10）： 鼠标放在工具栏，单击右键打开“任务管理器”，选择顶…
阅读更多...
最新文章
推荐文章

Copyright @ 2022~2023