在k8s中部署Prometheus并实现对k8s集群的监控

🐇明明跟你说过：个人主页

🏅个人专栏：《Prometheus：监控的神》 🏅

🔖行路有良友，便是天堂🔖

目录

一、引言

1、k8s简介

2、 Prometheus概述

二、准备k8s环境

1、k8s集群搭建

2、集群状态检查

三、部署Prometheus 

1、创建名称空间

2、安装node-exporter

3、安装Prometheus server

4、创建Service

四、访问测试

一、引言

1、k8s简介

Kubernetes单词起源于希腊语, 是“舵手”或者“领航员、飞行员”的意思。

Kubernetes（简称K8s）的前世今生可以追溯到谷歌（Google）内部的一个项目，它起源于2003年，当时谷歌正面临着不断增长的应用程序和服务的管理挑战。这个项目最初被称为"Borg"，是一个早期的容器编排系统。Borg 的成功经验成为 Kubernetes 开发的契机。

 有关k8s起源的介绍，请参考《初识K8s之前世今生、架构、组件、前景》这篇文章

​​

​

Kubernetes的优点包括可移植性、可伸缩性和扩展性。它使用轻型的YAML清单文件实现声明性部署方法，对于应用程序更新，无需重新构建基础结构。管理员可以计划和部署容器，根据需要扩展容器并管理其生命周期。借助Kubernetes的开放源代码API，用户可以通过首选编程语言、操作系统、库和消息传递总线来构建应用程序，还可以将现有持续集成和持续交付（CI/CD）工具集成。

2、 Prometheus概述

Prometheus 是一款开源的监控和警报工具，最初由 SoundCloud 开发，现已成为 Cloud Native Computing Foundation（CNCF）的一部分。它旨在帮助用户监控其应用程序和系统的性能，并能够发现故障、进行警报和分析。

以下是 Prometheus 的一些关键特点和概述：

  1. 多维数据模型： Prometheus 使用多维数据模型来存储时间序列数据，这意味着每个样本可以与任意数量的键/值标签相关联。这种灵活性使得用户可以以灵活的方式对数据进行查询和分析。
  2. 灵活的查询语言： Prometheus 提供了 PromQL（Prometheus Query Language），这是一种强大而灵活的查询语言，可以用于从 Prometheus 中提取和处理数据。
  3. 数据采集： Prometheus 通过称为 Exporters 的插件来采集数据。Exporters 可以将各种系统和服务的指标暴露给 Prometheus，例如应用程序、操作系统、数据库等。
  4. 警报管理： Prometheus 具有内置的警报管理功能，可以通过配置警报规则来触发警报。这些警报可以发送到各种通知渠道，如电子邮件、Slack 等。
  5. 可扩展性： Prometheus 是一个高度可扩展的系统，可以通过水平扩展来处理大量的时间序列数据。它支持多种存储后端，包括本地磁盘存储和远程存储系统。
  6. 社区支持： 作为 CNCF 项目的一部分，Prometheus 拥有一个庞大而活跃的社区，不断提供新的功能、改进和支持。

总的来说，Prometheus 是一个功能强大且灵活的监控系统，适用于各种规模的环境，并且可以与其他工具集成，以构建强大的监控解决方案。

有关Prometheus的详细介绍，请参考《揭秘Prometheus：诞生之旅与核心组件全解析》这篇文章

二、准备k8s环境

1、k8s集群搭建

如果还未搭建k8s集群，请参考《深度解析：Kubernetes 1.28.2集群安装过程中的关键步骤》这篇文章

2、集群状态检查

[root@master ~]# kubectl get node

三、部署Prometheus 

1、创建名称空间

创建一个名为Prometheus的名称空间，Prometheus所有的组件都在这个名称空间下运行

[root@master ~]# kubectl create ns prometheus
namespace/prometheus created

2、安装node-exporter

node-exporter资源官网地址：Download | Prometheus

离线镜像资源我已经放到资源列表中了，大家自行下载即可

下载后，在各个节点上导入

准备YAML文件

[root@master ~]# cat node-export.yaml 
# 输入如下内容
apiVersion: apps/v1
kind: DaemonSet
metadata:name: node-exporternamespace: prometheuslabels:name: node-exporter
spec:selector:matchLabels:name: node-exportertemplate:metadata:labels:name: node-exporterspec:hostPID: truehostIPC: truehostNetwork: truecontainers:- name: node-exporterimage: docker.io/prom/node-exporter:v1.8.0imagePullPolicy: IfNotPresentports:- containerPort: 9100securityContext:privileged: trueargs:- --path.procfs- /host/proc- --path.sysfs- /host/sys- --collector.filesystem.ignored-mount-points- '"^/(sys|proc|dev|host|etc)($|/)"'volumeMounts:- name: devmountPath: /host/dev- name: procmountPath: /host/proc- name: sysmountPath: /host/sys- name: rootfsmountPath: /rootfstolerations:- key: "node-role.kubernetes.io/master"operator: "Exists"effect: "NoSchedule"volumes:- name: prochostPath:path: /proc- name: devhostPath:path: /dev- name: syshostPath:path: /sys- name: rootfshostPath:path: /
  • apiVersion 指定了 Kubernetes API 的版本为 apps/v1。
  • kind 指定了资源的类型为 DaemonSet，即守护进程集。
  • metadata 下的 name 字段指定了 DaemonSet 的名称为 node-exporter，namespace 字段指定了 DaemonSet 所属的命名空间为 prometheus。
  • spec 下定义了 DaemonSet 的规范。
  • selector 指定了选择器，用于选择要控制的 Pod。
  • template 定义了要创建的 Pod 的模板，其中包含了 Pod 的元数据和规范。
  • hostPID: true、hostIPC: true、hostNetwork: true：指定了容器可以使用主机的 PID、IPC 和网络命名空间。
  • containers 下定义了要运行的容器，这里定义了一个名为 node-exporter 的容器。
  • image 指定了容器的镜像为 docker.io/prom/node-exporter:v1.8.0。
  • ports 定义了容器暴露的端口，这里将容器的端口 9100 映射到了宿主机上。
  • securityContext 下的 privileged: true 表示容器具有特权访问。
  • args 下指定了容器启动时的参数，这里配置了 Node Exporter 的参数。
  • volumeMounts 下定义了容器挂载的卷。
  • tolerations 下定义了容忍策略，表示容器可以容忍某些节点上的特定条件。
  • volumes 下定义了宿主机的卷，用于挂载到容器中。

查看Pod状态

访问测试，使用curl命令，如果有返回值，则部署成功

3、安装Prometheus server

离线镜像资源我已经放到资源列表中了，大家自行下载即可

下载后，在各个节点上导入

然后，在node1节点上，为Prometheus server创建一个数据目录

[root@node1 ~]# mkdir /data
[root@node1 ~]# chmod 777 /data/

为prometheus server创建一个sa，并分配权限

[root@master ~]# kubectl create serviceaccount prometheus -n prometheus
serviceaccount/prometheus created
[root@master ~]# kubectl create clusterrolebinding prometheus-clusterrolebinding -n prometheus --clusterrole=cluster-admin  --serviceaccount=prometheus:prometheus
clusterrolebinding.rbac.authorization.k8s.io/prometheus-clusterrolebinding created

 

编写Prometheus的config配置文件

[root@master ~]# vim prometheus-config.yaml 
#输入以下内容
---
kind: ConfigMap
apiVersion: v1
metadata:labels:app: prometheusname: prometheus-confignamespace: prometheus
data:prometheus.yml: |global:scrape_interval: 15sscrape_timeout: 10sevaluation_interval: 1mscrape_configs:- job_name: 'kubernetes-node'kubernetes_sd_configs:- role: noderelabel_configs:- source_labels: [__address__]regex: '(.*):10250'replacement: '${1}:9100'target_label: __address__action: replace- action: labelmapregex: __meta_kubernetes_node_label_(.+)- job_name: 'kubernetes-node-cadvisor'kubernetes_sd_configs:- role:  nodescheme: httpstls_config:ca_file: /var/run/secrets/kubernetes.io/serviceaccount/ca.crtbearer_token_file: /var/run/secrets/kubernetes.io/serviceaccount/tokenrelabel_configs:- action: labelmapregex: __meta_kubernetes_node_label_(.+)- target_label: __address__replacement: kubernetes.default.svc:443- source_labels: [__meta_kubernetes_node_name]regex: (.+)target_label: __metrics_path__replacement: /api/v1/nodes/${1}/proxy/metrics/cadvisor- job_name: 'kubernetes-apiserver'kubernetes_sd_configs:- role: endpointsscheme: httpstls_config:ca_file: /var/run/secrets/kubernetes.io/serviceaccount/ca.crtbearer_token_file: /var/run/secrets/kubernetes.io/serviceaccount/tokenrelabel_configs:- source_labels: [__meta_kubernetes_namespace, __meta_kubernetes_service_name, __meta_kubernetes_endpoint_port_name]action: keepregex: default;kubernetes;https- job_name: 'kubernetes-service-endpoints'kubernetes_sd_configs:- role: endpointsrelabel_configs:- source_labels: [__meta_kubernetes_service_annotation_prometheus_io_scrape]action: keepregex: true- source_labels: [__meta_kubernetes_service_annotation_prometheus_io_scheme]action: replacetarget_label: __scheme__regex: (https?)- source_labels: [__meta_kubernetes_service_annotation_prometheus_io_path]action: replacetarget_label: __metrics_path__regex: (.+)- source_labels: [__address__, __meta_kubernetes_service_annotation_prometheus_io_port]action: replacetarget_label: __address__regex: ([^:]+)(?::\d+)?;(\d+)replacement: $1:$2- action: labelmapregex: __meta_kubernetes_service_label_(.+)- source_labels: [__meta_kubernetes_namespace]action: replacetarget_label: kubernetes_namespace- source_labels: [__meta_kubernetes_service_name]action: replacetarget_label: kubernetes_name
  •  global 部分定义了全局的抓取配置，包括抓取间隔 scrape_interval、超时时间 scrape_timeout 和评估间隔 evaluation_interval。
  • scrape_configs 部分定义了要抓取的目标列表，每个 job_name 对应一个抓取目标配置。在这个示例中，有以下几个抓取目标：
  • kubernetes-node：抓取 Kubernetes 节点的指标，通过 Kubernetes 的服务发现配置 kubernetes_sd_configs，并通过 relabel_configs 将抓取地址从 :10250 替换为 :9100。
  • kubernetes-node-cadvisor：抓取 Kubernetes 节点的 cAdvisor 指标，通过 Kubernetes 的服务发现配置和 TLS 配置，以及 relabel_configs 对地址和路径进行替换和重写。
  • kubernetes-apiserver：抓取 Kubernetes API Server 的指标，通过 Kubernetes 的服务发现配置和 TLS 配置，以及 relabel_configs 保留相关标签。
  • kubernetes-service-endpoints：抓取 Kubernetes 服务的指标，通过 Kubernetes 的服务发现配置和 relabel_configs 对地址、路径和标签进行替换和重写。
  • 每个抓取目标配置中都包含了 kubernetes_sd_configs，用于从 Kubernetes 中发现相应的目标，以及 relabel_configs，用于对抓取地址、标签等进行转换和处理。

创建configMap

[root@master ~]# kubectl  apply -f prometheus-config.yaml

 编写部署Prometheus server的YAML文件

[root@master ~]# vim prometheus-deploy.yaml 
---
apiVersion: apps/v1
kind: Deployment
metadata:name: prometheus-servernamespace: prometheuslabels:app: prometheus
spec:replicas: 1selector:matchLabels:app: prometheuscomponent: server#matchExpressions:#- {key: app, operator: In, values: [prometheus]}#- {key: component, operator: In, values: [server]}template:metadata:labels:app: prometheuscomponent: serverannotations:prometheus.io/scrape: 'false'spec:nodeName: node1serviceAccountName: prometheuscontainers:- name: prometheusimage: prom/prometheus:v2.51.1imagePullPolicy: IfNotPresentcommand:- prometheus- --config.file=/etc/prometheus/prometheus.yml- --storage.tsdb.path=/prometheus- --storage.tsdb.retention=720h- --web.enable-lifecycleports:- containerPort: 9090protocol: TCPvolumeMounts:- mountPath: /etc/prometheusname: prometheus-config- mountPath: /prometheus/name: prometheus-storage-volumevolumes:- name: prometheus-configconfigMap:name: prometheus-config- name: prometheus-storage-volumehostPath:path: /datatype: Directory

部署prometheus server

[root@master ~]# kubectl apply -f  prometheus-deploy.yaml

查看pod状态

4、创建Service

为Prometheus server创建一个service，用于我们外部访问

[root@master ~]# vim prometheus-svc.yaml 
#输入如下内容
apiVersion: v1
kind: Service
metadata:name: prometheusnamespace: prometheuslabels:app: prometheus
spec:type: NodePortports:- port: 9090targetPort: 9090protocol: TCPselector:app: prometheuscomponent: server

 创建service

[root@master ~]# kubectl apply -f  prometheus-svc.yaml

查看service的nodeport端口

四、访问测试

在浏览器输入node ip + service端口 

点击Status并点击Targets，如果能显示下面的内容，说明监控数据采集成功 

目前采集的目录并不适合直接阅读，还需要配合Grafana进行数据的展示，关于Grafana，我们将在后期的章节中介绍

💕💕💕每一次的分享都是一次成长的旅程，感谢您的陪伴和关注。希望这些关于Prometheus的文章能陪伴您走过技术的一段旅程，共同见证成长和进步！😺😺😺

🧨🧨🧨让我们一起在技术的海洋中探索前行，共同书写美好的未来！！！

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.rhkb.cn/news/325016.html

如若内容造成侵权/违法违规/事实不符，请联系长河编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

IDEA安装使用Git

IDEA安装使用Git

IDEA安装使用Git 1 Git下载与安装 2 在IDEA中使用Git 2.1 IDEA中配置Git 在IDEA中使用Git，本质上还是使用本地安装的Git软件，所以需要在IDEA中配置Git。 2.2 在IDEA中使用Git 2.2.1 获取Git仓库 在IDEA中使用Git获取仓库有两种方式: 本地初始化仓库从…
阅读更多...
HTTP超时时间设置

HTTP超时时间设置

在进行超时时间设置之前我们需要了解一次http请求经历的过程 浏览器进行DNS域名解析，得到对应的IP地址根据这个IP，找到对应的服务器建立连接（三次握手）建立TCP连接后发起HTTP请求（一个完整的http请求报文）服…
阅读更多...
在R的 RGui中，使用devtools 安装trajeR

在R的 RGui中，使用devtools 安装trajeR

创建于：2024.5.5 文章目录 1. 报错信息2. 尝试使用指定的清华镜像，没有解决3. 找到原因：官网把包删除了4. 尝试从网上下载，然后安装。没有成功5. 使用devtools安装5.1 尝试直接安装：install.packages("devtools&q…
阅读更多...
Vue从入门到实战Day04

Vue从入门到实战Day04

一、组件的三大组成部分（结构/样式/逻辑） 1. scoped样式冲突 默认情况：写在组件中的样式会全局生效 -> 因此很容易造成多个组件之间的样式冲突问题。 1. 全局样式：默认组件中的样式会作用到全局 2. 局部样式：可以…
阅读更多...
浅谈运维数据安全

浅谈运维数据安全

在数字化日益深入的今天，运维数据安全已经成为企业信息安全体系中的核心要素。运维工作涉及到企业信息系统的各个方面，从硬件维护到软件升级，从网络配置到数据备份，无一不需要严谨的数据安全保障措施。本文将从运维数据安全的重要…
阅读更多...
122. Kafka问题与解决实践

122. Kafka问题与解决实践

文章目录 前言顺序问题1. 为什么要保证消息的顺序？2.如何保证消息顺序？3.出现意外4.解决过程 消息积压1. 消息体过大2. 路由规则不合理3. 批量操作引起的连锁反应4. 表过大 主键冲突数据库主从延迟重复消费多环境消费问题后记 前言 假如有家公司是做餐饮…
阅读更多...
【Linux笔记】 基础指令（二）

【Linux笔记】 基础指令（二）

风住尘香花已尽 日晚倦梳头 重命名、剪切指令 -- mv 简介： mv 命令是 move 的缩写，可以用来移动文件或者将文件改名，是 Linux 系统下常用的命令，经常用来备份文件或者目录 语法： mv [选项] 源文件或目录 目标文件或目录…
阅读更多...
【吴恩达机器学习-week2】多个变量的特征缩放和学习率问题

【吴恩达机器学习-week2】多个变量的特征缩放和学习率问题

特征缩放和学习率（多变量） 目标 利用上一个实验中开发的多变量例程在具有多个特征的数据集上运行梯度下降探索学习率对梯度下降的影响通过 Z 分数归一化进行特征缩放，提高梯度下降的性能 import numpy as np np.set_printoptions(precisio…
阅读更多...
Windows 10 Manager (Win10优化工具)，中文破姐版 v3.9.3

Windows 10 Manager (Win10优化工具)，中文破姐版 v3.9.3

01 软件介绍 Windows 10 Manager是一款为Win10操作系统设计的综合优化工具。包含逾40种不同的功能模块，旨在全方位地提升系统性能。其核心效用体现在对Win10的优化、调整、清理、加速和修复方面。能够显著提高系统的运行速度，并有效地排查及解决系统问题…
阅读更多...
C# Linq中的自定义排序

C# Linq中的自定义排序

1.开发过程中&#xff0c;会遇到OrderBy/OrderByDescending排序无法满足的情况&#xff0c;此时就需要自定义排序&#xff0c;按照想要的排序规则取排序&#xff0c;比如订单的状态等等。 2.自定义泛型比较器代码如下&#xff1a; /// <summary>/// 自定义泛型比较器(用…
阅读更多...
ISIS学习二——与OSPF相比的ISIS报文以及路由计算

ISIS学习二——与OSPF相比的ISIS报文以及路由计算

目录 一.ISIS支持的网络类型 1.OSPF支持 2.ISIS支持 二.ISIS最优路径的选取 &#xff08;1&#xff09;.ISIS开销值设置 1.全局开销 2.接口开销 3.根据带宽设置开销 &#xff08;2&#xff09;.ISIS的次优路径 三.ISIS报文格式 1.ISIS专用报头——TLV 2.ISIS通用头…
阅读更多...
容器中的单例集合（二）——List接口的实现类之ArrayList

容器中的单例集合（二）——List接口的实现类之ArrayList

根据接口的定义我们知道&#xff0c;接口的作用是定义标准或者规定&#xff0c;要满足接口中的要求就需要定义一个实现类来实现接口中定义的标准。List接口的常用实现类有ArrayList、Vector、Stack以及LinkedList。其中ArrayList类是较为基础的一个实现类&#xff0c;理解Array…
阅读更多...
【Unity Shader入门精要 第6章】基础光照（一）

【Unity Shader入门精要 第6章】基础光照（一）

1. 什么是光照模型 光照原理 在真实世界中&#xff0c;我们能够看到物体&#xff0c;是由于眼睛接收到了来自观察目标的光。这里面包括两种情况&#xff1a;一部分是观察目标本身发出的光&#xff08;自发光&#xff09;直接进入我们的眼睛&#xff0c;另一部分是其他物体&am…
阅读更多...
数字社交风潮：解析Facebook的影响力

数字社交风潮：解析Facebook的影响力

随着互联网的普及和科技的发展&#xff0c;数字社交媒体已经成为现代社会不可或缺的一部分。在众多的社交媒体平台中&#xff0c;Facebook作为其中的佼佼者&#xff0c;影响着数以亿计的用户。本文将深入解析Facebook的影响力&#xff0c;探讨其在数字社交风潮中的地位和作用。…
阅读更多...
springcloud alibaba微服务框架涉及的技术

springcloud alibaba微服务框架涉及的技术

一、微服务架构中核心模块及其使用技术总览 二、各模块详细说明 1、注册中心 该模块主要功能为 自动提供服务的注册与发现&#xff0c;集中式管理服务&#xff0c;让 服务调用端发现服务&#xff0c;让服务提供端注册服务&#xff0c;倘若没有注册中心&#xff0c;那客户端就…
阅读更多...
【Java基础】初识正则表达式

【Java基础】初识正则表达式

正则表达式只适用于字符串 匹配matches 实际使用的是String类中定义的方法boolean matches(String regex) public static void piPei( ){String regex"[1][356789]\\d{9}";boolean boo"14838384388".matches(regex);System.out.println(boo); }验证qq号…
阅读更多...
前后端完全开源！功能丰富的在线教室项目：Agora Flat

前后端完全开源！功能丰富的在线教室项目：Agora Flat

Agora Flat&#xff1a;高效集成的在线教室解决方案&#xff0c;重塑互动学习新体验。- 精选真开源&#xff0c;释放新价值。 概览 Agora Flat是在GitHub平台上公开分享的一个全面开源项目&#xff0c;它精心设计为一个高性能的在线教室解决方案&#xff0c;旨在便捷地搭建支持…
阅读更多...
政安晨：【Keras机器学习示例演绎】（四十二）—— 使用 KerasNLP 和 tf.distribute 进行数据并行训练

政安晨：【Keras机器学习示例演绎】（四十二）—— 使用 KerasNLP 和 tf.distribute 进行数据并行训练

目录 简介 导入 基本批量大小和学习率 计算按比例分配的批量大小和学习率 政安晨的个人主页&#xff1a;政安晨 欢迎 &#x1f44d;点赞✍评论⭐收藏 收录专栏: TensorFlow与Keras机器学习实战 希望政安晨的博客能够对您有所裨益&#xff0c;如有不足之处&#xff0c;欢迎在…
阅读更多...
Linux提权--内核漏洞--web用户提权(脏牛)本地提权(脏管道)

Linux提权--内核漏洞--web用户提权(脏牛)本地提权(脏管道)

免责声明:本文仅做技术交流与学习... 目录 Linux-内核漏洞Web用户提权-探针&利用-脏牛dcow nmap扫描目标IP及端口 导入脚本,进行探针 通过MSF发现目标机器存在脏牛漏洞 ---上传信息搜集的文件,查找漏洞,利用漏洞,继续上传EXP. --密码改了,再用xshell连一下就行了. …
阅读更多...
对话易参创始人黄怡然：股权能不能赋能企业增长？| 极新企服直播实录

对话易参创始人黄怡然：股权能不能赋能企业增长？| 极新企服直播实录

“ 致所有爱画饼的老板 ” 整理 | 云舒 编辑 | 小白 出品&#xff5c;极新 2022年以前&#xff0c;股权激励作为企业实现增长、吸引人才、保留人才并大幅度激发人才价值的重要手段&#xff0c;几乎成为每一个企业的标配。但是&#xff0c;现在这个时代&#xff0c;股权激励几…
阅读更多...
最新文章
推荐文章

Copyright @ 2022~2023