【K8S系列】深入解析K8S监控

序言

做一件事并不难，难的是在于坚持。坚持一下也不难，难的是坚持到底。

文章标记颜色说明：

  • 黄色：重要标题
  • 红色：用来标记结论
  • 绿色：用来标记论点
  • 蓝色：用来标记论点

Kubernetes (k8s) 是一个容器编排平台，允许在容器中运行应用程序和服务。今天学习一下k8s监控相关知识

希望这篇文章能让你不仅有一定的收获，而且可以愉快的学习，如果有什么建议，都可以留言和我交流

 专栏介绍

这是这篇文章所在的专栏，欢迎订阅：【深入解析k8s】专栏

简单介绍一下这个专栏要做的事：

  • 主要是深入解析每个知识点，帮助大家完全掌握k8s,以下是已更新的章节
  • 这是专栏介绍文章地址：【深入解析K8S专栏介绍】

Kubernetes是一个分布式系统，能够管理和编排容器化应用程序。其中，监控是一个非常重要的方面，可以帮助用户了解集群的健康状态、性能和可用性。

在本文中，将详细介绍Kubernetes监控的

  • 监控类型
  • 监控详解
  • 监控软件安装
  • 监问题思考

1 基础介绍

1.1监控的类型

在Kubernetes中，监控是一个非常重要的方面，可以帮助用户了解集群的健康状态、性能和可用性。根据监控的类型和范围，Kubernetes的监控可以分为以下几种类型：

  1. 集群层监控
  2. 节点层监控
  3. 应用层监控
  4. 日志监控

2 集群层监控

集群层监控是指对整个Kubernetes集群进行监控，包括节点、Pod、服务等。集群层监控通常会关注集群的资源使用情况、负载均衡、服务发现等方面的指标，以帮助用户了解集群的整体健康状态和性能状况。

常用的集群层监控工具包括Prometheus、Grafana、Heapster等。

2.1 监控原理 

Kubernetes的集群层监控通常是基于指标采集和存储的原理实现的。其基本流程如下：

  1. 指标采集
  2. 指标存储
  3. 数据可视化

2.1.1指标采集

Kubernetes集群中的各种组件和对象都会产生一些指标，如CPU、内存、磁盘、网络等。

这些指标可以通过各种方式进行采集，如Kubernetes API、容器运行时、系统监控工具等。不同的指标采集工具有不同的采集方式和频率，需要根据实际需求和资源限制进行选择和配置。

2.1.2 指标存储

采集到的指标需要进行存储和管理，以便后续的查询和分析。常用的指标存储工具包括Prometheus、InfluxDB、Elasticsearch等。这些工具可以将采集到的指标存储到数据库中，并提供一些查询和分析接口，以帮助用户了解集群的状态和健康状况。

2.1.3 数据可视化

存储的指标数据可以通过数据可视化工具进行展示，帮助用户更直观地了解集群的状态和健康状况。常用的数据可视化工具包括Grafana、Kubernetes Dashboard等。这些工具可以将指标数据转换成漂亮的图表和仪表盘，以帮助用户快速发现和解决问题。

总之，Kubernetes的集群层监控主要是基于指标采集、存储和展示的原理实现的。通过采集集群中各种组件和对象的指标数据，存储到指标存储工具中，并通过数据可视化工具展示给用户，可以帮助用户了解集群的状态和健康状况，及时发现和解决问题。

3 节点层监控

节点层监控是指对Kubernetes节点进行监控，包括节点的CPU、内存、磁盘、网络等指标。节点层监控通常会关注节点的负载状况、资源使用情况、容器状态等方面的指标，以帮助用户了解节点的健康状态和性能状况。

常用的节点层监控工具包括cAdvisor、Node Exporter等。

4 应用层监控 

应用层监控是指对Kubernetes中运行的应用程序进行监控，包括应用程序的CPU、内存、网络、磁盘等指标。应用层监控通常会关注应用程序的性能、错误、日志等方面的指标，以帮助用户了解应用程序的健康状态和性能状况。

常用的应用层监控工具包括Prometheus、ELK Stack、Zipkin等。

5 日志监控 

日志监控是指对Kubernetes集群中产生的日志进行监控，包括容器日志、系统日志、应用程序日志等。

日志监控通常会关注日志的格式、内容、数量等方面的指标，以帮助用户了解集群的运行状态和问题状况。

常用的日志监控工具包括ELK Stack、Fluentd等。

Kubernetes的监控类型非常多样化，可以根据实际需求和场景选择合适的监控工具和技术来实现监控。

在实际的使用中，需要根据监控的类型和范围进行配置和优化，以提高监控的效率和精度。

6 监控技术和工具 

以下是一些常用的集群层监控技术和工具：

  1. Prometheus + Grafana
  2. Heapster
  3. Kubernetes Dashboard
  4. Kube-state-metrics

1 Prometheus + Grafana

Prometheus和Grafana是Kubernetes中常用的监控工具，可以用于监控集群的资源使用情况和健康状态。

Prometheus可以收集和存储各种集群指标数据，如CPU、内存、磁盘、网络等，而Grafana可以将这些数据转换成漂亮的图表和仪表盘，帮助用户快速发现和解决问题。

此外，Prometheus还提供了一些自带的集群监控规则，可以帮助用户监控集群的状态和健康状况。

安装

下面是使用docker-compose安装Prometheus和Grafana的步骤：

  1. 创建一个目录用于存放docker-compose.yml文件和相关配置文件，如prometheus-grafana。

  2. 在该目录下创建docker-compose.yml文件，并添加以下内容：

version: '3.7'
services:prometheus:image: prom/prometheuscontainer_name: prometheusports:- "9090:9090"volumes:- ./prometheus.yml:/etc/prometheus/prometheus.ymlcommand:- --config.file=/etc/prometheus/prometheus.yml- --storage.tsdb.path=/prometheusgrafana:image: grafana/grafanacontainer_name: grafanaports:- "3000:3000"volumes:- grafana-storage:/var/lib/grafana
volumes:grafana-storage:

这个docker-compose.yml文件定义了两个服务，一个是Prometheus，一个是Grafana。其中Prometheus会暴露9090端口，Grafana会暴露3000端口。

两个服务都会使用docker-compose.yml文件所在目录下的配置文件进行配置。

  1. 在该目录下创建prometheus.yml文件，并添加以下内容：
global:scrape_interval: 15sscrape_configs:- job_name: 'prometheus'scrape_interval: 5sstatic_configs:- targets: ['localhost:9090']- job_name: 'node'scrape_interval: 5sstatic_configs:- targets: ['node-exporter:9100']- job_name: 'cadvisor'scrape_interval: 5sstatic_configs:- targets: ['cadvisor:8080']- job_name: 'kubelet'scrape_interval: 5sstatic_configs:- targets: ['kubelet:10255']

这个prometheus.yml文件定义了一些基本的Scrape Configs，用于采集Kubernetes节点、cAdvisor、kubelet和Prometheus本身的指标数据。

  1. 在命令行中进入上面创建的目录，并运行以下命令以启动Prometheus和Grafana服务：
docker-compose up -d

这个命令会在后台启动docker-compose.yml文件中定义的服务。

  1. 打开浏览器，访问http://localhost:3000，即可进入Grafana的登录界面。使用默认用户名和密码（admin/admin）登录。

  2. 在Grafana中添加数据源。在左侧菜单栏中选择Configuration->Data Sources，并点击Add data source按钮。选择Prometheus作为数据源类型，然后填写Prometheus的地址http://prometheus:9090，点击Save & Test按钮测试连接是否成功。

  3. 在Grafana中导入Dashboard。Grafana提供了很多现成的Dashboard，用户可以根据自己的需求进行选择和导入。在左侧菜单栏中选择+ -> Import，然后选择一个Dashboard模板文件

至此，已经成功地使用docker-compose安装和配置了Prometheus和Grafana。可以在Grafana中查看和分析Prometheus采集到的Kubernetes集群指标数据。

2 Heapster

Heapster是一个Kubernetes集群监控和性能分析工具，它可以监控集群内所有容器的资源使用情况，并将数据存储到指定的后端存储中，如InfluxDB、Elasticsearch等。Heapster还提供了一些有用的命令行工具和API，可以帮助用户查询和分析数据，包括节点、Pod、容器等数据。

3 Kubernetes Dashboard

Kubernetes Dashboard是Kubernetes官方提供的Web界面，可以用于监控和管理Kubernetes集群。Dashboard提供了集群层监控的功能，可以显示集群的健康状态、资源使用情况、Pod和容器状态等信息。此外，Dashboard还提供了一些有用的管理功能，如Pod和容器的日志查询、事件查看等。

4 Kube-state-metrics

Kube-state-metrics是一个Kubernetes状态指标导出器，用于将Kubernetes中的各种对象状态指标导出为Prometheus格式。它可以导出各种对象的状态指标，如节点、Pod、服务、副本集、Deployment、DaemonSet等，帮助用户了解集群的状态和健康状况。

总之，Kubernetes的集群层监控非常重要，可以帮助用户了解集群的整体健康状态和性能状况。以上列出的工具和技术可以帮助用户实现集群层监控，但是需要根据实际需求和资源限制进行配置和优化，以提高监控的效率和精度。

7 问题思考

1 etcd的watch 监听

在Kubernetes中，etcd是一个高可用的分布式键值存储，用于存储Kubernetes集群的配置数据和状态信息。etcd提供了一些API接口，其中包括watch接口，可以用于监听etcd中指定目录的变化。etcd的watch机制非常强大，可以帮助用户实现实时的配置更新和状态同步。以下是一些关于etcd的watch监听的技术和实践：

1.1 监听etcd目录 

可以使用etcdctl命令或etcd的客户端库来监听etcd中指定目录下的键值变化。例如，使用etcdctl命令监听/mydir目录的变化可以使用以下命令：

etcdctl watch /mydir

当目录/mydir下的键值发生变化时，etcd会将变化通知给监听者。

1.2 使用etcd的客户端库 

etcd的客户端库提供了一些高级的watch机制，可以更灵活地实现对etcd的监听。例如，可以使用etcd的Go客户端库，通过Watch函数来实现对etcd目录的监听。以下是一个示例：

watcher := clientv3.NewWatcher(client)
watcher.Watch(context.Background(), "/mydir", clientv3.WithPrefix(), clientv3.WithPrevKV())
for {select {case resp := <-watcher.WatchChan():for _, event := range resp.Events {fmt.Printf("Event received! Type: %s Key: %s Value: %s\n", event.Type, event.Kv.Key, event.Kv.Value)}}
}

上述示例中，使用etcd的Go客户端库创建了一个Watcher实例，然后调用Watch函数来监听/mydir目录下的变化。当目录下的键值发生变化时，Watcher会将变化通知到WatchChan通道中，从而实现实时的更新和同步。

1.3 使用etcd的API接口 

除了etcd的客户端库，还可以使用etcd的API接口来实现对etcd的监听。etcd的API接口提供了一些高级的watch功能，如可取消的watch、多路复用的watch等。

以下是一个使用etcd的API接口实现的示例：

watcher := clientv3.NewWatcher(client)
ctx, cancel := context.WithCancel(context.Background())
watcher.Watch(ctx, "/mydir", clientv3.WithPrefix())
go func() {for {select {case resp := <-watcher.Chan():for _, event := range resp.Events {fmt.Printf("Event received! Type: %s Key: %s Value: %s\n", event.Type, event.Kv.Key, event.Kv.Value)}}}
}()
// 取消监听
time.Sleep(10 * time.Second)
cancel()

上述示例中，使用etcd的API接口创建了一个Watcher实例，然后调用Watch函数来监听/mydir目录下的变化。

使用context.WithCancel函数创建了一个可取消的context对象，用于在需要的时候取消监听。

当目录下的键值发生变化时，Watcher会将变化通知到Chan通道中，从而实现实时的更新和同步。

总之，etcd的watch机制可以帮助用户实现实时的配置更新和状态同步。根据实际需求和场景，可以选择合适的监听方式和技术，来实现对etcd的监听。

8 投票 

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/116.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

微服务实例构建成 docker 镜像实例

微服务实例构建成 docker 镜像实例

&#x1f388; 作者&#xff1a;Linux猿 &#x1f388; 简介&#xff1a;CSDN博客专家&#x1f3c6;&#xff0c;华为云享专家&#x1f3c6;&#xff0c;Linux、C/C、云计算、物联网、面试、刷题、算法尽管咨询我&#xff0c;关注我&#xff0c;有问题私聊&#xff01; &…
阅读更多...
使用WiFi测量仪进行机器人定位的粒子过滤器研究（Matlab代码实现）

使用WiFi测量仪进行机器人定位的粒子过滤器研究（Matlab代码实现）

&#x1f4a5;&#x1f4a5;&#x1f49e;&#x1f49e;欢迎来到本博客❤️❤️&#x1f4a5;&#x1f4a5; &#x1f3c6;博主优势&#xff1a;&#x1f31e;&#x1f31e;&#x1f31e;博客内容尽量做到思维缜密&#xff0c;逻辑清晰&#xff0c;为了方便读者。 ⛳️座右铭&a…
阅读更多...
PLSQL Developer怎样查看当前活动会话

PLSQL Developer怎样查看当前活动会话

点‘工具’-‘会话’&#xff1a; 选择‘Active sessions’: 点击某个会话&#xff0c;可以看到其对应的sql&#xff1a;
阅读更多...
Flutter系列文章-Flutter环境搭建和Dart基础

Flutter系列文章-Flutter环境搭建和Dart基础

Flutter是Google推出的一个开源的、高性能的移动应用开发框架&#xff0c;可以用一套代码库开发Android和iOS应用。Dart则是Flutter所使用的编程语言。让我们来看看如何搭建Flutter开发环境&#xff0c;并了解Dart语言的基础知识。 一、Flutter环境搭建 1. 安装Flutter SDK …
阅读更多...
设计模式之模板模式

设计模式之模板模式

1. 模板模式介绍 1、模板模式即模板方法模式自定义了一个操作中的算法骨架&#xff0c;而将步骤延迟到子类中&#xff0c;使得子类可以不改变一个算法的结构&#xff0c;可以自定义该算法的某些特定步骤&#xff1b; 2、父类中提取了公共的部分代码&#xff0c;便于代码复用&am…
阅读更多...
【ShenYu系列】ShenYu网关条件匹配的设计及原理分析

【ShenYu系列】ShenYu网关条件匹配的设计及原理分析

ShenYu网关中用到了很多有趣的设计&#xff0c;我对其中的条件匹配的实现尤其感兴趣&#xff0c;所以研究一下具体实现的原理。我这边用到的shenyu版本是2.6.0-SNAPSHOT。 应用入口 原理拆解 AbstractShenyuPlugin#execute&#xff0c;获取到SelectorData集合&#xff0c;进行…
阅读更多...
MySQL基础篇第3章（基本的SELECT语句）

MySQL基础篇第3章（基本的SELECT语句）

文章目录 1、SQL概述1.1 SQL背景知识1.2 SQL分类 2、SQL语言的规则与规范2.1 基本规则2.2 SQL大小写规范 &#xff08;建议遵守&#xff09;2.3 注释2.4 命名规则2.5 数据导入指令 3、基本的SELECT语句3.0 SELECT...3.1 SELECT...FROM3.2 列的别名3.3 去除重复行3.4 空置参与运…
阅读更多...
OpenCV 入门教程： Sobel算子和Scharr算子

OpenCV 入门教程： Sobel算子和Scharr算子

OpenCV 入门教程&#xff1a; Sobel 算子和 Scharr 算子 导语一、Sobel 算子二、Scharr 算子三、示例应用3.1 图像边缘检测3.2 边缘增强 总结 导语 在图像处理和计算机视觉领域&#xff0c;边缘检测是一项重要的任务。 Sobel 算子和 Scharr 算子是两种常用的边缘检测算子&…
阅读更多...
MOVEit再现新漏洞，多个版本受影响

MOVEit再现新漏洞，多个版本受影响

今年6月&#xff0c;文件共享工具MOVEit Transfer曾曝出SQL 注入漏洞&#xff0c;能让远程攻击者访问其数据库并执行任意代码。最近&#xff0c;MOVEit Transfer 母公司Progress Software又披露了三个新漏洞。 这三个漏洞分别是 CVE-2023-36932、CVE-2023-36933 和 CVE-2023-36…
阅读更多...
window安装MongoDB

window安装MongoDB

安装直接先去官网下载 Download MongoDB Community Server | MongoDB 安装后如下&#xff0c;我们直接双击运行&#xff0c; 这里记得选下面(可以自己选择安装盘符位置)&#xff0c;上面第一个会自动帮你安装到C盘&#xff0c;然后选择下一步 &#xff0c;这里勾选就会选择去自…
阅读更多...
win10电脑出现网络问题时，如何解决？

win10电脑出现网络问题时，如何解决？

我们的Windows可能会出现各种网络连接问题&#xff1a; 尝试连接Wi-Fi网络时出现错误&#xff1a;Windows无法连接到此网络&#xff1b;可以通过Wifi访问互联网&#xff0c;但通过电缆访问以太网却无法正常工作&#xff1b;尝试通过电缆连接互联网时出现错误&#xff1a; Wind…
阅读更多...
NXP i.MX 6ULL工业开发板硬件说明书（ ARM Cortex-A7，主频792MHz）

NXP i.MX 6ULL工业开发板硬件说明书（ ARM Cortex-A7，主频792MHz）

前 言 本文档主要介绍TLIMX6U-EVM评估板硬件接口资源以及设计注意事项等内容。 创龙科技TLIMX6U-EVM是一款基于NXP i.MX 6ULL的ARM Cortex-A7高性能低功耗处理器设计的评估板&#xff0c;由核心板和评估底板组成。核心板经过专业的PCB Layout和高低温测试验证&#xff0c;稳…
阅读更多...
基于Springboot+vue的垃圾分类网站设计与实现

基于Springboot+vue的垃圾分类网站设计与实现

博主介绍&#xff1a; 大家好&#xff0c;我是一名在Java圈混迹十余年的程序员&#xff0c;精通Java编程语言&#xff0c;同时也熟练掌握微信小程序、Python和Android等技术&#xff0c;能够为大家提供全方位的技术支持和交流。 我擅长在JavaWeb、SSH、SSM、SpringBoot等框架…
阅读更多...
Linux下软件安装的命令

Linux下软件安装的命令

源码安装 以源代码安装软件&#xff0c;每次都需要配置操作系统、配置编译参数、实际编译&#xff0c;最后还要依据个人喜好的方式来安装软件。这个过程很麻烦很累人。 RPM安装软件的默认路径: 注意&#xff1a; /etc 配置文件放置目录/usr/bin 一些可执行文件/usr/lib 一些程…
阅读更多...
星辰秘典：探索Python项目的神秘力量——贪吃蛇

星辰秘典：探索Python项目的神秘力量——贪吃蛇

✨博主&#xff1a;命运之光 &#x1f338;专栏&#xff1a;星辰秘典&#xff1a;探索Python项目的神秘力量 &#x1f433;专栏&#xff1a;web开发&#xff08;html css js&#xff09; ❤️专栏&#xff1a;Java经典程序设计 ☀️博主的其他文章&#xff1a;点击进入博主的主…
阅读更多...
基于SpringBoot+Hadoop+Vue的企业网盘系统

基于SpringBoot+Hadoop+Vue的企业网盘系统

完整资料进入【数字空间】查看——baidu搜索"writebug" 1.1.1 选题的背景 随着信息网络技术的迅猛发展&#xff0c;云计算技术从它的概念提出已经开始在实际生产环境中使用了。大部分的东西都已经慢慢云端化&#xff0c;这种新型的技术也受到许多互联网人员的关注&a…
阅读更多...
ARM CORETEX M0简介

ARM CORETEX M0简介

ARM CORETEX M0简介 1. M0处理器简单框图 处理器内核&#xff1a;逻辑控制与运算 内部总线系统&#xff1a;单总线将处理器与外部的存储器和外部连接&#xff0c;进行数据交互&#xff08;冯诺依曼架构&#xff0c;数据与指令一起&#xff09; NVIC&#xff1a;嵌套向量中断控…
阅读更多...
RabbitMQ部署

RabbitMQ部署

文章目录 RabbitMQ部署指南1.单机部署1.1.下载镜像1.2.安装MQ RabbitMQ部署指南 RabbitMQ是基于Erlang语言开发的开源消息通信中间件&#xff0c;官网地址&#xff1a;https://www.rabbitmq.com Erlang语言: 面向并发的编程语言&#xff0c;天生为了分布式系统而设计的 1.单机…
阅读更多...
JavaScript--改变 HTML 的值

JavaScript--改变 HTML 的值

要改变 HTML 元素的值&#xff0c;可以使用以下方法&#xff1a; 1.使用元素节点的 innerText 属性来改变元素的文本内容。 例如&#xff1a;element.innerText 新的文本内容; 2.使用元素节点的 innerHTML 属性来改变元素的 HTML 内容。 例如&#xff1a;element.innerHTML …
阅读更多...
java通过url获取视频时长（无需下载文件）

java通过url获取视频时长（无需下载文件）

1、导入架包 <!-- jave 核心依赖 --><dependency><groupId>ws.schild</groupId><artifactId>jave-core</artifactId><version>2.4.6</version></dependency><!-- 根据不同操作系统引入不同FFmpeg包 --><!-- wi…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023