容器化 | 构建 RadonDB MySQL 集群监控平台

上一篇文章我们演示了如何《在 S3 备份恢复 RadonDB MySQL 集群数据》,本文将演示在 KubeSphere[1] 中使用 Prometheus[2] + Grafana[3] 构建 MySQL 监控平台,开启所需监控指标。

背景

Prometheus 基于文本的暴露格式,已经成为云原生监控领域事实上的标准格式。

RadonDB MySQL 监控引擎基于 Prometheus MySQLd Exporter[5] 定义。通过 mysqld-exporter 抓取 RadonDB MySQL 服务指标,再通过接入第三方应用平台实现监控指标可视化。

准备工作

  • 已准备可用 Kubernetes 或 KubeSphere 集群
  • 已部署 RadonDB MySQL 集群 《部署文档》
  • RadonDB MySQL Kubernetes 版本 2.1.0

部署步骤

步骤 1: 配置 serviceMonitor

serviceMonitor 开启后将自动绑定 mysqld_exporter 与 Prometheus。

serviceMonitor 参数包含如下字段:

serviceMonitor:
  enabled: true
  ## Additional labels for the serviceMonitor. Useful if you have multiple prometheus operators running to select only specific ServiceMonitors
  # additionalLabels:
  #   prometheus: prom-internal
  interval: 10s
  scrapeTimeout: 3s
  # jobLabel:
  # targetLabels:
  # podTargetLabels:
  namespaceSelector:
    any: true
  selector:
    matchLabels:
      app.kubernetes.io/managed-by: mysql.radondb.com
      app.kubernetes.io/name: mysql

您可以在 charts/mysql-operator/values.yaml 文件中配置 serviceMonitor

  • 新部署 Operator 时, serviceMonitor.enabled 默认为 true,表示默认开启。
  • 已部署 Operator 2.1.0 以下版本的集群,需重新部署 Operator。

步骤 2: 配置 metricsOpts

metricsOpts 是 CRD mysqlclusters.mysql.radondb.com 中定义 RadonDB MySQL 集群监控的参数,可通过配置 mysql_v1alpha1_mysqlcluster.yaml 文件中参数值开启监控服务。

metricsOpts 参数包含如下字段:

metricsOpts:
    enabled: false
    image: prom/mysqld-exporter:v0.12.1

    resources:
      requests:
        cpu: 10m
        memory: 32Mi
      limits:
        cpu: 100m
        memory: 128Mi

metricsOpts.enabled 默认为 false,需手动设置为 true

  • 设置 metricsOpts.enabledtrue,开启集群监控功能;
  • 设置资源参数值,定义监控容器的资源配额大小
    [En]

    set the resource parameter value and define the resource quota size of the monitoring container*

修改文件参数后,按照如下说明进行配置,部署/更新集群的回应信息如下:

[En]

After the file parameters are modified, use the following instructions to apply the configuration, and deploy / update the echo information of the cluster as follows:

$ kubectl apply -f config/sample/mysql_v1alpha1_mysqlcluster.yaml
cluster.mysql.radondb.com/sample created/configured

查看监控服务

通过客户端查看

您可以通过如下指令查看集群监控服务和 serviceMonitor 信息。

$ kubectl get service,servicemonitor

$ kubectl describe servicemonitor

预期效果

$ kubectl get service,servicemonitor
NAME                             TYPE        CLUSTER-IP      EXTERNAL-IP   PORT(S)    AGE
service/mysql-operator-metrics   ClusterIP   10.96.242.205           8443/TCP   3h25m
service/sample-follower          ClusterIP   10.96.2.234             3306/TCP   21h
service/sample-leader            ClusterIP   10.96.30.238            3306/TCP   21h
service/sample-metrics           ClusterIP   10.96.7.222             9104/TCP   3h24m
service/sample-mysql             ClusterIP   None                    3306/TCP   21h

NAME                                                              AGE
servicemonitor.monitoring.coreos.com/demo-mysql-operator          3h25m

$ kubectl describe servicemonitor demo-mysql-operator
Name:         test-radondb-mysql-metrics
Namespace:    default
Labels:       app=test-radondb-mysql
              app.kubernetes.io/managed-by=Helm
              app.kubernetes.io/vendor=kubesphere
              chart=radondb-mysql-1.0.0
              heritage=Helm
              release=test
Annotations:  kubesphere.io/creator: admin
API Version:  monitoring.coreos.com/v1
Kind:         ServiceMonitor
......

Spec:
  Endpoints:
    Interval:        1m
    Path:            /metrics
    Port:            metrics
    Scheme:          http
    Scrape Timeout:  10s
......

在 KubeSphere 平台查看

在 KubeSphere 企业空间部署的 RadonDB MySQL Operator 和集群,开启监控后,可在如下页面查看监控服务状态。

  • 在项目空间 应用负载下的 服务页面,点击 <集群名称>-metrics<!--集群名称-->,可查看监控服务信息。

容器化 | 构建 RadonDB MySQL 集群监控平台
  • 在项目空间 应用负载下的 容器组页面,点击一个容器的名称,可查看该容器中 metrics 资源状态。

容器化 | 构建 RadonDB MySQL 集群监控平台

查看监控内容

通过 KubeSphere 自定义监控

KubeSphere 的监控引擎基于 Prometheus 和 Prometheus Operator。使用 KubeSphere 的自定义监控功能支持以可视化的形式监控 RadonDB MySQL 指标。

  • 在集群同一项目中,选择 监控告警 -> 自定义监控 -> 创建
  • 在对话框中,选择 MySQL 模版,并继续配置监控模版;

容器化 | 构建 RadonDB MySQL 集群监控平台
  • 点击 保存模版,即新创建监控面板。

容器化 | 构建 RadonDB MySQL 集群监控平台
  • 需要等待约10分钟,新的监控面板才能查看监控数据。
    [En]

    you need to wait about 10 minutes for the new monitoring panel to view the monitoring data.*

容器化 | 构建 RadonDB MySQL 集群监控平台

更多详情,请查看 KubeSphere 自定义监控介绍[6] 和 可视化监控[7]。

通过 Prometheus + Grafana 平台

Grafana 是一个跨平台、开源的数据可视化网络应用程序平台。通过 Prometheus + Grafana 平台查看监控基本原理如下:

  • 通过 mysql_exporter 获取 RadonDB MySQL 服务监控数据.

  • 通过 node_exporter 获得 RadonDB MySQL 服务器的监控数据。

  • 将监控数据传到 Prometheus 后,通过配置数据源,最终在 Grafana 呈现丰富的监控数据图表和警告。

容器化 | 构建 RadonDB MySQL 集群监控平台

更多 Grafana 可视化监控使用说明,请参见 Grafana Dashboards[8]。

参考引用

  1. KubeSphere:https://kubesphere.com.cn
  2. Prometheus:https://prometheus.io/
  3. Grafana:https://grafana.org/
  4. RadonDB MySQL Kubernetes 2.1.3:https://radondb.com/projects/mysql/
  5. Prometheus MySQLd Exporter:https://github.com/prometheus/mysqld_exporter
  6. 自定义监控:https://kubesphere.io/zh/docs/project-user-guide/custom-application-monitoring/introduction/
  7. 可视化监控:https://kubesphere.io/zh/docs/project-user-guide/custom-application-monitoring/visualization/overview/
  8. Grafana Dashboards:https://grafana.com/docs/grafana/latest/dashboards/

Original: https://www.cnblogs.com/radondb/p/16257835.html
Author: RadonDB
Title: 容器化 | 构建 RadonDB MySQL 集群监控平台

原创文章受到原创版权保护。转载请注明出处:https://www.johngo689.com/505389/

转载文章受原作者版权保护。转载请注明原作者出处!

(0)

大家都在看

  • 手把手教你分析MySQL查询性能瓶颈,包教包会

    当一条SQL执行较慢,需要分析性能瓶颈,到底慢在哪? 我们一般会使用 Explain查看其执行计划,从执行计划中得知这条SQL有没有使用索引?使用了哪个索引? 但执行计划显示内容不…

    数据库 2023年5月24日
    072
  • MySQL使用步骤

    出现mysqld: Can’t create directory ‘D:\Environment\mysql-5.7.37 \data’ (Er…

    数据库 2023年5月24日
    0144
  • 695.岛屿的最大面积

    695.岛屿的最大面积 给你一个大小为 m x n 的二进制矩阵 grid 。 岛屿 是由一些相邻的 1 (代表土地) 构成的组合,这里的「相邻」要求两个 1 必须在 水平或者竖直…

    数据库 2023年6月16日
    075
  • Typora + PicGo + Gitee 解放你对图片的管理

    计算机环境准备 Typora PicGo nodejs Typora官网: https://typora.io/ PicGo官网: https://picgo.github.io/…

    数据库 2023年6月9日
    083
  • PDF转换OFD(Java实用版)

    前言: 在项目中用到了,就写一下哈 OFD简介 百度百科:https://baike.baidu.com/item/OFD/56227163?fr=aladdin OFD(Open…

    数据库 2023年6月16日
    0131
  • nginx反向代理proxy_pass url后加/和不加/的区别

    在nginx中配置proxy_pass反向代理时,当在后面的url加上了/,相当于是绝对根路径,则nginx不会把location中匹配的路径部分代理走;如果没有/,则会把匹配的路…

    数据库 2023年6月6日
    0120
  • Mysql终端Terminal操作

    datebase管理 1.创建数据库-create 语法:create database 数据库名 character set 编码 注意:默认会存在四个数据库,其数据库中存储的是…

    数据库 2023年5月24日
    096
  • Dubbo源码(五)-服务目录

    前言 本文基于Dubbo2.6.x版本,中文注释版源码已上传github:xiaoguyu/dubbo 今天,来聊聊Dubbo的 服务目录(Directory)。下面是官方文档对服…

    数据库 2023年6月11日
    099
  • Angel工作室ASP.NET(AngelExam)开源驾校考试系统正式发布

    一、Angel工作室ASP.NET(AngelExam)开源驾校考试系统简介 Angel工作室ASP.NET(AngelExam)驾校考试系统是基于asp.net mvc4.5(C…

    数据库 2023年6月14日
    077
  • Windows 装机必备

    404. 抱歉,您访问的资源不存在。 可能是网址有误,或者对应的内容被删除,或者处于私有状态。 代码改变世界,联系邮箱 contact@cnblogs.com 园子的商业化努力-困…

    数据库 2023年6月6日
    074
  • 第二十章 AOP开发中的坑

    问题 //在同一个业务类中,一个业务方法调用另一个业务方法 //问题: login方法添加有额外功能 // register方法没有添加额外功能 public class User…

    数据库 2023年6月14日
    070
  • web开发模式

    前后端不分离 返回的是html的内容,需要在服务端拿到数据库的数据,再渲染给模板层,最后将渲染好的模板返回给浏览器! 前后端分离 前后端分离:只需要在浏览器上运行JS代码,使用aj…

    数据库 2023年6月14日
    091
  • 阻塞非阻塞和同步异步的区分 参考一些书籍

    编程中一直对这两个概念不是很理解,在网上搜了很多资料大概描述的其实都很模糊,有时候还自相矛盾,很容易搞混,这里说一下我对这两个概念的理解。首先看一下相关技术书籍对这两个概念的描述,…

    数据库 2023年6月16日
    0234
  • 掌握这9个单行代码技巧!你也能写出『高端』Python代码 ⛵

    💡 作者:韩信子@ShowMeAI📘 Python3◉技能提升系列:https://www.showmeai.tech/tutorials/56📘 本文地址:https://www…

    数据库 2023年6月14日
    096
  • 数据库基础,看完这篇就够了!

    404. 抱歉,您访问的资源不存在。 可能是网址有误,或者对应的内容被删除,或者处于私有状态。 代码改变世界,联系邮箱 contact@cnblogs.com 园子的商业化努力-困…

    数据库 2023年6月11日
    088
  • windows下安装mysql5.7

    1.首先官网下载ZIP安装包(即以解压,配置的方式安装) 2.解压完成之后在目录下创建 my.ini文件 内容如下: [mysql]设置mysql客户端默认字符集default-c…

    数据库 2023年5月24日
    082
亲爱的 Coder【最近整理,可免费获取】👉 最新必读书单  | 👏 面试题下载  | 🌎 免费的AI知识星球