首页 / MYSQL / 利用Prometheus与Grafana对Mysql服务器的性能监控详解

利用Prometheus与Grafana对Mysql服务器的性能监控详解

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了利用Prometheus与Grafana对Mysql服务器的性能监控详解，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含6941字，纯文字阅读大概需要10分钟。

内容图文

概述

Prometheus是一个开源的服务监控系统，它通过HTTP协议从远程的机器收集数据并存储在本地的时序数据库上。它提供了一个简单的网页界面、一个功能强大的查询语言以及HTTP接口等等。Prometheus通过安装在远程机器上的exporter来收集监控数据，这里用到了以下两个exporter：

node_exporter – 用于机器系统数据
mysqld_exporter – 用于Mysql服务器数据

Grafana是一个开源的功能丰富的数据可视化平台，通常用于时序数据的可视化。它内置了以下数据源的支持：

利用Prometheus与Grafana对Mysql服务器的性能监控详解 - 文章图片

并可以通过插件扩展支持的数据源。

架构图

下面是本次部署的架构图

利用Prometheus与Grafana对Mysql服务器的性能监控详解 - 文章图片

安装并运行Prometheus

1.在 Monitor 上安装 Prometheus

安装至/opt/prometheus

$ wget https://github.com/prometheus/prometheus/releases/download/v1.5.2/prometheus-1.5.2.linux-amd64.tar.gz
$ tar zxvf prometheus-1.5.2.linux-amd64.tar.gz
$ mv prometheus-1.5.2.linux-amd64 /opt/prometheus

2.在安装目下编辑配置文件 prometheus.yml

vim /opt/prometheus/prometheus.yml

# my global config
global:
 scrape_interval: 15s # Set the scrape interval to every 15 seconds. Default is every 1 minute.
 evaluation_interval: 15s # Evaluate rules every 15 seconds. The default is every 1 minute.
 # scrape_timeout is set to the global default (10s).
 # Attach these labels to any time series or alerts when communicating with
 # external systems (federation, remote storage, Alertmanager).
 external_labels:
 monitor: 'codelab-monitor'
# Load rules once and periodically evaluate them according to the global 'evaluation_interval'.
rule_files:
 # - "first.rules"
 # - "second.rules"
# A scrape configuration containing exactly one endpoint to scrape:
# Here it's Prometheus itself.
scrape_configs:
 # The job name is added as a label `job=<job_name>` to any timeseries scraped from this config.
 - job_name: 'prometheus'
 # metrics_path defaults to '/metrics'
 # scheme defaults to 'http'.
 static_configs:
 - targets: ['localhost:9090']
 # 以下是添加的部分
 - job_name: linux
 static_configs:
 - targets: ['172.30.251.214:9100']
 labels:
 instance: db1
 - job_name: mysql
 static_configs:
 - targets: ['172.30.251.214:9104']
 labels:
 instance: db1

其中：172.30.251.214是MySQL的IP，端口则是对应的exporter的监听端口。

3.启动Prometheus

[loya@centos6 prometheus]$ ./prometheus
INFO[0000] Starting prometheus (version=1.5.2, branch=master, revision=bd1182d29f462c39544f94cc822830e1c64cf55b) source=main.go:75
INFO[0000] Build context (go=go1.7.5, user=root@a8af9200f95d, date=20170210-14:41:22) source=main.go:76
INFO[0000] Loading configuration file prometheus.yml source=main.go:248
INFO[0000] Loading series map and head chunks... source=storage.go:373
INFO[0000] 0 series loaded. source=storage.go:378
INFO[0000] Starting target manager... source=targetmanager.go:61
INFO[0000] Listening on :9090 source=web.go:259

Prometheus内置了一个web界面，可以通过http://monitor_host:9090进行访问：

利用Prometheus与Grafana对Mysql服务器的性能监控详解 - 文章图片

在Status->Targets页面下，可以看到我们配置的两个Target，它们的State为DOWN。

利用Prometheus与Grafana对Mysql服务器的性能监控详解 - 文章图片

4.接下来需要在被监控机器上安装并运行exporter

下载exporters并解压：

$ mkdir /opt/prometheus/prometheus_exporters
$ cd /opt/prometheus/prometheus_exporters
$ wget https://github.com/prometheus/node_exporter/releases/download/v0.14.0-rc.1/node_exporter-0.14.0-rc.1.linux-amd64.tar.gz
$ wget https://github.com/prometheus/mysqld_exporter/releases/download/v0.9.0/mysqld_exporter-0.9.0.linux-amd64.tar.gz
$ tar zxvf node_exporter-0.14.0-rc.1.linux-amd64.tar.gz
$ tar zxvf mysqld_exporter-0.9.0.linux-amd64.tar.gz
# 将各自的可执行文件移动到/opt/prometheus/prometheus_exporters
$ ll /opt/prometheus/prometheus_exporters
total 24464
-rwxr-xr-x 1 root root 12182376 Feb 23 19:01 mysqld_exporter
-rwxr-xr-x 1 root root 12862209 Feb 23 19:01 node_exporter

运行node_exporter

$ cd /opt/prometheus/prometheus_exporters
$ ./node_exporter 
INFO[0000] Starting node_exporter (version=0.14.0-rc.1, branch=master, revision=5a07f4173d97fa0dd307db5bd3c2e6da26a4b16e) source="node_exporter.go:136"
INFO[0000] Build context (go=go1.7.4, user=root@ed143c8f2fcd, date=20170116-16:00:03) source="node_exporter.go:137"
INFO[0000] No directory specified, see --collector.textfile.directory source="textfile.go:57"
INFO[0000] Enabled collectors: source="node_exporter.go:156"
INFO[0000] - entropy source="node_exporter.go:158"
INFO[0000] - loadavg source="node_exporter.go:158"
INFO[0000] - stat source="node_exporter.go:158"
INFO[0000] - diskstats source="node_exporter.go:158"
INFO[0000] - textfile source="node_exporter.go:158"
INFO[0000] - vmstat source="node_exporter.go:158"
INFO[0000] - meminfo source="node_exporter.go:158"
INFO[0000] - filefd source="node_exporter.go:158"
INFO[0000] - filesystem source="node_exporter.go:158"
INFO[0000] - mdadm source="node_exporter.go:158"
INFO[0000] - netdev source="node_exporter.go:158"
INFO[0000] - sockstat source="node_exporter.go:158"
INFO[0000] - time source="node_exporter.go:158"
INFO[0000] - zfs source="node_exporter.go:158"
INFO[0000] - edac source="node_exporter.go:158"
INFO[0000] - hwmon source="node_exporter.go:158"
INFO[0000] - netstat source="node_exporter.go:158"
INFO[0000] - uname source="node_exporter.go:158"
INFO[0000] - conntrack source="node_exporter.go:158"
INFO[0000] Listening on :9100 source="node_exporter.go:176"

mysqld_exporter需要连接到MySQL，所以需要MySQL权限，我们为其创建用户并赋予所需的权限：

mysql> GRANT REPLICATION CLIENT, PROCESS ON *.* TO 'prom'@'localhost' identified by 'abc123';
mysql> GRANT SELECT ON performance_schema.* TO 'prom'@'localhost';

创建.my.cnf文件并运行mysqld_exporter：

$ cd /opt/prometheus/prometheus_exporters
$
$ cat << EOF > .my.cnf
[client]
user=prom
password=abc123
EOF
$
$ ./mysqld_exporter -config.my-cnf=".my.cnf"
INFO[0000] Starting mysqld_exporter (version=0.9.0, branch=master, revision=8400af20ccdbf6b5e0faa2c925c56c48cd78d70b) source=mysqld_exporter.go:432
INFO[0000] Build context (go=go1.6.3, user=root@2c131c66ca20, date=20160926-18:28:09) source=mysqld_exporter.go:433
INFO[0000] Listening on :9104 source=mysqld_exporter.go:451

回到Prometheus web界面Status->Targets，可以看到两个Target的状态已经变成UP了：

利用Prometheus与Grafana对Mysql服务器的性能监控详解 - 文章图片

安装和运行Grafana

安装：

Grafana 的安装官方文档比较清晰，这里不再赘述。

配置：

编辑配置文件/etc/grafana/grafana.ini，修改dashboards.json段落下两个参数的值：

[dashboards.json]
enabled = true
path = /var/lib/grafana/dashboards

导入Prometheus Dashboard：

$ git clone https://github.com/percona/grafana-dashboards.git
$ cp -r grafana-dashboards/dashboards /var/lib/grafana

启动：

$ /etc/init.d/grafana-server start

通过http://monitor_host:3000访问Grafana Web界面（缺省帐号/密码为admin/admin）

登录后，通过Data Sources页面添加数据源：

利用Prometheus与Grafana对Mysql服务器的性能监控详解 - 文章图片

然后就可以通过选择不同的仪表盘（左上角）和时间段（右上角）来呈现图表了：

System Overview:

利用Prometheus与Grafana对Mysql服务器的性能监控详解 - 文章图片

MySQL Overview:

利用Prometheus与Grafana对Mysql服务器的性能监控详解 - 文章图片

总结

以上就是这篇文章的全部内容了，希望本文的内容对大家的学习或者工作能带来一定的帮助，如果有疑问大家可以留言交流，谢谢大家对脚本之家的支持。

您可能感兴趣的文章:

根据mysql慢日志监控SQL语句执行效率
mysql常用监控脚本命令整理
安装配置Zabbix来监控MySQL的基本教程
Shell脚本实现监控MySQL主从同步
安装配置MySQLMTOP来监控MySQL运行性能的教程
MySQL数据库维护中监控所用到的常用命令
MySQL实时监控工具orztop的使用介绍
mytop 使用介绍 mysql实时监控工具
shell脚本监控mysql主从状态
关于对mysql语句进行监控的方法详解

内容总结

以上是互联网集市为您收集整理的利用Prometheus与Grafana对Mysql服务器的性能监控详解全部内容，希望文章能够帮你解决利用Prometheus与Grafana对Mysql服务器的性能监控详解所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/583111.html

来源：【匿名】

【上一篇】MySQL创建带特殊字符的数据库名称方法示例【下一篇】用IE远程创建Mysql数据库的简易程序

更多 ►

【利用Prometheus与Grafana对Mysql服务器的性能监控详解】教程文章相关的互联网学习教程文章

mysql性能检查脚本-部分

#!/bin/sh#ocpyang@126.comexport black=‘\033[0m‘ export boldblack=‘\033[1;0m‘ export red=‘\033[31m‘ export boldred=‘\033[1;31m‘ export green=‘\033[32m‘ export boldgreen=‘\033[1;32m‘ export yellow=‘\033[33m‘ export boldyellow=‘\033[1;33m‘ export blue=‘\033[34m‘ export boldblue=‘\033[1;34m‘ export magenta=‘\033[35m‘ export boldmagenta=‘\033[1;35m‘ export cyan=‘\033[36m‘ expo...

MySQL索引背后的之使用策略及优化(高性能索引策略)【图】

本章的内容完全基于上文的理论基础，实际上一旦理解了索引背后的机制，那么选择高性能的策略就变成了纯粹的推理，并且可以理解这些策略背后的逻辑。示例数据库　　为了讨论索引策略，需要一个数据量不算小的数据库作为示例。本文选用MySQL官方文档中提供的示例数据库之一：employees。这个数据库关系复杂度适中，且数据量较大。下图是这个数据库的E-R关系图(引用自MySQL官方手册)：　　图12　　MySQL官方文档中关于此数据库的页面...

MySQL性能调优与架构设计 PDF扫描版下载【图】

MySQL性能调优与架构设计以 mysql 数据库的基础及维护为切入点，重点介绍了 mysql 数据库应用系统的性能调优，以及高可用可扩展的架构设计。MySQL性能调优与架构设计共分3篇，基础篇介绍了mysql软件的基础知识、架构组成、存储引擎、安全管理及基本的备份恢复知识。性能优化篇从影响 mysql 数据库应用系统性能的因素开始，针对性地对各个影响因素进行调优分析。如 mysql schema 设计的技巧，query 语句的性能优化方式方法及mysql s...

使用动态跟踪技术SystemTap监控MySQL、Oracle性能【图】

【IT168 技术】本文根据吕海波2018年5月11日在【第九届中国数据库技术大会】上的演讲内容整理而成。　　讲师介绍：　　吕海波，美创科技研究员，ITPUB管理版版主。出版技术书籍《Oracle内核技术揭密》，曾参加过两届数据库大会。IT老兵，22年IT领域从业经历，十数年数据库经验，惯看IT江湖风起云涌。曾在多家巨头型互联网公司(阿里、ebay、京东)从事数据库管理、数据架构、运维自动化工作。目前主要研究数据安全、敏捷运维等方向。...

[转]mysql索引结构原理、性能分析与优化

第一部分：基础知识索引官方介绍索引是帮助MySQL高效获取数据的数据结构。笔者理解索引相当于一本书的目录，通过目录就知道要的资料在哪里，不用一页一页查阅找出需要的资料。唯一索引(unique index) 强调唯一，就是索引值必须唯一。创建索引：create unique index 索引名 on 表名(列名);alter table 表名 add unique index 索引名 (列名);删除索引：drop index 索引名 on 表名;alter table 表名 drop index 索引名;主键主键就...

mysql笔记02 创建高性能的索引

创建高性能的索引1. 索引(在MySQL中也叫做"键(key)")是存储引擎用于快速找到记录的一种数据结构。2. 索引可以包含一个或多个列的值。如果索引包含多个列，那么列的顺序也十分重要，因为MySQL只能高效低使用索引的最左前缀列。3. B-Tree索引：当人们谈论索引的时候，如果没有特别执行索引类型，那多半说是B-Tree索引，它使用B-Tree数据结构来存储数据。 1). 可以使用B-Tree索引的查询类型： a. 全职匹配：全值匹配指的是...

Python 使用 PyMysql、DBUtils 创建连接池，提升性能【代码】【图】

转自：https://blog.csdn.net/weixin_41287692/article/details/83413775Python 编程中可以使用 PyMysql 进行数据库的连接及诸如查询/插入/更新等操作，但是每次连接 MySQL 数据库请求时，都是独立的去请求访问，相当浪费资源，而且访问数量达到一定数量时，对 mysql 的性能会产生较大的影响。因此，实际使用中，通常会使用数据库的连接池技术，来访问数据库达到资源复用的目的。解决方案：DBUtilsDBUtils 是一套 Python 数据库连接...

mysql limit性能问题

offset大的时候的比较 SELECT * FROM persons LIMIT 200000,10;耗时0.078s SELECT *FROM persons WHERE id>=(SELECT id FROM persons ORDER BY id LIMIT 200000,1) LIMIT 10耗时0.109s why？原文：http://www.cnblogs.com/usual2013blog/p/3721804.html

mysql数据库性能调优总结积累

mysql数据库的调优大概可以分为四大块0 架构调优　　　　　　　---根据业务读写分库分表　　　　　　 ---主从读写分离1 配置的调优　　　　　　　---开启缓存查询设置缓存大小　　　　　　　---最大连接数设置　　　　　　　---数据库引擎配置 myisam（读操作，查询快） Innodb（写操作，主库，支持事务，安全）引擎配置　　　　　　　---日志配置2 表结构的调优　　　　　　　----建立合适的索引（主键索引，唯一索引，普...

[AWS][数据库]Aurora 动手实验&对比RDS Mysql性能【图】

实验包括：创建一个Aurora实例使用MySQL Workbench连接Aurora和RDS MySQL通过dump file 加载数据到Aurora和RDS MySQL使用查询语句验证Aurora和RDS MySQL性能Task1：创建Aurora数据库：创建一个Aurora数据库，跟创建RDS一样，登录AWS管理控制台，搜索Aurora，创建数据库。数据库类型选择，Aurora with MySQL compatibility，其他默认就好。Templates选择 Dev/TestDB instance size 选择db.t3.small就好，因为是测试环境，如果是生产...

对mysql存储性能优化的基本理解

这几天了解了下关于mysql数据库的性优化和设计方面的内容，现在做一下自己学习的小结，后续我会继续深入学习，完善下总结：1、使用索引每张表最多可以做16个索引，支持多列索引和全文索引建立索引：create index index_name on users(username); 查看索引：show index from users; 是一把双刃剑，建不建立索引，主要看表的功能，找好一个平衡点，。2、使用explain分析查询在查询在用explain explain select *from users;3、调...

mysql性能优化注意事项以及索引【图】

mysql性能优化注意事项以及索引一：数据库的优化方面1商业需求的影响比如说论坛里的帖子统计，并且实时更新从功能上来说通过命令 select count（*） from 表名可以得到结果，如果论坛每秒产生产生成千上万条帖子，我们没有采用myisam存储而用的是innodb存储；就算再好的设备也不可能很快的查询出来。注：在where和count（*）使用中myisam比innodb要快的多；因为myisam内置了一个计数器，count（*）可以直接从计数器当中读取，而...

MySQL性能测试初试（1）--sysbench【代码】

1.简介和安装SysBench是一个模块化的、跨平台、多线程基准测试工具，主要用于评估测试各种不同系统参数下的数据库负载情况。它主要包括以下几种方式的测试：cpu性能磁盘io性能调度程序性能内存分配及传输速度POSIX线程性能数据库性能(OLTP基准测试)源码下载：https://github.com/akopytov/sysbench/releases/tag/1.0.20 rpm包下载：https://packagecloud.io/akopytov/sysbench/packages/el/7/sysbench-1.0.20-1.el7.x86_64.rpm：1....

MySQL索引使用方法和性能优化【代码】

关于MySQL索引的好处，如果正确合理设计并且使用索引的MySQL是一辆兰博基尼的话，那么没有设计和使用索引的MySQL就是一个人力三轮车。对于没有索引的表，单表查询可能几十万数据就是瓶颈，而通常大型网站单日就可能会产生几十万甚至几百万的数据，没有索引查询会变的非常缓慢。还是以WordPress来说，其多个数据表都会对经常被查询的字段添加索引，比如wp_comments表中针对5个字段设计了BTREE索引。一个简单的对比测试以我去年测试的...

MYSQL索引结构原理、性能分析与优化【代码】

[转]MYSQL索引结构原理、性能分析与优化第一部分：基础知识索引官方介绍索引是帮助MySQL高效获取数据的数据结构。笔者理解索引相当于一本书的目录，通过目录就知道要的资料在哪里，不用一页一页查阅找出需要的资料。唯一索引(unique index)强调唯一，就是索引值必须唯一。创建索引： create unique index 索引名 on 表名(列名); alter table 表名 add unique index 索引名 (列名);删除索引： drop index 索引名 on 表名; alter ta...

首页 / MYSQL / 利用Prometheus与Grafana对Mysql服务器的性能监控详解

利用Prometheus与Grafana对Mysql服务器的性能监控详解

内容导读

内容图文

您可能感兴趣的文章:

内容总结

内容备注

内容手机端

【利用Prometheus与Grafana对Mysql服务器的性能监控详解】教程文章相关的互联网学习教程文章

mysql性能检查脚本-部分

MySQL索引背后的之使用策略及优化(高性能索引策略)【图】

MySQL性能调优与架构设计 PDF扫描版下载【图】

使用动态跟踪技术SystemTap监控MySQL、Oracle性能【图】

[转]mysql索引结构原理、性能分析与优化

mysql笔记02 创建高性能的索引

Python 使用 PyMysql、DBUtils 创建连接池，提升性能【代码】【图】

mysql limit性能问题

mysql数据库性能调优总结积累

[AWS][数据库]Aurora 动手实验&对比RDS Mysql性能【图】

对mysql存储性能优化的基本理解

mysql性能优化注意事项以及索引【图】

MySQL性能测试初试（1）--sysbench【代码】

MySQL索引使用方法和性能优化【代码】

MYSQL索引结构原理、性能分析与优化【代码】

MYSQL - 相关标签

服务器 - 相关标签

监控 - 相关标签

MYSQL - 技术教程分类

MYSQL - 最新教程

MYSQL - 最热教程