关于监控:Prometheusgrafana监控系统

Prometheus 简介

Prometheus 是一套开源的系统监控和报警框架。2012 年，SoundCloud 的 Google 前员工发明了 Prometheus，并作为社区开源我的项目进行开发。2015 年，该我的项目正式公布。2016 年，Prometheus 退出云原生计算基金会（Cloud Native Computing Foundation），成为受欢迎度仅次于 Kubernetes 的我的项目。
Prometheus 基本原理是通过 HTTP 协定周期性抓取被监控组件的状态，这样做的益处是任意组件只有提供 HTTP 接口就能够接入监控零碎，不须要任何 SDK 或者其余的集成过程。这样做非常适合虚拟化环境比方 VM 或者 Docker

Prometheus 具备以下个性：

• 多维的数据模型（基于工夫序列的 Key、Value 键值对）
• 灵便的查问和聚合语言 PromQL
• 提供本地存储和分布式存储
• 通过基于 HTTP 的 Pull 模型采集工夫序列数据
• 可利用 Pushgateway（Prometheus 的可选中间件）实现 Push 模式
• 可通过动静服务发现或动态配置发现指标机器
• 反对多种图表和数据大盘

一、装置 Prometheus

官网 https://prometheus.io/download/

1. 首先装置 go

`yum install -y go`
`go version`

2. 下载 prometheus

wget https://github.com/prometheus/prometheus/releases/download/v2.21.0-rc.0/prometheus-2.21.0-rc.0.linux-amd64.tar.gz
tar zxvf prometheus-2.21.0-rc.0.linux-amd64.tar.gz
mv prometheus-2.21.0-rc.0.linux-amd64 /data/prometheus

3. 增加自启

vim /usr/lib/systemd/system/prometheus.service

[Unit]
Description=Prometheus
Documentation=https://prometheus.io/
After=network.target

[Service]
# Type 设置为 notify 时，服务会一直重启
Type=simple
User=prometheus
# --storage.tsdb.path 是可选项，默认数据目录在运行目录的./dada 目录中
ExecStart=/data/prometheus/prometheus --config.file=/data/prometheus/prometheus.yml --storage.tsdb.path=/data/prometheus/prometheus-data
Restart=on-failure

[Install]
WantedBy=multi-user.target

systemctl daemon-reload
systemctl start prometheus && systemctl enable prometheus

4. 创立用户、受权目录

useradd prometheus
chown prometheus:prometheus /data/prometheus -R

5. 按需批改配置

# my global config
global:
  scrape_interval:     15s # Set the scrape interval to every 15 seconds. Default is every 1 minute.
  evaluation_interval: 15s # Evaluate rules every 15 seconds. The default is every 1 minute.
# scrape_timeout is set to the global default (10s).

# Alertmanager configuration
alerting:
  alertmanagers:
  - static_configs:
- targets:
  # - alertmanager:9093

# Load rules once and periodically evaluate them according to the global 'evaluation_interval'.
rule_files:
  # - "first_rules.yml"
  # - "second_rules.yml"

# A scrape configuration containing exactly one endpoint to scrape:
# Here it's Prometheus itself.
scrape_configs:
  # The job name is added as a label `job=<job_name>` to any timeseries scraped from this config.
  - job_name: 'prometheus'

# metrics_path defaults to '/metrics'
# scheme defaults to 'http'.

static_configs:
- targets: ['localhost:9090']

###agent
  - job_name: linux
static_configs:
  - targets: ['192.168.1.153:9100','192.168.1.157:9100']
labels:
  instance: node1

  - job_name: mysql
static_configs:
  - targets: ['192.168.1.157:9104']
    labels:
      instance: devdb

二、exporter（受监控端）

exporter 是用于收集监控数据的一个 http 接口，目前罕用的利用组件官网都有提供相应的 exporter，如：nginx、redis、mysql 以及 linux 和 windows 操作系统（cpu、mem、disk、net）等，查看更多

1. 下载 node_exporter

wget https://github.com/prometheus/node_exporter/releases/download/v1.0.1/node_exporter-1.0.1.linux-amd64.tar.gz
tar zxvf node_exporter-1.0.1.linux-amd64.tar.gz
mv node_exporter-1.0.1.linux-amd64 /data1/srv/node_exporter

2. 增加 node_exporter 自启

vim /usr/lib/systemd/system/node_exporter.service

[Unit]
Description=node_exporter
Documentation=https://prometheus.io/
After=network.target

[Service]
Type=simple
User=root
ExecStart=/data1/srv/node_exporter/node_exporter
Restart=on-failure

[Install]
WantedBy=multi-user.target

systemctl daemon-reload
systemctl start node_exporter && systemctl enable node_exporter

3. mysqld_exporter 下载

…

4. mysqld_exporter 自启脚本

须要创立一个 mysql 监控用户，将其填写在 /data/mysqld_exporter/.my.cnf

vim /data/mysqld_exporter/.my.cnf

[client]
user=mysqluser
password=xxxxxx

vim /usr/lib/systemd/system/mysqld_exporter.service

[Unit]
Description=mysqld_exporter
Documentation=https://prometheus.io/
After=network.target

[Service]
Type=simple
User=root
ExecStart=/data/mysqld_exporter/mysqld_exporter --config.my-cnf=/data/mysqld_exporter/.my.cnf
Restart=on-failure

[Install]
WantedBy=multi-user.target

三、增加模板

1. 登录 grafana，增加监控源

2. 增加模板

筛选实用的模板，下载 json 文件或通过 ID 号导入

导入模板