1.普羅米修斯概述

Prometheus是一套開(kāi)源的監(jiān)控&報(bào)警&時(shí)間序列數(shù)據(jù)庫(kù)的組合。適合監(jiān)控Docker容器。因?yàn)镵ubernetes的流行帶動(dòng)了Prometheus的發(fā)展
官網(wǎng)：https://prometheus.io/

2.時(shí)間序列數(shù)據(jù)

1.什么是序列數(shù)據(jù)

時(shí)間序列數(shù)據(jù)(TimeSeries Data)：按照時(shí)間順序記錄系統(tǒng)、設(shè)備狀態(tài)變化的數(shù)據(jù)被稱(chēng)為時(shí)序數(shù)據(jù)。
應(yīng)用的場(chǎng)景很多：如

無(wú)人駕駛車(chē)輛運(yùn)行中要記錄的經(jīng)度、緯度、速度、方向、旁邊的距離等。
某一地區(qū)的各車(chē)輛的行駛軌跡數(shù)據(jù)
傳統(tǒng)證券行業(yè)實(shí)時(shí)交易數(shù)據(jù)
實(shí)時(shí)運(yùn)維監(jiān)控?cái)?shù)據(jù)等

2.時(shí)間序列數(shù)據(jù)特點(diǎn)

性能好
關(guān)系型數(shù)據(jù)庫(kù)對(duì)于大規(guī)模數(shù)據(jù)的處理性能糟糕。NoSQL可以比較好的處理大規(guī)模數(shù)據(jù)，但依然比不上時(shí)間序列數(shù)據(jù)庫(kù)。
存儲(chǔ)成本低
高效的壓縮算法，節(jié)省存儲(chǔ)空間，有效降低IO

3.Prometheus的主要特征

多維度數(shù)據(jù)模型
靈活的查詢(xún)語(yǔ)言
不依賴(lài)分布式存儲(chǔ)，單個(gè)服務(wù)器節(jié)點(diǎn)是自主的
以HTTP方式，通過(guò)Pull模型拉取時(shí)間序列數(shù)據(jù)
也可以通過(guò)中間網(wǎng)關(guān)支持Push模型
通過(guò)服務(wù)發(fā)現(xiàn)或者靜態(tài)配置，來(lái)發(fā)現(xiàn)目標(biāo)服務(wù)對(duì)象
支持多種多樣的圖標(biāo)和界面展示

4.Prometheus原理架構(gòu)圖

1.png

實(shí)驗(yàn)環(huán)境準(zhǔn)備

10.10.11.120  Prometheus 服務(wù)器
10.10.11.116  Grafana 服務(wù)器
10.10.11.113  客戶(hù)端

關(guān)閉防火墻

[root@localhost ~]# systemctl stop firewalld

更改主機(jī)名

[root@localhost ~]# hostname prometheus
[root@localhost ~]# bash
[root@prometheus ~]# 

[root@localhost ~]# hostname grafana
[root@localhost ~]# bash
[root@grafana ~]# 

[root@localhost ~]# hostname client
[root@localhost ~]# bash
[root@client ~]#

安裝Prometheus

[root@prometheus ~]# tar -xf prometheus-2.21.0.linux-amd64.tar.gz -C /usr/local/
[root@prometheus ~]# mv /usr/local/prometheus-2.21.0.linux-amd64/ /usr/local/prometheus
[root@prometheus ~]# /usr/local/prometheus/prometheus --config.file="/usr/local/prometheus/prometheus.yml" &
[root@prometheus ~]# lsof -i:9090
COMMAND    PID USER   FD   TYPE DEVICE SIZE/OFF NODE NAME
prometheu 4673 root    3u  IPv6  53174      0t0  TCP localhost:websm->localhost:44938 (ESTABLISHED)
prometheu 4673 root    9u  IPv6  53169      0t0  TCP *:websm (LISTEN)
prometheu 4673 root   12u  IPv4  53173      0t0  TCP localhost:44938->localhost:websm (ESTABLISHED)

通過(guò)訪問(wèn)10.10.11.120:9090就可以訪問(wèn)到Prometheus

2.png

默認(rèn)只監(jiān)控了本機(jī) 點(diǎn)擊Status -->Targets

3.png

4.png

主機(jī)數(shù)據(jù)展示

通過(guò)瀏覽器http://10.10.11.120:9090/metrics可以查看監(jiān)控到的數(shù)據(jù)

5.png

在Web界面可以通過(guò)關(guān)鍵字查詢(xún)監(jiān)控項(xiàng)

6.png

監(jiān)控遠(yuǎn)程Linux主機(jī)

在遠(yuǎn)程主機(jī)安裝node_exporter組件

[root@client ~]# tar -xf node_exporter-1.0.1.linux-amd64.tar.gz -C /usr/local/
[root@client ~]# mv /usr/local/node_exporter-1.0.1.linux-amd64/ /usr/local/node_exporter
[root@client ~]# ls /usr/local/node_exporter/
LICENSE  node_exporter  NOTICE
[root@client ~]# nohup /usr/local/node_exporter/node_exporter &
[root@client ~]# lsof -i:9100
COMMAND    PID USER   FD   TYPE DEVICE SIZE/OFF NODE NAME
node_expo 4579 root    3u  IPv6  48879      0t0  TCP *:jetdirect (LISTEN)

擴(kuò)展：nohup命令：如果把啟動(dòng)node_exporter的終端關(guān)閉，那么進(jìn)程也會(huì)隨之關(guān)閉。nohup會(huì)幫助你解決這個(gè)問(wèn)題

通過(guò)瀏覽器訪問(wèn)10.10.11.113:9100/metrics可以查看到node_exporter在被監(jiān)控端手機(jī)的監(jiān)控信息

7.png

回到Prometheus服務(wù)器配置文件添加客戶(hù)端的配置段

[root@prometheus ~]# vim /usr/local/prometheus/prometheus.yml
  - job_name: 'client1'
    static_configs:
    - targets: ['10.10.11.113:9100']

重啟Prometheus

[root@prometheus ~]# pkill prometheus
[root@prometheus ~]# lsof -i:9090
[root@prometheus ~]# /usr/local/prometheus/prometheus --config.file="/usr/local/prometheus/prometheus.yml" &
[root@prometheus ~]# lsof -i:9090
COMMAND     PID USER   FD   TYPE DEVICE SIZE/OFF NODE NAME
prometheu 57136 root    9u  IPv6 113310      0t0  TCP *:websm (LISTEN)
prometheu 57136 root   10u  IPv4 113315      0t0  TCP localhost:44950->localhost:websm (ESTABLISHED)
prometheu 57136 root   12u  IPv6 113316      0t0  TCP localhost:websm->localhost:44950 (ESTABLISHED)

回到10.10.11.120:9090
點(diǎn)擊Status -->Targets 發(fā)現(xiàn)多了一臺(tái)主機(jī)

8.png

監(jiān)控遠(yuǎn)程MySQL

在Client上安裝mysqld_exporter組件和MySQL

[root@client ~]# tar -xf mysqld_exporter-0.12.1.linux-amd64.tar.gz -C /usr/local/
[root@client ~]# mv /usr/local/mysqld_exporter-0.12.1.linux-amd64/ /usr/local/mysqld_exporter
[root@client ~]# yum -y install mariadb\*

啟動(dòng)MySQL并授權(quán)

[root@client ~]# systemctl restart mariadb
[root@client ~]# mysql -uroot
MariaDB [(none)]> grant select,replication client,process on *.* to 'mysql_monitor'@'localhost' identified by '123.com';
#授權(quán)IP為localhost，因?yàn)椴皇莗rometheus服務(wù)器直接找mariadb獲取數(shù)據(jù)，而是prometheus服務(wù)器找mysql_exporter，mysql_exporter再找mariadb。所以這個(gè)localhost是指的mysql_exporter的IP
MariaDB [(none)]> flush privileges;
Query OK, 0 rows affected (0.00 sec)

創(chuàng)建一個(gè)mariadb配置文件，寫(xiě)上剛剛授權(quán)的用戶(hù)名和密碼

[root@client ~]# vim /usr/local/mysqld_exporter/.my.cnf

[client]
user=mysql_monitor
password=123.com

啟動(dòng)mysqld_exporter

[root@client ~]# nohup /usr/local/mysqld_exporter/mysqld_exporter --config.my-cnf=/usr/local/mysqld_exporter/.my.cnf &
[root@client ~]# lsof -i:9104
COMMAND     PID USER   FD   TYPE DEVICE SIZE/OFF NODE NAME
mysqld_ex 60421 root    3u  IPv6 111828      0t0  TCP *:peerwire (LISTEN)

在Prometheus服務(wù)器的配置文件里添加被監(jiān)控的mariadb的配置段

[root@prometheus ~]# vim /usr/local/prometheus/prometheus.yml 
  - job_name: 'mariadb'
    static_configs:
    - targets: ['10.10.11.113:9104']
[root@prometheus ~]# pkill prometheus
[root@prometheus ~]# /usr/local/prometheus/prometheus --config.file="/usr/local/prometheus/prometheus.yml" &

回到web管理界面 -->點(diǎn)Status -->點(diǎn)Targets -->可以看到監(jiān)控mariadb了

9.png

10.png

Grafana連接Prometheus

在Grafana服務(wù)器上安裝Grafana

[root@grafana ~]# rpm -ivh grafana-7.1.5-1.x86_64.rpm 
warning: grafana-7.1.5-1.x86_64.rpm
[root@grafana ~]# systemctl start grafana-server.service 
[root@grafana ~]# lsof -i:3000
COMMAND     PID    USER   FD   TYPE DEVICE SIZE/OFF NODE NAME
grafana-s 56949 grafana    8u  IPv6 104827      0t0  TCP *:hbci (LISTEN)

訪問(wèn)10.10.11.116:3000
默認(rèn)admin用戶(hù)，admin密碼