1.普羅米修斯概述

Prometheus是一套開源的監(jiān)控&報警&時間序列數(shù)據(jù)庫的組合。適合監(jiān)控Docker容器。因為Kubernetes的流行帶動了Prometheus的發(fā)展
官網(wǎng)：https://prometheus.io/

2.時間序列數(shù)據(jù)

1.什么是序列數(shù)據(jù)

時間序列數(shù)據(jù)(TimeSeries Data)：按照時間順序記錄系統(tǒng)、設(shè)備狀態(tài)變化的數(shù)據(jù)被稱為時序數(shù)據(jù)。
應(yīng)用的場景很多：如

無人駕駛車輛運(yùn)行中要記錄的經(jīng)度、緯度、速度、方向、旁邊的距離等。
某一地區(qū)的各車輛的行駛軌跡數(shù)據(jù)
傳統(tǒng)證券行業(yè)實時交易數(shù)據(jù)
實時運(yùn)維監(jiān)控數(shù)據(jù)等

2.時間序列數(shù)據(jù)特點

性能好
關(guān)系型數(shù)據(jù)庫對于大規(guī)模數(shù)據(jù)的處理性能糟糕。NoSQL可以比較好的處理大規(guī)模數(shù)據(jù)，但依然比不上時間序列數(shù)據(jù)庫。
存儲成本低
高效的壓縮算法，節(jié)省存儲空間，有效降低IO

3.Prometheus的主要特征

多維度數(shù)據(jù)模型
靈活的查詢語言
不依賴分布式存儲，單個服務(wù)器節(jié)點是自主的
以HTTP方式，通過Pull模型拉取時間序列數(shù)據(jù)
也可以通過中間網(wǎng)關(guān)支持Push模型
通過服務(wù)發(fā)現(xiàn)或者靜態(tài)配置，來發(fā)現(xiàn)目標(biāo)服務(wù)對象
支持多種多樣的圖標(biāo)和界面展示

4.Prometheus原理架構(gòu)圖

1.png

實驗環(huán)境準(zhǔn)備

10.10.11.120  Prometheus 服務(wù)器
10.10.11.116  Grafana 服務(wù)器
10.10.11.113  客戶端

關(guān)閉防火墻

[root@localhost ~]# systemctl stop firewalld

更改主機(jī)名

[root@localhost ~]# hostname prometheus
[root@localhost ~]# bash
[root@prometheus ~]# 

[root@localhost ~]# hostname grafana
[root@localhost ~]# bash
[root@grafana ~]# 

[root@localhost ~]# hostname client
[root@localhost ~]# bash
[root@client ~]#

安裝Prometheus

[root@prometheus ~]# tar -xf prometheus-2.21.0.linux-amd64.tar.gz -C /usr/local/
[root@prometheus ~]# mv /usr/local/prometheus-2.21.0.linux-amd64/ /usr/local/prometheus
[root@prometheus ~]# /usr/local/prometheus/prometheus --config.file="/usr/local/prometheus/prometheus.yml" &
[root@prometheus ~]# lsof -i:9090
COMMAND    PID USER   FD   TYPE DEVICE SIZE/OFF NODE NAME
prometheu 4673 root    3u  IPv6  53174      0t0  TCP localhost:websm->localhost:44938 (ESTABLISHED)
prometheu 4673 root    9u  IPv6  53169      0t0  TCP *:websm (LISTEN)
prometheu 4673 root   12u  IPv4  53173      0t0  TCP localhost:44938->localhost:websm (ESTABLISHED)

通過訪問10.10.11.120:9090就可以訪問到Prometheus

2.png

默認(rèn)只監(jiān)控了本機(jī) 點擊Status -->Targets

3.png

4.png

主機(jī)數(shù)據(jù)展示

通過瀏覽器http://10.10.11.120:9090/metrics可以查看監(jiān)控到的數(shù)據(jù)

5.png

在Web界面可以通過關(guān)鍵字查詢監(jiān)控項

6.png

監(jiān)控遠(yuǎn)程Linux主機(jī)

在遠(yuǎn)程主機(jī)安裝node_exporter組件

[root@client ~]# tar -xf node_exporter-1.0.1.linux-amd64.tar.gz -C /usr/local/
[root@client ~]# mv /usr/local/node_exporter-1.0.1.linux-amd64/ /usr/local/node_exporter
[root@client ~]# ls /usr/local/node_exporter/
LICENSE  node_exporter  NOTICE
[root@client ~]# nohup /usr/local/node_exporter/node_exporter &
[root@client ~]# lsof -i:9100
COMMAND    PID USER   FD   TYPE DEVICE SIZE/OFF NODE NAME
node_expo 4579 root    3u  IPv6  48879      0t0  TCP *:jetdirect (LISTEN)

擴(kuò)展：nohup命令：如果把啟動node_exporter的終端關(guān)閉，那么進(jìn)程也會隨之關(guān)閉。nohup會幫助你解決這個問題

通過瀏覽器訪問10.10.11.113:9100/metrics可以查看到node_exporter在被監(jiān)控端手機(jī)的監(jiān)控信息

7.png

回到Prometheus服務(wù)器配置文件添加客戶端的配置段

[root@prometheus ~]# vim /usr/local/prometheus/prometheus.yml
  - job_name: 'client1'
    static_configs:
    - targets: ['10.10.11.113:9100']

重啟Prometheus

[root@prometheus ~]# pkill prometheus
[root@prometheus ~]# lsof -i:9090
[root@prometheus ~]# /usr/local/prometheus/prometheus --config.file="/usr/local/prometheus/prometheus.yml" &
[root@prometheus ~]# lsof -i:9090
COMMAND     PID USER   FD   TYPE DEVICE SIZE/OFF NODE NAME
prometheu 57136 root    9u  IPv6 113310      0t0  TCP *:websm (LISTEN)
prometheu 57136 root   10u  IPv4 113315      0t0  TCP localhost:44950->localhost:websm (ESTABLISHED)
prometheu 57136 root   12u  IPv6 113316      0t0  TCP localhost:websm->localhost:44950 (ESTABLISHED)

回到10.10.11.120:9090
點擊Status -->Targets 發(fā)現(xiàn)多了一臺主機(jī)

8.png

監(jiān)控遠(yuǎn)程MySQL

在Client上安裝mysqld_exporter組件和MySQL

[root@client ~]# tar -xf mysqld_exporter-0.12.1.linux-amd64.tar.gz -C /usr/local/
[root@client ~]# mv /usr/local/mysqld_exporter-0.12.1.linux-amd64/ /usr/local/mysqld_exporter
[root@client ~]# yum -y install mariadb\*

啟動MySQL并授權(quán)

[root@client ~]# systemctl restart mariadb
[root@client ~]# mysql -uroot
MariaDB [(none)]> grant select,replication client,process on *.* to 'mysql_monitor'@'localhost' identified by '123.com';
#授權(quán)IP為localhost，因為不是prometheus服務(wù)器直接找mariadb獲取數(shù)據(jù)，而是prometheus服務(wù)器找mysql_exporter，mysql_exporter再找mariadb。所以這個localhost是指的mysql_exporter的IP
MariaDB [(none)]> flush privileges;
Query OK, 0 rows affected (0.00 sec)

創(chuàng)建一個mariadb配置文件，寫上剛剛授權(quán)的用戶名和密碼

[root@client ~]# vim /usr/local/mysqld_exporter/.my.cnf

[client]
user=mysql_monitor
password=123.com

啟動mysqld_exporter

[root@client ~]# nohup /usr/local/mysqld_exporter/mysqld_exporter --config.my-cnf=/usr/local/mysqld_exporter/.my.cnf &
[root@client ~]# lsof -i:9104
COMMAND     PID USER   FD   TYPE DEVICE SIZE/OFF NODE NAME
mysqld_ex 60421 root    3u  IPv6 111828      0t0  TCP *:peerwire (LISTEN)

在Prometheus服務(wù)器的配置文件里添加被監(jiān)控的mariadb的配置段

[root@prometheus ~]# vim /usr/local/prometheus/prometheus.yml 
  - job_name: 'mariadb'
    static_configs:
    - targets: ['10.10.11.113:9104']
[root@prometheus ~]# pkill prometheus
[root@prometheus ~]# /usr/local/prometheus/prometheus --config.file="/usr/local/prometheus/prometheus.yml" &

回到web管理界面 -->點Status -->點Targets -->可以看到監(jiān)控mariadb了

9.png

10.png

Grafana連接Prometheus

在Grafana服務(wù)器上安裝Grafana

[root@grafana ~]# rpm -ivh grafana-7.1.5-1.x86_64.rpm 
warning: grafana-7.1.5-1.x86_64.rpm
[root@grafana ~]# systemctl start grafana-server.service 
[root@grafana ~]# lsof -i:3000
COMMAND     PID    USER   FD   TYPE DEVICE SIZE/OFF NODE NAME
grafana-s 56949 grafana    8u  IPv6 104827      0t0  TCP *:hbci (LISTEN)

訪問10.10.11.116:3000
默認(rèn)admin用戶，admin密碼