2. 程式人生 > >Prometheus+Grafana監控部署實踐

Prometheus+Grafana監控部署實踐

阿新 • • 發佈：2018-01-15
tle tom timeout 自帶 ora mct image none rest

參考文檔：

  1. Prometheus github：https://github.com/prometheus
  2. grafana github：https://github.com/grafana/grafana
  3. Prometheus getting_started：https://prometheus.io/docs/prometheus/latest/getting_started/
  4. Prometheus node_exporter：https://github.com/prometheus/node_exporter
  5. Prometheus部署(docker,optional)：https://prometheus.io/docs/prometheus/latest/installation/
  6. Prometheus配置文件詳解：https://prometheus.io/docs/prometheus/latest/configuration/configuration/
  7. grafana 部署：http://docs.grafana.org/installation/rpm/

一．環境

1. 拓撲

技術分享圖片

2. 節點

Node

OS

Hostname

IP

Remark

prometheus& grafana server

centos 7.4

prometheus

172.20.1.211

prometheus node

centos 7.4

node1

172.20.1.212

3. 版本(截止20171130)

Soft/Node

Version

Download

prometheus

2.0.0

https://github.com/prometheus/prometheus/releases/download/v2.0.0/prometheus-2.0.0.linux-amd64.tar.gz

node_exporter

v0.15.1

https://github.com/prometheus/node_exporter/releases/download/v0.15.1/node_exporter-0.15.1.linux-amd64.tar.gz

grafana

4.6.2-1

https://s3-us-west-2.amazonaws.com/grafana-releases/release/grafana-4.6.2-1.x86_64.rpm

二．部署prometheus

在prometheus& grafana server節點部署prometheus服務。

1. 下載&部署

# 下載
[root@prometheus src]# cd /usr/local/src/
[root@prometheus src]# wget https://github.com/prometheus/prometheus/releases/download/v2.0.0/prometheus-2.0.0.linux-amd64.tar.gz

# 部署到/usr/local/目錄
# promethus不用編譯安裝，解壓目錄中有配置文件與啟動文件
[root@prometheus src]# tar -zxvf prometheus-2.0.0.linux-amd64.tar.gz -C /usr/local/
[root@prometheus src]# cd /usr/local/
[root@prometheus local]# mv prometheus-2.0.0.linux-amd64/ prometheus/

# 驗證
[root@prometheus local]# cd prometheus/
[root@prometheus prometheus]# ./prometheus --version

技術分享圖片

2. 配置文件

# 解壓目錄中的prometheus.yml
# 簡單驗證，主要配置采用默認文件配置，有修改/新增處用紅色標示
[root@prometheus prometheus]# vim prometheus.yml
# 全局配置
global:
  scrape_interval:     15s # 設置抓取(pull)時間間隔，默認是1m
  evaluation_interval: 15s # 設置rules評估時間間隔，默認是1m
  # scrape_timeout is set to the global default (10s).

# 告警管理配置，暫未使用，默認配置
alerting:
  alertmanagers:
  - static_configs:
    - targets:
      # - alertmanager:9093

# 加載rules，並根據設置的時間間隔定期評估，暫未使用，默認配置
rule_files:
  # - "first_rules.yml"
  # - "second_rules.yml"

# 抓取(pull)，即監控目標配置
# 默認只有主機本身的監控配置
scrape_configs:
  # 監控目標的label（這裏的監控目標只是一個metric，而不是指某特定主機，可以在特定主機取多個監控目標），在抓取的每條時間序列表中都會添加此label
  - job_name: ‘prometheus‘

    # metrics_path defaults to ‘/metrics‘
    # scheme defaults to ‘http‘.

    # 可覆蓋全局配置設置的抓取間隔，由15秒重寫成5秒。
    scrape_interval: 5s

    # 靜態指定監控目標，暫不涉及使用一些服務發現機制發現目標
static_configs:
      - targets: [‘localhost:9090‘]
        # (opentional)再添加一個label，標識了監控目標的主機
labels:
          instance: prometheus

  - job_name: ‘linux‘
    scrape_interval: 10s
static_configs:
  # 采用node_exporter默認開放的端口
      - targets: [‘172.20.1.212:9100‘]
labels:
          instance: node1

3. 設置用戶

# 添加用戶，後期用此賬號啟動服務
[root@prometheus prom etheus]# groupadd prometheus
[root@prometheus prometheus]# useradd -g prometheus -s /sbin/nologin prometheus

# 賦權
[root@prometheus prometheus]# cd ~
[root@prometheus ~]# chown -R prometheus:prometheus /usr/local/prometheus/

# 創建prometheus運行數據目錄
[root@prometheus ~]# mkdir -p /var/lib/prometheus
[root@prometheus ~]# chown -R prometheus:prometheus /var/lib/prometheus/

4. 設置開機啟動

[root@prometheus ~]# touch /usr/lib/systemd/system/prometheus.service 
[root@prometheus ~]# chown prometheus:prometheus /usr/lib/systemd/system/prometheus.service

[root@prometheus ~]# vim /usr/lib/systemd/system/prometheus.service
[Unit]
Description=Prometheus
Documentation=https://prometheus.io/
After=network.target

[Service]
# Type設置為notify時，服務會不斷重啟
Type=simple
User=prometheus
# --storage.tsdb.path是可選項，默認數據目錄在運行目錄的./dada目錄中
ExecStart=/usr/local/prometheus/prometheus --config.file=/usr/local/prometheus/prometheus.yml --storage.tsdb.path=/var/lib/prometheus
Restart=on-failure

[Install]
WantedBy=multi-user.target

# 設置開機啟動
[root@prometheus ~]# systemctl enable Prometheus
[root@prometheus ~]# systemctl start prometheus

5. 設置iptables

[root@prometheus ~]# vim /etc/sysconfig/iptables
-A INPUT -p tcp -m state --state NEW -m tcp --dport 9090 -j ACCEPT

[root@prometheus ~]# service iptables restart

6. 啟動並驗證

1）查看服務狀態

[root@prometheus ~]# systemctl status prometheus

技術分享圖片

[root@prometheus ~]# netstat -tunlp | grep 9090

技術分享圖片

2）web ui

Prometheus自帶有簡單的UI，http://172.20.1.211:9090

技術分享圖片

在Status菜單下，Configuration，Rule，Targets等，

Statu-->Configuration展示prometheus.yml的配置，如下：

技術分享圖片

Statu-->Targets展示監控具體的監控目標，這裏監控目標"linux"暫未設置node_exporter，未scrape數據，如下：

技術分享圖片

7. 繪圖

訪問：http://172.20.1.211:9090/metrics，查看從exporter具體能抓到的數據，如下：

技術分享圖片

訪問：http://172.20.1.211:9090，在輸入框中任意輸入1個exporter能抓取得值，點擊"Execute"與"Execute"按鈕，即可見相應抓取數據的圖形，同時可對時間與unit做調整，如下：

技術分享圖片

三．部署node_exporter

Node_exporter收集機器的系統數據，這裏采用prometheus官方提供的exporter，除node_exporter外，官方還提供consul，memcached，haproxy，mysqld等exporter，具體可查看官網。

這裏在prometheus node節點部署相關服務。

1. 下載&部署

# 下載
[root@node1 ~]# cd /usr/local/src/
[root@node1 src]# wget https://github.com/prometheus/node_exporter/releases/download/v0.15.1/node_exporter-0.15.1.linux-amd64.tar.gz

# 部署
[root@node1 src]# tar -zxvf node_exporter-0.15.1.linux-amd64.tar.gz -C /usr/local/
[root@node1 src]# cd /usr/local/
[root@node1 local]# mv node_exporter-0.15.1.linux-amd64/ node_exporter/

2. 設置用戶

[root@node1 ~]# groupadd prometheus
[root@node1 ~]# useradd -g prometheus -s /sbin/nologin prometheus
[root@node1 ~]# chown -R prometheus:prometheus /usr/local/node_exporter/

3. 設置開機啟動

[root@node1 ~]# vim /usr/lib/systemd/system/node_exporter.service
[Unit]
Description=node_exporter
Documentation=https://prometheus.io/
After=network.target

[Service]
Type=simple
User=prometheus
ExecStart=/usr/local/node_exporter/node_exporter
Restart=on-failure

[Install]
WantedBy=multi-user.target

[root@node1 ~]# systemctl enable node_exporter
[root@node1 ~]# systemctl start node_exporter

4. 設置iptables

# 官方node_exporter默認使用9100端口
[root@node1 ~]# vim /etc/sysconfig/iptables
-A INPUT -p tcp -m state --state NEW -m tcp --dport 9100 -j ACCEPT

[root@node1 ~]# service iptables restart

5. 驗證

訪問：http://172.20.1.211:9090，可見node1主機已經可被監控，如下：

技術分享圖片

四．部署grafana

在prometheus& grafana server節點部署grafana服務。

1. 下載&安裝

# 下載
[root@prometheus ~]# cd /usr/local/src/
[root@prometheus src]# wget https://s3-us-west-2.amazonaws.com/grafana-releases/release/grafana-4.6.2-1.x86_64.rpm

# 安裝
[root@prometheus src]# yum localinstall grafana-4.6.2-1.x86_64.rpm

2. 配置文件

配置文件位於/etc/grafana/grafana.ini，這裏暫時保持默認配置即可。

3. 設置開機啟動

[root@prometheus src]# systemctl enable grafana-server
[root@prometheus src]# systemctl start grafana-server

4. 設置iptables

# grafana-server默認使用3000端口
[root@prometheus src]# vim /etc/sysconfig/iptables
-A INPUT -p tcp -m state --state NEW -m tcp --dport 3000 -j ACCEPT

[root@prometheus src]# service iptables restart

5. 添加數據源

1）登陸

訪問：http://172.20.1.211:3000，默認賬號/密碼：admin/admin

技術分享圖片

2）添加數據源

在登陸首頁，點擊"Add data source"按鈕，跳轉到添加數據源頁面，配置如下：

Name: prometheus

Type: prometheus

URL: http://localhost:9090/

Access: proxy

取消Default的勾選，其余默認，點擊"Add"，如下：

技術分享圖片

在"Dashboards"頁簽下"import"自帶的模版，如下：

技術分享圖片

6. 導入dashboard

從grafana官網下載相關dashboaed到本地，如：https://grafana.com/dashboards/405

Grafana首頁-->左上角圖標-->Dashboard-->import

技術分享圖片

Upload已下載至本地的json文件（或者使用dashboard id，如這裏的405），如下：

技術分享圖片

數據源選擇"prometheus"，即添加的數據源name，點擊"Import"按鈕，如下：

技術分享圖片

7. 查看dashboard

Grafana首頁-->左上角圖標-->Dashboard-->Home，Home下拉列表中可見有已添加的兩個dashboard，"Prometheus Stats"與"Node Exporter Server Metrics"，選擇1個即可，如下：

技術分享圖片

技術分享圖片

技術分享圖片

Prometheus+Grafana監控部署實踐

相關推薦

Prometheus+Grafana監控部署實踐

tle tom timeout 自帶 ora mct image none rest 參考文檔： Prometheus github：https://github.com/prometheus grafana github：https://github.com/grafa

使用Prometheus+Grafana監控MySQL實踐

all 獲取 ODB shel 定時 not 引擎 包括 linu Grafana+Prometheus打造全方位立體監控系統 一、介紹Prometheus Prometheus（普羅米修斯）是一套開源的監控&報警&時間序列數據庫的組合，起始是由

初試 Prometheus + Grafana 監控系統搭建並監控 Mysql

目錄 文章目錄 1、Prometheus & Grafana 介紹 1.1、Prometheus 介紹 1.2、Grafana 介紹 2、環境、軟體準備 3、Prometheus 安裝配置

prometheus+grafana 監控生產環境機器的系統資訊、redis、mongodb以及jvm

介紹：       為了更好的對生產環境的一些中介軟體和作業系統的執行情況進行視覺化的展示，近期瞭解了下prometheus加上grafana來實現這種效果，由於prometheus是新出來的開源專案，所以，監控的外掛還不是很多，但是對基本的一些需求能夠滿足。     Prometheus 是源於 Googl

基於Docker+Prometheus+Grafana監控SpringBoot健康資訊

在微服務體系當中，監控是必不可少的。當系統環境超過指定的閥值以後，需要提醒指定的運維人員或開發人員進行有效的防範，從而降低系統宕機的風險。在CNCF雲端計算平臺中，Prometheus+Grafana是比較通用的解決方案，在SpringBoot2.0以後metrics預設與micrometer整合，而micr

prometheus+grafana監控nginx

概述： 國內用Nginx的比較多，Nginx的監控比較老的方案可能是通過跑指令碼定期收集nginx的status模組的資料，或者監控nginx的日誌；後來阿里的tengine在國內開始流行，於是誕生了很多不錯的lua模組;但是這些監控方案在有新的監控需求的時候，可能就需要再修改指令碼或者更改

Prometheus+grafana監控：cAdvisor輸出的容器CPU相關的指標的解讀

概述 對容器中的服務進行監控，常見方案是採用Prometheus+grafana。其中對容器服務的CPU的監控有一組指標，本文對它們進行了一些分析和解讀，並做了一些試驗。 檢視cAdvisor輸出的容器CPU監控指標 我們使用kubernetes進行管理，自帶了容器監控

Prometheus+Grafana監控報警系統搭建

1.基本概念 Prometheus 架構圖 工作流程：通過exporters從資料來源主動拉取資料（metrics），儲存到時序資料庫（TSDB）中，可以通過HTTP Server訪問，同時可以發起報警，對於資料庫中的時序資料，提供P

使用prometheus+grafana監控springboot2專案jvm情況

軟體需求： jdk8+ grafana下載地址：https://grafana.com/grafana/download p

windows上prometheus+Grafana監控mysql8.0狀態

第一步： 因為mysql_exporter需要連線到mysql,所以需要建立mysql使用者監控mysql資料庫,並賦許可權

【Springboot】用Prometheus+Grafana監控Springboot應用

1 簡介 專案越做越發覺得，任何一個系統上線，運維監控都太重要了。關於Springboot微服務的監控，之前寫過【Springboot】用Springboot Admin監控你的微服務應用，這個方案可以實時監控並提供告警提醒功能，但不能記錄歷史資料，無法檢視過去1小時或過去1天等運維情況。本文介紹Promet

Prometheus+Grafana監控MySQL

## Prometheus+Grafana監控MySQL - Prometheus(由go語言(golang)開發)是一套開源的監控&報警&時間序列資料庫的組合。適合監控docker容器。因為kubernetes(俗稱k8s)的流行帶動了prometheus的發展。被很多人稱為下一代監控系統。

【DB寶36】使用Docker分分鐘搭建漂亮的prometheus+grafana監控

[toc] # 一、部署Prometheus+grafana環境 ## 1.1、下載Prometheus+grafana映象 ```sql [root@docker36 ~]# docker pull registry.cn-hangzhou.aliyuncs.com/lhrbest/lhrprom

Prometheus+Grafana部署監控docker服務

int mar alt src x86_64 follow emd contain nod 1.環境192.168.244.128 Prometheus 監控服務器192.168.244.129 docker 服務（被監控端）註：都是centos7.5系統 2.下載安

使用 Prometheus + Grafana 對 Kubernetes 進行效能監控的實踐

本文由 網易雲 釋出1 什麼是 Kubernetes？Kubernetes 是 Google 開源的容器叢集管理系統，其管理操作包括部署，排程和節點叢集間擴充套件等。 如下圖所示為目前 Kubernetes 的架構圖，由 master 和 node 端構成，排程部署和擴充套件

Grafana+prometheus監控體系實踐

可視化 influxdb 應用 graphite list 配置 sha file 1.4 一、前言 1.1、grafana介紹 Grafana是一個開源指標分析和可視化套件，常用於可視化基礎設施的性能數據和應用程序分析的時間序列數據。也可以應用於其他領域，包括工業傳感器，

Docker實踐(八)：Prometheus + Grafana + 釘釘搭建監控告警系統

nvi code aso lib inf native over 密碼 系統監控 環境說明： 主機名 Docker版本 Prometheus版本 Node exporter版本 cAdvisor版本 Grafana版本 ip地址 docker01 18.09.

手動部署 Docker+Grafana+Prometheus系統監控之Redis

監控規劃圖 使用Docker 建立兩臺Redis docker run -d --name redis1 redis docker run -d --name redis2 redis 檢視redis的部署地址 docker inspect (docker ps -a | grep redis | awk

基於prometheus+grafana 搭建監控mysql redis mongodb等

基於prometheus+grafana 搭建監控mysql redis mongodb等先把題目定好，具體待這幾天整理我的筆記補充進來。官方網站https://prometheus.io/ 參考文檔：http://www.cnblogs.com/sfnz/p/6566951.htmlhttp://www.j

Grafana+Prometheus系統監控之webhook

tps pan {} 高效 mixed eval eid 建立 eth 概述 Webhook是一個API概念，並且變得越來越流行。我們能用事件描述的事物越多，webhook的作用範圍也就越大。Webhook作為一個輕量的事件處理應用，正變得越來越有用。 準確的說webhoo