2. 程式人生 > 其它 >prometheus node-exporter cadvisor grafana alertmanager 安裝及服務發現

prometheus node-exporter cadvisor grafana alertmanager 安裝及服務發現

阿新 • • 發佈：2021-08-03

prometheus node-exporter cadvisor grafana alertmanager 安裝及服務發現

本次搭建基於docker環境

前期準備

　　拉取映象

docker pull google/cadvisor
docker pull prom/prometheus
docker pull grafana/grafana
docker pull prom/alertmanager

　　建立持久化目錄

mkdir /home/prometheus/config
vim /home/prometheus/prometheus.yml
mkdir /home/grafana-storage

啟動node-exporter硬體系統監控

docker run -d -p 9100:9100 \
-v /proc:/host/proc:ro \
-v /sys:/host/sys:ro \
-v /:/rootfs:ro \
--name=node-exporter \
prom/node-exporter

　　

啟動cadvisor容器監控

docker run \
-v /:/rootfs:ro \
-v /var/run:/var/run:rw \
-v /sys:/sys:ro \
-v /var/lib/docker/:/var/lib/docker:ro \
-p 9080:8080 \
--detach=true \
--name=cadvisor \
google/cadvisor
#--detach=true #分離容器

　　

啟動grafana

docker run -d -p 3000:3000 \
--user=root \
--name=grafana \
-v /home/grafana-storage:/var/lib/grafana \
grafana/grafana
#--user=root  #以root使用者執行

　　

　　grafana模板地址https://grafana.com/grafana/dashboards

啟動prometheus

docker run  -d -p 9090:9090 \
--name prometheus \
-v /home/prometheus:/etc/prometheus \
-v /home/prometheus/prometheus.yml:/etc/prometheus/prometheus.yml \
prom/prometheus \
--web.enable-lifecycle \
--config.file="/etc/prometheus/prometheus.yml"

#--web.enable-lifecycle							#熱載入引數，需要配合配置檔案--config.file使用，否則會報錯
#curl -X POST http://localhost:9090/-/reload	#熱載入prometheus配置檔案
#--config.file									#配置檔案路徑
#--storage.tsdb.path="/etc/prometheus/data"		#資料儲存路徑

　　Prometheus配置grafana

[root@localhost prometheus]# vim prometheus.yml
global:             # 全域性設定，可以被覆蓋
  scrape_interval: 15s              # 抓取取樣資料的時間間隔，每15秒去被監控機上取樣，即資料採集頻率
  evaluation_interval: 15s          # 監控資料規則的評估頻率，比如設定檔案系統使用率>75%發出告警則每15秒執行一次該規則，進行檔案系統檢查

#告警管理
alerting:
    alertmanagers:
    - static_configs:                       #告警靜態目標配置
#      - targets: ['192.168.31.131:9093']    #告警ui地址

#告警規則
rule_files:
#- /etc/prometheus/rules/*.rules     #告警規則檔案路徑

scrape_configs:             # 抓取配置
#靜態發現
  - job_name: 'grafana'     #任務名 全域性唯一
    scrape_interval: 5s     # 抓取取樣資料的時間間隔
    static_configs:         #靜態目標配置
      - targets: ['192.168.31.131:3000']   #抓取地址，預設為/metrics
        labels:             #標籤
          instance: grafana
curl -X POST http://localhost:9090/-/reload		#熱載入prometheus配置檔案

　　

啟動pushgateway

docker run -d \
--name pushgateway \
-p 9091:9091 \
prom/pushgateway

　　推送exporter到pushgateway

curl http://localhost:9090/metrics | curl --data-binary @- http://192.168.31.158:9091/metrics/job/prometheus/instance/131-普羅米修斯
curl http://192.168.31.158:9104/metrics | curl --data-binary @- http://192.168.31.158:9091/metrics/job/mysql/instance/158-MYSQL

　　

注：推送到pushgateway的指標不會顯示在prometheus的網頁介面上，只能通過promsql查詢

　　刪除指標

curl -X DELETE http://192.168.31.158:9104/metrics/job/mysql

　　Prometheus配置pushgateway

[root@localhost prometheus]# vim prometheus.yml
scrape_configs:             # 抓取配置
#靜態發現
  - job_name: 'grafana'     #任務名 全域性唯一
    scrape_interval: 5s     # 抓取取樣資料的時間間隔
    static_configs:         #靜態目標配置
      - targets: ['192.168.31.131:3000']   #抓取地址，預設為/metrics
        labels:             #標籤
          instance: grafana
#pushgateway中轉
  - job_name: pushgateway
    static_configs:
      - targets: ['192.168.31.158:9091']
        labels:
          instance: pushgateway

　　

curl -X POST http://localhost:9090/-/reload		#熱載入prometheus配置檔案

　　

啟動告警管理alertmanager

docker run --name alertmanager -d -p 9093:9093 prom/alertmanager
docker cp alertmanager:/etc/alertmanager/alertmanager.yml /home/alertmanager/
docker rm -f alertmanager

docker run -d --name alertmanger -p 9093:9093 \
-v /home/alertmanager:/etc/alertmanager \
prom/alertmanager

#--storage.path   資料儲存路徑
#--config.file    配置檔案路徑

　　

　　Prometheus配置alertmanager連線

[root@localhost prometheus]# cat rules/hoststats-alert.rules 
groups:
- name: hostStatsAlert
  rules:
  - alert: hostCpuUsageAlert
    expr: sum(avg without (cpu)(irate(node_cpu_seconds_total{mode!="idle"}[5m]))) by (instance) > 0.85
    for: 1m
    labels:
      severity: page
    annotations:
      summary: "Instance {{ $labels.instance }} CPU usgae high"
      description: "{{ $labels.instance }} CPU usage above 85% (current value: {{ $value }})"
  - alert: hostMemUsageAlert
    expr: (node_memory_MemTotal_bytes - node_memory_MemAvailable_bytes)/node_memory_MemTotal_bytes > 0.85
    for: 1m
    labels:
      severity: page
    annotations:
      summary: "Instance {{ $labels.instance }} MEM usgae high"
      description: "{{ $labels.instance }} MEM usage above 85% (current value: {{ $value }})"

　　

[root@localhost prometheus]# vim prometheus.yml
global:             # 全域性設定，可以被覆蓋
  scrape_interval: 15s              # 抓取取樣資料的時間間隔，每15秒去被監控機上取樣，即資料採集頻率
  evaluation_interval: 15s          # 監控資料規則的評估頻率，比如設定檔案系統使用率>75%發出告警則每15秒執行一次該規則，進行檔案系統檢查

#告警管理
alerting:
    alertmanagers:
    - static_configs:                       #告警靜態目標配置
      - targets: ['192.168.31.131:9093']    #告警ui地址

#告警規則
rule_files:
- /etc/prometheus/rules/*.rules     #告警規則檔案路徑

　　

curl -X POST http://localhost:9090/-/reload		#熱載入prometheus配置檔案

　　

配置基於檔案發現

[root@localhost config]# cat /home/prometheus/config/target.yml 
- targets: ['192.168.31.131:9090']          #prometheus的地址埠，監控Prometheus資訊
  labels:
    app: 'app1'
    env: 'game1'
    region: 'reg1'
- targets: ['192.168.31.158:9100']			#另外伺服器的node-exporter的地址埠，監控伺服器資訊
  labels:
    app: 'app2'
    env: 'game2'
    region: 'reg2'

　　

[root@localhost prometheus]# cat /home/prometheus/prometheus.yml
global:             # 全域性設定，可以被覆蓋
  scrape_interval: 15s              # 抓取取樣資料的時間間隔，每15秒去被監控機上取樣，即資料採集頻率
  evaluation_interval: 15s          # 監控資料規則的評估頻率，比如設定檔案系統使用率>75%發出告警則每15秒執行一次該規則，進行檔案系統檢查

#告警管理
alerting:
    alertmanagers:
    - static_configs:                       #靜態目標配置
      - targets: ['192.168.31.131:9093']    #告警ui地址

#告警規則
rule_files:
- /etc/prometheus/rules/*.rules     #告警規則檔案路徑

scrape_configs:             # 抓取配置
#靜態發現
  - job_name: 'grafana'     #任務名 全域性唯一
    scrape_interval: 5s     # 抓取取樣資料的時間間隔
    static_configs:         #靜態目標配置
      - targets: ['192.168.31.131:3000']   #抓取地址，預設為/metrics
        labels:             #標籤
          instance: grafana
#pushgateway中轉
  - job_name: pushgateway
    static_configs:
      - targets: ['192.168.31.158:9091']
        labels:
          instance: pushgateway
#檔案發現
  - job_name: 'file_ds'     #任務名 全域性唯一
    file_sd_configs:        #基於檔案發現配置
    - files: ['/etc/prometheus/config/*.yml']        #配置檔案路徑,匹配config目錄下所有yml檔案
      refresh_interval: 5s  #每五秒掃描重新整理配置檔案

　　

curl -X POST http://localhost:9090/-/reload		#熱載入prometheus配置檔案

　　

配置基於服務發現

　　安裝consul

wget https://releases.hashicorp.com/consul/1.6.1/consul_1.6.1_linux_amd64.zip
unzip consul_1.5.3_linux_amd64.zip
./consul agent -dev
或者
docker run --name consul -d -p 8500:8500 consul

　　登出服務

curl -X PUT http://192.168.31.131:8500/v1/agent/service/deregister/node-exporter
#node-exporter就是"id": "node-exporter"

　　註冊服務

#vim /home/prometheus/config/consul-1.json
{
"ID": "node-exporter",
"Name": "node-exporter-192.168.31.131",
"Tags": [
"node-exporter"
],
"Address": "192.168.31.131",
"Port": 9100,
"Meta": {
"app": "spring-boot",
"team": "appgroup",
"project": "bigdata"
},
"EnableTagOverride": false,
"Check": {
"HTTP": "http://192.168.31.131:9100/metrics",
"Interval": "10s"
},
"Weights": {
"Passing": 10,
"Warning": 1
}
}

# 更新註冊服務
#curl --request PUT --data @/home/prometheus/config/consul-1.json http://192.168.31.131:8500/v1/agent/service/register?replace-existing-checks=1

$ vim /home/prometheus/config/consul-2.json
{
"ID": "cadvisor-exporter",
"Name": "cadvisor-exporter-192.168.31.131",
"Tags": [
"cadvisor-exporter"
],
"Address": "192.168.31.131",
"Port": 9080,
"Meta": {
"app": "docker",
"team": "cloudgroup",
"project": "docker-service"
},
"EnableTagOverride": false,
"Check": {
"HTTP": "http://192.168.31.131:9080/metrics",
"Interval": "10s"
},
"Weights": {
"Passing": 10,
"Warning": 1
}
}

# 註冊服務
# curl --request PUT --data @/home/prometheus/config/consul-2.json http://192.168.31.131:8500/v1/agent/service/register?replace-existing-checks=1

　　更新Prometheus.yml

[root@localhost prometheus]# vim /home/prometheus/prometheus.yml
#檔案發現
  - job_name: 'file_ds'     #任務名 全域性唯一
    file_sd_configs:        #基於檔案發現配置
    - files: ['/etc/prometheus/config/*.yml']        #配置檔案路徑
      refresh_interval: 5s  #每五秒掃描重新整理配置檔案
#服務發現
  - job_name: 'consul-node-exporter'
    consul_sd_configs:							#基於服務發現型別
      - server: '192.168.31.131:8500'			#服務地址
        services: []  
    relabel_configs:
      - source_labels: [__meta_consul_tags]		#注意兩個橫槓"__"
        regex: .*node-exporter.*				#匹配__meta_consul_tags中值包含node-exporter的
        action: keep							#keep丟棄未匹配到regex中內容的資料
      - regex: __meta_consul_service_metadata_(.+)	#獲取__meta_consul_service_metadata_的值（標籤）
        action: labelmap							#將獲取的值作為新的標籤

  - job_name: 'consul-cadvisor-exproter'
    consul_sd_configs:
      - server: '192.168.31.131:8500'
        services: []
    relabel_configs:
      - source_labels: [__meta_consul_tags]
        regex: .*cadvisor-exporter.*
        action: keep
      - regex: __meta_consul_service_metadata_(.+)
        action: labelmap

　

curl -X POST http://localhost:9090/-/reload		#熱載入prometheus配置檔案

　　

　

相關推薦

prometheus node-exporter cadvisor grafana alertmanager 安裝及服務發現

prometheus node-exporter cadvisor grafana alertmanager 安裝及服務發現 本次搭建基於docker環境

為 Prometheus Node Exporter 加上認證

這篇文章主要是為了慶祝 Node Exporter 終於迎來了 v1.0.0 版本。 Prometheus ( https://prometheus.io/ ) 是最早由 SoundCloud 開源的監控告警解決方案。並已經成長為繼 Kubernetes 之後，第二個從 CNCF 畢業的專

Node後端Express框架安裝及應用

目錄其中Express 框架核心特性：Express安裝方式一：安裝express-generator建立專案專案目錄如下方式二： 自己搭建環境express 初體驗請求和響應返回資料Express 中介軟體認識中介軟體中間是什麼？中介軟體中可以執行

mysql-8.0.15-winx64 使用zip包進行安裝及服務啟動後立即關閉問題

本例項使用的mysql版本為mysql-8.0.15-winx64 1、下載zip包 官網地址：https://dev.mysql.com/downloads/mysql/

圖文詳解Prometheus監控+Grafana+Alertmanager告警安裝使用

一：前言 一個服務上線了後，你想知道這個服務是否可用，需要監控。假如線上出故障了，你要先於顧客感知錯誤，你需要監控。還有對資料庫，伺服器的監控，等等各層面的監控。

從零開始搭建Prometheus+Grafana+AlertManager自動監控報警系統（非docker方式安裝：推薦）

一：前言 一個服務上線了後，你想知道這個服務是否可用，需要監控。假如線上出故障了，你要先於顧客感知錯誤，你需要監控。還有對資料庫，伺服器的監控，等等各層面的監控。近年來，微服務架構的流行，服務數越來越

Day11-prometheus安裝、promQL語句、node_exporter、cadvisor、alertmanager告警

Day11-11.14號作業 1.針對網路的總結 2.prometheus 的安裝方式 3.promQL語句 4.node exporter/blackbox exporter/cadvisor

通過Docker安裝 Prometheus 和node-exporter 檢視版本

[root@node ~]# mkdir /opt/prometheus [root@node ~]# cd /opt/prometheus/ [root@node ~]# vim prometheus.yml

TICK技術棧（四）Grafana安裝及使用

1.什麼是Grafana？ Grafana是一款採用go語言和Angular框架編寫的開源的視覺化工具，主要用於大規模指標資料的視覺化展示，提供包括折線圖，餅圖，儀表盤等多種監控資料視覺化UI，是網路架構和應用分析中最流行的時序

Node.js安裝及環境配置之Windows篇

一、安裝環境 1、本機系統：Windows 10專業版（64位）2、Node.js：node-v12.16.2-x64（64位）

typescript 起步之安裝及配置 ts-node 環境變數

步驟一：全域性安裝 typescript npm ``install` `-g typescript　　 　　 步驟二：全域性安裝 ts-node

node-exporter安裝和詳解-適用於物理機虛擬機器的監控採集

node-exporter:採集node節點（物理機、虛擬機器、雲主機）監控指標資料，能夠採集到主機的執行指標如CPU, 記憶體，磁碟，網路，檔案數等資訊

使用Rancher2.0 Catalog安裝prometneus-node-exporter

>>> prometheus-node-exporter在Helm Stable中。 github地址為：https://github.com/helm/charts/tree/master/stable/prometheus-node-exporter

Node.js安裝及環境配置之Windows

一、安裝環境 1、本機系統：Windows 10 Pro（64位） 2、Node.js：v6.9.2LTS（64位） 二、安裝Node.js步驟

Prometheus的安裝及部署

Prometheus的安裝及部署 二進位制安裝部署 下載二進位制包 prometheus-2.6.1.linux-amd64.tar.gz

Node.js實踐一：node.js安裝及環境配置之Windows篇

Node.js實踐一：node.js安裝及環境配置之Windows篇 一、Node.js簡介 簡單的說 Node.js 就是執行在服務端的 JavaScript。

Kubernetes中DaemonSet方式部署Node-Exporter以及Prometheus中抓取Node-Exporter

K8S中DaemonSet方式部署Node-Exporer配置檔案 apiVersion: apps/v1 kind: DaemonSet metadata: name: node-exporter

prometheus之四：node-exporter

一、下載node-exporter.yaml檔案 apiVersion: apps/v1 kind: DaemonSet metadata: name: node-exporter-daemonset

grafana安裝及使用教程詳解

1. 下載grafana並安裝 1.1 官網下載較慢，在清華映象站下載 下載連結>> https://mirrors.tuna.tsinghua.edu.cn/grafana/yum/rpm/

node.js安裝及HbuilderX配置詳解

npm安裝教程： 一.下載Node.js安裝包 官網：https://nodejs.org/en/ 二.使用之前，我們先來掌握3個東西是用來幹什麼的。