服务器多节点Docker部署 Grafana、Prometheus、Node-Exporter、alertmanager、prometh ...

要在多台服务器上部署 Grafana、Prometheus 和 Node-Exporter，并且其中一台服务器专门用于 Grafana 和 Prometheus 的部署
1. 准备工作

• 服务器信息：
  
  
  
  • Server 1：用于部署 Grafana 和 Prometheus、alertmanager、prometheus-alert
    
  • Server 2-n：用于部署 Node-Exporter。
    
  
  
• Docker：确保所有服务器上已安装 Docker 和 Docker Compose。
  

https://getdocker.quickso.cn/
2. 在 Server 1 上部署 Grafana 和 Prometheus等

2.1 创建 Docker Compose 文件

在 Server 1 上创建一个 docker-compose.yml 文件，内容如下：
version: '3'services:  prometheus:    image: prom/prometheus    container_name: prometheus    ports:      - "9090:9090"    volumes:      - /root/Prometheus/data/prometheus.yml:/etc/prometheus/prometheus.yml      -  /root/Prometheus/data/alerts.yml:/etc/prometheus/alerts.yml    command:      - '--config.file=/etc/prometheus/prometheus.yml'      - '--web.enable-lifecycle'    restart: always  grafana:    image: grafana/grafana    container_name: grafana    ports:      - "3000:3000"    volumes:      - grafana-storage:/var/lib/grafana    environment:      - GF_SECURITY_ADMIN_PASSWORD=admin #这里可以改成你的密码    restart: always  node-exporter:    image: prom/node-exporter    container_name: node-exporter    ports:      - "9100:9100"    restart: always  alertmanager:    image: prom/alertmanager    container_name: alertmanager    ports:      - "9093:9093"    volumes:      - /root/Prometheus/alertmanager/alertmanager.yml:/etc/alertmanager/alertmanager.yml    command:      - '--config.file=/etc/alertmanager/alertmanager.yml'    restart: always      prometheus-alert:    image: feiyu563/prometheus-alert:v4.9.1    container_name: prometheus-alert    ports:      - "8080:8080"    volumes:      - /root/Prometheus/prometheus-alert/app.conf:/app/conf/app.conf    restart: alwaysvolumes:  grafana-storage:2.2 创建 配置文件

在 Server 1 上创建一个 prometheus.yml 文件，内容如下：
global:  scrape_interval: 15s  evaluation_interval: 15salerting:  alertmanagers:    - static_configs:        - targets: ['alertmanager:9093']rule_files:  - /etc/prometheus/alerts.ymlscrape_configs:  - job_name: 'node-exporter'    static_configs:      - targets: ['server2:9100', 'server3:9100', 'server4:9100', 'server5:9100', 'server6:9100']alerts.yml

groups:- name: alerts  rules:  - alert: 实例宕机    expr: up == 0    for: 1m    labels:      severity: 严重    annotations:      summary: "实例 {{ $labels.instance }} 宕机"      description: "实例 {{ $labels.instance }} 已经宕机超过 1 分钟。"  - alert: CPU使用率过高    expr: 100 - (avg by (instance) (irate(node_cpu_seconds_total{mode="idle"}[1m])) * 100) > 30    for: 5m    labels:      severity: 警告    annotations:      summary: "实例 {{ $labels.instance }} 的 CPU 使用率过高"      description: "实例 {{ $labels.instance }} 的 CPU 使用率超过 30% 已经持续 5 分钟。"  - alert: 内存使用率过高    expr: (node_memory_MemTotal_bytes - node_memory_MemAvailable_bytes) / node_memory_MemTotal_bytes * 100 > 80    for: 5m    labels:      severity: 警告    annotations:      summary: "实例 {{ $labels.instance }} 的内存使用率过高"      description: "实例 {{ $labels.instance }} 的内存使用率超过 80% 已经持续 5 分钟。"alertmanager.yml

global:  resolve_timeout: 5mroute:  receiver: 'feishu-webhook'  group_by: ['alertname']  group_wait: 10s  group_interval: 5m  repeat_interval: 3hreceivers:  - name: 'feishu-webhook'    webhook_configs:      - url: 'http://你的IP:8080/prometheusalert?type=fs&tpl=prometheus-fs&fsurl=https://open.feishu.cn/open-apis/bot/v2/hook/xxx'        send_resolved: true2.3 启动服务

在 Server 1 上运行以下命令启动：
docker-compose up -d3.在 Server 2-n 上部署 Node-Exporter，并开放端口

docker run -d \  --name node-exporter \  -p 9100:9100 \  --restart always \  prom/node-exporter
4. 配置 Grafana

4.1 访问 Grafana

在浏览器中访问 http://<Server1-IP>:3000，使用默认用户名 admin 和密码 admin 登录。
4.2 添加 Prometheus 数据源

• 在 Grafana 中，点击左侧菜单的 Configuration -> Data Sources。
  
• 点击 Add data source，选择 Prometheus。
  
• 在 URL 字段中输入 http://prometheus:9090，然后点击 Save & Test。
  

4.3 导入 Node-Exporter 仪表盘

• 在 Grafana 中，点击左侧菜单的 + -> Import。
  
• 在 Grafana.com Dashboard 字段中输入 1860，然后点击 Load。
  
• 选择 Prometheus 数据源，然后点击 Import。
  

<hr>4. 验证部署

• Prometheus：访问 http://<Server1-IP>:9090/targets，确保所有 Node-Exporter 目标（包括 Server 1）的状态为 UP。
  
• Grafana：访问 http://<Server1-IP>:3000，查看仪表盘是否显示所有服务器的监控数据。
  
• Alertmanager: 访问 http://<Server1-IP>:9093，告警管理组件，负责处理、分组、抑制和发送告警通知。
  
• Prometheus-Alert :访问 http://<Server1-IP>:8080，开源的运维告警中心消息转发系统，以及所有支持WebHook接口的系统发出的预警消息，支持将收到的这些消息发送到国内的各种平台
  

    本文来自博客园，作者：木子欢儿，转载请注明原文链接：https://www.cnblogs.com/HGNET/p/18664763