prometheus

docker部署promrtheus与grafana

第一部分：彻底清除当前 Docker 环境

1. 停止所有容器：

   docker stop $(docker ps -aq)

2. 删除所有容器：

   docker rm $(docker ps -aq)

3. 删除所有镜像：

   docker rmi $(docker images -q)

4. 停止 Docker 服务：

   systemctl stop docker

5. 卸载 Docker 软件包：

   dnf remove docker-ce docker-ce-cli containerd.io docker-buildx-plugin docker-compose-plugin

6. 删除所有 Docker 文件和目录（这一步会彻底清除所有镜像、容器、卷和网络配置）：

   rm -rf /var/lib/docker
   rm -rf /var/lib/containerd

7. （可选）删除 Docker 的镜像仓库配置：

   rm -rf /etc/docker

现在您的系统已经是一个干净的、没有 Docker 的环境了。

第二部分：在 CentOS 9 上重新安装 Docker

我们将使用官方推荐的方式安装最新版本的 Docker。

1. 安装必要的依赖包：

   dnf install -y yum-utils device-mapper-persistent-data lvm2

2. 添加 Docker 的官方 YUM 仓库：

   yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo
   #使用这个会出现如下报错
   #root@yxy0238:~# yum-config-manager --add-repo #https://download.docker.com/linux/centos/docker-ce.repo
   #Adding repo from: https://download.docker.com/linux/centos/docker-ce.repo
   #Curl error (35): SSL connect error for #https://download.docker.com/linux/centos/docker-ce.repo [OpenSSL SSL_connect: #Connection reset by peer in connection to download.docker.com:443 ]
   #Error: Configuration of repo failed

   root@yxy0238:~# cat /etc/yum.repos.d/docker-ce.repo
   [docker-ce-stable]
   name=Docker CE Stable - $basearch
   baseurl=https://download.docker.com/linux/centos/$releasever/$basearch/stable
   enabled=1
   gpgcheck=1
   gpgkey=https://download.docker.com/linux/centos/gpg
   ​
   [docker-ce-stable-debuginfo]
   name=Docker CE Stable - Debuginfo $basearch
   baseurl=https://download.docker.com/linux/centos/$releasever/debug-$basearch/stable
   enabled=0
   gpgcheck=1
   gpgkey=https://download.docker.com/linux/centos/gpg
   ​
   [docker-ce-stable-source]
   name=Docker CE Stable - Sources
   baseurl=https://download.docker.com/linux/centos/$releasever/source/stable
   enabled=0
   gpgcheck=1
   gpgkey=https://download.docker.com/linux/centos/gpg
   ​
   [docker-ce-test]
   name=Docker CE Test - $basearch
   baseurl=https://download.docker.com/linux/centos/$releasever/$basearch/test
   enabled=0
   gpgcheck=1
   gpgkey=https://download.docker.com/linux/centos/gpg
   ​
   [docker-ce-test-debuginfo]
   name=Docker CE Test - Debuginfo $basearch
   baseurl=https://download.docker.com/linux/centos/$releasever/debug-$basearch/test
   enabled=0
   gpgcheck=1
   gpgkey=https://download.docker.com/linux/centos/gpg
   ​
   [docker-ce-test-source]
   name=Docker CE Test - Sources
   baseurl=https://download.docker.com/linux/centos/$releasever/source/test
   enabled=0
   gpgcheck=1
   gpgkey=https://download.docker.com/linux/centos/gpg
   ​
   [docker-ce-nightly]
   name=Docker CE Nightly - $basearch
   baseurl=https://download.docker.com/linux/centos/$releasever/$basearch/nightly
   enabled=0
   gpgcheck=1
   gpgkey=https://download.docker.com/linux/centos/gpg
   ​
   [docker-ce-nightly-debuginfo]
   name=Docker CE Nightly - Debuginfo $basearch
   baseurl=https://download.docker.com/linux/centos/$releasever/debug-$basearch/nightly
   enabled=0
   gpgcheck=1
   gpgkey=https://download.docker.com/linux/centos/gpg
   ​
   [docker-ce-nightly-source]
   name=Docker CE Nightly - Sources
   baseurl=https://download.docker.com/linux/centos/$releasever/source/nightly
   enabled=0
   gpgcheck=1
   gpgkey=https://download.docker.com/linux/centos/gpg

    

3. 安装 Docker Engine：

   dnf install -y docker-ce docker-ce-cli containerd.io docker-buildx-plugin docker-compose-plugin

4. 启动 Docker 服务并设置开机自启：

   systemctl start docker
   systemctl enable docker

5. 验证安装是否成功：

   docker --version
   docker run hello-world

第三部分：使用 Docker 部署 Prometheus 监控栈

我们将创建目录结构、配置文件，并分别启动三个容器：Node-Exporter（收集主机指标）、Prometheus（存储和查询指标）、Grafana（可视化指标）。

步骤 1：创建目录和配置文件

1. 创建项目目录：

   mkdir -p /server/tools/docker-monitor/{prometheus,grafana}
   cd /opt/docker-monitor

2. 创建 Prometheus 配置文件 prometheus.yml：

   vim /server/tools/docker-monitor/prometheus/prometheus.yml

   将以下内容粘贴到文件中并保存（:wq）。注意缩进，YAML 对格式敏感。

   global:
     scrape_interval: 15s # 每15秒抓取一次数据
     evaluation_interval: 15s # 每15秒评估一次规则
   ​
   scrape_configs:
     # 作业名称：监控本机
     - job_name: 'node'
       static_configs:
         - targets: ['host.docker.internal:9100']  # 将 192.168.10.238 替换为 Docker 主机名host.docker.internal,或者保留localhost:9100，在运行时加上--network="host"参数
   ​
     # 作业名称：监控 Prometheus 自己
     - job_name: 'prometheus'
       static_configs:
         - targets: ['localhost:9090']

创建自定义网络

docker network create monitor-net

步骤 2：部署 Node-Exporter

Node-Exporter 用于收集服务器硬件和操作系统指标。

docker run -d \
--name=node-exporter \
--network=monitor-net \
-p 9100:9100 \
--restart=always \
-v "/:/host:ro,rslave" \
quay.io/prometheus/node-exporter:latest \
--path.rootfs=/host

• --net="host" 和 --pid="host"：让容器使用主机网络和PID命名空间，以便可以访问所有系统信息。

• -v "/:/host:ro,rslave"：将主机根目录只读挂载到容器内，以便读取系统信息。

步骤 3：部署 Prometheus

    docker run -d \
  --name=prometheus \
--network=monitor-net \
  --user="root:root" \
  -p 9090:9090 \
  -v /server/tools/docker-monitor/prometheus/prometheus.yml:/etc/prometheus/prometheus.yml \
  -v /server/tools/docker-monitor/prometheus/data:/prometheus \
  --restart=always \
  prom/prometheus:latest

• -v .../prometheus.yml:/etc/...：将我们刚才创建的配置文件挂载到容器内。

• -v .../data:/prometheus：将数据目录挂载到主机，防止容器删除后数据丢失。

• 数据目录的所有者ID（通常是 root）。所以加上--user="root:root"

  修改配置文件后重启服务就需要执行以下命令

  docker restart prometheus

  如果需要修改容器的启动参数（如添加 --user、--network 等）：

  • 必须先停止并删除旧容器：

  • docker stop prometheus && docker rm prometheus

  • 然后使用新的参数重新执行 docker run ... 命令来创建并启动一个新容器。

  • 因为容器的配置（如网络模式、用户等）是在创建时决定的，无法通过 restart 来更改。

步骤 4：部署 Grafana

修改 Grafana 数据目录的所有权（Grafana 在容器内以用户ID 472运行）：

chown -R 472:472 /server/tools/docker-monitor/grafana/data

Grafana 容器默认以用户ID 472运行，现在挂载的目录也有了这个用户的写权限。

docker run -d \
  --name=grafana \
--network=monitor-net \
  -p 3000:3000 \
  -v /server/tools/docker-monitor/grafana/data:/var/lib/grafana \
  --restart=always \
  grafana/grafana:latest

• -v .../data:/var/lib/grafana：持久化存储 Grafana 的配置、仪表板和数据源信息。

第四部分：访问和验证服务

1. 查看容器状态：

   docker ps

   应该能看到 node-exporter, prometheus, grafana 三个容器都在运行（STATUS 为 Up）。

2. 访问服务：

   • Prometheus: 打开浏览器，访问 http://<您的服务器IP>:9090。进入 “Status” -> “Targets”，应该能看到 node 和 prometheus 两个 job 的状态都是 UP。这表示配置正确，Prometheus 正在成功抓取数据。

   • Grafana: 打开浏览器，访问 http://<您的服务器IP>:3000。

     • 首次登录用户名和密码都是 admin。

     • 登录后会要求修改密码，可以稍后修改。

   • 配置 Grafana 数据源：

     • 在 Grafana 首页，点击 “Add your first data source”。

     • 选择 “Prometheus”。

     • 在 URL 处填写 http://<您的服务器IP>:9090（注意：如果Grafana和Prometheus在同一台机器，这里可以填 http://host.docker.internal:9090 或直接填服务器IP）。

     • 点击 “Save & Test”，应该显示 “Data source is working”。

3. 导入仪表板：

   • 在 Grafana 中，点击左侧 “+” 号 -> “Import”。

   • 在 “Import via grafana.com” 框中输入 1860（这是一个非常流行的 Node-Exporter 仪表板ID）。

   • 点击 “Load”，然后选择 Prometheus 数据源，点击 “Import”。

   • 您现在就能看到漂亮的服务器监控仪表板了！

至此，您已经在 CentOS 9 上完成了一个干净、完整的 Prometheus 监控栈的部署。所有数据都已持久化，容器配置为自动重启，非常稳定。