docker容器部署prometheus服务发现，运行日志异常，如何解决？(操作系统-centos)

Question

问题遇到的现象和发生背景

运行容器
prometheus_targets（容器A，用于生成file_sd_configs文件）
挂载 /data/xxc/prometheus/targets/:/data/prometheus/targets/

prometheus（容器B）
挂载 /data/xxc/prometheus/targets/:/etc/prometheus/targets/

挂载内文件
xxc.json

容器B日志运行异常

ts=2024-11-25T05:33:05.105Z caller=file.go:342 level=error component="discovery manager scrape" discovery=file config=xxc msg="Error reading file" path=/etc/prometheus/targets/xxc.json err="open /etc/prometheus/targets/xxc.json: no such file or directory"
ts=2024-11-25T05:34:05.210Z caller=file.go:342 level=error component="discovery manager scrape" discovery=file config=xxc msg="Error reading file" path=/etc/prometheus/targets/xxc.json err="open /etc/prometheus/targets/xxc.json: no such file or directory"

操作环境、软件版本等信息

centos 7.9
docker 20.10.9

尝试过的解决方法

给挂载目录设置权限无效

chmod -R 777 /data//prometheus

我想要达到的结果

不在输出错误日志

Answer 1

♥ 该回答参考ChatGPT，由吾为汝整理提供，如若有用，还请题主采纳！♥

在你的情况下，Prometheus 容器 B 报告无法找到文件 /etc/prometheus/targets/xxc.json，这通常是由于文件挂载或路径配置的问题。我们可以一步步来排查并解决这个问题。

1. 检查文件路径和挂载

首先，确保你在宿主机上 /data/xxc/prometheus/targets/ 目录下确实存在 xxc.json 文件。可以通过以下命令检查：

ls -l /data/xxc/prometheus/targets/

确保 xxc.json 文件存在并且文件名没有拼写错误。

2. 检查 Docker 容器的挂载

确认容器 B 的挂载是否正确。你可以通过以下命令查看容器 B 的挂载情况：

docker inspect <容器B的ID或名称>

在输出中，查找 Mounts 部分，确保 /data/xxc/prometheus/targets/ 被正确挂载到 /etc/prometheus/targets/。

3. 检查文件权限

虽然你已经尝试过设置权限，但确保 xxc.json 文件的权限是可读的。可以使用以下命令检查文件权限：

ls -l /data/xxc/prometheus/targets/xxc.json

确保文件的权限是可读的（例如，-rw-r--r--）。

4. 检查 Docker 容器的用户

有时候，Docker 容器可能以非 root 用户运行，导致无法访问挂载的文件。你可以在 Dockerfile 或运行容器时指定用户。确保容器 B 运行的用户有权限访问 /etc/prometheus/targets/xxc.json。

5. 重新启动容器

如果你做了任何更改（例如添加文件或更改权限），请确保重新启动容器 B，以便它能够读取新的配置：

docker restart <容器B的ID或名称>

6. 查看 Prometheus 配置

确保 Prometheus 的配置文件中正确引用了 xxc.json。你可以在 Prometheus 的配置文件中检查 file_sd_configs 的配置部分，确保路径与挂载一致。

7. 查看日志

如果问题仍然存在，查看容器 B 的日志以获取更多信息：

docker logs <容器B的ID或名称>

8. 其他调试步骤

• 尝试在容器 B 内部手动检查文件是否存在。你可以进入容器：

docker exec -it <容器B的ID或名称> /bin/sh

然后检查 /etc/prometheus/targets/ 目录下是否有 xxc.json 文件。

通过以上步骤，你应该能够找出问题并解决 Prometheus 的日志错误。如果你还有其他问题或需要进一步的帮助，请告诉我！