K ubernetes（k8s）监控与报警：Prometheus界面报错，收不到告警信息

Question

文章地址：【Kubernetes（k8s）监控与报警：Prometheus + Grafana + Alertmanager（超详细） -

Kubernetes（k8s）监控与报警：Prometheus + Grafana + Alertmanager（超详细）-CSDN博客 文章浏览阅读75次，点赞2次，收藏2次。Kubernetes（k8s）监控与报警：Prometheus + Grafana + Alertmanager（超详细） https://blog.csdn.net/qq_41840843/article/details/137334491

界面报错：server returned HTTP status 400 Bad Request

Answer 1

晚上好🌙🌙🌙
本答案参考ChatGPT-3.5

根据问题描述，Prometheus界面报错，并且收不到短信。报错信息显示Prometheus无法从目标获取数据，且目标状态显示为Unhealthy。此外，还显示了HTTP状态码为400 Bad Request。这意味着Prometheus无法正确获取指定端点的数据，导致监控报错。

针对这个问题，可以采取以下解决方案：

1. 检查目标端点的状态：首先需要确认目标端点是否处于正常运行状态。可以通过访问对应的metrics端点来验证，确保该端点可以正常访问，并且返回的数据格式符合Prometheus的要求。

2. 检查Prometheus配置：检查Prometheus配置文件中是否正确配置了目标的scrape endpoint。确保配置文件中指定的端点地址和标签等信息正确无误。

3. 检查目标端点的日志：查看目标端点的日志文件，确认是否有相关的报错信息，例如与HTTP请求相关的错误信息，以及是否有请求被拦截等问题。

4. 检查防火墙和网络设置：确保目标端点所在的主机防火墙没有阻止Prometheus的访问请求。另外，确保网络设置中没有限制Prometheus服务器与目标端点之间的通信。

5. 查看Alertmanager配置：确认Alertmanager的配置是否正确，并且配置了正确的报警接收方式，如短信或其他通知方式。确保报警规则和接收方式配置正确无误。

6. 查看Prometheus日志：查看Prometheus服务器的日志文件，确认是否有相关的报错信息，例如网络连接错误、数据格式错误等。日志文件中可能会提供进一步的错误信息，有助于定位问题。

通过以上步骤的检查和排查，可以找到导致Prometheus报错并且无法收到短信通知的原因，然后针对具体的原因进行相应的修复和调整。