Prometheus down après upgrade pourquoi
Commentaires
Vérifie si la config a bien été rechargée. `Prometheus` ne reload pas forcément automatiquement après un upgrade de pod. Fais un `kill -HUP` ou envoie un `POST` au endpoint `/-/reload`
curl -XPOST http://localhost:9090/-/reload
Si t'es en Kubernetes vérifie ton `ServiceMonitor` ou tes `PodMonitor`. Des fois les labels changent ou la selector match plus. Regarde les logs de ton operator s'il y en a un
Même si les logs de `Prometheus` sont clean, regarde bien les logs de `Thanos` si tu en as un. Parfois c'est `Thanos` qui n'arrive plus à scrapper les stores ou le sidecar n'est pas bon
C'était bien le `reload` de la config. J'ai fait le `curl` sur le pod `Prometheus` et tout est revenu. Apparemment l'operator n'avait pas forcé le reload de la nouvelle conf. Cimer
Laisser une réponse
Vous devez être connecté pour poster un message !
Rejoindre la communauté
Recevoir les derniers articles gratuitement en créant un compte !
S'inscrire
patricia88
Membre depuis le 16/01/2021actif
J'ai mis à jour mon `Prometheus` de 2.30 à 2.45. Maintenant j'ai plus aucune métrique. Les targets ne sont plus discover. Pas d'erreurs dans les logs