Mes alertes Prometheus ne s'envoient pas à PagerDuty

Question

hey l'équipe j'ai configuré une nouvelle alerte dans prometheus pour mes services critiques une alerte de type high_cpu_usage. prometheus voit bien que l'état est FIRING mais alertmanager ne forwarde rien à pagerduty j'ai vérifié le config alertmanager pour pagerduty et le routing ça semble ok
# exemple de config alertmanager (simplifié)
route:
  group_by: ['alertname']
  receiver: 'pagerduty'
receivers:
  - name: 'pagerduty'
    pagerduty_configs:
      - service_key: '{{ .Secret.PagerDutyServiceKey }}' # placeholder

auguste-hebert · Answer

t'as check les logs d'alertmanager ? souvent c'est un truc bête genre une erreur de conf pagerduty key ou le url qui est pas bon pour le webhook ou un group_by qui fait que les alertes sont pas regroupées comme tu penses

wbegue · Answer

ah putain j'ai regardé les logs y'a des error sending alert: bad status code 400 ça doit être la clé pagerduty j'ai du la copier coller avec un espace de merde je recheck ça

auguste-hebert · Answer

yep 400 c'est souvent ça ou un payload mal formé pour pagerduty corrige la clé et relance

wbegue · Answer

c'était la clé un espace en trop merci beaucoup

Mes alertes Prometheus ne s'envoient pas à PagerDuty

4 commentaires

Laisser une réponse

Introduction du cours pour apprendre l'orchestrateur Kubernetes (k8s)

Utilisation des modules sur Terraform

Retirer des utilisateurs sur GitLab pour sécuriser votre projet

Tissus Réseaux Intelligents : L'Ère de l'Opération par Intention

Optimisez vos images Docker : La méthode multi-stage

Rejoindre la communauté