39,6 heures sans alerte : quand la métrique disparaît
Une ligne en trop dans un fichier de métriques a fait rejeter tout le fichier. Les alertes « valeur > 0 » évaluaient un vide et restaient silencieuses.
Symptômes
- Aucune alerte malgré un état non vérifié
- Erreur de lecture visible uniquement dans le journal de l'exporteur
Hypothèses
- Défaut de l'exporteurinfirmée
- Format du fichier de métriques invalideconfirmée
Problème
L'indexation documentaire était invisible pour la supervision pendant 39,6 h sur 48.
Diagnostic
Une commande de comptage écrivait deux fois « 0 » ; la seconde ligne, orpheline, rendait le fichier illisible.
Décision
Corriger le script ET rendre l'absence de métrique alertable.
Correction
Sortie assainie en un seul entier ; gardes d'absence sur les familles d'alertes critiques ; alerte dédiée sur les fichiers de métriques illisibles.
Retour arrière
Version précédente du script conservée ; les règles ajoutées se retirent indépendamment.
Test
Les nouvelles alertes ont été rejouées sur l'historique réel : elles auraient sonné pendant les 39,6 h d'erreur.
Résultat mesuré
Une métrique qui disparaît déclenche désormais une alerte.
Apprentissage
« Pas d'alerte » ne veut pas dire « tout va bien ». Toute alerte qui teste une valeur a besoin d'une alerte sur l'absence de cette valeur.