Jumps: a sudden change within 2 h (8 times the target's usual 2-hour change) that lasts 24 h (at least 1.4 times its daily swing); every jump of the range, returns included, so PR17's return on 12/10 now shows. Trends: Theil-Sen slope and Kendall tau of the daily levels, jumps set aside, kept when the drift over the period reaches the daily swing and goes steadily one way. Provisional thresholds; method and results in vues-deplacements/contexte/detection-d-anomalies.md. Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
73 lines
7.2 KiB
Markdown
73 lines
7.2 KiB
Markdown
# Détection mécanique des anomalies dans les déplacements
|
||
|
||
- **Date** : 2026-10-16. **Statut** : premier essai mis dans la maquette : page `Displacements` (`maquette/spec.md`, « La page Displacements »). Très expérimental : on essaie et on converge pas à pas. Décision liée : D-055.
|
||
- **Origine** : demande de l'utilisateur après le cas NORDEND (`cas/2026-10_NORDEND/parcours.md`), où l'anomalie est le saut de PR17 le 08/10.
|
||
|
||
## L'idée
|
||
|
||
- Le diagnostic a plusieurs facettes. L'une d'elles : un système qui **détecte lui-même** les anomalies, sans qu'on lui désigne la cible (à l'inverse de l'enquête à la demande, D-042, et de `Analyze by AI` dans la maquette).
|
||
- Traiter les données finales (les déplacements en mm) pour en sortir ce qui est intéressant, dans deux buts :
|
||
- **diagnostic poussé** : mettre en avant une courbe, puis l'ouvrir dans View et Diagnosis ou la confier à l'agent ;
|
||
- **écarter** le bruit et les données sans intérêt.
|
||
- Le constat : sur la page des déplacements, beaucoup de courbes et de fluctuations, la plupart sans valeur de diagnostic ; parfois une courbe l'est (PR17). C'est elle qu'il faut faire ressortir.
|
||
- **Sans modifier les données** : on calcule, on classe, on montre ; les courbes restent brutes. Différent de D-044 (`docs/displacement/cadrage.md`), qui produit une courbe corrigée.
|
||
|
||
## Ce qui compte pour le client : sauts et tendances
|
||
|
||
- Les cibles bougent avec la météo, la température, le soleil, de façon **périodique** (jour et nuit) ou **saisonnière**, puis reviennent à leur place.
|
||
- Le client regarde les déplacements horizontaux et verticaux, pas les erreurs (traitées en amont : seuils, mesures rejetées). Ce qui compte pour lui, selon l'utilisateur (2026-10-16), ce sont deux choses :
|
||
- **les sauts** : un décalage soudain de la courbe, qui dure. Tous les sauts de la plage, retours compris (PR17 saute le 08/10 et revient le 12/10) ;
|
||
- **les tendances** : une hausse ou une baisse lente, faite de petits décalages qu'aucun saut ne capte ; elle peut annoncer une dégradation de l'ouvrage (affaissement…).
|
||
- Où le montrer : la page `Displacements` de la maquette (construite le 2026-10-16).
|
||
|
||
## Méthode actuelle (2026-10-16, deuxième version)
|
||
|
||
Sur l'export horaire (mm), pour chaque cible et chaque axe ; constantes et seuils dans `maquette/explore.py`.
|
||
- **Amplitude journalière** de la cible : médiane, sur les jours UTC d'au moins 20 heures, de max − min.
|
||
- **Saut** : un changement **brutal** (sur 2 h, au moins 8 fois ce que la cible bouge d'habitude en 2 h) qui **dure** (médiane des 24 h après − médiane des 24 h avant, de même sens, au moins la moitié du changement brutal et 1,4 fois l'amplitude journalière). Tous les sauts de la plage, un par ±24 h et par axe. Le cycle du jour et la météo sont lents et reviennent : ils ne passent pas.
|
||
- **Tendance** : sauts retirés (pour le calcul seulement), la médiane de chaque jour UTC ; pente de Theil-Sen (médiane des pentes entre deux jours) et régularité (tau de Kendall, part des paires de jours qui vont dans le même sens). Gardée si la dérive sur la période atteint l'amplitude journalière et si |tau| ≥ 0,6 ; il faut 5 jours au moins.
|
||
- Seuils provisoires, sans source, réglés sur les jeux ci-dessous.
|
||
|
||
| Jeu | Sauts | Tendances |
|
||
|---|---|---|
|
||
| NORDEND, octobre (cas PR17) | deux événements, PR17 seule : 08/10 01:00 → 04:00 (−8,5 mm en vertical, +5,1 en horizontal) ; retour le 12/10 21:00 → 23:00 (−4,9 mm en horizontal, +2,6 en vertical) | PR06 en horizontal : +0,7 mm en 10 jours (amplitude 0,5 mm) |
|
||
| PS des Coudres (sain) | aucun | aucune |
|
||
| WILDSTRUBEL | aucun | (3 jours : trop court) |
|
||
| NORDEND, juillet | PR18 en vertical, −4,4 mm le 28/07 vers 23:00, revenu ensuite | (4 jours : trop court) |
|
||
| CLARIDEN (incident de Barcelone) | un événement de 21 cibles, 18/09 21:00 → 19/09 08:00 | (3 jours : trop court) |
|
||
|
||
Pourquoi la première version ne suffisait pas : le plus grand écart des médianes sur 24 h, un par axe, au-dessus de 3 fois l'amplitude journalière, cachait le retour de PR17. Même à 2 fois, son retour vertical (2,6 mm, 1,5 fois l'amplitude) ne se distinguait pas des petits écarts d'autres cibles (PR03 à 1,2). Ce qui le distingue, c'est qu'il est brutal : 2,6 mm en 2 h.
|
||
|
||
## Premier essai (2026-10-16, remplacé)
|
||
|
||
Méthode, sur l'export horaire (mm), pour chaque cible et chaque axe : à chaque heure t, la médiane des 24 h qui suivent moins celle des 24 h qui précèdent. Des fenêtres de 24 h absorbent le cycle jour et nuit. On garde le plus grand saut et on le rapporte à l'amplitude journalière propre de la cible (médiane, sur les jours UTC, de max − min).
|
||
|
||
| Jeu | Plus grand saut / amplitude journalière | Lecture |
|
||
|---|---|---|
|
||
| NORDEND, octobre (cas PR17) | PR17 : 4,7 en vertical (−8,4 mm, 08/10 vers 03:00 UTC), 4,1 en horizontal (+5,1 mm) ; toutes les autres cibles ≤ 1,2 | PR17 sort seule |
|
||
| PS des Coudres (sain selon le spécialiste) | ≤ 1,1 | rien |
|
||
| WILDSTRUBEL | ≤ 0,9 | rien |
|
||
| NORDEND, juillet | ≤ 1,5 (PR18) | rien |
|
||
| CLARIDEN (incident de Barcelone) | 24 à 28 sur 4 cibles à la même heure (18/09 vers 22:00) | saut commun : mode commun, à montrer comme un seul événement |
|
||
| NIEDERHORN | — | export horaire trop court (< 72 h) |
|
||
|
||
Ce qu'on en retient :
|
||
- **Mode commun** : plusieurs cibles qui sautent ensemble ne font pas plusieurs anomalies. Dire combien sautent en même temps (règle du projet : ne pas confondre mode commun et mouvement structurel).
|
||
- **« Sans retour »** : PR17 revient en partie le 12/10 vers 23:00 ; en fin de fenêtre, il reste −4,8 mm en vertical, et l'horizontal est revenu (+0,25 mm). Plutôt que « jamais revenu », détecter un saut qui dure (au moins 24 h) et dire ce qu'il en reste à la fin.
|
||
- **Limites** : seuil pas encore choisi (entre 1,5 et 4 sur ces jeux, sans source) ; jeux courts (2 à 10 jours) ; l'heure de l'export horaire est prise en UTC+2 partout (vrai en Suisse en octobre, à vérifier ailleurs) ; un saut n'est connu qu'un jour après (il faut les 24 h qui suivent).
|
||
|
||
## Autres méthodes (pistes)
|
||
|
||
- **CUSUM ou Page-Hinkley** sur les médianes journalières : voit les sauts et les dérives lentes qui s'accumulent ; plus de réglages, moins lisible.
|
||
- **Écart à la même heure la veille** : suit mieux le cycle quand il est régulier ; mais quand la météo change le cycle (NORDEND le 08/10 : soleil puis ciel couvert), fausses alertes.
|
||
- **Saisonnier** : demande des mois d'historique (base de données de la plateforme, plus tard).
|
||
|
||
## Plus tard
|
||
|
||
- L'autre facette : écarter le bruit, donc dire « rien à signaler » sur les autres courbes.
|
||
- Tendance sur une plage choisie (aujourd'hui : toute la période de l'export), et tendance qui change de pente.
|
||
- Autres scénarios proposés à l'utilisateur (2026-10-16), non retenus pour l'instant :
|
||
- **accélération** : la vitesse d'une tendance augmente ; en surveillance de versants, c'est le signe classique avant une rupture ;
|
||
- **cible qui se sépare de ses voisines** : une zone de l'ouvrage bouge, ou une seule cible ;
|
||
- **le cycle qui change** : l'amplitude journalière qui grandit ou diminue (NORDEND, à partir du 08/10 : soleil puis ciel couvert) ; sans doute la météo, pas un déplacement.
|