Files
Support-Agent/vues-deplacements/contexte/lissage.md
T
maximeandClaude Opus 5.5 955566d86f Clean the journal curves, unfold its timeline and sort it in batches (D-056)
Plan points 18 to 26, 30, 39, 40 and the point 37 housekeeping:
- greyed zones per target, vertical scale without the zones to ignore, Fit all,
  mm by default with a px switch, Support view, Expand (one row per category);
- cleaned curves: cut in the zones to ignore, raw data kept there in thin grey;
- target02 to target05 count as targets; smoothing questions answered;
- categories.py sorts in slices with 3 days of history by default;
- the pumping script points to ~/monitoring-dashboard and skips diff images;
- CLAUDE.md back under 200 lines; a case page is named after its case.

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
2026-10-24 14:31:42 +02:00

7.7 KiB
Raw Blame History

Lisser ou corriger les courbes de déplacement : ce qui existe, ce qui est possible

  • Date : 2026-10-23. Statut : exploration, rien de construit. Second volet du « journal du matin » : le premier n'altère rien (barres étiquetées, zones grisées « à ignorer »), celui-ci ajoute une courbe lissée ou corrigée, la brute toujours gardée.
  • Les chiffres ci-dessous viennent des exports horaires (mm) de WILDSTRUBEL, NIEDERHORN et CLARIDEN, 3 jours chacun : des ordres de grandeur, pas une validation.

1. Ce qui existe déjà

  • La station moyenne 20 à 40 images par mesure et rejette toute mesure dont l'error_value dépasse le seuil du capteur (corr_x / corr_y vides, rien d'interpolé). La plateforme propose déjà de surligner, masquer, interpoler ou passer une médiane glissante (Data Exploration, cadrage §2).
  • L'export horaire est la moyenne des mesures de l'heure (1 à 6 selon la station), avec _min et _max. Une moyenne n'est pas robuste : un train d'une mesure déplace l'heure entière.
  • Le cadrage D-044 (docs/displacement/cadrage.md) fixe déjà le cadre : brute jamais remplacée, chaque point corrigé porte son statut et sa raison (§3, §4.2), calcul causal, poids continus, correction seulement si la cause externe est strongly supported. Chaîne : qualifier, détecter, corriger ; outil du socle : le masque, puis une médiane glissante causale (§4.1) ; lisser sans détecter est écarté (§8).
  • L'annexe du cadrage note Hampel, Kalman et le poids continu, à revoir « si le besoin apparaît ». Le contexte support interdit de fusionner en silence données d'origine et retraitées (§27).
  • Aucun code : rien dans src/. Le volet 1 du journal fournira les zones « ignore », donc une partie de l'étape « détecter » du cadrage.

2. Les options, de la plus simple à la plus riche

A. Masquer les zones « ignore » du journal.

  • Principe : la courbe nettoyée est la brute sans les points des zones grisées, laissés en trou (pas d'interpolation, sinon on cache une marche). Aucun calcul nouveau.
  • Enlève : tout ce que le volet 1 grise (train, mauvaise visibilité, turbulence, pluie), avec sa raison déjà étiquetée.
  • Risque : une zone mal posée masque un vrai mouvement (CLARIDEN, mouvement réel qui débute la nuit : un volet 1 qui le rangerait en « mauvaise visibilité » le masquerait). La marche reste visible entre les deux bords du trou.
  • Coût : nul, bibliothèque standard, embarquable. La fiabilité est celle du volet 1.

B. Médiane glissante causale (ou filtre de Hampel : un point à plus de k MAD de la médiane locale est remplacé par elle).

  • Enlève : les pics courts. NIEDERHORN, train du 01/10 12:00 UTC : une heure à 14,83 mm sur un niveau de 9,9 ; médiane de 3 h : 9,95. Ne gomme pas un épisode plus long que la moitié de la fenêtre (pluie, turbulence de l'après-midi).
  • Risque : une marche réelle est gardée en entier mais en retard de (fenêtre − 1) / 2 heures. CLARIDEN, −4,9 mm en deux paliers : retard de 1 h (3 h) ou 2 h (5 h), amplitude intacte ; une moyenne de 5 h étale la marche sur 6 h. Un vrai choc d'une heure disparaît.
  • Sur WILDSTRUBEL, aucun gain : le bruit d'heure en heure est déjà de 0,03 à 0,12 mm pour un cycle de 0,3 à 0,75 mm, et la médiane de 5 h ne le change pas. La turbulence se voit à la mesure, pas à l'heure.
  • Coût : une dizaine de lignes, bibliothèque standard, embarquable, causale. Fenêtre à sourcer (cadrage §6, étape 3). _min / _max ne voient pas le train de NIEDERHORN : inutilisables pour le détecter.

C. Moyenne pondérée par error_value.

  • Principe : chaque mesure pèse selon son erreur, au lieu de tout ou rien (roadmap §5.2, image_quality_weight, qui ne donne pas de formule).
  • Enlève : le bruit des mesures sous le seuil de rejet (eau, turbulence légère).
  • Risque : à CLARIDEN, l'error de la cible qui saute triple (0,02 puis 0,06) à la marche réelle : la pondération rend la marche moins crédible au moment où elle naît. La fonction de poids n'a pas de source.
  • Coût : demande l'export « advanced » à cadence native (l'horaire ne donne que l'erreur moyenne), plus une fonction de poids à justifier.

D. Retrait du profil journalier (vague thermique).

  • Principe : soustraire le profil moyen heure par heure des jours précédents.
  • Enlève : le cycle du jour, donc ce qui ressemble à un mouvement et n'en est pas un pour le client.
  • Risque : trop court, il aggrave. WILDSTRUBEL, profil des jours 1-2 retiré du jour 3 : crête à crête 0,46 puis 0,67 mm (PA3_2), le profil variant de 0,13 à 0,21 mm d'un jour à l'autre pour un cycle de 0,3 à 0,75 mm. La dilatation thermique est aussi un mouvement réel (cadrage Q8), et une dérive apprise dans le profil s'efface.
  • Coût : simple à coder, mais il faut des semaines d'historique ; inutilisable sur une station neuve.

E. Filtre de Kalman ou lissage centré a posteriori, avec bande d'incertitude.

  • Principe : modèle d'état de la position, bande autour de la courbe ; ou fenêtre centrée sur le journal de la veille, sans retard.
  • Enlève : bruit, pics et trous, avec une incertitude affichée. Aucun chiffre ici, aucun cas de test à ce jour.
  • Risque : réglage (bruit du modèle) sans source, difficile à expliquer au client ; un modèle trop souple absorbe une marche.
  • Coût : le plus lourd ; l'annexe du cadrage le réserve au jour où l'incertitude par cible existe (roadmap §5.5).

3. Recommandation : la première marche

Option A seule. Rien à régler, rien d'inventé, chaque trou porte l'étiquette du volet 1, aucun risque d'effacer un mouvement tant que les zones sont justes. Si le client veut ensuite une courbe plus lisse, B avec une fenêtre de 3 h (étape 3 du cadrage), qu'on mesure sur NIEDERHORN et CLARIDEN avant de la montrer. C, D et E attendent un besoin visible.

Affichage (chaque graphique de cible) :

  • la brute en gris fin, toujours dessous et visible ;
  • la nettoyée en couleur par-dessus, en trait interrompu aux trous ;
  • les zones grisées du volet 1 derrière, avec leur étiquette au survol ;
  • un sélecteur « Brute / Nettoyée / Les deux », « Les deux » par défaut, et une ligne de légende : « zones à ignorer retirées, rien d'autre modifié » ;
  • avec B ensuite : une troisième courbe nommée « Lissée (médiane 3 h) », jamais confondue avec la nettoyée.

4. Questions pour l'utilisateur

  1. Le client voit-il la nettoyée par défaut avec la brute en option, ou l'inverse ? Elle ne remplace jamais la brute à l'écran (cadrage Q4).
  2. Le journal paraît une fois le matin : un lissage centré (côté serveur, sans retard) vous convient-il, ou garde-t-on le calcul causal des analyses, avec 1 à 2 h de retard (cadrage Q5) ?
  3. Le cycle thermique du jour reste-t-il tel quel (choix par défaut, cadrage Q8), ou faut-il une vue « sans le cycle » ? Seule cette réponse justifie l'option D.

Réponses de l'utilisateur (2026-10-24, point 24 du plan, D-056).

  1. Les deux ensemble : la nettoyée en couleur, coupée dans les zones à ignorer ; la brute en gris fin, visible dans ces zones seulement. Pas de sélecteur « Brute / Nettoyée / Les deux » pour commencer.
  2. Calcul au moment où le client regarde les courbes, sur tout ce qui est disponible jusque-là : chaque instant est jugé avec ce qui le suit (comme les détecteurs, sauts regarde 24 h après), les dernières heures restent provisoires. Rien n'est écrit dans la base de la plateforme : on ne le peut pas à ce stade. Le temps de calcul au chargement est à mesurer (point 36 du plan).
  3. Le cycle thermique reste tel quel : le journal le nomme (« Thermal expansion », « Thermal contraction », point 41) ; pas de vue « sans le cycle », l'option D reste en réserve.