Files
2026-11-05 10:19:13 +01:00

13 KiB
Raw Permalink Blame History

Displacement : modification 1

Ce qui a changé

  • S1, commit aac90d0 : detectors/displacement.py, dérive lente. Nouvelle constante MORCEAU = 3.5 et nouvelle fonction _morceaux() (point 4 bis du bloc « Dérive lente »). Une cible qui n'a pas de dérive sur toute la fenêtre (étape 3, inchangée) est cherchée par morceaux. Un morceau est une suite d'au moins JOURS jours retenus. Sa dérive est le niveau du dernier jour moins celui du premier, et doit atteindre au moins MORCEAU amplitudes journalières (médiane de la série). Il faut aussi |tau| ≥ REGULIER du même signe, et aucun pas d'un jour retenu au suivant de plus de la moitié de la dérive. Les morceaux sont pris de la plus grande dérive à la plus petite, sans se chevaucher : chacun va d'un extrême du niveau à l'autre. Il y a un épisode « Slow drift » par morceau et par axe. Le choix des jours retenus passe dans une petite fonction _jours(), partagée avec _derive() (même comportement). Le registre ajoute la ligne MORCEAU.
  • S2, commit efd85c6 : detectors/displacement.py, point 5. Quand la caméra dérive (la plupart des cibles du même côté, positions brutes comprises), la station n'est plus tue : seule la tendance sur toute la fenêtre (étape 3) est écartée, les morceaux du point 4 bis sont signalés. Avant : return [], aucune dérive. Le registre met à jour la ligne GROS.
  • S5, commit 4f067a6 :
    • detectors/visibility.py, point 2 (Brief obstruction) : avant, un instant dont des références sont hautes n'était jamais un passage. Maintenant, il en est un si au moins BREF_MIN cibles sont rejetées (> error_threshold) à cet instant, et ni à l'instant d'avant ni à celui d'après. Aucune constante nouvelle.
    • detectors/categories.py, classer() : un Brief obstruction (un seul instant) n'absorbe plus que les sauts revenus qui commencent à son instant, pas les sauts de plusieurs jours qu'il croise.
  • S6, commit fbb84bf : detectors/categories.py, classer(). Une « Slow drift » ou un « Sudden jump, back to normal » dont toutes les cibles sont dans un épisode Target issue qui le chevauche y est absorbé : il prend la famille Target issue. Les décalages qui durent ne sont toujours jamais absorbés.

Pourquoi

  • S1 : une seule pente sur toute la fenêtre manque une dérive de quelques jours qui se pose ou repart en arrière. Les morceaux la trouvent. Sous 3,5 amplitudes, les cycles thermiques de plusieurs jours et le bruit des niveaux passent, sur des stations sans étiquette Displacement. Les morceaux ne remplacent pas la tendance sur toute la fenêtre : à sa place, des fins de dérive étiquetées étaient perdues, ainsi que des instants trouvés par elle. La partie « bornes trop larges » de la suggestion reste donc ouverte.
  • S2 : la dérive d'une caméra mal compensée est un Displacement pour les étiquettes. Retirer l'exclusion en entier fait signaler la lente dérive saisonnière d'une station que les étiquettes rangent en Thermal displacement, jour après jour. Les morceaux, plus exigeants, séparent les deux cas.
  • S5 : un passage (train, véhicule) rejette plusieurs cibles à une seule mesure, et peut en même temps rendre une référence haute. La règle « référence touchée : toute l'image » laissait alors les sauts des autres cibles sans cause. Le rejet de plusieurs cibles à ce seul instant distingue le passage d'une secousse de toute l'image (qui n'a pas de rejet). La restriction de l'absorption évite qu'un passage d'un instant emporte des sauts longs de plusieurs jours.
  • S6 : la courbe d'une cible que Target issue signale est à ignorer : sa dérive et ses sauts revenus ne sont pas un mouvement.

Avant / après sur les stations de la suggestion

Commande du journal, plage de l'en-tête du benchmark, avec 2>&1 : aucune ligne sauté sur les onze stations.

CLARIDEN (S1, S5)

+ 2026-09-28T00:00Z → 2026-11-01T23:50Z Displacement gardé | Slow drift | 7 capteurs | absorbés : Slow drift … (8)
- 2026-10-05T12:00Z → 2026-10-05T12:00Z Obstruction grisé | Brief obstruction | 3 capteurs | absorbés : —
- 2026-10-05T12:20Z → 2026-10-05T12:20Z Displacement gardé | Sudden jump, back to normal | 4 capteurs | absorbés : —
+ 2026-10-05T12:00Z → 2026-10-05T12:20Z Obstruction grisé | Brief obstruction | 18 capteurs | absorbés : Brief obstruction 10-05T12:20, Sudden jump, back to normal 10-05T12:20

Les morceaux, par cible :

  • D-301-C : 09-28 → 10-07 (−0,34 px) et 10-07 → 10-25 (+0,17) ;
  • D-302-B et PR_BG : 09-30 → 10-22 ;
  • D-303-B : 10-02 → 10-14 ;
  • D-303-C et D-304-C : 10-19 → 10-25 (CLARIDEN-23) ;
  • D-304-C : aussi 09-28 → 11-01 ;
  • D-306-B : 10-07 → 10-25.

CLARIDEN-14 et -23 sont trouvées. Le journal fusionne ces Slow drift qui se chevauchent en un seul événement.

NEBRASKA (S2)

+ 2026-10-03T00:00Z → 2026-10-31T20:00Z Displacement gardé | Slow drift | 12 capteurs | absorbés : Slow drift … (25)
  • COLJ20 : +0,58 px, 10-03 → 10-30 ;
  • POUJ20 : +0,44 px ;
  • POUJ19 : +0,36 px ;
  • COLJ19 : +0,30 px ;
  • POUH19 et COLH19 : montée jusqu'au 10-29, puis −0,15 px du 10-14 au 10-29/31 ;
  • … : NEBRASKA-1, -3 et -6 sont couvertes.

NEBRASKA-5 (saut de COLJ19) n'a pas de saut à elle au journal (S3).

NIEDERHORN (S5, S6)

- 2026-09-28T00:00Z → 2026-10-26T23:00Z Displacement gardé | Slow drift | 1 capteurs (e01)
- 2026-10-06T12:00Z → 2026-10-06T12:00Z Displacement gardé | Sudden jump, back to normal | 5 capteurs
+ 2026-10-06T12:00Z → 2026-10-06T12:00Z Obstruction grisé | Brief obstruction | 21 capteurs | absorbés : Sudden jump, back to normal 10-06T12:00
- 2026-10-21T22:00Z → 2026-10-21T22:00Z Displacement gardé | Sudden jump, back to normal | 3 capteurs
+ 2026-10-21T22:00Z → 2026-10-21T22:00Z Obstruction grisé | Brief obstruction | 15 capteurs | absorbés : Sudden jump, back to normal 10-21T22:00

Les sauts revenus de e01 du 10-03T16:00 et du 10-06T17:00 restent Displacement : aucun épisode Target issue de e01 ne les chevauche (le sien va du 10-17 au 10-24).

LENZSPITZE (effet de S5, sans exemple de S5 dans la critique)

- 2026-10-28T10:55Z → 2026-10-31T06:05Z Displacement gardé | Sudden jump, back to normal | 15 capteurs | absorbés : 10 sauts
+ 2026-10-28T10:55Z Obstruction grisé | Brief obstruction | 18 capteurs | absorbés : Sudden jump, back to normal 10-28T10:55
+ 2026-10-29T06:05Z, 10-29T14:35, 10-30T10:40, 10-30T13:55 (9 capteurs), 10-31T04:40 → 06:05 (7) : Displacement, Sudden jump, back to normal, séparés
+ 2026-10-29T07:55Z, 10-30T07:55Z : Obstruction, Brief obstruction (20 capteurs), chacune absorbe le saut de son instant
- 2026-10-19T08:00Z → 11:15Z Displacement | Sudden jump, back to normal | 2 capteurs
+ 2026-10-19T08:00Z Obstruction | Brief obstruction | 14 capteurs | absorbés : saut 10-19T08:00 ; 10-19T09:30 Displacement, 1 capteur
+ 2026-10-20T06:55Z Obstruction | Brief obstruction | 21 capteurs | absorbés : 2 sauts

La Slow drift de 1016 (10-16 → 10-31) et les Lasting shift des 10-23 et 10-26 sont inchangés (S1 partiel, S7).

WILDSTRUBEL : aucun événement Displacement changé. Quatre Brief obstruction nouvelles, sans saut absorbé : 09-01T11:00, 10-04T09:00, 10-06T10:45 et 10-15T08:00.

Benchmark

Avant (benchmark-avant.txt) → après S6 (benchmark-1-S6.txt), lignes changées :

Station Famille trouvées justes
CLARIDEN Displacement 3/3091 (0 %) → 3091/3091 (100 %) 3/13 (23 %) → 3091/4213 (73 %)
NEBRASKA Displacement 1/165 (1 %) → 165/165 (100 %) 1/1 (100 %) → 165/171 (96 %)
NIEDERHORN Displacement 3/48 → 3/48 3/604 (0 %) → 3/16 (19 %)
NORDEND Displacement 2/12 → 2/12 2/37 → 2/38 (+1 à tort)
BREITHORN Obstruction 38/48 → 39/48 38/38 → 39/39
CLARIDEN Obstruction 0/5 → 1/5 0/42 → 1/44
LENZSPITZE Obstruction 0/47 → 12/47 — → 12/12
NIEDERHORN Obstruction 91/156 → 92/156 91/290 → 92/291
NORDEND Obstruction 978/2625 → 978/2625 978/2142 → 978/2143
SNCF01 Obstruction 15/22 → 21/22 15/979 → 21/985
WILDSTRUBEL Obstruction 214/1026 → 216/1026 214/422 → 216/424

Total :

  Displacement   2968/6345 (47 %) → 6220/6345 (98 %)    2968/9028 (33 %) → 6220/12811 (49 %)
  Obstruction    1338/3932 (34 %) → 1361/3932 (35 %)    1338/5077 (26 %) → 1361/5102 (27 %)

Par suggestion : benchmark-1-S1.txt (CLARIDEN Displacement seule change), benchmark-1-S2.txt (NEBRASKA Displacement seule), benchmark-1-S5.txt (Obstruction de sept stations, NORDEND Displacement +1 à tort), benchmark-1-S6.txt (NIEDERHORN Displacement seule).

Aucun recul sur une station que la suggestion ne vise pas. Sur ses stations, la ligne Displacement monte en « trouvées » comme en « justes » :

  • CLARIDEN : +1112 instants signalés à tort, pour 3088 instants trouvés de plus ;
  • NEBRASKA : +6 instants signalés à tort, « justes » de 100 à 96 %, pour 164 instants trouvés de plus.

À trancher par l'utilisateur

  • Une dérive commune des cibles, positions brutes comprises, est rangée tantôt en Thermal displacement, tantôt en Displacement :

    • JUNGFRAU, 09-28 → 10-24 : le corr_y des cibles du pont (PBJ_C, PM_D, PM_C, BJ_C, BJ_G…) monte lentement sur le mois. Les étiquettes en font du Thermal displacement, nuit après nuit (JUNGFRAU-1, -4, -6 : « les corr_y des cibles du pont montent toute la nuit »), sans étiquette Displacement.
    • NEBRASKA-6, 10-16 → 11-01, Displacement : longue dérive de toutes les cibles avec la caméra.

    Ce qu'elles empêchent : retirer en entier l'exclusion de la dérive de la caméra (ce que demande S2) fait signaler +2985 instants à tort sur JUNGFRAU. S2 n'a été fait que pour les dérives par morceaux, qui ne prennent pas JUNGFRAU (3,1 amplitudes au plus).

Pas corrigé

  • S1, en partie : la tendance sur toute la fenêtre est gardée, à côté des morceaux. Ses défauts restent : bornes trop larges, palier dans un long trou pris pour une dérive. Ainsi, la Slow drift de 1016 à LENZSPITZE (4047 instants à tort) et celle de PA3_2, PA_9, PB2_2 à WILDSTRUBEL (08-29 → 10-01) sont toujours là. La remplacer par les morceaux enlève ces instants à tort (LENZSPITZE −3007, WILDSTRUBEL −1735), mais fait reculer :

    • WILDSTRUBEL : −499 instants trouvés, ceux de WILDSTRUBEL-89, -120 et -136, que seule cette fausse dérive couvrait ;
    • MICHIGAN : −18 à −24 instants trouvés, la fin de MICHIGAN-7 après la redescente du 10-29.

    Le journal fusionne aussi les Slow drift qui se chevauchent en un seul événement (CLARIDEN : 09-28 → 11-01), même si chaque morceau est borné.

  • S3 : les paliers visés font 4,5 à 7,4 bruits et 4,1 à 4,4 variations ordinaires d'un jour au suivant (CLARIDEN 10-20T00:30 et 10-28T19:30, NEBRASKA 10-17T00:00). Les cibles saines vont jusqu'à 6. Avec K_DURABLE 5 et PALIER 4 :

    • Displacement : FLORIDA +19, JUNGFRAU +141, NORDEND +19 instants signalés à tort ;
    • Visibility : LENZSPITZE −449, JUNGFRAU −40 et WILDSTRUBEL −29 instants trouvés, la turbulence étant écartée par les nouveaux décalages.

    Comparer les heures avant et après le saut ne les sépare pas mieux (5,1 à 5,7 bruits). Pas de règle simple.

  • S4 : la cause n'est pas la fusion de categories.py : les longs « Sudden jump, back to normal » sont des épisodes d'une seule cible qui saute et revient sans cesse (point 7, _bascules), sans être « Target flipping ».

    • Fusionner seulement des sauts qui ont une cible en commun ne change rien au benchmark.
    • Découper ces épisodes en sauts brefs fait reculer FLORIDA (+953 instants à tort), JUNGFRAU (+33), NORDEND (+5) et WILDSTRUBEL (−38 trouvés).

    À LENZSPITZE, la chaîne du 10-28 → 10-31 est quand même rompue par S5.

  • S6, en partie : les sauts revenus de e01 à NIEDERHORN (10-03, 10-06) restent Displacement : aucun épisode Target issue de e01 ne les chevauche (target_issue.py ne la signale que du 10-17 au 10-24).

  • S7 : juger le niveau d'après sur les mesures à l'error_value ordinaire (≤ 2 fois sa médiane), dès la première d'entre elles, ne retire qu'un Lasting shift à LENZSPITZE et en déplace trois. Au benchmark, presque rien ne change (FLORIDA −2, NORDEND +1 à tort). C'est un petit gain pour une constante et une règle de plus : laissé.

Difficultés

  • La règle de recul (« à tort +2 ») et celle des stations de la suggestion (« ce que tu fais monter ») se croisent. Sur une station visée, la ligne Displacement peut monter en « trouvées » et en « justes » avec plus d'instants signalés à tort (CLARIDEN : +1112). J'ai lu la seconde comme prioritaire sur les stations de la suggestion, et la première comme valant pour les autres.
  • regression.py prend environ 75 s et lit detectors/ dans le dépôt. Pour comparer plusieurs réglages à la fois sans toucher au dépôt, j'ai lancé chaque variante dans une copie légère du dépôt (detectors/, agent-tools/, les scripts du skill, liens vers data/ et labeling/auto/), dans le scratchpad.