From 312b017ab550353e6f4facb41ad8060ecbc903bc Mon Sep 17 00:00:00 2001 From: maxime Date: Thu, 5 Nov 2026 13:04:28 +0100 Subject: [PATCH] Detector-learner Thermal displacement: modification 1, S3 Co-Authored-By: Claude Opus 5.5 --- .../benchmark-1-S3.txt | 101 ++++++++++++++++++ detectors/thermal_displacement.py | 51 +++++++-- .../contexte/seuils-du-journal.md | 1 + 3 files changed, 143 insertions(+), 10 deletions(-) create mode 100644 detector-learner/2026-11-05T1112Z_Thermal-displacement/benchmark-1-S3.txt diff --git a/detector-learner/2026-11-05T1112Z_Thermal-displacement/benchmark-1-S3.txt b/detector-learner/2026-11-05T1112Z_Thermal-displacement/benchmark-1-S3.txt new file mode 100644 index 0000000..13de49a --- /dev/null +++ b/detector-learner/2026-11-05T1112Z_Thermal-displacement/benchmark-1-S3.txt @@ -0,0 +1,101 @@ +BREITHORN : 2026-10-03T00:00Z → 2026-11-01T00:00Z, 27 étiquettes + trouvées justes + Displacement 168/168 (100 %) 168/171 (98 %) + No data 2/2 (100 %) 2/2 (100 %) + Obstruction 46/48 (96 %) 46/46 (100 %) + Thermal displacement 4/21 (19 %) 4/4 (100 %) + Visibility — 0/25 (0 %) + +CLARIDEN : 2026-10-01T00:00Z → 2026-11-01T00:00Z, 43 étiquettes + trouvées justes + Displacement 2578/3091 (83 %) 2578/2601 (99 %) + No data 6/20 (30 %) 6/12 (50 %) + Obstruction 1/5 (20 %) 1/5 (20 %) + Target issue 4068/4068 (100 %) 4068/4069 (100 %) + Thermal displacement 40/42 (95 %) 40/264 (15 %) + Visibility 3/87 (3 %) 3/3 (100 %) + +FLORIDA : 2026-10-01T00:00Z → 2026-11-01T00:00Z, 64 étiquettes + trouvées justes + Displacement 0/41 (0 %) 0/15 (0 %) + No data 4/21 (19 %) 4/4 (100 %) + Obstruction 0/2 (0 %) 0/13 (0 %) + Target issue 2913/2913 (100 %) 2913/2914 (100 %) + Thermal displacement 777/1047 (74 %) 777/1286 (60 %) + Visibility 381/598 (64 %) 381/381 (100 %) + +JUNGFRAU : 2026-09-30T00:00Z → 2026-11-01T00:00Z, 99 étiquettes + trouvées justes + Displacement — 0/19 (0 %) + No data 4/29 (14 %) 4/4 (100 %) + Obstruction 1/1 (100 %) 1/158 (1 %) + Target issue 3005/3005 (100 %) 3005/3006 (100 %) + Thermal displacement 1496/2557 (59 %) 1496/1736 (86 %) + Visibility 305/669 (46 %) 305/315 (97 %) + +LENZSPITZE : 2026-10-16T00:00Z → 2026-11-01T00:00Z, 67 étiquettes + trouvées justes + Displacement — 0/4640 (0 %) + No data 12/615 (2 %) 12/16 (75 %) + Obstruction 19/47 (40 %) 19/84 (23 %) + Thermal displacement 1767/1925 (92 %) 1767/4253 (42 %) + Visibility 915/1886 (49 %) 915/1077 (85 %) + +MICHIGAN : 2026-10-03T00:00Z → 2026-11-01T00:00Z, 15 étiquettes + trouvées justes + Displacement 130/130 (100 %) 130/171 (76 %) + No data 2/2 (100 %) 2/2 (100 %) + Target issue 132/147 (90 %) 132/132 (100 %) + Thermal displacement 19/25 (76 %) 19/46 (41 %) + +NEBRASKA : 2026-10-03T00:00Z → 2026-11-01T00:00Z, 11 étiquettes + trouvées justes + Displacement 165/165 (100 %) 165/171 (96 %) + No data 2/2 (100 %) 2/2 (100 %) + Target issue 132/132 (100 %) 132/132 (100 %) + Thermal displacement 10/20 (50 %) 10/17 (59 %) + +NIEDERHORN : 2026-10-01T00:00Z → 2026-11-01T00:00Z, 139 étiquettes + trouvées justes + Displacement 3/48 (6 %) 3/15 (20 %) + No data 2/26 (8 %) 2/2 (100 %) + Obstruction 75/156 (48 %) 75/167 (45 %) + Target issue 719/719 (100 %) 719/720 (100 %) + Thermal displacement 216/267 (81 %) 216/236 (92 %) + Visibility 25/104 (24 %) 25/28 (89 %) + +NORDEND : 2026-08-10T00:00Z → 2026-11-01T00:00Z, 228 étiquettes + trouvées justes + Displacement 2/12 (17 %) 2/36 (6 %) + No data 10/58 (17 %) 10/10 (100 %) + Obstruction 635/2625 (24 %) 635/1873 (34 %) + Target issue 2097/7183 (29 %) 2097/2097 (100 %) + Thermal displacement 4567/7412 (62 %) 4567/4666 (98 %) + Visibility 679/1950 (35 %) 679/1138 (60 %) + +SNCF01 : 2026-10-04T00:00Z → 2026-11-01T00:00Z, 97 étiquettes + trouvées justes + Displacement 2111/2111 (100 %) 2111/2112 (100 %) + No data 10/30 (33 %) 10/16 (62 %) + Obstruction 20/22 (91 %) 20/431 (5 %) + Target issue 2111/2111 (100 %) 2111/2112 (100 %) + Thermal displacement 1101/1726 (64 %) 1101/1139 (97 %) + Visibility 0/761 (0 %) — + +WILDSTRUBEL : 2026-09-01T00:00Z → 2026-11-01T00:00Z, 201 étiquettes + trouvées justes + Displacement 550/579 (95 %) 550/1833 (30 %) + No data 21/31 (68 %) 21/30 (70 %) + Obstruction 253/1026 (25 %) 253/482 (52 %) + Target issue 350/2091 (17 %) 350/350 (100 %) + Thermal displacement 399/845 (47 %) 399/410 (97 %) + Visibility 420/1152 (36 %) 420/429 (98 %) + +Total + trouvées justes + Displacement 5707/6345 (90 %) 5707/11784 (48 %) + No data 75/836 (9 %) 75/100 (75 %) + Obstruction 1050/3932 (27 %) 1050/3259 (32 %) + Target issue 15527/22369 (69 %) 15527/15532 (100 %) + Thermal displacement 10396/15887 (65 %) 10396/14057 (74 %) + Visibility 2728/7207 (38 %) 2728/3396 (80 %) diff --git a/detectors/thermal_displacement.py b/detectors/thermal_displacement.py index 0217ae2..e5310ce 100644 --- a/detectors/thermal_displacement.py +++ b/detectors/thermal_displacement.py @@ -53,6 +53,14 @@ mesure toutes les 4 h, refroidissements brefs), et la compensation ne l'enlève brutes laisse aux sauts une bascule de la seule pose calculée (positions brutes immobiles). MICHIGAN : 9 épisodes du 09 au 30.10, tous dans la dérive thermique étiquetée ; NEBRASKA : 13 instants, tous justes ; BREITHORN, JUNGFRAU, NORDEND, WILDSTRUBEL inchangés (cycle trouvé, ou rien) ; ECART = 2 prenait 2 instants Displacement de BREITHORN. +La caméra bouge avec le froid (/detector-learner Thermal displacement, modification 1, S3) : faute de cycle, aussi un +« Camera thermal movement » là où la pose de la caméra (tilt, rotation ou échelle) s'écarte de sa médiane du jour d'avant +d'au moins FROID bruits, pendant que la température de la station (detect la déclare, D-124) tombe sous la sienne d'au +moins FROID bruits la même heure ; bruit : la médiane des variations sur une heure (sur un pas, à une mesure toutes les +4 h), pour que le seuil ne dépende pas de la cadence. Les cibles peuvent s'écarter en sens opposés ou rester presque +immobiles (la compensation absorbe le mouvement) : la règle des glissades ne le voit pas. Les instants qui se suivent dans +la pose font un épisode. Sans pose ou sans température, rien. FROID = 3 prenait plus d'instants Displacement de NEBRASKA +et de MICHIGAN ; la chaleur n'est pas prise : par beau temps, c'est le cycle du jour. """ import math import os @@ -73,6 +81,7 @@ R2_MIN = 0.3 # provisoire, ébauche du 2026-10-24 : PS des Coudres 14 axe CHAUDES_MIN = 2 # provisoire : boucle WILDSTRUBEL, lot 01 ; NIEDERHORN (E-005) n'a qu'une heure chaude (midi) BORD = 0.1 # provisoire : bornes de la vague (départ, retour), en part de l'amplitude ; CHAUD dit s'il y a un cycle ECART = 3 # provisoire : glissade commune, en bruits (médiane des pas) d'écart à la médiane du jour d'avant +FROID = 4 # provisoire : la caméra bouge avec le froid, en bruits d'une heure d'écart au jour d'avant (pose, température) W = 2 * math.pi / 86400 # pulsation d'un cycle de 24 h, en rad/s @@ -173,25 +182,28 @@ def heures_chaudes(concernes): return [h for h, e in enumerate(ecarts(concernes)) if e >= CHAUD] -def detect(mesures): +def detect(mesures, temperature=(), camera=()): """Cycle des courbes corrigées (l'ouvrage) ; sinon, celui des positions brutes (la caméra qui bouge par dilatation - de son support, compensée : D-074, 2026-10-27).""" + de son support, compensée : D-074, 2026-10-27) ; sinon, les glissades de la caméra (avec le froid).""" return (_episodes(mesures, ("corr_x", "corr_y"), "Thermal", False) or - _episodes(mesures, ("x", "y"), "Camera thermal", True) or glissades(mesures)) + _episodes(mesures, ("x", "y"), "Camera thermal", True) or glissades(mesures, temperature, camera)) -def _signes(ms, col): - """{instant: +1 ou -1} où la mesure s'écarte d'au moins ECART bruits de la médiane du jour d'avant.""" +def _signes(ms, col, heure=False, seuil=None): + """{instant: +1 ou -1} où la mesure s'écarte d'au moins ECART bruits de la médiane du jour d'avant ; bruit : la + médiane des pas d'une mesure à la suivante, ou, heure, des variations sur une heure (un pas si la cadence est lente).""" k = [(m["t"], m[col]) for m in ms if m[col] is not None] if len(k) < 3: return {} - bruit = statistics.median(abs(b - a) for (_, a), (_, b) in zip(k, k[1:])) + pas = statistics.median((b - a).total_seconds() for (a, _), (b, _) in zip(k, k[1:])) if heure else 0 + n = max(1, round(3600 / pas)) if pas else 1 + bruit = statistics.median(abs(k[i + n][1] - k[i][1]) for i in range(len(k) - n)) if len(k) > n else 0 out, j = {}, 0 for i, (t, v) in enumerate(k): while k[j][0] < t - timedelta(days=1): j += 1 avant = [w for _, w in k[j:i]] - if bruit and len(avant) >= 3 and abs(v - statistics.median(avant)) >= ECART * bruit: + if bruit and len(avant) >= 3 and abs(v - statistics.median(avant)) >= (seuil or ECART) * bruit: out[t] = 1 if v > statistics.median(avant) else -1 return out @@ -206,9 +218,28 @@ def _communs(series): return {t for (t, x), c in compte.items() if n and c >= PART * n} -def glissades(mesures): +def _froid(mesures, temperature, camera): + """[(début, fin)] des suites d'instants où la pose de la caméra (tilt, rotation ou échelle) s'écarte de son jour + d'avant pendant que la température tombe sous le sien, d'au moins FROID bruits d'une heure ; vide sans l'une d'elles.""" + ts = [m["t"] for ms in mesures.values() for m in ms] + heure = lambda t: t.replace(minute=0, second=0, microsecond=0) # noqa: E731 + froid = {heure(t) for t, x in _signes([{"t": t, "T": v} for t, v in temperature], "T", True, FROID).items() if x < 0} + pose = [p for p in camera if min(ts) <= p["t"] <= max(ts)] if ts else [] + vus = {t for c in ("tilt", "rotation", "scale") for t in _signes(pose, c, True, FROID) if heure(t) in froid} + episodes = [] # les instants qui se suivent dans la pose font un épisode + for i, p in enumerate(pose): + if p["t"] in vus: + if episodes and episodes[-1][2] == i - 1: + episodes[-1][1:] = [p["t"], i] + else: + episodes.append([p["t"], p["t"], i]) + return [(a, b) for a, b, _ in episodes] + + +def glissades(mesures, temperature=(), camera=()): """Glissade commune de la caméra, sans cycle de 24 h : les positions brutes de la plupart des capteurs, références - comprises, et les courbes corrigées de la plupart des cibles s'écartent ensemble, du même côté, de leur jour d'avant.""" + comprises, et les courbes corrigées de la plupart des cibles s'écartent ensemble, du même côté, de leur jour d'avant ; + ou la pose de la caméra s'en écarte avec le froid (_froid).""" cibles = [ms for ms in mesures.values() if ms[0]["pattern_type"] != "global_ref"] brut = set().union(*(_communs([_signes(ms, c) for ms in mesures.values()]) for c in ("x", "y"))) corr = set().union(*(_communs([_signes(ms, c) for ms in cibles]) for c in ("corr_x", "corr_y"))) @@ -221,7 +252,7 @@ def glissades(mesures): return [{"start": iso(a), "end": iso(b), "kind": "Thermal displacement", "label": "Camera thermal movement", "text": "The camera moved with a change of temperature and all the curves moved with it; this is not a " "movement of the structure, nothing to do.", "ignore": False, "sensors": sorted(mesures)} - for a, b in episodes] + for a, b in episodes + _froid(mesures, temperature, camera)] def _episodes(mesures, cols, nom, camera): diff --git a/vues-deplacements/contexte/seuils-du-journal.md b/vues-deplacements/contexte/seuils-du-journal.md index 1114007..044b6f3 100644 --- a/vues-deplacements/contexte/seuils-du-journal.md +++ b/vues-deplacements/contexte/seuils-du-journal.md @@ -44,6 +44,7 @@ Les détecteurs doivent tout détecter (l'utilisateur, 2026-10-26, D-068) : un r | | `R2_MIN` | 0,3 | sinusoïde de 24 h (point 41) : PS des Coudres 14 axes sur 22 au-dessus, CLARIDEN 0 sur 48 ; plus demandée pour la caméra (positions brutes) depuis la boucle WILDSTRUBEL, lot 01 (1 cible sur 7, les pointés faux écrasent l'ajustement) | | | `CHAUDES_MIN` | 2 h | boucle WILDSTRUBEL, lot 01 : une seule heure chaude n'est pas un cycle (NIEDERHORN, E-005 : midi, trains et trous) | | | `ECART` | 3 bruits | glissade commune de la caméra sans cycle (« Camera thermal movement ») : écart à la médiane du jour d'avant, positions brutes et courbes corrigées ; boucle /detector-learner MICHIGAN, modification 1 (à 2, des instants Displacement de BREITHORN pris) | +| | `FROID` | 4 bruits d'une heure | la caméra bouge avec le froid (« Camera thermal movement », sans cycle) : la pose (tilt, rotation ou échelle) s'écarte de sa médiane du jour d'avant pendant que la température tombe sous la sienne, la même heure ; bruit : variations sur une heure, un pas à 4 h ; /detector-learner Thermal displacement, modification 1, S3 (BREITHORN, CLARIDEN, NEBRASKA : cibles en sens opposés, ou compensées ; à 3, des instants Displacement de NEBRASKA pris) | | `visibility` (turbulence) | `RATIO` | 1,5 | E-003 (×1,7 à ×3 la nuit) | | | `PART` | 0,5 | — | | | `RATIO_ERR` | 1,5 | E-003 (×1,7 à ×3,2) |