From 94941ecd857722ef66bec0229b90b80d26487ac9 Mon Sep 17 00:00:00 2001 From: maxime Date: Thu, 5 Nov 2026 15:31:07 +0100 Subject: [PATCH] Detector-learner Target issue: modification 1, S1 Co-Authored-By: Claude Opus 5.5 --- .../benchmark-1-S1.txt | 101 ++++++++++++++++++ detectors/target_issue.py | 24 +++-- .../contexte/seuils-du-journal.md | 5 +- 3 files changed, 120 insertions(+), 10 deletions(-) create mode 100644 detector-learner/2026-11-05T1402Z_Target-issue/benchmark-1-S1.txt diff --git a/detector-learner/2026-11-05T1402Z_Target-issue/benchmark-1-S1.txt b/detector-learner/2026-11-05T1402Z_Target-issue/benchmark-1-S1.txt new file mode 100644 index 0000000..9080e20 --- /dev/null +++ b/detector-learner/2026-11-05T1402Z_Target-issue/benchmark-1-S1.txt @@ -0,0 +1,101 @@ +BREITHORN : 2026-10-03T00:00Z → 2026-11-01T00:00Z, 27 étiquettes + trouvées justes + Displacement 168/168 (100 %) 168/171 (98 %) + No data 2/2 (100 %) 2/2 (100 %) + Obstruction 46/48 (96 %) 46/46 (100 %) + Thermal displacement 4/21 (19 %) 4/4 (100 %) + Visibility — 0/25 (0 %) + +CLARIDEN : 2026-10-01T00:00Z → 2026-11-01T00:00Z, 43 étiquettes + trouvées justes + Displacement 2578/3091 (83 %) 2578/2601 (99 %) + No data 6/20 (30 %) 6/12 (50 %) + Obstruction 1/5 (20 %) 1/5 (20 %) + Target issue 4068/4068 (100 %) 4068/4069 (100 %) + Thermal displacement 40/42 (95 %) 40/264 (15 %) + Visibility 3/87 (3 %) 3/3 (100 %) + +FLORIDA : 2026-10-01T00:00Z → 2026-11-01T00:00Z, 64 étiquettes + trouvées justes + Displacement 0/41 (0 %) 0/14 (0 %) + No data 4/21 (19 %) 4/4 (100 %) + Obstruction 0/2 (0 %) 0/13 (0 %) + Target issue 2913/2913 (100 %) 2913/2914 (100 %) + Thermal displacement 815/1047 (78 %) 815/1338 (61 %) + Visibility 434/598 (73 %) 434/439 (99 %) + +JUNGFRAU : 2026-09-30T00:00Z → 2026-11-01T00:00Z, 99 étiquettes + trouvées justes + Displacement — 0/19 (0 %) + No data 4/29 (14 %) 4/4 (100 %) + Obstruction 1/1 (100 %) 1/158 (1 %) + Target issue 3005/3005 (100 %) 3005/3006 (100 %) + Thermal displacement 1544/2557 (60 %) 1544/1786 (86 %) + Visibility 427/669 (64 %) 427/450 (95 %) + +LENZSPITZE : 2026-10-16T00:00Z → 2026-11-01T00:00Z, 67 étiquettes + trouvées justes + Displacement — 0/4640 (0 %) + No data 12/615 (2 %) 12/16 (75 %) + Obstruction 19/47 (40 %) 19/84 (23 %) + Thermal displacement 1767/1925 (92 %) 1767/4253 (42 %) + Visibility 934/1886 (50 %) 934/1116 (84 %) + +MICHIGAN : 2026-10-03T00:00Z → 2026-11-01T00:00Z, 15 étiquettes + trouvées justes + Displacement 130/130 (100 %) 130/171 (76 %) + No data 2/2 (100 %) 2/2 (100 %) + Target issue 132/147 (90 %) 132/132 (100 %) + Thermal displacement 19/25 (76 %) 19/46 (41 %) + +NEBRASKA : 2026-10-03T00:00Z → 2026-11-01T00:00Z, 11 étiquettes + trouvées justes + Displacement 165/165 (100 %) 165/171 (96 %) + No data 2/2 (100 %) 2/2 (100 %) + Target issue 132/132 (100 %) 132/132 (100 %) + Thermal displacement 10/20 (50 %) 10/17 (59 %) + +NIEDERHORN : 2026-10-01T00:00Z → 2026-11-01T00:00Z, 139 étiquettes + trouvées justes + Displacement 3/48 (6 %) 3/10 (30 %) + No data 2/26 (8 %) 2/2 (100 %) + Obstruction 66/156 (42 %) 66/134 (49 %) + Target issue 719/719 (100 %) 719/720 (100 %) + Thermal displacement 216/267 (81 %) 216/236 (92 %) + Visibility 28/104 (27 %) 28/32 (88 %) + +NORDEND : 2026-08-10T00:00Z → 2026-11-01T00:00Z, 228 étiquettes + trouvées justes + Displacement 2/12 (17 %) 2/20 (10 %) + No data 10/58 (17 %) 10/10 (100 %) + Obstruction 616/2625 (23 %) 616/1461 (42 %) + Target issue 3781/7183 (53 %) 3781/3781 (100 %) + Thermal displacement 4607/7412 (62 %) 4607/4707 (98 %) + Visibility 774/1950 (40 %) 774/1246 (62 %) + +SNCF01 : 2026-10-04T00:00Z → 2026-11-01T00:00Z, 97 étiquettes + trouvées justes + Displacement 2111/2111 (100 %) 2111/2112 (100 %) + No data 10/30 (33 %) 10/16 (62 %) + Obstruction 20/22 (91 %) 20/431 (5 %) + Target issue 2111/2111 (100 %) 2111/2112 (100 %) + Thermal displacement 1218/1726 (71 %) 1218/1275 (96 %) + Visibility 23/761 (3 %) 23/24 (96 %) + +WILDSTRUBEL : 2026-09-01T00:00Z → 2026-11-01T00:00Z, 201 étiquettes + trouvées justes + Displacement 579/579 (100 %) 579/1986 (29 %) + No data 21/31 (68 %) 21/30 (70 %) + Obstruction 253/1026 (25 %) 253/482 (52 %) + Target issue 2089/2091 (100 %) 2089/2092 (100 %) + Thermal displacement 495/845 (59 %) 495/512 (97 %) + Visibility 908/1152 (79 %) 908/925 (98 %) + +Total + trouvées justes + Displacement 5736/6345 (90 %) 5736/11915 (48 %) + No data 75/836 (9 %) 75/100 (75 %) + Obstruction 1022/3932 (26 %) 1022/2814 (36 %) + Target issue 18950/22369 (85 %) 18950/18958 (100 %) + Thermal displacement 10735/15887 (68 %) 10735/14438 (74 %) + Visibility 3531/7207 (49 %) 3531/4260 (83 %) diff --git a/detectors/target_issue.py b/detectors/target_issue.py index 264f7cd..9315c75 100644 --- a/detectors/target_issue.py +++ b/detectors/target_issue.py @@ -25,6 +25,11 @@ Méthode (seuils provisoires, Claude, 2026-10-27) : propres à la cible presque chaque jour de la plage ») ; les Target obscured qu'elle couvre n'existent plus (/detector-learner Obstruction, modification 1, S1 : FLORIDA Sellette 6 et Massif 2, SNCF01 F4.3 et F4.4, NORDEND CTR01, NIEDERHORN e01, découpées en Target obscured par un jour sous PART ; BREITHORN, véhicules garés, inchangé). + La cible à problème juge la régularité plutôt que la part du jour : un jour y est dégradé dès PART_SEMAINE (le quart) + de ses instants calmes rejetés, et PONT vaut un jour ; la cible cachée par moments garde PART. Une cible rejetée chaque + jour aux mêmes heures, le jour seulement ou la nuit seulement, reste sous la moitié et n'était pas vue + (/detector-learner Target issue, modification 1, S1 : WILDSTRUBEL R3, de 04:00 à 16:00 chaque jour, vue seulement les + jours sans mesure de nuit ; NORDEND PR04 et CTR01, NIEDERHORN PWD_IMP_B08_024_C09 et e01, SNCF01 F4.3, plus tôt). Sur les jeux de data/ (2026-10-27) : FLORIDA Massif 2 21 → 25.10, Sellette 6 16 → 17.10 et 19 → 20.10 ; NIEDERHORN e03 à e12 toute la période (jamais vues) ; NORDEND CTR01 plusieurs suites en juin-juillet (déjà « souvent rejetée ») ; rien sur LENZSPITZE ; CLARIDEN PR-283 du 12 au 16.09. La cause (salissure, végétation, réglage) ne se lit que sur les images. @@ -45,9 +50,12 @@ from donnees import charger, est_reference, iso # noqa: E402 CALME = 0.25 # part des autres capteurs rejetés au plus, pour un instant calme PART = 0.5 # la moitié des instants calmes rejetés : « la plupart du temps » +PART_SEMAINE = 0.25 # le quart des instants calmes rejetés, chaque jour d'une semaine ou plus : une cible à problème, + # même rejetée seulement le jour ou seulement la nuit (/detector-learner Target issue, modification 1, S1) MIN_HEURES = 3 # heures d'instants calmes, à la cadence de la station : en dessous, le jour ne compte pas MIN_JOURS = 2 # un jour seul est trop souvent un accident (NORDEND : jours isolés sur 16 capteurs) -PONT = 2 # provisoire : jours non dégradés de suite qui ne coupent pas une suite de jours dégradés (4) +PONT = 1 # provisoire : jour non dégradé qui ne coupe pas une suite de jours dégradés (4) ; à 2, les véhicules garés + # de BREITHORN (deux jours, puis rien deux jours, puis un) feraient une semaine au quart SEMAINE = 7 # provisoire : jours dégradés de suite pour une cible à problème ; en dessous, une cible cachée par moments COLLE = 0.05 # provisoire : bruit d'une cible collée face aux autres (E-011 : 0,006 ; NORDEND, E-001 : 0,7 au plus bas) @@ -81,18 +89,18 @@ def episodes(mesures): c[1] += 1 out = [] for s, js in sorted(jours.items()): - cache = [] # suites reliées d'au moins SEMAINE jours, à part de rejets PART : une cible à problème - for su in _suites(js, min_instants, PONT): + cache = [] # suites reliées d'au moins SEMAINE jours, à part de rejets PART_SEMAINE : une cible à problème + for su in _suites(js, min_instants, PONT, PART_SEMAINE): part = sum(c[0] for c in su) / sum(c[1] for c in su) - if len(su) < SEMAINE or part < PART: + if len(su) < SEMAINE or part < PART_SEMAINE: continue - n = sum(c[0] / c[1] >= PART for c in su) + n = sum(c[0] / c[1] >= PART_SEMAINE for c in su) r = _rejets([m for m in mesures[s] if su[0][2] <= m["t"] <= su[-1][3]]) cache.append((su[0][2], su[-1][3])) out.append({"start": iso(r[0][0]), "end": iso(r[-1][1]), "kind": "Target issue", "label": "Degraded target", "text": f"{s} was rejected in {round(100 * part)} % of the measurements when the other targets were " f"seen, on {n} of {len(su)} days.", "ignore": True, "sensors": [s]}) - for su in _suites(js, min_instants, 0): # par moments : un épisode par suite de mesures rejetées + for su in _suites(js, min_instants, 0, PART): # par moments : un épisode par suite de mesures rejetées if len(su) < MIN_JOURS or any(a <= su[0][2] <= b for a, b in cache): continue part = round(100 * sum(c[0] for c in su) / sum(c[1] for c in su)) @@ -103,7 +111,7 @@ def episodes(mesures): return sorted(out + colles(mesures, min_instants), key=lambda e: e["start"]) -def _suites(js, min_instants, pont): +def _suites(js, min_instants, pont, part): """{jour: [rejetés, calmes, première, dernière]} -> suites de jours dégradés ; au plus pont jours non dégradés de suite entre deux jours dégradés ne coupent pas la suite (ils en sont) ; un jour qui ne compte pas ne la coupe pas.""" suites, cur, creux = [], [], [] @@ -111,7 +119,7 @@ def _suites(js, min_instants, pont): rej, calmes = js[j][:2] if calmes < min_instants: continue - if rej / calmes >= PART: + if rej / calmes >= part: cur += creux + [js[j]] creux = [] elif cur: diff --git a/vues-deplacements/contexte/seuils-du-journal.md b/vues-deplacements/contexte/seuils-du-journal.md index 63a38b2..8ec6439 100644 --- a/vues-deplacements/contexte/seuils-du-journal.md +++ b/vues-deplacements/contexte/seuils-du-journal.md @@ -55,11 +55,12 @@ Les détecteurs doivent tout détecter (l'utilisateur, 2026-10-26, D-068) : un r | | `DUREE_MIN` | 3 h | E-003 (10-11 h) contre matin de E-004 (2 h) ; le classement écarte aussi ce matin, quelle que soit la durée (point 14) | | `no_data` | `MISSING` | 2 pas | consigne de l'utilisateur, 2026-10-23 ; appliqué aussi entre la dernière mesure et la fin de la fenêtre lue (boucle CLARIDEN, lot 01) | | `target_issue` | `CALME` | 0,25 | (détecteur ajouté le 2026-10-27, voir son en-tête) | -| | `PART` | 0,5 | — | +| | `PART` | 0,5 | — ; la cible cachée par moments (« Target obscured ») | +| | `PART_SEMAINE` | 0,25 | part des instants calmes rejetés qui fait un jour dégradé de la cible à problème (« Degraded target », au moins `SEMAINE` jours) : la régularité plutôt que la part du jour ; /detector-learner Target issue, modification 1, S1 (WILDSTRUBEL R3 rejetée de 04:00 à 16:00 chaque jour, 30 à 45 % : vue seulement les jours sans mesure de nuit ; NORDEND PR04 et CTR01, NIEDERHORN PWD_IMP_B08_024_C09, sous la moitié) | | | `MIN_HEURES` | 3 h | heures d'instants calmes par jour, à la cadence de la station (écart médian entre deux instants) : 12 instants à 15 min, comme l'ancien `MIN_INSTANTS` ; boucle /detector-learner NEBRASKA, lot 01 (une mesure toutes les 4 h : aucun jour ne comptait, la référence perdue REFCOLH22 n'était pas vue) | | | `MIN_JOURS` | 2 jours | NORDEND : jours isolés sur 16 capteurs | | | `SEMAINE` | 7 jours | cible à problème (« Degraded target ») si gênée au moins une semaine de suite, sinon cible cachée par moments (« Target obscured », `cible_masquee`) : frontière « Target issue ou Obstruction » de `labeling/familles.md` ; boucle /detector-learner NEBRASKA, lot 01 (BREITHORN, véhicules garés, 2 à 5 jours ; NEBRASKA et MICHIGAN, référence perdue, 25 jours ; JUNGFRAU, PM_G, 63 jours) | -| | `PONT` | 2 jours | jours non dégradés de suite qui ne coupent pas la suite d'une cible à problème (« Degraded target » : `SEMAINE` jours du premier au dernier jour dégradé, `PART` de rejets sur la suite reliée) ; /detector-learner Obstruction, modification 1, S1 (FLORIDA, SNCF01, NORDEND, NIEDERHORN : cibles à problème découpées en Target obscured par un jour sous `PART` ; BREITHORN, véhicules garés, inchangé) | +| | `PONT` | 1 jour | jours non dégradés de suite qui ne coupent pas la suite d'une cible à problème (« Degraded target » : `SEMAINE` jours du premier au dernier jour dégradé, `PART_SEMAINE` de rejets sur la suite reliée) ; /detector-learner Obstruction, modification 1, S1 (FLORIDA, SNCF01, NORDEND, NIEDERHORN : cibles à problème découpées en Target obscured par un jour sous `PART` ; BREITHORN, véhicules garés, inchangé) ; 2 → 1 : /detector-learner Target issue, modification 1, S1 (au quart, deux jours de pont relient les véhicules garés de BREITHORN, POUI22, en une semaine) | | | `COLLE` | 0,05 | cible collée (D-074) : E-011, C2 et C3 à 0,006 et 0,016 du bruit des autres ; NORDEND, E-001 : 0,7 au plus bas | | `displacement` (dérive lente) | `HEURES` | 20 h sur 24 | comme `TREND_DAYS` de D-055 (ci-dessous) ; en part des heures que la station mesure (boucle /detector-learner MICHIGAN, modification 1 : 5 sur 6 à une mesure toutes les 4 h, aucun jour ne comptait) | | | `JOURS` | 5 jours | `TREND_DAYS` |