From 5077a358d1b6c83c94c6025759d810a137b792c1 Mon Sep 17 00:00:00 2001 From: maxime Date: Tue, 3 Nov 2026 15:40:36 +0100 Subject: [PATCH] Detector-learner MICHIGAN: bilan Co-Authored-By: Claude Opus 5.5 --- .../benchmark-fin.txt | 55 +++++++++++++++++ .../2026-11-03T1423Z_MICHIGAN/bilan.md | 59 +++++++++++++++++++ detector-learner/historique.csv | 33 +++++++++++ 3 files changed, 147 insertions(+) create mode 100644 detector-learner/2026-11-03T1423Z_MICHIGAN/benchmark-fin.txt create mode 100644 detector-learner/2026-11-03T1423Z_MICHIGAN/bilan.md diff --git a/detector-learner/2026-11-03T1423Z_MICHIGAN/benchmark-fin.txt b/detector-learner/2026-11-03T1423Z_MICHIGAN/benchmark-fin.txt new file mode 100644 index 0000000..e0b0962 --- /dev/null +++ b/detector-learner/2026-11-03T1423Z_MICHIGAN/benchmark-fin.txt @@ -0,0 +1,55 @@ +BREITHORN : 2026-10-03T00:00Z → 2026-11-01T00:00Z, 26 étiquettes + trouvées justes + Displacement 171/171 (100 %) 171/171 (100 %) + No data 2/2 (100 %) 2/2 (100 %) + Obstruction 38/71 (54 %) 38/38 (100 %) + Visibility — 0/25 (0 %) + +JUNGFRAU : 2026-09-30T00:00Z → 2026-10-26T00:00Z, 22 étiquettes + trouvées justes + Displacement — 0/2433 (0 %) + No data — 0/4 (0 %) + Obstruction — 0/191 (0 %) + Target issue 1147/1147 (100 %) 1147/2433 (47 %) + Thermal displacement 406/1080 (38 %) 406/889 (46 %) + Visibility 174/256 (68 %) 174/287 (61 %) + +MICHIGAN : 2026-10-05T00:00Z → 2026-11-01T00:00Z, 13 étiquettes + trouvées justes + Displacement 9/9 (100 %) 9/159 (6 %) + No data 2/2 (100 %) 2/2 (100 %) + Target issue 132/133 (99 %) 132/132 (100 %) + Thermal displacement 46/135 (34 %) 46/46 (100 %) + +NEBRASKA : 2026-10-07T00:00Z → 2026-11-01T00:00Z, 8 étiquettes + trouvées justes + Displacement 1/53 (2 %) 1/1 (100 %) + No data 2/2 (100 %) 2/2 (100 %) + Target issue 132/133 (99 %) 132/132 (100 %) + Thermal displacement 13/91 (14 %) 13/13 (100 %) + Visibility 0/10 (0 %) — + +NORDEND : 2026-08-10T00:00Z → 2026-08-16T00:00Z, 19 étiquettes + trouvées justes + No data 0/2 (0 %) — + Obstruction 0/6 (0 %) 0/83 (0 %) + Thermal displacement 316/332 (95 %) 316/318 (99 %) + Visibility 11/111 (10 %) 11/13 (85 %) + +WILDSTRUBEL : 2026-09-01T00:00Z → 2026-09-07T00:00Z, 30 étiquettes + trouvées justes + Displacement — 0/3 (0 %) + Obstruction 105/294 (36 %) 105/191 (55 %) + Thermal displacement — 0/126 (0 %) + Visibility 106/290 (37 %) 106/111 (95 %) + +Total + trouvées justes + Displacement 181/233 (78 %) 181/2767 (7 %) + No data 6/8 (75 %) 6/10 (60 %) + Obstruction 143/371 (39 %) 143/503 (28 %) + Target issue 1411/1413 (100 %) 1411/2697 (52 %) + Thermal displacement 781/1638 (48 %) 781/1392 (56 %) + Visibility 291/667 (44 %) 291/436 (67 %) + +historique : detector-learner/historique.csv (version 0d43a4c) diff --git a/detector-learner/2026-11-03T1423Z_MICHIGAN/bilan.md b/detector-learner/2026-11-03T1423Z_MICHIGAN/bilan.md new file mode 100644 index 0000000..fd41673 --- /dev/null +++ b/detector-learner/2026-11-03T1423Z_MICHIGAN/bilan.md @@ -0,0 +1,59 @@ +# Bilan — /detector-learner MICHIGAN, 2026-11-03T1423Z + +- **Plage** : 2026-10-05 → 2026-11-01 (UTC), celle des étiquettes ; **13 étiquettes** de `labeling/auto/MICHIGAN.jsonl`. +- **Base de la séance** : `03ce530`. Commits (`git log --oneline 03ce530..HEAD`) : + - `eb40210` benchmark ; `2bafe70` critique (suggestions) ; + - `b34d2b7` modification 1, S1 ; `d231ed0` modification 1, S2 ; `b54deb3` modification 1, S4 ; `2c6ac20` modification 1 ; + - `0d43a4c` contrôle 1 (accepté) ; + - `bb1fd1a` (Labeling: no hover on bars…) : commit d'une autre session, pendant la séance, hors des chemins de la séance. +- **Critique** : suggestions (4). S1 : une glissade commune de la caméra hors du cycle de 24 h n'est pas Thermal displacement. S2 : la règle des 20 heures distinctes par jour aveugle le thermique et la dérive lente à une mesure toutes les 4 h. S3 : une excursion commune de quelques mesures n'est pas vue comme un saut revenu. S4 : un pic commun revenu à la mesure suivante sort en « Large shift ». +- **Consigne de l'utilisateur** : aucune transmise aux agents. Pendant la séance, l'utilisateur a dit que MICHIGAN et NEBRASKA sont dans le même bâtiment, et qu'on peut ignorer la contradiction des étiquettes entre stations (voir « À trancher »). +- **Modification** : gardée en 1 passage, S1, S2 (partie dérive lente) et S4 ; S3 et la partie thermique de S2 non faites. + - S1 : `thermal_displacement.py`, voie `glissades` (sorte « Camera thermal movement »), `ECART = 3` ; la sorte entre dans `HOTES` de `categories.py`. + - S2 : `displacement.py`, un jour de la dérive lente compte selon la cadence de la station ; `_commune` retire le « Slow drift » d'une dérive commune de la caméra. + - S4 : `displacement.py`, le retour d'un saut se juge sur une heure de mesures, plus sur 4 mesures. + +## Score de MICHIGAN, avant → fin + +| Famille | trouvées | justes | +|---|---|---| +| Displacement | 0/9 → 9/9 | 0/1 → 9/159 | +| No data | 2/2 → 2/2 | 2/2 → 2/2 | +| Target issue | 132/133 → 132/133 | 132/132 → 132/132 | +| Thermal displacement | 0/135 → 46/135 | — → 46/46 | + +## Autres stations, avant → fin (lignes changées) + +- BREITHORN, Displacement : trouvées 11/171 → 171/171 ; justes 11/11 → 171/171 (S2). +- NEBRASKA, Displacement : justes 1/3 → 1/1 ; Thermal displacement : trouvées 0/91 → 13/91, justes — → 13/13 (S1). +- JUNGFRAU, Visibility : trouvées 145/222 → 174/256, justes 145/287 → 174/287 : vient des étiquettes (`labeling/auto/JUNGFRAU.jsonl` modifié par une autre session pendant la séance), pas des détecteurs (vérifié par le contrôle). + +## Total, avant → fin + +- Displacement : trouvées 12/233 → 181/233 ; justes 12/2451 → 181/2767. +- Thermal displacement : trouvées 722/1638 → 781/1638 ; justes 722/1333 → 781/1392. +- Visibility : trouvées 262/633 → 291/667 ; justes 262/436 → 291/436 (étiquettes de JUNGFRAU). +- No data, Obstruction, Target issue : inchangés. + +## À trancher par l'utilisateur + +Limites de la critique : +- L2, L4, L7 à L13 (Thermal displacement) : leur famille vient des températures des composants (baisses brèves, baisse du mois), que les détecteurs ne voient pas ; la glissade commune des positions brutes (S1) n'en est qu'un signe, « consistent with » un mouvement thermique de la caméra, pas une preuve. L10 (27.10), où l'étiquette dit le lien à la température moins net, restera douteux. Il faudrait la température pour l'établir. +- L1 (05.10, Displacement) : la cause (reconfiguration de COLH21' et REFH22', deux capteurs jusque-là sur le même point) vient des vignettes ; les détecteurs peuvent au mieux y voir une marche durable, ce qui suffit à la famille. +- L3 (09.10, Target issue) : la cause de la perte de REFPOU22 (prisme masqué, tourné ou enlevé) ne se voit que sur les images ; la famille, elle, est trouvée. + +« À trancher » de la modification 1 (l'utilisateur a dit en séance qu'on peut ignorer cette contradiction) : +- **Les excursions de la caméra du 28 au 30.10.** BREITHORN étiquette Displacement le 28.10 00:00 → 12:00, le 28.10 16:00 → 29.10 12:00 et le 29.10 20:00 → 30.10 12:00 (rotation et échelle de la caméra, cibles en sens opposés). MICHIGAN étiquette Thermal displacement le 28.10 04:00 → 16:00, le 28.10 16:00 → 29.10 12:00 et le 29.10 20:00 → 30.10 12:00 (glissade commune des positions brutes). Mêmes nuits, retour à midi dans les deux cas. Ce qu'elles empêchent : baisser `ECART` (à 2, des instants Displacement de BREITHORN deviennent Thermal), ou faire de toute excursion commune de la caméra un Thermal displacement. +- **La dérive lente d'octobre, caméra qui s'incline.** BREITHORN étiquette Displacement du 03.10 au 01.11 (quatre étiquettes, six cibles qui dérivent avec la caméra). NEBRASKA étiquette Thermal displacement du 16.10 20:00 au 01.11 (toutes les cibles), et MICHIGAN du 09.10 12:00 au 01.11 (toutes les cibles). Ce qu'elles empêchent : une seule famille pour la dérive lente commune ; aujourd'hui, BREITHORN la garde en « Slow drift » et NEBRASKA ne la signale pas. + +## Suggestions non traitées + +- **S1, dérive commune en Thermal displacement** : fait reculer NEBRASKA en Thermal justes (~100 % → 63 %) ; `_commune` retire seulement le « Slow drift » de la famille Displacement. Sur MICHIGAN, la dérive n'est commune qu'à 3 ou 4 cibles et reste « Slow drift ». +- **S2, partie thermique** : rendre `HEURES_MIN` et le profil de `_axe` relatifs à la cadence demande de refaire le profil, les heures chaudes et la nuit, pensés en 24 heures fixes ; et un cycle trouvé à cadence lâche couperait la voie des glissades. +- **S3** : le seul cas Displacement visé (17.10 16:00 → 18.10 04:00) chevauche une glissade de la caméra ; il resterait au mieux un instant, pour un seuil commun plus bas que `K_PIC`, risqué à 15 min. +- **L1** : le bruit de la série se calcule sur toute la série, plus agitée après la perte d'une référence ; le saut tombe sous `K_DURABLE`. + +## Erreurs + +- La plage donnée par `regression.plage()` (`2026-10-05T00:00Z`, `2026-11-01T00:00Z`) fait échouer `categories.py` et `capteurs.py`, qui n'acceptent que `AAAA-MM-JJ` (`ValueError: unconverted data remains: T00:00Z`). Le critique les a relancées en `AAAA-MM-JJ` ; l'orchestrateur a ensuite donné la commande du journal sous cette forme à l'upgrader (même plage, `--au` exclu). +- Fichiers déjà modifiés au début de la séance : aucun. Mais `labeling/auto/JUNGFRAU.jsonl` a été modifié par une autre session **pendant** la séance (non commité) : `benchmark-avant.txt` est fait sur les anciennes étiquettes de JUNGFRAU, les suivants sur les nouvelles. Ni l'upgrader ni le contrôle n'y ont touché ; tous deux ont recomparé sur un benchmark relancé. diff --git a/detector-learner/historique.csv b/detector-learner/historique.csv index 9974212..7c504be 100644 --- a/detector-learner/historique.csv +++ b/detector-learner/historique.csv @@ -245,3 +245,36 @@ date,seance,etape,version,station,famille,etiquetees,signalees,les_deux 2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,Total,Target issue,1413,2697,1411 2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,Total,Thermal displacement,1638,1392,781 2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,Total,Visibility,667,436,291 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,BREITHORN,Displacement,171,171,171 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,BREITHORN,No data,2,2,2 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,BREITHORN,Obstruction,71,38,38 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,BREITHORN,Visibility,0,25,0 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,JUNGFRAU,Displacement,0,2433,0 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,JUNGFRAU,No data,0,4,0 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,JUNGFRAU,Obstruction,0,191,0 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,JUNGFRAU,Target issue,1147,2433,1147 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,JUNGFRAU,Thermal displacement,1080,889,406 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,JUNGFRAU,Visibility,256,287,174 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,MICHIGAN,Displacement,9,159,9 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,MICHIGAN,No data,2,2,2 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,MICHIGAN,Target issue,133,132,132 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,MICHIGAN,Thermal displacement,135,46,46 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NEBRASKA,Displacement,53,1,1 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NEBRASKA,No data,2,2,2 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NEBRASKA,Target issue,133,132,132 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NEBRASKA,Thermal displacement,91,13,13 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NEBRASKA,Visibility,10,0,0 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NORDEND,No data,2,0,0 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NORDEND,Obstruction,6,83,0 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NORDEND,Thermal displacement,332,318,316 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NORDEND,Visibility,111,13,11 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,WILDSTRUBEL,Displacement,0,3,0 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,WILDSTRUBEL,Obstruction,294,191,105 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,WILDSTRUBEL,Thermal displacement,0,126,0 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,WILDSTRUBEL,Visibility,290,111,106 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,Total,Displacement,233,2767,181 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,Total,No data,8,10,6 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,Total,Obstruction,371,503,143 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,Total,Target issue,1413,2697,1411 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,Total,Thermal displacement,1638,1392,781 +2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,Total,Visibility,667,436,291