Detector-learner MICHIGAN: bilan

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
maximeandClaude Opus 5.5 committed 2026-11-03 15:40:36 +01:00
1 parent 0d43a4cc4e
commit 5077a358d1
3 files changed
+147

No files matched your search

@@ -0,0 +1,55 @@
BREITHORN : 2026-10-03T00:00Z → 2026-11-01T00:00Z, 26 étiquettes
trouvées justes
Displacement 171/171 (100 %) 171/171 (100 %)
No data 2/2 (100 %) 2/2 (100 %)
Obstruction 38/71 (54 %) 38/38 (100 %)
Visibility — 0/25 (0 %)
JUNGFRAU : 2026-09-30T00:00Z → 2026-10-26T00:00Z, 22 étiquettes
trouvées justes
Displacement — 0/2433 (0 %)
No data — 0/4 (0 %)
Obstruction — 0/191 (0 %)
Target issue 1147/1147 (100 %) 1147/2433 (47 %)
Thermal displacement 406/1080 (38 %) 406/889 (46 %)
Visibility 174/256 (68 %) 174/287 (61 %)
MICHIGAN : 2026-10-05T00:00Z → 2026-11-01T00:00Z, 13 étiquettes
trouvées justes
Displacement 9/9 (100 %) 9/159 (6 %)
No data 2/2 (100 %) 2/2 (100 %)
Target issue 132/133 (99 %) 132/132 (100 %)
Thermal displacement 46/135 (34 %) 46/46 (100 %)
NEBRASKA : 2026-10-07T00:00Z → 2026-11-01T00:00Z, 8 étiquettes
trouvées justes
Displacement 1/53 (2 %) 1/1 (100 %)
No data 2/2 (100 %) 2/2 (100 %)
Target issue 132/133 (99 %) 132/132 (100 %)
Thermal displacement 13/91 (14 %) 13/13 (100 %)
Visibility 0/10 (0 %) —
NORDEND : 2026-08-10T00:00Z → 2026-08-16T00:00Z, 19 étiquettes
trouvées justes
No data 0/2 (0 %) —
Obstruction 0/6 (0 %) 0/83 (0 %)
Thermal displacement 316/332 (95 %) 316/318 (99 %)
Visibility 11/111 (10 %) 11/13 (85 %)
WILDSTRUBEL : 2026-09-01T00:00Z → 2026-09-07T00:00Z, 30 étiquettes
trouvées justes
Displacement — 0/3 (0 %)
Obstruction 105/294 (36 %) 105/191 (55 %)
Thermal displacement — 0/126 (0 %)
Visibility 106/290 (37 %) 106/111 (95 %)
Total
trouvées justes
Displacement 181/233 (78 %) 181/2767 (7 %)
No data 6/8 (75 %) 6/10 (60 %)
Obstruction 143/371 (39 %) 143/503 (28 %)
Target issue 1411/1413 (100 %) 1411/2697 (52 %)
Thermal displacement 781/1638 (48 %) 781/1392 (56 %)
Visibility 291/667 (44 %) 291/436 (67 %)
historique : detector-learner/historique.csv (version 0d43a4c)
@@ -0,0 +1,59 @@
# Bilan — /detector-learner MICHIGAN, 2026-11-03T1423Z
- **Plage** : 2026-10-05 → 2026-11-01 (UTC), celle des étiquettes ; **13 étiquettes** de `labeling/auto/MICHIGAN.jsonl`.
- **Base de la séance** : `03ce530`. Commits (`git log --oneline 03ce530..HEAD`) :
- `eb40210` benchmark ; `2bafe70` critique (suggestions) ;
- `b34d2b7` modification 1, S1 ; `d231ed0` modification 1, S2 ; `b54deb3` modification 1, S4 ; `2c6ac20` modification 1 ;
- `0d43a4c` contrôle 1 (accepté) ;
- `bb1fd1a` (Labeling: no hover on bars…) : commit d'une autre session, pendant la séance, hors des chemins de la séance.
- **Critique** : suggestions (4). S1 : une glissade commune de la caméra hors du cycle de 24 h n'est pas Thermal displacement. S2 : la règle des 20 heures distinctes par jour aveugle le thermique et la dérive lente à une mesure toutes les 4 h. S3 : une excursion commune de quelques mesures n'est pas vue comme un saut revenu. S4 : un pic commun revenu à la mesure suivante sort en « Large shift ».
- **Consigne de l'utilisateur** : aucune transmise aux agents. Pendant la séance, l'utilisateur a dit que MICHIGAN et NEBRASKA sont dans le même bâtiment, et qu'on peut ignorer la contradiction des étiquettes entre stations (voir « À trancher »).
- **Modification** : gardée en 1 passage, S1, S2 (partie dérive lente) et S4 ; S3 et la partie thermique de S2 non faites.
- S1 : `thermal_displacement.py`, voie `glissades` (sorte « Camera thermal movement »), `ECART = 3` ; la sorte entre dans `HOTES` de `categories.py`.
- S2 : `displacement.py`, un jour de la dérive lente compte selon la cadence de la station ; `_commune` retire le « Slow drift » d'une dérive commune de la caméra.
- S4 : `displacement.py`, le retour d'un saut se juge sur une heure de mesures, plus sur 4 mesures.
## Score de MICHIGAN, avant → fin
| Famille | trouvées | justes |
|---|---|---|
| Displacement | 0/9 → 9/9 | 0/1 → 9/159 |
| No data | 2/2 → 2/2 | 2/2 → 2/2 |
| Target issue | 132/133 → 132/133 | 132/132 → 132/132 |
| Thermal displacement | 0/135 → 46/135 | — → 46/46 |
## Autres stations, avant → fin (lignes changées)
- BREITHORN, Displacement : trouvées 11/171 → 171/171 ; justes 11/11 → 171/171 (S2).
- NEBRASKA, Displacement : justes 1/3 → 1/1 ; Thermal displacement : trouvées 0/91 → 13/91, justes — → 13/13 (S1).
- JUNGFRAU, Visibility : trouvées 145/222 → 174/256, justes 145/287 → 174/287 : vient des étiquettes (`labeling/auto/JUNGFRAU.jsonl` modifié par une autre session pendant la séance), pas des détecteurs (vérifié par le contrôle).
## Total, avant → fin
- Displacement : trouvées 12/233 → 181/233 ; justes 12/2451 → 181/2767.
- Thermal displacement : trouvées 722/1638 → 781/1638 ; justes 722/1333 → 781/1392.
- Visibility : trouvées 262/633 → 291/667 ; justes 262/436 → 291/436 (étiquettes de JUNGFRAU).
- No data, Obstruction, Target issue : inchangés.
## À trancher par l'utilisateur
Limites de la critique :
- L2, L4, L7 à L13 (Thermal displacement) : leur famille vient des températures des composants (baisses brèves, baisse du mois), que les détecteurs ne voient pas ; la glissade commune des positions brutes (S1) n'en est qu'un signe, « consistent with » un mouvement thermique de la caméra, pas une preuve. L10 (27.10), où l'étiquette dit le lien à la température moins net, restera douteux. Il faudrait la température pour l'établir.
- L1 (05.10, Displacement) : la cause (reconfiguration de COLH21' et REFH22', deux capteurs jusque-là sur le même point) vient des vignettes ; les détecteurs peuvent au mieux y voir une marche durable, ce qui suffit à la famille.
- L3 (09.10, Target issue) : la cause de la perte de REFPOU22 (prisme masqué, tourné ou enlevé) ne se voit que sur les images ; la famille, elle, est trouvée.
« À trancher » de la modification 1 (l'utilisateur a dit en séance qu'on peut ignorer cette contradiction) :
- **Les excursions de la caméra du 28 au 30.10.** BREITHORN étiquette Displacement le 28.10 00:00 → 12:00, le 28.10 16:00 → 29.10 12:00 et le 29.10 20:00 → 30.10 12:00 (rotation et échelle de la caméra, cibles en sens opposés). MICHIGAN étiquette Thermal displacement le 28.10 04:00 → 16:00, le 28.10 16:00 → 29.10 12:00 et le 29.10 20:00 → 30.10 12:00 (glissade commune des positions brutes). Mêmes nuits, retour à midi dans les deux cas. Ce qu'elles empêchent : baisser `ECART` (à 2, des instants Displacement de BREITHORN deviennent Thermal), ou faire de toute excursion commune de la caméra un Thermal displacement.
- **La dérive lente d'octobre, caméra qui s'incline.** BREITHORN étiquette Displacement du 03.10 au 01.11 (quatre étiquettes, six cibles qui dérivent avec la caméra). NEBRASKA étiquette Thermal displacement du 16.10 20:00 au 01.11 (toutes les cibles), et MICHIGAN du 09.10 12:00 au 01.11 (toutes les cibles). Ce qu'elles empêchent : une seule famille pour la dérive lente commune ; aujourd'hui, BREITHORN la garde en « Slow drift » et NEBRASKA ne la signale pas.
## Suggestions non traitées
- **S1, dérive commune en Thermal displacement** : fait reculer NEBRASKA en Thermal justes (~100 % → 63 %) ; `_commune` retire seulement le « Slow drift » de la famille Displacement. Sur MICHIGAN, la dérive n'est commune qu'à 3 ou 4 cibles et reste « Slow drift ».
- **S2, partie thermique** : rendre `HEURES_MIN` et le profil de `_axe` relatifs à la cadence demande de refaire le profil, les heures chaudes et la nuit, pensés en 24 heures fixes ; et un cycle trouvé à cadence lâche couperait la voie des glissades.
- **S3** : le seul cas Displacement visé (17.10 16:00 → 18.10 04:00) chevauche une glissade de la caméra ; il resterait au mieux un instant, pour un seuil commun plus bas que `K_PIC`, risqué à 15 min.
- **L1** : le bruit de la série se calcule sur toute la série, plus agitée après la perte d'une référence ; le saut tombe sous `K_DURABLE`.
## Erreurs
- La plage donnée par `regression.plage()` (`2026-10-05T00:00Z`, `2026-11-01T00:00Z`) fait échouer `categories.py` et `capteurs.py`, qui n'acceptent que `AAAA-MM-JJ` (`ValueError: unconverted data remains: T00:00Z`). Le critique les a relancées en `AAAA-MM-JJ` ; l'orchestrateur a ensuite donné la commande du journal sous cette forme à l'upgrader (même plage, `--au` exclu).
- Fichiers déjà modifiés au début de la séance : aucun. Mais `labeling/auto/JUNGFRAU.jsonl` a été modifié par une autre session **pendant** la séance (non commité) : `benchmark-avant.txt` est fait sur les anciennes étiquettes de JUNGFRAU, les suivants sur les nouvelles. Ni l'upgrader ni le contrôle n'y ont touché ; tous deux ont recomparé sur un benchmark relancé.
+33
View File
@@ -245,3 +245,36 @@ date,seance,etape,version,station,famille,etiquetees,signalees,les_deux
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,Total,Target issue,1413,2697,1411
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,Total,Thermal displacement,1638,1392,781
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,Total,Visibility,667,436,291
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,BREITHORN,Displacement,171,171,171
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,BREITHORN,No data,2,2,2
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,BREITHORN,Obstruction,71,38,38
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,BREITHORN,Visibility,0,25,0
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,JUNGFRAU,Displacement,0,2433,0
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,JUNGFRAU,No data,0,4,0
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,JUNGFRAU,Obstruction,0,191,0
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,JUNGFRAU,Target issue,1147,2433,1147
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,JUNGFRAU,Thermal displacement,1080,889,406
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,JUNGFRAU,Visibility,256,287,174
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,MICHIGAN,Displacement,9,159,9
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,MICHIGAN,No data,2,2,2
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,MICHIGAN,Target issue,133,132,132
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,MICHIGAN,Thermal displacement,135,46,46
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NEBRASKA,Displacement,53,1,1
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NEBRASKA,No data,2,2,2
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NEBRASKA,Target issue,133,132,132
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NEBRASKA,Thermal displacement,91,13,13
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NEBRASKA,Visibility,10,0,0
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NORDEND,No data,2,0,0
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NORDEND,Obstruction,6,83,0
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NORDEND,Thermal displacement,332,318,316
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,NORDEND,Visibility,111,13,11
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,WILDSTRUBEL,Displacement,0,3,0
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,WILDSTRUBEL,Obstruction,294,191,105
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,WILDSTRUBEL,Thermal displacement,0,126,0
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,WILDSTRUBEL,Visibility,290,111,106
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,Total,Displacement,233,2767,181
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,Total,No data,8,10,6
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,Total,Obstruction,371,503,143
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,Total,Target issue,1413,2697,1411
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,Total,Thermal displacement,1638,1392,781
2026-11-03T14:39Z,2026-11-03T1423Z_MICHIGAN,fin,0d43a4c,Total,Visibility,667,436,291
1 date seance etape version station famille etiquetees signalees les_deux
245 2026-11-03T14:37Z 2026-11-03T1423Z_MICHIGAN modification 1 b54deb3 Total Target issue 1413 2697 1411
246 2026-11-03T14:37Z 2026-11-03T1423Z_MICHIGAN modification 1 b54deb3 Total Thermal displacement 1638 1392 781
247 2026-11-03T14:37Z 2026-11-03T1423Z_MICHIGAN modification 1 b54deb3 Total Visibility 667 436 291
248 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c BREITHORN Displacement 171 171 171
249 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c BREITHORN No data 2 2 2
250 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c BREITHORN Obstruction 71 38 38
251 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c BREITHORN Visibility 0 25 0
252 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c JUNGFRAU Displacement 0 2433 0
253 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c JUNGFRAU No data 0 4 0
254 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c JUNGFRAU Obstruction 0 191 0
255 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c JUNGFRAU Target issue 1147 2433 1147
256 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c JUNGFRAU Thermal displacement 1080 889 406
257 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c JUNGFRAU Visibility 256 287 174
258 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c MICHIGAN Displacement 9 159 9
259 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c MICHIGAN No data 2 2 2
260 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c MICHIGAN Target issue 133 132 132
261 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c MICHIGAN Thermal displacement 135 46 46
262 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c NEBRASKA Displacement 53 1 1
263 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c NEBRASKA No data 2 2 2
264 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c NEBRASKA Target issue 133 132 132
265 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c NEBRASKA Thermal displacement 91 13 13
266 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c NEBRASKA Visibility 10 0 0
267 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c NORDEND No data 2 0 0
268 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c NORDEND Obstruction 6 83 0
269 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c NORDEND Thermal displacement 332 318 316
270 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c NORDEND Visibility 111 13 11
271 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c WILDSTRUBEL Displacement 0 3 0
272 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c WILDSTRUBEL Obstruction 294 191 105
273 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c WILDSTRUBEL Thermal displacement 0 126 0
274 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c WILDSTRUBEL Visibility 290 111 106
275 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c Total Displacement 233 2767 181
276 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c Total No data 8 10 6
277 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c Total Obstruction 371 503 143
278 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c Total Target issue 1413 2697 1411
279 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c Total Thermal displacement 1638 1392 781
280 2026-11-03T14:39Z 2026-11-03T1423Z_MICHIGAN fin 0d43a4c Total Visibility 667 436 291