Detector-learner NEBRASKA: modification 1
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
1 parent
f790519cd1
commit
7fcc7264d3
7 files changed
+272
-15
No files matched your search
@@ -0,0 +1,60 @@
|
||||
# Lot 01 : modification 1
|
||||
|
||||
## Ce qui a changé
|
||||
- `detectors/degradee.py` :
|
||||
- constante `MIN_INSTANTS = 12` (instants calmes par jour, « 3 h à 15 min ») remplacée par `MIN_HEURES = 3` (heures d'instants calmes par jour, à la cadence propre de la station : l'écart médian entre deux instants de mesure, comme dans `trous`). On garde 12 instants à 15 min, mais il en faut 1 à 4 h. Les cibles collées (`colles`) prennent le même seuil.
|
||||
- nouvelle constante `SEMAINE = 7` (jours) et nouvelle règle, le point 4 de la docstring : une suite d'au moins 7 jours dégradés reste « Degraded target » (`cible_a_probleme`), bornée de la première à la dernière mesure rejetée. Une suite plus courte devient « Target obscured », une cible cachée par moments, avec un épisode par suite de mesures rejetées : les heures où la cible est vue n'en font plus partie.
|
||||
- bornes de la « Degraded target » : de la première à la dernière mesure rejetée de la suite, au lieu de la première à la dernière mesure des jours de la suite.
|
||||
- `detectors/categories.py` : `LABELS` gagne `("degradee", "Target obscured", None): "cible_masquee"`, une catégorie existante de la famille `obstruction`. La docstring est à jour.
|
||||
- `vues-deplacements/contexte/seuils-du-journal.md` : la ligne `MIN_INSTANTS` est remplacée par `MIN_HEURES`, et la ligne `SEMAINE` est ajoutée.
|
||||
|
||||
## Pourquoi
|
||||
Il fallait aligner le classement des catégories du journal sur les familles des étiquettes (suggestion S2 et consigne de l'utilisateur) et rendre `degradee` indépendant de la cadence (S1). Avec un quorum fixé pour 15 min, aucun jour ne comptait à une mesure toutes les 4 h : une référence perdue et rejetée sans cesse pendant des semaines restait invisible. De son côté, `labeling/familles.md` tranche « Target issue ou Obstruction » ainsi : une cible gênée tout le temps relève de Target issue, une cible gênée par moments d'Obstruction. Un `degradee` de quelques jours, par exemple une cible derrière un véhicule garé plusieurs nuits, va donc en `cible_masquee` et ne couvre que ses mesures rejetées. Une semaine ou plus reste une cible à problème.
|
||||
|
||||
## Avant / après sur le lot
|
||||
Avant (`python3 detectors/categories.py data/NEBRASKA --du 2026-10-07 --au 2026-11-01 2>&1`) :
|
||||
```
|
||||
2026-10-09T12:00Z → 2026-10-09T12:00Z a_verifier gardé | sauts | 2 capteurs | absorbés : —
|
||||
2026-10-15T20:00Z → 2026-10-16T12:00Z trou gardé | trous | tous les capteurs | absorbés : —
|
||||
2026-10-28T08:00Z → 2026-10-28T08:00Z a_verifier gardé | sauts | 2 capteurs | absorbés : —
|
||||
2026-10-29T04:00Z → 2026-10-29T04:00Z saut_bref grisé | sauts | 6 capteurs | absorbés : —
|
||||
```
|
||||
Après (aucune ligne `sauté`) :
|
||||
```
|
||||
2026-10-09T12:00Z → 2026-10-31T20:00Z cible_a_probleme grisé | degradee | 1 capteurs | absorbés : —
|
||||
2026-10-09T12:00Z → 2026-10-09T12:00Z a_verifier gardé | sauts | 2 capteurs | absorbés : —
|
||||
2026-10-15T20:00Z → 2026-10-16T12:00Z trou gardé | trous | tous les capteurs | absorbés : —
|
||||
2026-10-28T08:00Z → 2026-10-28T08:00Z a_verifier gardé | sauts | 2 capteurs | absorbés : —
|
||||
2026-10-29T04:00Z → 2026-10-29T04:00Z saut_bref grisé | sauts | 6 capteurs | absorbés : —
|
||||
```
|
||||
REFCOLH22 (L2) est maintenant vue en `cible_a_probleme` à partir de l'instant même de sa perte, le 09.10 à 12:00. Les autres événements n'ont pas changé.
|
||||
|
||||
## Score
|
||||
NEBRASKA, 2026-10-07 → 2026-11-01 :
|
||||
- `cible_a_probleme` : trouvées 0/133 (0 %) → 132/133 (99 %) ; justes — → 132/132 (100 %).
|
||||
- Les autres familles n'ont pas changé : `deplacement` 1/53 et 1/2, `deplacement_thermique` 0/91, `trou` 2/2 et 2/2, `visibilite` 1/10 et 1/1.
|
||||
|
||||
## Non-régression
|
||||
`python3 .claude/skills/detector-learner/regression.py --sauf NEBRASKA` :
|
||||
- BREITHORN `obstruction` : trouvées 12/71 (17 %) → 41/71 (58 %) ; justes 12/12 (100 %) → 41/41 (100 %).
|
||||
- MICHIGAN `cible_a_probleme` : trouvées 0/133 (0 %) → 132/133 (99 %) ; justes — → 132/132 (100 %).
|
||||
- JUNGFRAU, NORDEND, WILDSTRUBEL : aucune ligne n'a changé.
|
||||
- Total `cible_a_probleme` : 571/704 (81 %) → 703/704 (100 %) ; justes 571/2433 (23 %) → 703/2565 (27 %).
|
||||
- Total `obstruction` : 119/371 (32 %) → 148/371 (40 %) ; justes 119/479 (25 %) → 148/508 (29 %).
|
||||
- Les autres lignes du total n'ont pas changé. Aucune famille ne recule sur aucune station.
|
||||
- `score.py --test` : bon.
|
||||
|
||||
## Pas corrigé
|
||||
- **Dérives longues (L1, L3 en `deplacement`, L5 en `deplacement_thermique`)** : `derive` à la cadence de la station (`HEURES`) donne une dérive de la fenêtre entière pour presque toutes les cibles de NEBRASKA, MICHIGAN et BREITHORN, toutes rangées en `deplacement`. Or l'étiqueteur range celles de MICHIGAN et L5 en `deplacement_thermique`. Pour trancher par la température de la station, comme le demande la frontière, il faudrait une règle ou un détecteur qui lise les métriques : non fait.
|
||||
- **`thermique`** : il exige un profil de 24 heures distinctes et ne voit qu'une vague quotidienne. La montée de plusieurs jours qui suit la température n'a aucun détecteur : non fait, pour la même raison.
|
||||
- **`sauts`, `BASE` à la cadence** : avec `BASE` à 1 ou 2 à 4 h, le pic du 28.10 08:00 (L6) disparaît de NEBRASKA, car il ne touche que 2 cibles, sous `PIC_MIN`. Sur MICHIGAN, il devient un `saut_bref` sous une étiquette thermique, que le score ne range dans aucune famille. Sans gain, je n'ai rien changé : le 28.10 reste en `a_verifier`.
|
||||
- **Saut commun au moment de la perte de REFCOLH22 (09.10 12:00)** : il reste en `a_verifier`. Rattacher un saut qui dure à une référence perdue au même instant risquerait de cacher un vrai mouvement accompagné de références instables (E-004).
|
||||
- **Référence gênée sans rejet (L7, L8)** : à 04:00, REFH22 ne dépasse sa médiane que de ×1,2 à ×1,3, sous `FACTEUR = 2` de `visibilite`, une constante réglée sur E-004. L8 reste manquée.
|
||||
- **`trou` d'une ou deux mesures** : les étiquettes ne sont pas cohérentes entre stations. NORDEND étiquette un trou d'une mesure, JUNGFRAU (une douzaine de trous d'une mesure) et WILDSTRUBEL (trois) ne les étiquettent pas. Baisser `MISSING` signalerait ces trous non étiquetés : laissé à 2.
|
||||
- **Contradiction pour l'utilisateur** : `familles.md` dit de ne pas étiqueter « la pose qui suit la chaleur » compensée. Pourtant l'étiqueteur étiquette en `deplacement_thermique` les jours où `thermique` ne voit que la caméra (« Camera thermal… »), 316 des 332 instants à NORDEND. Retirer ces épisodes ferait reculer NORDEND et JUNGFRAU : je les ai gardés. De même, « Target stuck » n'a jamais été signalé sur ces lots : rien à trancher ici.
|
||||
- **`events/carte-des-evenements.md`, section 4** : elle décrit encore `degradee` « Degraded target » sur « 2 jours de suite ». C'est désormais au moins 7 jours, une suite plus courte allant en `cible_masquee`. Ce fichier est hors de ceux que je peux modifier : à mettre à jour.
|
||||
|
||||
## Difficultés
|
||||
- La consigne de l'utilisateur, « aligner les catégories du journal sur les familles », et l'interdit « pas de nouvelle catégorie » ne disaient pas jusqu'où aller : renommer les douze catégories en six familles, ou seulement changer le classement ? `categories.py` est lu par `score.py`, `status.py`, `explore.py` et `detecteurs.py`, hors de mon périmètre. J'ai donc seulement changé la catégorie que reçoit un épisode, sans renommer ni ajouter de catégorie.
|
||||
- `score.py` range un `saut_bref` dans la famille de l'étiquette qui le couvre, mais seulement parmi `CAUSES_SAUT = {obstruction, visibilite, deplacement}`. `familles.md` dit pourtant « la famille de sa cause », ce qui inclut le froid (`deplacement_thermique`). Un saut bref sous une étiquette thermique ne compte donc dans aucune famille, et cela a pesé sur l'essai de `BASE`.
|
||||
- Le gabarit du rendu demande la ligne `total` de la catégorie `toutes`, qui n'existe que dans le benchmark. `regression.py` donne un bloc « Total » par famille : j'ai mis les lignes de ce bloc qui ont changé.
|
||||
@@ -0,0 +1,58 @@
|
||||
BREITHORN : 2026-10-03T00:00Z → 2026-11-01T00:00Z, 26 étiquettes
|
||||
trouvées justes
|
||||
deplacement 11/171 (6 %) 11/11 (100 %)
|
||||
obstruction 41/71 (58 %) 41/41 (100 %)
|
||||
trou 2/2 (100 %) 2/2 (100 %)
|
||||
visibilite — 0/34 (0 %)
|
||||
|
||||
JUNGFRAU : 2026-09-30T00:00Z → 2026-10-26T00:00Z, 22 étiquettes
|
||||
trouvées justes
|
||||
cible_a_probleme 571/571 (100 %) 571/2433 (23 %)
|
||||
deplacement — 0/2433 (0 %)
|
||||
deplacement_thermique 201/504 (40 %) 201/889 (23 %)
|
||||
obstruction — 0/191 (0 %)
|
||||
sans famille 0/576 (0 %) —
|
||||
saut_bref — 0/14 (0 %)
|
||||
trou — 0/4 (0 %)
|
||||
visibilite 25/47 (53 %) 25/287 (9 %)
|
||||
|
||||
MICHIGAN : 2026-10-05T00:00Z → 2026-11-01T00:00Z, 13 étiquettes
|
||||
trouvées justes
|
||||
cible_a_probleme 132/133 (99 %) 132/132 (100 %)
|
||||
deplacement 0/9 (0 %) 0/1 (0 %)
|
||||
deplacement_thermique 0/135 (0 %) —
|
||||
trou 2/2 (100 %) 2/2 (100 %)
|
||||
|
||||
NEBRASKA : 2026-10-07T00:00Z → 2026-11-01T00:00Z, 8 étiquettes
|
||||
trouvées justes
|
||||
cible_a_probleme 132/133 (99 %) 132/132 (100 %)
|
||||
deplacement 1/53 (2 %) 1/2 (50 %)
|
||||
deplacement_thermique 0/91 (0 %) —
|
||||
trou 2/2 (100 %) 2/2 (100 %)
|
||||
visibilite 1/10 (10 %) 1/1 (100 %)
|
||||
|
||||
NORDEND : 2026-08-10T00:00Z → 2026-08-16T00:00Z, 19 étiquettes
|
||||
trouvées justes
|
||||
deplacement_thermique 316/332 (95 %) 316/318 (99 %)
|
||||
obstruction 0/6 (0 %) 0/83 (0 %)
|
||||
trou 0/2 (0 %) —
|
||||
visibilite 11/111 (10 %) 11/13 (85 %)
|
||||
|
||||
WILDSTRUBEL : 2026-09-01T00:00Z → 2026-09-07T00:00Z, 30 étiquettes
|
||||
trouvées justes
|
||||
deplacement_thermique — 0/126 (0 %)
|
||||
obstruction 107/294 (36 %) 107/193 (55 %)
|
||||
visibilite 108/290 (37 %) 108/113 (96 %)
|
||||
|
||||
Total
|
||||
trouvées justes
|
||||
cible_a_probleme 835/837 (100 %) 835/2697 (31 %)
|
||||
deplacement 12/233 (5 %) 12/2447 (0 %)
|
||||
deplacement_thermique 517/1062 (49 %) 517/1333 (39 %)
|
||||
obstruction 148/371 (40 %) 148/508 (29 %)
|
||||
sans famille 0/576 (0 %) —
|
||||
saut_bref — 0/14 (0 %)
|
||||
trou 6/8 (75 %) 6/10 (60 %)
|
||||
visibilite 145/458 (32 %) 145/448 (32 %)
|
||||
|
||||
historique : detector-learner/historique.csv (version f790519+)
|
||||
@@ -0,0 +1,48 @@
|
||||
BREITHORN : 2026-10-03T00:00Z → 2026-11-01T00:00Z, 26 étiquettes
|
||||
trouvées justes
|
||||
deplacement 11/171 (6 %) 11/11 (100 %)
|
||||
obstruction 41/71 (58 %) 41/41 (100 %)
|
||||
trou 2/2 (100 %) 2/2 (100 %)
|
||||
visibilite — 0/34 (0 %)
|
||||
|
||||
JUNGFRAU : 2026-09-30T00:00Z → 2026-10-26T00:00Z, 22 étiquettes
|
||||
trouvées justes
|
||||
cible_a_probleme 571/571 (100 %) 571/2433 (23 %)
|
||||
deplacement — 0/2433 (0 %)
|
||||
deplacement_thermique 201/504 (40 %) 201/889 (23 %)
|
||||
obstruction — 0/191 (0 %)
|
||||
sans famille 0/576 (0 %) —
|
||||
saut_bref — 0/14 (0 %)
|
||||
trou — 0/4 (0 %)
|
||||
visibilite 25/47 (53 %) 25/287 (9 %)
|
||||
|
||||
MICHIGAN : 2026-10-05T00:00Z → 2026-11-01T00:00Z, 13 étiquettes
|
||||
trouvées justes
|
||||
cible_a_probleme 132/133 (99 %) 132/132 (100 %)
|
||||
deplacement 0/9 (0 %) 0/1 (0 %)
|
||||
deplacement_thermique 0/135 (0 %) —
|
||||
trou 2/2 (100 %) 2/2 (100 %)
|
||||
|
||||
NORDEND : 2026-08-10T00:00Z → 2026-08-16T00:00Z, 19 étiquettes
|
||||
trouvées justes
|
||||
deplacement_thermique 316/332 (95 %) 316/318 (99 %)
|
||||
obstruction 0/6 (0 %) 0/83 (0 %)
|
||||
trou 0/2 (0 %) —
|
||||
visibilite 11/111 (10 %) 11/13 (85 %)
|
||||
|
||||
WILDSTRUBEL : 2026-09-01T00:00Z → 2026-09-07T00:00Z, 30 étiquettes
|
||||
trouvées justes
|
||||
deplacement_thermique — 0/126 (0 %)
|
||||
obstruction 107/294 (36 %) 107/193 (55 %)
|
||||
visibilite 108/290 (37 %) 108/113 (96 %)
|
||||
|
||||
Total
|
||||
trouvées justes
|
||||
cible_a_probleme 703/704 (100 %) 703/2565 (27 %)
|
||||
deplacement 11/180 (6 %) 11/2445 (0 %)
|
||||
deplacement_thermique 517/971 (53 %) 517/1333 (39 %)
|
||||
obstruction 148/371 (40 %) 148/508 (29 %)
|
||||
sans famille 0/576 (0 %) —
|
||||
saut_bref — 0/14 (0 %)
|
||||
trou 4/6 (67 %) 4/8 (50 %)
|
||||
visibilite 144/448 (32 %) 144/447 (32 %)
|
||||
@@ -0,0 +1,58 @@
|
||||
BREITHORN : 2026-10-03T00:00Z → 2026-11-01T00:00Z, 26 étiquettes
|
||||
trouvées justes
|
||||
deplacement 11/171 (6 %) 11/11 (100 %)
|
||||
obstruction 12/71 (17 %) 12/12 (100 %)
|
||||
trou 2/2 (100 %) 2/2 (100 %)
|
||||
visibilite — 0/34 (0 %)
|
||||
|
||||
JUNGFRAU : 2026-09-30T00:00Z → 2026-10-26T00:00Z, 22 étiquettes
|
||||
trouvées justes
|
||||
cible_a_probleme 571/571 (100 %) 571/2433 (23 %)
|
||||
deplacement — 0/2433 (0 %)
|
||||
deplacement_thermique 201/504 (40 %) 201/889 (23 %)
|
||||
obstruction — 0/191 (0 %)
|
||||
sans famille 0/576 (0 %) —
|
||||
saut_bref — 0/14 (0 %)
|
||||
trou — 0/4 (0 %)
|
||||
visibilite 25/47 (53 %) 25/287 (9 %)
|
||||
|
||||
MICHIGAN : 2026-10-05T00:00Z → 2026-11-01T00:00Z, 13 étiquettes
|
||||
trouvées justes
|
||||
cible_a_probleme 0/133 (0 %) —
|
||||
deplacement 0/9 (0 %) 0/1 (0 %)
|
||||
deplacement_thermique 0/135 (0 %) —
|
||||
trou 2/2 (100 %) 2/2 (100 %)
|
||||
|
||||
NEBRASKA : 2026-10-07T00:00Z → 2026-11-01T00:00Z, 8 étiquettes
|
||||
trouvées justes
|
||||
cible_a_probleme 0/133 (0 %) —
|
||||
deplacement 1/53 (2 %) 1/2 (50 %)
|
||||
deplacement_thermique 0/91 (0 %) —
|
||||
trou 2/2 (100 %) 2/2 (100 %)
|
||||
visibilite 1/10 (10 %) 1/1 (100 %)
|
||||
|
||||
NORDEND : 2026-08-10T00:00Z → 2026-08-16T00:00Z, 19 étiquettes
|
||||
trouvées justes
|
||||
deplacement_thermique 316/332 (95 %) 316/318 (99 %)
|
||||
obstruction 0/6 (0 %) 0/83 (0 %)
|
||||
trou 0/2 (0 %) —
|
||||
visibilite 11/111 (10 %) 11/13 (85 %)
|
||||
|
||||
WILDSTRUBEL : 2026-09-01T00:00Z → 2026-09-07T00:00Z, 30 étiquettes
|
||||
trouvées justes
|
||||
deplacement_thermique — 0/126 (0 %)
|
||||
obstruction 107/294 (36 %) 107/193 (55 %)
|
||||
visibilite 108/290 (37 %) 108/113 (96 %)
|
||||
|
||||
Total
|
||||
trouvées justes
|
||||
cible_a_probleme 571/837 (68 %) 571/2433 (23 %)
|
||||
deplacement 12/233 (5 %) 12/2447 (0 %)
|
||||
deplacement_thermique 517/1062 (49 %) 517/1333 (39 %)
|
||||
obstruction 119/371 (32 %) 119/479 (25 %)
|
||||
sans famille 0/576 (0 %) —
|
||||
saut_bref — 0/14 (0 %)
|
||||
trou 6/8 (75 %) 6/10 (60 %)
|
||||
visibilite 145/458 (32 %) 145/448 (32 %)
|
||||
|
||||
historique : detector-learner/historique.csv (version 2a8d3da)
|
||||
Reference in new issue
Block a user