Detector-learner NEBRASKA: bilan
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
1 parent
cd4c591b90
commit
165e1c2cd6
2 files changed
+59
No files matched your search
@@ -0,0 +1,52 @@
|
||||
# Bilan — /detector-learner NEBRASKA, 2026-11-03T1249Z
|
||||
|
||||
- **Plage** : 2026-10-07 → 2026-11-01 (UTC), celle des étiquettes ; **8 étiquettes** de `labeling/auto/NEBRASKA.jsonl`.
|
||||
- **Base de la séance** : `2a8d3da`. Commits :
|
||||
- `609ef34` score ; `f790519` critique (suggestions) ; `7fcc726` modification 1 ;
|
||||
- `dbff2b9` `regression.py` devient le benchmark global, avec son historique ; `9725363` le skill le lance à chaque étape (consigne de l'utilisateur en cours de séance) ;
|
||||
- `cd4c591` contrôle 1 (accepté).
|
||||
- **Critique** : suggestions (2). S1, les seuils réglés pour 15 min ne voient rien à une mesure toutes les 4 h ; S2, aligner les catégories du journal sur les familles de `labeling/familles.md` (consigne de l'utilisateur, relayée au critique et à l'upgrader).
|
||||
- **Modification** : gardée en 1 passage. `degradee` compte en heures à la cadence de la station (`MIN_HEURES = 3`) ; au moins 7 jours de rejets, « Degraded target » (`cible_a_probleme`), moins, « Target obscured » (`cible_masquee`, donc `obstruction`), selon la frontière « Target issue ou Obstruction ».
|
||||
|
||||
## Score du lot, avant → fin
|
||||
|
||||
| Famille | trouvées | justes |
|
||||
|---|---|---|
|
||||
| cible_a_probleme | 0/133 → 132/133 | — → 132/132 |
|
||||
| deplacement | 1/53 → 1/53 | 1/2 → 1/2 |
|
||||
| deplacement_thermique | 0/91 → 0/91 | — |
|
||||
| trou | 2/2 → 2/2 | 2/2 → 2/2 |
|
||||
| visibilite | 1/10 → 1/10 | 1/1 → 1/1 |
|
||||
|
||||
## Non-régression (autres stations), Total avant → modification 1
|
||||
|
||||
- cible_a_probleme : trouvées 571/704 → 703/704, justes 571/2433 → 703/2565 ;
|
||||
- obstruction : trouvées 119/371 → 148/371, justes 119/479 → 148/508 ;
|
||||
- les autres familles inchangées ; aucun recul station par station (contrôle 1).
|
||||
|
||||
## Benchmark (toutes les étiquettes auto), Total avant → modification 1
|
||||
|
||||
`detector-learner/historique.csv`, étapes « avant » (version `2a8d3da`) et « modification 1 ».
|
||||
|
||||
- cible_a_probleme : trouvées 571/837 → 835/837, justes 571/2433 → 835/2697 ;
|
||||
- obstruction : trouvées 119/371 → 148/371, justes 119/479 → 148/508 ;
|
||||
- deplacement 12/233, deplacement_thermique 517/1062, trou 6/8, visibilite 145/458 : inchangés.
|
||||
|
||||
## Suggestions non traitées
|
||||
|
||||
De `modification-1.md`, « Pas corrigé » ; l'alignement demandé par l'utilisateur (S2) n'est fait que pour `cible_a_probleme` / `cible_masquee` :
|
||||
|
||||
- dérives longues (L1, L3 `deplacement`, L5 `deplacement_thermique`) : les séparer demande la température de la station, qu'aucun détecteur ne lit ;
|
||||
- aucune catégorie pour une montée de plusieurs jours qui suit la température (`thermique` ne voit qu'une vague quotidienne) ;
|
||||
- `sauts` : `BASE` à la cadence sans gain, le 28.10 reste `a_verifier` ;
|
||||
- saut commun à la perte de REFCOLH22 (09.10 12:00) laissé en `a_verifier` (risque de cacher un vrai mouvement, E-004) ;
|
||||
- référence gênée sans rejet (L7, L8) : sous `FACTEUR = 2` de `visibilite` ;
|
||||
- `trou` d'une ou deux mesures : les étiquettes ne sont pas cohérentes entre stations (NORDEND l'étiquette, JUNGFRAU et WILDSTRUBEL non) ;
|
||||
- pour l'utilisateur : `familles.md` dit de ne pas étiqueter la pose qui suit la chaleur, l'étiqueteur l'étiquette en `deplacement_thermique` (« Camera thermal », 316 des 332 instants à NORDEND) ;
|
||||
- `events/carte-des-evenements.md`, section 4 : décrit encore `degradee` sur « 2 jours de suite ».
|
||||
|
||||
## Erreurs
|
||||
|
||||
- Aucun argument douteux ; aucun fichier déjà modifié sous `detectors/`, `seuils-du-journal.md` ni `labeling/auto/` au début.
|
||||
- `labeling/familles.md` est modifié et non commité (nouvelle famille `trou`) : `score.py` et `regression.py` le lisent tel quel.
|
||||
- Le skill a changé pendant la séance, sur consigne de l'utilisateur : le benchmark global s'ajoute au garde-fou `--sauf`. Son « avant » a été calculé après coup, sur la base de la séance dans un worktree (avec le `familles.md` courant).
|
||||
@@ -0,0 +1,7 @@
|
||||
NEBRASKA : 2026-10-07T00:00Z → 2026-11-01T00:00Z, 8 étiquettes de labeling/auto/NEBRASKA.jsonl, par famille et par instant
|
||||
trouvées justes
|
||||
cible_a_probleme 132/133 (99 %) 132/132 (100 %)
|
||||
deplacement 1/53 (2 %) 1/2 (50 %)
|
||||
deplacement_thermique 0/91 (0 %) —
|
||||
trou 2/2 (100 %) 2/2 (100 %)
|
||||
visibilite 1/10 (10 %) 1/1 (100 %)
|
||||
Reference in new issue
Block a user