Detector-learner NEBRASKA: critique (suggestions)

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
maximeandClaude Opus 5.5 committed 2026-11-03 13:52:59 +01:00
1 parent 609ef346ac
commit f790519cd1
1 file changed
+91
@@ -0,0 +1,91 @@
# Lot 01 : critique des détecteurs, NEBRASKA, 2026-10-07 → 2026-11-01 (UTC)
**Verdict** : suggestions
## 1. Les étiquettes
8 étiquettes : 2 `deplacement`, 2 `deplacement_thermique`, 2 `visibilite`, 1 `cible_a_probleme`, 1 `trou`.
| # | Bornes (UTC) | Famille | Capteurs nommés | Ce qu'elle y voit |
|---|---|---|---|---|
| L1 | 10-07 08:00 → 10-12 12:00 | `deplacement` | corr_x de COLJ20, POUJ20, POUJ19, COLJ19, puis COLH19, POUH19 | la caméra pique du nez, les cibles du haut et de la droite dérivent lentement avec elle, sans retour ; pas thermique, cause mécanique non établie |
| L2 | 10-09 08:00 → 11-01 00:00 | `cible_a_probleme` | REFCOLH22 (perdue, rejetée sans cesse) ; au saut du 09.10 12:00, toutes les cibles : corr_x surtout COLJ20, POUJ19, POUJ20, POUH19, corr_y COLH19, COLH20, COLJ23, COLJ24 | référence perdue à 12:00 le 09.10 et jamais revenue ; toutes les cibles sautent ensemble en un pas qui reste ; compensation sur deux références ensuite |
| L3 | 10-13 08:00 → 10-17 04:00 | `deplacement` | corr_y de COLJ20, POUJ20, POUJ19, COLJ19 (un peu COLH19, POUH19) ; corr_x de COLJ20, POUJ20 | bosse lente de 4 jours : monte le 13.10 vers midi, redescend le 17.10 au matin ; la caméra revient en arrière, part thermique non établie |
| L4 | 10-15 20:00 → 10-16 12:00 | `trou` | tous | aucune mesure pendant trois mesures |
| L5 | 10-16 20:00 → 11-01 00:00 | `deplacement_thermique` | corr_x de toutes les cibles (fort sur COLJ20, POUJ20, POUJ19, COLJ19, COLH19, POUH19, COLH20 ; faible sur COLH21, COLJ23, COLJ24), corr_y de COLH19, POUH19, POUJ20, COLJ19, COLH20 | longue dérive qui suit la baisse de la température de la station, recule quand elle remonte |
| L6 | 10-28 04:00 → 10-28 12:00 | `deplacement_thermique` | corr_x de presque toutes les cibles, surtout COLJ19, COLJ20, POUJ19, POUJ20, POUH19 | pic d'une mesure (08:00) au plus froid, revenu à la suivante |
| L7 | 10-28 20:00 → 10-29 12:00 | `visibilite` | error_value de REFH22, COLH19, COLH20 (sans rejet) ; corr_y de presque toutes les cibles (COLJ19, POUJ19, COLH21, COLJ24, POUH19), corr_x en pic | à 04:00, la référence REFH22 mal vue fait sauter toutes les cibles ; retour à midi |
| L8 | 10-29 20:00 → 10-30 12:00 | `visibilite` | error_value de REFH22, COLH20, COLH19 (sans rejet) ; corr_y de COLJ19, POUJ19, POUH19, POUH20 ; corr_x | même chose le 30.10 à 04:00, puis vers le bas à 08:00 ; retour à midi |
Leurs bornes et leurs mentions (« à 04:00 », « mesures de 00:00 et 08:00 », « trois mesures » de 20:00 à 12:00) disent une cadence de 4 h.
## 2. Ce qu'ont trouvé les détecteurs
`python3 detectors/categories.py data/NEBRASKA --du 2026-10-07 --au 2026-11-01 2>&1`
```
2026-10-09T12:00Z → 2026-10-09T12:00Z a_verifier gardé | sauts | 2 capteurs | absorbés : —
2026-10-15T20:00Z → 2026-10-16T12:00Z trou gardé | trous | tous les capteurs | absorbés : —
2026-10-28T08:00Z → 2026-10-28T08:00Z a_verifier gardé | sauts | 2 capteurs | absorbés : —
2026-10-29T04:00Z → 2026-10-29T04:00Z saut_bref grisé | sauts | 6 capteurs | absorbés : —
```
## 3. Comparaison
| Événement ou étiquette | Jugement | Pourquoi |
|---|---|---|
| `a_verifier` 10-09 12:00 (sauts, 2 capteurs) | famille fausse ; capteurs faux | c'est le saut de la perte de REFCOLH22 (L2, `cible_a_probleme`) ; L1 dit en toutes lettres que « le saut de ce jour-là est une autre étiquette ». Le score le compte juste parce que l'instant tombe aussi dans L1 (`deplacement`), mais sa cause est la référence perdue. Et L2 dit que toutes les cibles sautent (au moins 8 nommées), pas 2 |
| `trou` 10-15 20:00 → 10-16 12:00 (trous) | juste | mêmes bornes que L4, tous les capteurs |
| `a_verifier` 10-28 08:00 (sauts, 2 capteurs) | famille fausse ; capteurs faux | c'est le pic d'une mesure de L6 (`deplacement_thermique`), revenu à la mesure suivante : il ne devrait pas être un saut qui reste (`a_verifier` = `deplacement`) mais un saut bref de la famille de sa cause. L6 nomme presque toutes les cibles (au moins 5), pas 2 |
| `saut_bref` 10-29 04:00 (sauts, 6 capteurs, grisé) | juste | L7 : saut de 04:00, revenu ; sa cause est la référence REFH22 mal vue (`visibilite`), et le score le compte juste. Bornes : la mesure de 04:00 seule, dans L7 (00:00 → 08:00 de mesures touchées) : écart d'une mesure, pas un défaut. 6 capteurs face à 5 cibles nommées et « presque toutes » : acceptable |
| L1 `deplacement` 10-07 08:00 → 10-12 12:00 | manquant | dérive lente de 5 jours de six cibles, rien sauf le saut du 09.10 (1/53 instants), qui n'est pas elle |
| L2 `cible_a_probleme` 10-09 08:00 → 11-01 00:00 | manquant | REFCOLH22 rejetée de 09.10 12:00 à la fin du lot : aucun épisode `degradee` ; 0/133 instants. L'étiquette la plus longue et la plus grave du lot (« très mauvais signe pour la mesure ») |
| L3 `deplacement` 10-13 08:00 → 10-17 04:00 | manquant | bosse de 4 jours sur le corr_y de quatre à six cibles : ni saut qui reste au 13.10 ni retour au 17.10 |
| L5 `deplacement_thermique` 10-16 20:00 → 11-01 00:00 | manquant | longue dérive de toutes les cibles avec la température : 0/91 instants, ni `thermique` ni `derive` |
| L6 `deplacement_thermique` 10-28 04:00 → 12:00 | famille fausse | trouvée, mais en `a_verifier` (voir plus haut) |
| L7 `visibilite` 10-28 20:00 → 10-29 12:00 | juste | le `saut_bref` de 04:00 |
| L8 `visibilite` 10-29 20:00 → 10-30 12:00 | manquant | même phénomène que L7, le 30.10 à 04:00 (et 08:00) : aucun événement ; ni saut bref ni perte de visibilité (REFH22 sans rejet) |
## 4. Score
```
NEBRASKA : 2026-10-07T00:00Z → 2026-11-01T00:00Z, 8 étiquettes de labeling/auto/NEBRASKA.jsonl, par famille et par instant
trouvées justes
cible_a_probleme 0/133 (0 %) —
deplacement 1/53 (2 %) 1/2 (50 %)
deplacement_thermique 0/91 (0 %) —
trou 2/2 (100 %) 2/2 (100 %)
visibilite 1/10 (10 %) 1/1 (100 %)
```
Il appuie la comparaison : seuls le trou et le saut du 29.10 sont vus. Les trois familles longues (`cible_a_probleme`, `deplacement`, `deplacement_thermique`) sont presque entièrement manquées ; le « 1/53 » de `deplacement` est le saut de la perte de référence, compté dans L1 par son instant ; le « 1/2 juste » manquant est le pic du 28.10 classé `a_verifier`.
## 5. Suggestions
### S1 : des seuils pensés pour 15 min rendent aveugles `degradee`, `derive` et `thermique` à une mesure toutes les 4 h
- **Défaut** : les trois familles longues du lot sont presque entièrement manquées : la référence perdue (`cible_a_probleme`, 0/133 instants), les dérives mécaniques (`deplacement`, 1/53, et ce 1 est le saut de la perte) et la dérive thermique (`deplacement_thermique`, 0/91). Un même biais : ces détecteurs ne retiennent un jour, ou un niveau, que sur un nombre de mesures ou d'heures fixé pour une cadence de 15 min ; à 6 mesures par jour (00, 04, 08, 12, 16, 20 h), aucun jour ne compte et aucun épisode ne peut naître, sur aucune cible.
- **Exemple** : REFCOLH22, perdue le 2026-10-09 à 12:00 et rejetée jusqu'au 2026-11-01 00:00 (L2), sans aucun événement ; 2026-10-16 20:00 → 2026-11-01 00:00, corr_x de toutes les cibles qui monte avec la baisse de la température de la station (COLJ20, POUJ20, POUJ19, COLJ19 surtout), corr_y de COLH19, POUH19, POUJ20, COLJ19, COLH20 qui descend (L5) ; 2026-10-07 08:00 → 2026-10-12 12:00, corr_x de COLJ20, POUJ20, POUJ19, COLJ19, COLH19, POUH19 qui monte lentement (L1).
- **Détecteur** : `degradee` (`MIN_INSTANTS = 12`, « 3 h à 15 min » : un jour sans 12 instants calmes ne compte pas) ; `derive` (`HEURES = 20` heures distinctes par jour) ; `thermique` (`HEURES_MIN = 20`, et un profil qui exige les 24 heures) ; `sauts` a le même biais (`BASE = 4` mesures, « 1 h à 15 min », soit 16 h ici) : c'est sans doute pourquoi le pic d'une mesure du 28.10 08:00 (L6) n'est pas lu « revenu » (quatre mesures de suite près de l'ancien niveau, pendant 16 h de dérive) et sort en `a_verifier`.
- **Ce qu'il faudrait** : exprimer « un jour assez mesuré » et les fenêtres de niveau en part des mesures attendues à la cadence propre de la station (celle que `trous` calcule déjà), pas en heures ni en nombre de mesures fixés pour 15 min. Pour `degradee`, aussi : qu'une référence rejetée sans cesse, à partir d'un instant et sans revenir, soit une cible à problème même si son seuil de rejet manque (`rejete` exige `error_threshold`) ; et que le saut commun de toutes les cibles à l'instant même de sa perte lui soit rattaché (la conséquence de la perte, pas un mouvement à vérifier) plutôt que gardé seul en `a_verifier`, sur 2 capteurs, le 09.10 à 12:00.
### S2 : aligner les catégories du journal sur les familles des étiquettes
- **Défaut** : `detectors/categories.py` classe en douze catégories que la correspondance de `labeling/familles.md` ramène aux six familles, mais plusieurs écarts restent, si bien que le journal signale ce qu'aucune étiquette ne porte, ou manque ce qu'une famille porte :
1. **`saut_bref` sans famille fixe** : la correspondance dit « la famille de sa cause », mais le classement ne lui en donne une que s'il est absorbé par un hôte (`HOSTS` : visibilité, passage, turbulence, vague thermique) ; seul, il sort en `saut_bref`, que la frontière « Un saut puis le retour » range en `deplacement` faute de cause établie. Le 29.10 04:00 (L7), sa cause est une référence mal vue (`visibilite`) ; le 28.10 08:00 (L6), le froid (`deplacement_thermique`), et il sort même en `a_verifier`.
2. **Une référence gênée sans rejet n'a pas de catégorie** : `familles.md` la range dans la famille de sa cause (Visibility), « les cibles en bougent ensemble » ; `visibilite` l'écarte deux fois : la Poor visibility exige une cible rejetée qui ne soit pas une référence (règle 6, `refuses`), et la Brief obstruction n'est pas montrée dès qu'une référence est haute. L7 et L8 (REFH22, error_value en hausse sans rejet, toutes les cibles qui sautent) n'ont donc pas de catégorie `visibilite` ; L8 est manquée.
3. **La perte d'une référence**, qui fait sauter toutes les cibles d'un pas qui reste, est `cible_a_probleme` pour l'étiquette (L2) et `a_verifier` (`deplacement`) pour le journal : aucune règle de classement ne rattache le saut commun à la référence perdue au même instant (S1).
4. **La dérive de plusieurs jours qui suit la température** (phénomène de `deplacement_thermique` : « Une montée de plusieurs jours avec la baisse de la température ») n'a aucune catégorie : `thermique` ne cherche que la vague quotidienne (`dilatation_thermique`, `contraction_thermique`), et `derive_lente` va à `deplacement`. La frontière « Thermal displacement ou Displacement » demande de trancher par la température.
5. **Ce que les détecteurs signalent et qu'aucune famille n'étiquette** (`familles.md`, « Ce qui ne s'étiquette pas ») : « Camera thermal expansion / contraction » de `thermique` (positions brutes, mouvement que la caméra compense) est classé `dilatation_thermique` / `contraction_thermique`, donc `deplacement_thermique`, alors que « la pose qui suit la chaleur » compensée ne s'étiquette pas ; « Target stuck » de `degradee` (cible jumelle d'une référence, configuration voulue) est classé `cible_a_probleme` ; et toute catégorie fondée sur la seule `error_value`, sans effet sur `corr_x` ni `corr_y`, n'a pas d'étiquette en face.
6. **`trou`** : la famille « No data » est « aucune mesure pour aucun capteur », sans durée minimale ; `trous` ne signale qu'au-delà de 2 pas manquants (`MISSING = 2`), une ou deux mesures absentes partout n'ont pas d'événement. Sur ce lot, le trou de L4 (trois mesures) est bien trouvé.
- **Exemple** : 2026-10-29 04:00 et 2026-10-30 04:00 (REFH22 sans rejet, corr_y de COLJ19, POUJ19, POUH19 et des autres cibles) : le premier en `saut_bref` seul, le second sans événement, tous deux `visibilite` pour l'étiquette ; 2026-10-09 12:00 (perte de REFCOLH22) en `a_verifier`.
- **Détecteur** : `sauts` et `visibilite` pour les sauts et les références gênées ; le classement de `categories.py` (`HOSTS`, `LABELS`, `KINDS`, la règle d'absorption) pour l'attribution des familles ; `thermique` et `degradee` pour ce qui ne s'étiquette pas.
- **Ce qu'il faudrait** : que chaque événement du journal tombe dans une seule famille d'étiquette, sa cause comprise : un saut revenu prend la famille de ce qui le cause au même instant (une référence haute ou perdue, un passage, le froid), et `deplacement` seulement à défaut ; une référence dont l'`error_value` monte et fait bouger toutes les cibles compte comme une perte de visibilité même sans rejet ; une dérive de plusieurs jours qui suit la température de la station va à l'effet thermique ; ce que `familles.md` dit de ne pas étiqueter (mouvement de la caméra compensé, configuration voulue, `error_value` sans effet sur les courbes) n'est plus un événement du journal, ou n'y est qu'en information sans famille ; une absence de mesure de tous les capteurs, même d'une ou deux mesures, est un `trou`.
## Difficultés
- La sortie de la commande du lot dit le nombre de capteurs d'un événement, pas leurs noms : les capteurs des deux `a_verifier` et du `saut_bref` n'ont pu être comparés qu'en nombre à ceux des descriptions.
- La partie 1 du plan demande « leur nombre, par famille, en une ligne » alors que le déroulé (point 1) demande bornes, famille et capteurs de chaque étiquette : j'ai mis la ligne, puis un tableau par étiquette.
- La consigne de l'utilisateur relayée en cours de travail (aligner les catégories du journal sur les familles, en faire une suggestion) s'ajoute à la limite de deux suggestions : j'ai fondu en S1 les deux défauts de cadence (cible à problème manquée, dérives manquées), qui ont la même cause, et fait de l'alignement S2.
- La cadence de la station (4 h), qui fonde les deux suggestions, n'est pas donnée : je l'ai déduite des bornes et des descriptions des étiquettes, sans regarder les données.
## Sources lues
- `labeling/auto/NEBRASKA.jsonl` (les 8 étiquettes, toutes dans le lot)
- `labeling/familles.md` (en entier)
- sortie de `python3 detectors/categories.py data/NEBRASKA --du 2026-10-07 --au 2026-11-01 2>&1`
- `detector-learner/2026-11-03T1249Z_NEBRASKA/score-avant.txt`
- `detectors/categories.py`, `detectors/degradee.py`, `detectors/derive.py`, `detectors/sauts.py`, `detectors/thermique.py`, `detectors/visibilite.py`
- `events/carte-des-evenements.md`, section 4
- `detectors/trous.py`, `detectors/turbulence.py` (en-tête), pour l'alignement des catégories