Files
Support-Agent/detector-learner/2026-11-03T1249Z_NEBRASKA/critique.md
T
2026-11-03 13:52:59 +01:00

15 KiB

Lot 01 : critique des détecteurs, NEBRASKA, 2026-10-07 → 2026-11-01 (UTC)

Verdict : suggestions

1. Les étiquettes

8 étiquettes : 2 deplacement, 2 deplacement_thermique, 2 visibilite, 1 cible_a_probleme, 1 trou.

# Bornes (UTC) Famille Capteurs nommés Ce qu'elle y voit
L1 10-07 08:00 → 10-12 12:00 deplacement corr_x de COLJ20, POUJ20, POUJ19, COLJ19, puis COLH19, POUH19 la caméra pique du nez, les cibles du haut et de la droite dérivent lentement avec elle, sans retour ; pas thermique, cause mécanique non établie
L2 10-09 08:00 → 11-01 00:00 cible_a_probleme REFCOLH22 (perdue, rejetée sans cesse) ; au saut du 09.10 12:00, toutes les cibles : corr_x surtout COLJ20, POUJ19, POUJ20, POUH19, corr_y COLH19, COLH20, COLJ23, COLJ24 référence perdue à 12:00 le 09.10 et jamais revenue ; toutes les cibles sautent ensemble en un pas qui reste ; compensation sur deux références ensuite
L3 10-13 08:00 → 10-17 04:00 deplacement corr_y de COLJ20, POUJ20, POUJ19, COLJ19 (un peu COLH19, POUH19) ; corr_x de COLJ20, POUJ20 bosse lente de 4 jours : monte le 13.10 vers midi, redescend le 17.10 au matin ; la caméra revient en arrière, part thermique non établie
L4 10-15 20:00 → 10-16 12:00 trou tous aucune mesure pendant trois mesures
L5 10-16 20:00 → 11-01 00:00 deplacement_thermique corr_x de toutes les cibles (fort sur COLJ20, POUJ20, POUJ19, COLJ19, COLH19, POUH19, COLH20 ; faible sur COLH21, COLJ23, COLJ24), corr_y de COLH19, POUH19, POUJ20, COLJ19, COLH20 longue dérive qui suit la baisse de la température de la station, recule quand elle remonte
L6 10-28 04:00 → 10-28 12:00 deplacement_thermique corr_x de presque toutes les cibles, surtout COLJ19, COLJ20, POUJ19, POUJ20, POUH19 pic d'une mesure (08:00) au plus froid, revenu à la suivante
L7 10-28 20:00 → 10-29 12:00 visibilite error_value de REFH22, COLH19, COLH20 (sans rejet) ; corr_y de presque toutes les cibles (COLJ19, POUJ19, COLH21, COLJ24, POUH19), corr_x en pic à 04:00, la référence REFH22 mal vue fait sauter toutes les cibles ; retour à midi
L8 10-29 20:00 → 10-30 12:00 visibilite error_value de REFH22, COLH20, COLH19 (sans rejet) ; corr_y de COLJ19, POUJ19, POUH19, POUH20 ; corr_x même chose le 30.10 à 04:00, puis vers le bas à 08:00 ; retour à midi

Leurs bornes et leurs mentions (« à 04:00 », « mesures de 00:00 et 08:00 », « trois mesures » de 20:00 à 12:00) disent une cadence de 4 h.

2. Ce qu'ont trouvé les détecteurs

python3 detectors/categories.py data/NEBRASKA --du 2026-10-07 --au 2026-11-01 2>&1

2026-10-09T12:00Z → 2026-10-09T12:00Z a_verifier        gardé | sauts | 2 capteurs | absorbés : —
2026-10-15T20:00Z → 2026-10-16T12:00Z trou              gardé | trous | tous les capteurs | absorbés : —
2026-10-28T08:00Z → 2026-10-28T08:00Z a_verifier        gardé | sauts | 2 capteurs | absorbés : —
2026-10-29T04:00Z → 2026-10-29T04:00Z saut_bref         grisé | sauts | 6 capteurs | absorbés : —

3. Comparaison

Événement ou étiquette Jugement Pourquoi
a_verifier 10-09 12:00 (sauts, 2 capteurs) famille fausse ; capteurs faux c'est le saut de la perte de REFCOLH22 (L2, cible_a_probleme) ; L1 dit en toutes lettres que « le saut de ce jour-là est une autre étiquette ». Le score le compte juste parce que l'instant tombe aussi dans L1 (deplacement), mais sa cause est la référence perdue. Et L2 dit que toutes les cibles sautent (au moins 8 nommées), pas 2
trou 10-15 20:00 → 10-16 12:00 (trous) juste mêmes bornes que L4, tous les capteurs
a_verifier 10-28 08:00 (sauts, 2 capteurs) famille fausse ; capteurs faux c'est le pic d'une mesure de L6 (deplacement_thermique), revenu à la mesure suivante : il ne devrait pas être un saut qui reste (a_verifier = deplacement) mais un saut bref de la famille de sa cause. L6 nomme presque toutes les cibles (au moins 5), pas 2
saut_bref 10-29 04:00 (sauts, 6 capteurs, grisé) juste L7 : saut de 04:00, revenu ; sa cause est la référence REFH22 mal vue (visibilite), et le score le compte juste. Bornes : la mesure de 04:00 seule, dans L7 (00:00 → 08:00 de mesures touchées) : écart d'une mesure, pas un défaut. 6 capteurs face à 5 cibles nommées et « presque toutes » : acceptable
L1 deplacement 10-07 08:00 → 10-12 12:00 manquant dérive lente de 5 jours de six cibles, rien sauf le saut du 09.10 (1/53 instants), qui n'est pas elle
L2 cible_a_probleme 10-09 08:00 → 11-01 00:00 manquant REFCOLH22 rejetée de 09.10 12:00 à la fin du lot : aucun épisode degradee ; 0/133 instants. L'étiquette la plus longue et la plus grave du lot (« très mauvais signe pour la mesure »)
L3 deplacement 10-13 08:00 → 10-17 04:00 manquant bosse de 4 jours sur le corr_y de quatre à six cibles : ni saut qui reste au 13.10 ni retour au 17.10
L5 deplacement_thermique 10-16 20:00 → 11-01 00:00 manquant longue dérive de toutes les cibles avec la température : 0/91 instants, ni thermique ni derive
L6 deplacement_thermique 10-28 04:00 → 12:00 famille fausse trouvée, mais en a_verifier (voir plus haut)
L7 visibilite 10-28 20:00 → 10-29 12:00 juste le saut_bref de 04:00
L8 visibilite 10-29 20:00 → 10-30 12:00 manquant même phénomène que L7, le 30.10 à 04:00 (et 08:00) : aucun événement ; ni saut bref ni perte de visibilité (REFH22 sans rejet)

4. Score

NEBRASKA : 2026-10-07T00:00Z → 2026-11-01T00:00Z, 8 étiquettes de labeling/auto/NEBRASKA.jsonl, par famille et par instant
                                    trouvées              justes
  cible_a_probleme               0/133 (0 %)                   —
  deplacement                     1/53 (2 %)          1/2 (50 %)
  deplacement_thermique           0/91 (0 %)                   —
  trou                           2/2 (100 %)         2/2 (100 %)
  visibilite                     1/10 (10 %)         1/1 (100 %)

Il appuie la comparaison : seuls le trou et le saut du 29.10 sont vus. Les trois familles longues (cible_a_probleme, deplacement, deplacement_thermique) sont presque entièrement manquées ; le « 1/53 » de deplacement est le saut de la perte de référence, compté dans L1 par son instant ; le « 1/2 juste » manquant est le pic du 28.10 classé a_verifier.

5. Suggestions

S1 : des seuils pensés pour 15 min rendent aveugles degradee, derive et thermique à une mesure toutes les 4 h

  • Défaut : les trois familles longues du lot sont presque entièrement manquées : la référence perdue (cible_a_probleme, 0/133 instants), les dérives mécaniques (deplacement, 1/53, et ce 1 est le saut de la perte) et la dérive thermique (deplacement_thermique, 0/91). Un même biais : ces détecteurs ne retiennent un jour, ou un niveau, que sur un nombre de mesures ou d'heures fixé pour une cadence de 15 min ; à 6 mesures par jour (00, 04, 08, 12, 16, 20 h), aucun jour ne compte et aucun épisode ne peut naître, sur aucune cible.
  • Exemple : REFCOLH22, perdue le 2026-10-09 à 12:00 et rejetée jusqu'au 2026-11-01 00:00 (L2), sans aucun événement ; 2026-10-16 20:00 → 2026-11-01 00:00, corr_x de toutes les cibles qui monte avec la baisse de la température de la station (COLJ20, POUJ20, POUJ19, COLJ19 surtout), corr_y de COLH19, POUH19, POUJ20, COLJ19, COLH20 qui descend (L5) ; 2026-10-07 08:00 → 2026-10-12 12:00, corr_x de COLJ20, POUJ20, POUJ19, COLJ19, COLH19, POUH19 qui monte lentement (L1).
  • Détecteur : degradee (MIN_INSTANTS = 12, « 3 h à 15 min » : un jour sans 12 instants calmes ne compte pas) ; derive (HEURES = 20 heures distinctes par jour) ; thermique (HEURES_MIN = 20, et un profil qui exige les 24 heures) ; sauts a le même biais (BASE = 4 mesures, « 1 h à 15 min », soit 16 h ici) : c'est sans doute pourquoi le pic d'une mesure du 28.10 08:00 (L6) n'est pas lu « revenu » (quatre mesures de suite près de l'ancien niveau, pendant 16 h de dérive) et sort en a_verifier.
  • Ce qu'il faudrait : exprimer « un jour assez mesuré » et les fenêtres de niveau en part des mesures attendues à la cadence propre de la station (celle que trous calcule déjà), pas en heures ni en nombre de mesures fixés pour 15 min. Pour degradee, aussi : qu'une référence rejetée sans cesse, à partir d'un instant et sans revenir, soit une cible à problème même si son seuil de rejet manque (rejete exige error_threshold) ; et que le saut commun de toutes les cibles à l'instant même de sa perte lui soit rattaché (la conséquence de la perte, pas un mouvement à vérifier) plutôt que gardé seul en a_verifier, sur 2 capteurs, le 09.10 à 12:00.

S2 : aligner les catégories du journal sur les familles des étiquettes

  • Défaut : detectors/categories.py classe en douze catégories que la correspondance de labeling/familles.md ramène aux six familles, mais plusieurs écarts restent, si bien que le journal signale ce qu'aucune étiquette ne porte, ou manque ce qu'une famille porte :
    1. saut_bref sans famille fixe : la correspondance dit « la famille de sa cause », mais le classement ne lui en donne une que s'il est absorbé par un hôte (HOSTS : visibilité, passage, turbulence, vague thermique) ; seul, il sort en saut_bref, que la frontière « Un saut puis le retour » range en deplacement faute de cause établie. Le 29.10 04:00 (L7), sa cause est une référence mal vue (visibilite) ; le 28.10 08:00 (L6), le froid (deplacement_thermique), et il sort même en a_verifier.
    2. Une référence gênée sans rejet n'a pas de catégorie : familles.md la range dans la famille de sa cause (Visibility), « les cibles en bougent ensemble » ; visibilite l'écarte deux fois : la Poor visibility exige une cible rejetée qui ne soit pas une référence (règle 6, refuses), et la Brief obstruction n'est pas montrée dès qu'une référence est haute. L7 et L8 (REFH22, error_value en hausse sans rejet, toutes les cibles qui sautent) n'ont donc pas de catégorie visibilite ; L8 est manquée.
    3. La perte d'une référence, qui fait sauter toutes les cibles d'un pas qui reste, est cible_a_probleme pour l'étiquette (L2) et a_verifier (deplacement) pour le journal : aucune règle de classement ne rattache le saut commun à la référence perdue au même instant (S1).
    4. La dérive de plusieurs jours qui suit la température (phénomène de deplacement_thermique : « Une montée de plusieurs jours avec la baisse de la température ») n'a aucune catégorie : thermique ne cherche que la vague quotidienne (dilatation_thermique, contraction_thermique), et derive_lente va à deplacement. La frontière « Thermal displacement ou Displacement » demande de trancher par la température.
    5. Ce que les détecteurs signalent et qu'aucune famille n'étiquette (familles.md, « Ce qui ne s'étiquette pas ») : « Camera thermal expansion / contraction » de thermique (positions brutes, mouvement que la caméra compense) est classé dilatation_thermique / contraction_thermique, donc deplacement_thermique, alors que « la pose qui suit la chaleur » compensée ne s'étiquette pas ; « Target stuck » de degradee (cible jumelle d'une référence, configuration voulue) est classé cible_a_probleme ; et toute catégorie fondée sur la seule error_value, sans effet sur corr_x ni corr_y, n'a pas d'étiquette en face.
    6. trou : la famille « No data » est « aucune mesure pour aucun capteur », sans durée minimale ; trous ne signale qu'au-delà de 2 pas manquants (MISSING = 2), une ou deux mesures absentes partout n'ont pas d'événement. Sur ce lot, le trou de L4 (trois mesures) est bien trouvé.
  • Exemple : 2026-10-29 04:00 et 2026-10-30 04:00 (REFH22 sans rejet, corr_y de COLJ19, POUJ19, POUH19 et des autres cibles) : le premier en saut_bref seul, le second sans événement, tous deux visibilite pour l'étiquette ; 2026-10-09 12:00 (perte de REFCOLH22) en a_verifier.
  • Détecteur : sauts et visibilite pour les sauts et les références gênées ; le classement de categories.py (HOSTS, LABELS, KINDS, la règle d'absorption) pour l'attribution des familles ; thermique et degradee pour ce qui ne s'étiquette pas.
  • Ce qu'il faudrait : que chaque événement du journal tombe dans une seule famille d'étiquette, sa cause comprise : un saut revenu prend la famille de ce qui le cause au même instant (une référence haute ou perdue, un passage, le froid), et deplacement seulement à défaut ; une référence dont l'error_value monte et fait bouger toutes les cibles compte comme une perte de visibilité même sans rejet ; une dérive de plusieurs jours qui suit la température de la station va à l'effet thermique ; ce que familles.md dit de ne pas étiqueter (mouvement de la caméra compensé, configuration voulue, error_value sans effet sur les courbes) n'est plus un événement du journal, ou n'y est qu'en information sans famille ; une absence de mesure de tous les capteurs, même d'une ou deux mesures, est un trou.

Difficultés

  • La sortie de la commande du lot dit le nombre de capteurs d'un événement, pas leurs noms : les capteurs des deux a_verifier et du saut_bref n'ont pu être comparés qu'en nombre à ceux des descriptions.
  • La partie 1 du plan demande « leur nombre, par famille, en une ligne » alors que le déroulé (point 1) demande bornes, famille et capteurs de chaque étiquette : j'ai mis la ligne, puis un tableau par étiquette.
  • La consigne de l'utilisateur relayée en cours de travail (aligner les catégories du journal sur les familles, en faire une suggestion) s'ajoute à la limite de deux suggestions : j'ai fondu en S1 les deux défauts de cadence (cible à problème manquée, dérives manquées), qui ont la même cause, et fait de l'alignement S2.
  • La cadence de la station (4 h), qui fonde les deux suggestions, n'est pas donnée : je l'ai déduite des bornes et des descriptions des étiquettes, sans regarder les données.

Sources lues

  • labeling/auto/NEBRASKA.jsonl (les 8 étiquettes, toutes dans le lot)
  • labeling/familles.md (en entier)
  • sortie de python3 detectors/categories.py data/NEBRASKA --du 2026-10-07 --au 2026-11-01 2>&1
  • detector-learner/2026-11-03T1249Z_NEBRASKA/score-avant.txt
  • detectors/categories.py, detectors/degradee.py, detectors/derive.py, detectors/sauts.py, detectors/thermique.py, detectors/visibilite.py
  • events/carte-des-evenements.md, section 4
  • detectors/trous.py, detectors/turbulence.py (en-tête), pour l'alignement des catégories