diff --git a/detector-learner/2026-11-03T1317Z_BREITHORN/modification-2.md b/detector-learner/2026-11-03T1317Z_BREITHORN/modification-2.md new file mode 100644 index 0000000..4e86f5e --- /dev/null +++ b/detector-learner/2026-11-03T1317Z_BREITHORN/modification-2.md @@ -0,0 +1,119 @@ +# Lot 01 : modification 2 + +## Ce qui a changé +Ce passage suit la consigne de l'utilisateur : aligner `detectors/` sur les étiquettes et leurs familles (`labeling/familles.md`), à la place des repères obsolètes (base d'events, carte des événements, points du plan). Il suit aussi les remarques 1 et 2 du contrôle 1. Aucune catégorie n'est ajoutée ni renommée ; le contrat `detect(mesures)` et les clés des épisodes ne changent pas. + +- `detectors/categories.py` + - **Docstring** : réécrite. Elle renvoie à `labeling/familles.md` comme référence : sa section « Correspondance » fait foi, et `score.py` la lit. Elle ne renvoie plus à `events/carte-des-evenements.md` ni aux points du plan. Ses règles (absorption, saut qui dure, turbulence, `MERGE`) sont listées une par une. + - **`CATEGORIES`** : chaque catégorie reçoit un champ `famille`, la famille de la correspondance de `familles.md`. `saut_bref` a `None` : il prend la famille de sa cause. J'ai vérifié que le champ est identique à `score.familles()` pour les douze catégories. + - **`saut_bref` sans hôte** : il n'est plus grisé (`ignore` passe de `True` à `False`). Sa phrase change : + - avant : « … jumped and came back. This is not a movement: ignore it. » + - après : « … jumped and came back. The cause is not established: look at the images. » + - **Saut absorbé par un hôte** : la phrase ajoutée change. + - avant : « The jump(s) … is (are) not a movement(s). » + - après : « … has (have) the same cause. » + - **Commentaires** : ceux de `HOSTS` et de `MERGE` ne citent plus de points du plan ; « l'analyste » devient « la critique ». +- `detectors/sauts.py` + - le texte de l'épisode « Sudden jump, back to normal » change : + - avant : « most likely a measurement artefact, not a movement » + - après : « the cause is not established, look at the images » + - le point 2 de la docstring dit que la cause d'un saut revenu vient de la catégorie qui le chevauche, à défaut des images. Aucune constante ne change. +- `detectors/visibilite.py` : une règle nouvelle et une constante, `QUELQUES = 3`. + - La règle : une Poor visibility qui ne touche qu'au plus `QUELQUES` cibles, et aucune référence (`global_ref`), devient un épisode « Target obscured » sur toute sa durée, sans niveau. `categories.py` la range en `cible_masquee`, famille obstruction. + - Le point 7 de la docstring décrit la règle. +- `vues-deplacements/contexte/seuils-du-journal.md` : la ligne `QUELQUES` est ajoutée. + +## Pourquoi +- `familles.md` dit qu'un saut puis le retour prend la famille de sa cause, et qu'il relève de Displacement, à vérifier, quand sa cause n'est pas établie. Le journal affirmait au contraire « not a movement: ignore it » pour tout saut revenu, même sans cause (remarque 2 du contrôle). +- `familles.md` sépare Visibility, une gêne diffuse qui touche la scène, d'Obstruction, un objet qui cache une ou quelques cibles. Or une perte de visibilité qui ne touche que deux ou trois cibles, et pas les références, était dite « Reduced visibility ». Elle est désormais dite cible cachée. +- `categories.py` renvoyait à la carte des événements et aux points du plan, sources que les agents suivaient encore. Elle renvoie maintenant aux familles (remarque 1). + +## Avant / après sur le lot +Avant (identique à la sortie du passage 1) : +``` +2026-10-03T04:00Z → 2026-10-04T16:00Z cible_masquee grisé | degradee | 3 capteurs | absorbés : degradee 10-03T04:00, degradee 10-03T04:00 +2026-10-03T04:00Z → 2026-10-04T16:00Z visibilite_reduite gardé | visibilite | 14 capteurs | absorbés : sauts 10-04T16:00 +2026-10-06T20:00Z → 2026-10-07T04:00Z visibilite_reduite gardé | visibilite | 3 capteurs | absorbés : — +2026-10-07T20:00Z → 2026-10-07T20:00Z saut_bref grisé | sauts | 1 capteurs | absorbés : — +2026-10-08T00:00Z → 2026-10-08T00:00Z saut_bref grisé | sauts | 1 capteurs | absorbés : — +2026-10-09T00:00Z → 2026-10-09T04:00Z saut_bref grisé | sauts | 1 capteurs | absorbés : — +2026-10-09T20:00Z → 2026-10-09T20:00Z passage grisé | visibilite | 3 capteurs | absorbés : — +2026-10-10T04:00Z → 2026-10-10T04:00Z saut_bref grisé | sauts | 8 capteurs | absorbés : — +2026-10-13T04:00Z → 2026-10-13T04:00Z passage grisé | visibilite | 5 capteurs | absorbés : sauts 10-13T04:00 +2026-10-15T20:00Z → 2026-10-16T12:00Z trou gardé | trous | tous les capteurs | absorbés : — +2026-10-21T20:00Z → 2026-10-21T20:00Z a_verifier gardé | sauts | 1 capteurs | absorbés : — +2026-10-21T20:00Z → 2026-10-22T04:00Z visibilite_reduite gardé | visibilite | 2 capteurs | absorbés : — +2026-10-22T00:00Z → 2026-10-22T04:00Z cible_masquee grisé | degradee | 1 capteurs | absorbés : — +2026-10-22T08:00Z → 2026-10-22T08:00Z a_verifier gardé | sauts | 1 capteurs | absorbés : — +2026-10-22T20:00Z → 2026-10-23T04:00Z cible_masquee grisé | degradee | 1 capteurs | absorbés : — +2026-10-22T20:00Z → 2026-10-23T04:00Z visibilite_reduite gardé | visibilite | 2 capteurs | absorbés : — +2026-10-23T20:00Z → 2026-10-25T20:00Z cible_masquee grisé | degradee | 2 capteurs | absorbés : degradee 10-24T04:00 +2026-10-23T20:00Z → 2026-10-23T20:00Z a_verifier gardé | sauts | 2 capteurs | absorbés : — +2026-10-23T20:00Z → 2026-10-26T04:00Z visibilite_reduite gardé | visibilite | 7 capteurs | absorbés : sauts 10-26T00:00 +2026-10-26T16:00Z → 2026-10-27T04:00Z cible_masquee grisé | degradee | 2 capteurs | absorbés : visibilite 10-26T20:00 +2026-10-26T20:00Z → 2026-10-26T20:00Z saut_bref grisé | sauts | 1 capteurs | absorbés : — +2026-10-29T20:00Z → 2026-10-30T00:00Z saut_bref grisé | sauts | 2 capteurs | absorbés : — +``` + +Après (aucune ligne `sauté`) : +``` +2026-10-03T04:00Z → 2026-10-04T16:00Z cible_masquee grisé | degradee | 3 capteurs | absorbés : degradee 10-03T04:00, degradee 10-03T04:00 +2026-10-03T04:00Z → 2026-10-04T16:00Z visibilite_reduite gardé | visibilite | 14 capteurs | absorbés : sauts 10-04T16:00 +2026-10-06T20:00Z → 2026-10-07T04:00Z cible_masquee grisé | visibilite | 3 capteurs | absorbés : — +2026-10-07T20:00Z → 2026-10-07T20:00Z saut_bref gardé | sauts | 1 capteurs | absorbés : — +2026-10-08T00:00Z → 2026-10-08T00:00Z saut_bref gardé | sauts | 1 capteurs | absorbés : — +2026-10-09T00:00Z → 2026-10-09T04:00Z saut_bref gardé | sauts | 1 capteurs | absorbés : — +2026-10-09T20:00Z → 2026-10-09T20:00Z passage grisé | visibilite | 3 capteurs | absorbés : — +2026-10-10T04:00Z → 2026-10-10T04:00Z saut_bref gardé | sauts | 8 capteurs | absorbés : — +2026-10-13T04:00Z → 2026-10-13T04:00Z passage grisé | visibilite | 5 capteurs | absorbés : sauts 10-13T04:00 +2026-10-15T20:00Z → 2026-10-16T12:00Z trou gardé | trous | tous les capteurs | absorbés : — +2026-10-21T20:00Z → 2026-10-21T20:00Z a_verifier gardé | sauts | 1 capteurs | absorbés : — +2026-10-21T20:00Z → 2026-10-22T04:00Z cible_masquee grisé | visibilite | 2 capteurs | absorbés : degradee 10-22T00:00 +2026-10-22T08:00Z → 2026-10-22T08:00Z a_verifier gardé | sauts | 1 capteurs | absorbés : — +2026-10-22T20:00Z → 2026-10-23T04:00Z cible_masquee grisé | degradee | 2 capteurs | absorbés : visibilite 10-22T20:00 +2026-10-23T20:00Z → 2026-10-25T20:00Z cible_masquee grisé | degradee | 2 capteurs | absorbés : degradee 10-24T04:00 +2026-10-23T20:00Z → 2026-10-23T20:00Z a_verifier gardé | sauts | 2 capteurs | absorbés : — +2026-10-23T20:00Z → 2026-10-26T04:00Z visibilite_reduite gardé | visibilite | 7 capteurs | absorbés : sauts 10-26T00:00 +2026-10-26T16:00Z → 2026-10-27T04:00Z cible_masquee grisé | degradee | 2 capteurs | absorbés : visibilite 10-26T20:00 +2026-10-26T20:00Z → 2026-10-26T20:00Z saut_bref gardé | sauts | 1 capteurs | absorbés : — +2026-10-29T20:00Z → 2026-10-30T00:00Z saut_bref gardé | sauts | 2 capteurs | absorbés : — +``` + +Changements : +- 06.10 20:00 → 07.10 04:00 : `visibilite_reduite` devient `cible_masquee`, mêmes 3 cibles, mêmes bornes. +- 21.10 20:00 → 22.10 04:00 : `visibilite_reduite` devient `cible_masquee` et se fond avec le `cible_masquee` de `degradee`, 2 cibles. +- 22.10 20:00 → 23.10 04:00 : les deux événements de la nuit ne font plus qu'un `cible_masquee`, 2 cibles. +- Les `saut_bref` sans hôte passent de « grisé » à « gardé ». + +## Score +BREITHORN, lot 01 (avant → après) : +``` + obstruction 41/71 (58 %) → 45/71 (63 %) 41/41 (100 %) → 45/45 (100 %) + visibilite — 0/34 (0 %) → 0/25 (0 %) +``` +Les familles deplacement et trou ne changent pas. + +## Non-régression +`python3 .claude/skills/detector-learner/regression.py` : aucune ligne `sauté`. Les blocs de JUNGFRAU, MICHIGAN, NEBRASKA, NORDEND et WILDSTRUBEL ne changent pas, ligne pour ligne. BREITHORN change comme le score ci-dessus. + +Les lignes changées du bloc `Total`, avant → après : +``` + obstruction 148/371 (40 %) → 152/371 (41 %) 148/508 (29 %) → 152/512 (30 %) + visibilite 145/458 (32 %) (inchangé) 145/448 (32 %) → 145/439 (33 %) +``` +Pour information, `benchmark.py` sur la base d'events est inchangé, sauf la ligne de version. + +## Pas corrigé +- **S1, la dérive lente à une mesure toutes les 4 h, et S2, les écarts de la caméra sur quelques mesures** : toujours la contradiction entre stations, décrite dans la modification 1. Sur MICHIGAN et NEBRASKA, l'étiqueteur range les mêmes formes en `deplacement_thermique`, parce qu'il voit la température. `detect(mesures)` ne la reçoit pas. C'est à trancher par l'utilisateur ; le correctif de S1 est dans `modification-1.md`. +- **Remarque 2, « vers la famille deplacement »** : seule la phrase et le grisé suivent `familles.md`, la catégorie `saut_bref` reste. Classer un saut revenu sans hôte en `a_verifier` ferait reculer l'obstruction sur BREITHORN : les sauts des cibles en partie cachées (L5, L6, L17, L21) y sont des sauts sans hôte, sous des étiquettes obstruction. Le `0/14` de `saut_bref` sur JUNGFRAU vient de `score.py`, hors de `detectors/` : un saut bref qu'aucune étiquette ne couvre reste dans la famille « saut_bref », au lieu d'aller en deplacement. +- **Remarque 3, la dérive de JUNGFRAU sur toute la fenêtre** : `derive` est le seul détecteur de `derive_lente`, il ne peut donc pas être retiré (D-074). Je n'ai pas trouvé de critère général pour la resserrer qui ne demande pas la température, la même difficulté que pour S1. +- **Ce qui reste en `visibilite_reduite` sur le lot** : + - le 03-04.10 : 14 capteurs, dont 2 références ; + - le 23-26.10 : 5 cibles et 2 références cachées. + Ces deux événements touchent des références, et la règle `QUELQUES` les laisse en visibilité pour ne pas prendre une buée sur les références pour un objet. Le 03-04.10 a déjà son `cible_masquee` juste. +- **Les sauts des cibles en partie cachées sortent en `a_verifier`** (21.10, 22.10, 23.10) : hors des suggestions, non traité. +- **`visibilite_reduite` reste « gardé, use with care »**, alors que `familles.md` dit pour Visibility « ne pas croire les courbes ». C'est le niveau réduit du point 38, validé par l'utilisateur : je ne l'ai pas touché. + +## Difficultés +- La consigne de l'utilisateur, « adapter `detectors/`, aligné sur les étiquettes et les familles », est large. Je l'ai lue à travers les trois remarques du contrôle et la frontière « Visibility ou Obstruction » de `familles.md`, sans réécrire les docstrings historiques des autres détecteurs (`Résultats … vérité : events/INDEX.md` dans `visibilite.py`, `sauts.py`, `turbulence.py`). +- Le gabarit du rendu demande la ligne `total toutes` du benchmark des events. Elle n'existe pas dans `regression.py` ; j'ai donné les lignes changées du bloc `Total`. diff --git a/detector-learner/2026-11-03T1317Z_BREITHORN/regression-2-global.txt b/detector-learner/2026-11-03T1317Z_BREITHORN/regression-2-global.txt new file mode 100644 index 0000000..c8b27b9 --- /dev/null +++ b/detector-learner/2026-11-03T1317Z_BREITHORN/regression-2-global.txt @@ -0,0 +1,58 @@ +BREITHORN : 2026-10-03T00:00Z → 2026-11-01T00:00Z, 26 étiquettes + trouvées justes + deplacement 11/171 (6 %) 11/11 (100 %) + obstruction 45/71 (63 %) 45/45 (100 %) + trou 2/2 (100 %) 2/2 (100 %) + visibilite — 0/25 (0 %) + +JUNGFRAU : 2026-09-30T00:00Z → 2026-10-26T00:00Z, 22 étiquettes + trouvées justes + cible_a_probleme 571/571 (100 %) 571/2433 (23 %) + deplacement — 0/2433 (0 %) + deplacement_thermique 201/504 (40 %) 201/889 (23 %) + obstruction — 0/191 (0 %) + sans famille 0/576 (0 %) — + saut_bref — 0/14 (0 %) + trou — 0/4 (0 %) + visibilite 25/47 (53 %) 25/287 (9 %) + +MICHIGAN : 2026-10-05T00:00Z → 2026-11-01T00:00Z, 13 étiquettes + trouvées justes + cible_a_probleme 132/133 (99 %) 132/132 (100 %) + deplacement 0/9 (0 %) 0/1 (0 %) + deplacement_thermique 0/135 (0 %) — + trou 2/2 (100 %) 2/2 (100 %) + +NEBRASKA : 2026-10-07T00:00Z → 2026-11-01T00:00Z, 8 étiquettes + trouvées justes + cible_a_probleme 132/133 (99 %) 132/132 (100 %) + deplacement 1/53 (2 %) 1/2 (50 %) + deplacement_thermique 0/91 (0 %) — + trou 2/2 (100 %) 2/2 (100 %) + visibilite 1/10 (10 %) 1/1 (100 %) + +NORDEND : 2026-08-10T00:00Z → 2026-08-16T00:00Z, 19 étiquettes + trouvées justes + deplacement_thermique 316/332 (95 %) 316/318 (99 %) + obstruction 0/6 (0 %) 0/83 (0 %) + trou 0/2 (0 %) — + visibilite 11/111 (10 %) 11/13 (85 %) + +WILDSTRUBEL : 2026-09-01T00:00Z → 2026-09-07T00:00Z, 30 étiquettes + trouvées justes + deplacement_thermique — 0/126 (0 %) + obstruction 107/294 (36 %) 107/193 (55 %) + visibilite 108/290 (37 %) 108/113 (96 %) + +Total + trouvées justes + cible_a_probleme 835/837 (100 %) 835/2697 (31 %) + deplacement 12/233 (5 %) 12/2447 (0 %) + deplacement_thermique 517/1062 (49 %) 517/1333 (39 %) + obstruction 152/371 (41 %) 152/512 (30 %) + sans famille 0/576 (0 %) — + saut_bref — 0/14 (0 %) + trou 6/8 (75 %) 6/10 (60 %) + visibilite 145/458 (32 %) 145/439 (33 %) + +historique : detector-learner/historique.csv (version 8e94f02+) diff --git a/detector-learner/2026-11-03T1317Z_BREITHORN/regression-2.txt b/detector-learner/2026-11-03T1317Z_BREITHORN/regression-2.txt new file mode 100644 index 0000000..fa69df5 --- /dev/null +++ b/detector-learner/2026-11-03T1317Z_BREITHORN/regression-2.txt @@ -0,0 +1,49 @@ +JUNGFRAU : 2026-09-30T00:00Z → 2026-10-26T00:00Z, 22 étiquettes + trouvées justes + cible_a_probleme 571/571 (100 %) 571/2433 (23 %) + deplacement — 0/2433 (0 %) + deplacement_thermique 201/504 (40 %) 201/889 (23 %) + obstruction — 0/191 (0 %) + sans famille 0/576 (0 %) — + saut_bref — 0/14 (0 %) + trou — 0/4 (0 %) + visibilite 25/47 (53 %) 25/287 (9 %) + +MICHIGAN : 2026-10-05T00:00Z → 2026-11-01T00:00Z, 13 étiquettes + trouvées justes + cible_a_probleme 132/133 (99 %) 132/132 (100 %) + deplacement 0/9 (0 %) 0/1 (0 %) + deplacement_thermique 0/135 (0 %) — + trou 2/2 (100 %) 2/2 (100 %) + +NEBRASKA : 2026-10-07T00:00Z → 2026-11-01T00:00Z, 8 étiquettes + trouvées justes + cible_a_probleme 132/133 (99 %) 132/132 (100 %) + deplacement 1/53 (2 %) 1/2 (50 %) + deplacement_thermique 0/91 (0 %) — + trou 2/2 (100 %) 2/2 (100 %) + visibilite 1/10 (10 %) 1/1 (100 %) + +NORDEND : 2026-08-10T00:00Z → 2026-08-16T00:00Z, 19 étiquettes + trouvées justes + deplacement_thermique 316/332 (95 %) 316/318 (99 %) + obstruction 0/6 (0 %) 0/83 (0 %) + trou 0/2 (0 %) — + visibilite 11/111 (10 %) 11/13 (85 %) + +WILDSTRUBEL : 2026-09-01T00:00Z → 2026-09-07T00:00Z, 30 étiquettes + trouvées justes + deplacement_thermique — 0/126 (0 %) + obstruction 107/294 (36 %) 107/193 (55 %) + visibilite 108/290 (37 %) 108/113 (96 %) + +Total + trouvées justes + cible_a_probleme 835/837 (100 %) 835/2697 (31 %) + deplacement 1/62 (2 %) 1/2436 (0 %) + deplacement_thermique 517/1062 (49 %) 517/1333 (39 %) + obstruction 107/300 (36 %) 107/467 (23 %) + sans famille 0/576 (0 %) — + saut_bref — 0/14 (0 %) + trou 4/6 (67 %) 4/8 (50 %) + visibilite 145/458 (32 %) 145/414 (35 %) diff --git a/detector-learner/historique.csv b/detector-learner/historique.csv index 6a4f959..eb64b9f 100644 --- a/detector-learner/historique.csv +++ b/detector-learner/historique.csv @@ -143,3 +143,39 @@ date,seance,etape,version,station,famille,etiquetees,signalees,les_deux 2026-11-03T13:27Z,2026-11-03T1317Z_BREITHORN,modification 1,70cbae9,Total,saut_bref,0,14,0 2026-11-03T13:27Z,2026-11-03T1317Z_BREITHORN,modification 1,70cbae9,Total,trou,8,10,6 2026-11-03T13:27Z,2026-11-03T1317Z_BREITHORN,modification 1,70cbae9,Total,visibilite,458,448,145 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,BREITHORN,deplacement,171,11,11 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,BREITHORN,obstruction,71,45,45 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,BREITHORN,trou,2,2,2 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,BREITHORN,visibilite,0,25,0 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,JUNGFRAU,cible_a_probleme,571,2433,571 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,JUNGFRAU,deplacement,0,2433,0 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,JUNGFRAU,deplacement_thermique,504,889,201 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,JUNGFRAU,obstruction,0,191,0 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,JUNGFRAU,sans famille,576,0,0 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,JUNGFRAU,saut_bref,0,14,0 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,JUNGFRAU,trou,0,4,0 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,JUNGFRAU,visibilite,47,287,25 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,MICHIGAN,cible_a_probleme,133,132,132 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,MICHIGAN,deplacement,9,1,0 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,MICHIGAN,deplacement_thermique,135,0,0 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,MICHIGAN,trou,2,2,2 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,NEBRASKA,cible_a_probleme,133,132,132 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,NEBRASKA,deplacement,53,2,1 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,NEBRASKA,deplacement_thermique,91,0,0 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,NEBRASKA,trou,2,2,2 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,NEBRASKA,visibilite,10,1,1 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,NORDEND,deplacement_thermique,332,318,316 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,NORDEND,obstruction,6,83,0 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,NORDEND,trou,2,0,0 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,NORDEND,visibilite,111,13,11 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,WILDSTRUBEL,deplacement_thermique,0,126,0 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,WILDSTRUBEL,obstruction,294,193,107 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,WILDSTRUBEL,visibilite,290,113,108 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,Total,cible_a_probleme,837,2697,835 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,Total,deplacement,233,2447,12 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,Total,deplacement_thermique,1062,1333,517 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,Total,obstruction,371,512,152 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,Total,sans famille,576,0,0 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,Total,saut_bref,0,14,0 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,Total,trou,8,10,6 +2026-11-03T13:34Z,2026-11-03T1317Z_BREITHORN,modification 2,8e94f02+,Total,visibilite,458,439,145 diff --git a/detectors/categories.py b/detectors/categories.py index 30dee1d..63b5e51 100644 --- a/detectors/categories.py +++ b/detectors/categories.py @@ -1,22 +1,23 @@ -"""Journal du matin : des épisodes des détecteurs aux événements catégorisés (point 6 du plan ; catégories validées le -2026-10-24 : events/carte-des-evenements.md, section 4). +"""Journal du matin : des épisodes des détecteurs aux événements catégorisés. -Chaque épisode reçoit sa catégorie d'après son détecteur et son label ; catégories du terrain (D-074, 2026-10-27) : -Target issue (`cible_a_probleme` : degradee, sauf ses « Target obscured », cible cachée par moments, et sauts « Target -flipping »), la dérive lente (derive) et le gros saut -(sauts « Large shift ») sous « À vérifier », l'effet thermique de la caméra (thermique « Camera thermal … »). Un saut revenu à la normale qui chevauche une -perte de visibilité, un passage, une turbulence ou, à défaut et s'il touche plusieurs cibles, un effet thermique y est -absorbé ; un saut qui dure ou trop récent pour savoir ne l'est -jamais ; une turbulence qui chevauche un saut à vérifier n'est pas gardée (un vrai mouvement agite aussi les courbes : -le matin du mouvement de CLARIDEN, point 14 du plan). Deux événements de même catégorie à moins d'une heure n'en font -qu'un. Chaque événement reçoit sa phrase -(point 9, validées le 2026-10-24) : ce qui s'est passé et quoi en faire, sans conditionnel ; la cause n'est dite que si la -catégorie l'établit, sinon les images la montrent. Pas de fonction detect : le chargeur ne prend pas ce fichier pour un -détecteur. +Les catégories du journal (CATEGORIES, validées, D-074) se rangent dans les familles des étiquettes, labeling/familles.md : +sa section « Correspondance » fait foi (score.py la lit) ; le champ famille de CATEGORIES la recopie, pour lire ce fichier +seul. Un saut bref n'a pas de famille fixe : il a celle de sa cause (familles.md, « Un saut puis le retour »). + +Chaque épisode reçoit sa catégorie d'après son détecteur et son label (LABELS, puis KINDS). Règles : +- un saut revenu à la normale qui chevauche une catégorie de HOSTS (visibilité, passage, turbulence, et en dernier + l'effet thermique, s'il touche plusieurs cibles) y est absorbé : il en prend la cause et la famille ; sinon il reste + un saut bref sans cause établie, à vérifier sur les images, pas grisé (familles.md : sans cause établie, Displacement) ; +- un saut qui dure, ou trop récent pour savoir, n'est jamais absorbé ; +- une turbulence qui chevauche un saut à vérifier n'est pas gardée : un vrai mouvement agite aussi les courbes ; +- deux événements de même catégorie à moins de MERGE n'en font qu'un. +Chaque événement reçoit sa phrase, en anglais (le site) : ce qui s'est passé et quoi en faire, comme le dit la colonne +« Pour le client » de familles.md ; la cause n'est dite que si la catégorie l'établit, sinon les images la montrent. +Pas de fonction detect : le chargeur ne prend pas ce fichier pour un détecteur. Usage : python3 detectors/categories.py (une ligne par événement) - ... [--du AAAA-MM-JJ] [--au AAAA-MM-JJ] [--tranche 3] [--historique N] (tri en lot, point 30 : - chaque tranche de 3 jours classée seule, avec les jours d'historique d'avant s'ils existent ; seuls les événements - qui touchent la tranche sont montrés ; « rien » pour une tranche calme) + ... [--du AAAA-MM-JJ] [--au AAAA-MM-JJ] [--tranche 3] [--historique N] (tri en lot : chaque tranche + de N jours classée seule, avec les jours d'historique d'avant s'ils existent ; seuls les événements qui touchent + la tranche sont montrés ; « rien » pour une tranche calme) """ import importlib.util import os @@ -27,21 +28,24 @@ from pathlib import Path sys.path.insert(0, os.path.join(os.path.dirname(os.path.abspath(__file__)), "..", "agent-tools")) from donnees import charger, iso # noqa: E402 -# ignore : zone grisée (None : comme le dit le détecteur, la turbulence n'est grisée que forte) ; process : bouton -# Images, rien, ou Images et lien vers Diagnosis. L'ordre est celui des lignes de la frise. +# famille : celle de labeling/familles.md (None : la famille de sa cause) ; ignore : zone grisée (None : comme le dit le +# détecteur, la turbulence n'est grisée que forte) ; process : bouton Images, rien, ou Images et lien vers Diagnosis. +# L'ordre est celui des lignes de la frise. CATEGORIES = { - "visibilite_reduite": {"label": "Reduced visibility", "ignore": False, "process": "images"}, # en retrait (point 38) - "visibilite_nulle": {"label": "No visibility", "ignore": True, "process": "images"}, - "passage": {"label": "Passing obstacle", "ignore": True, "process": "images"}, - "cible_masquee": {"label": "Target hidden", "ignore": True, "process": "images"}, - "cible_a_probleme": {"label": "Target issue", "ignore": True, "process": "images"}, # Target issue (D-074) - "turbulence": {"label": "Heat haze", "ignore": None, "process": "aucun"}, - "dilatation_thermique": {"label": "Thermal expansion", "ignore": False, "process": "aucun"}, # effet périodique - "contraction_thermique": {"label": "Thermal contraction", "ignore": False, "process": "aucun"}, # (point 41) - "trou": {"label": "No data", "ignore": False, "process": "aucun"}, - "saut_bref": {"label": "Brief jump", "ignore": True, "process": "images"}, - "a_verifier": {"label": "Shift to check", "ignore": False, "process": "verifier"}, - "derive_lente": {"label": "Slow drift", "ignore": False, "process": "verifier"}, # sous-groupe d'À vérifier (D-074) + "visibilite_reduite": {"label": "Reduced visibility", "famille": "visibilite", "ignore": False, "process": "images"}, + "visibilite_nulle": {"label": "No visibility", "famille": "visibilite", "ignore": True, "process": "images"}, + "passage": {"label": "Passing obstacle", "famille": "obstruction", "ignore": True, "process": "images"}, + "cible_masquee": {"label": "Target hidden", "famille": "obstruction", "ignore": True, "process": "images"}, + "cible_a_probleme": {"label": "Target issue", "famille": "cible_a_probleme", "ignore": True, "process": "images"}, + "turbulence": {"label": "Heat haze", "famille": "visibilite", "ignore": None, "process": "aucun"}, + "dilatation_thermique": {"label": "Thermal expansion", "famille": "deplacement_thermique", "ignore": False, + "process": "aucun"}, + "contraction_thermique": {"label": "Thermal contraction", "famille": "deplacement_thermique", "ignore": False, + "process": "aucun"}, + "trou": {"label": "No data", "famille": "trou", "ignore": False, "process": "aucun"}, + "saut_bref": {"label": "Brief jump", "famille": None, "ignore": False, "process": "images"}, + "a_verifier": {"label": "Shift to check", "famille": "deplacement", "ignore": False, "process": "verifier"}, + "derive_lente": {"label": "Slow drift", "famille": "deplacement", "ignore": False, "process": "verifier"}, } # (détecteur, label, niveau de l'épisode) -> catégorie ; puis détecteur seul ; un détecteur inconnu garde son nom LABELS = {("visibilite", "Poor visibility", "reduced"): "visibilite_reduite", @@ -56,8 +60,8 @@ LABELS = {("visibilite", "Poor visibility", "reduced"): "visibilite_reduite", ("thermique", "Camera thermal contraction", None): "contraction_thermique"} KINDS = {"turbulence": "turbulence", "trous": "trou", "degradee": "cible_a_probleme", "derive": "derive_lente"} HOSTS = {"visibilite_reduite", "visibilite_nulle", "passage", "turbulence", "dilatation_thermique", - "contraction_thermique"} # absorbent un saut revenu (point 5 ; la vague thermique : boucle NIEDERHORN, lot 01) -MERGE = timedelta(hours=1) # même catégorie à moins d'une heure : un seul événement (point 5, 2026-10-24) + "contraction_thermique"} # disent la cause d'un saut revenu qui les chevauche, et l'absorbent +MERGE = timedelta(hours=1) # même catégorie à moins d'une heure : un seul événement (règle validée, 2026-10-24) def detecteurs(): @@ -92,8 +96,8 @@ def targets(n): def phrase(cat, groupe, sensors, references): - """Phrase du journal d'un événement (validées par l'utilisateur le 2026-10-24) ; un saut absorbé ajoute qu'il n'est - pas un mouvement.""" + """Phrase du journal d'un événement (validées par l'utilisateur le 2026-10-24) ; un saut absorbé ajoute qu'il a la + même cause.""" n, one = len(sensors), len(sensors) == 1 sauts = [e for e in groupe[1:] if categorie(e) == "saut_bref"] jumped = len({s for e in sauts for s in e["sensors"]}) @@ -114,7 +118,7 @@ def phrase(cat, groupe, sensors, references): if camera else "The structure expands in the day heat.") + " This daily wave is normal: nothing to do.", "contraction_thermique": ("The camera support contracts as it cools down; the curves are corrected for it." if camera else "The structure contracts as it cools down.") + " This daily wave is normal: nothing to do.", - "saut_bref": f"{targets(n).capitalize()} jumped and came back. This is not a movement: ignore it.", + "saut_bref": f"{targets(n).capitalize()} jumped and came back. The cause is not established: look at the images.", "a_verifier": (f"{targets(n).capitalize()}, most of the targets, shifted together: everything moved." if large else f"{targets(n).capitalize()} shifted and {'has' if one else 'have'} not come back yet." if not lasting else f"{targets(n).capitalize()} shifted and stayed shifted." if lasting == n @@ -125,8 +129,8 @@ def phrase(cat, groupe, sensors, references): text += f" Ignore {'its curve' if one else 'their curves'} in this period and look at the images of the target." if not jumped: return text - return text + (f" The jump of {targets(jumped)} in this period is not a movement." if len(sauts) == 1 - else f" The jumps of {targets(jumped)} in this period are not movements.") + return text + (f" The jump of {targets(jumped)} in this period has the same cause." if len(sauts) == 1 + else f" The jumps of {targets(jumped)} in this period have the same cause.") def evenement(groupe, references): @@ -207,7 +211,7 @@ if __name__ == "__main__": print(f"== {iso(t)} → {iso(b)} : {len(evs) or 'rien'}") for v in evs: print(v["start"], "→", v["end"], f"{v['category']:<17}", "grisé" if v["ignore"] else "gardé", - f"| {v['episodes'][0]['kind']}", # le détecteur, pour que l'analyste le nomme (boucle, 2026-10-26) + f"| {v['episodes'][0]['kind']}", # le détecteur, pour que la critique le nomme f"| {len(v['sensors']) or 'tous les'} capteurs", "| absorbés :", ", ".join( f"{e['kind']} {e['start'][5:16]}" for e in v["episodes"][1:]) or "—") t = b diff --git a/detectors/sauts.py b/detectors/sauts.py index 0b13bf5..f574cad 100644 --- a/detectors/sauts.py +++ b/detectors/sauts.py @@ -4,7 +4,8 @@ d'avant (médiane des BASE mesures précédentes) ; les BASE premières mesures, faute de niveau d'avant, face au niveau d'après (médiane des BASE suivantes), un écart y est un saut revenu aussitôt (point 12 du plan, 2026-10-24). 2. Revenu (BASE mesures de suite à moins de la moitié du saut) en moins d'un jour, ou un jour après de retour à sa place - habituelle (premier jour de l'export) ou du jour d'avant : « Sudden jump, back to normal », grisé (artefact). + habituelle (premier jour de l'export) ou du jour d'avant : « Sudden jump, back to normal », grisé ; sa cause n'est pas + établie ici (categories.py lui donne celle de la catégorie qui le chevauche, sinon : à vérifier sur les images). 3. Sinon « Lasting shift », jamais grisé (peut-être un vrai mouvement) ; moins d'un jour de recul : « Jump, not back yet », pas grisé non plus. 4. Les sauts qui se suivent à moins d'une heure, toutes cibles confondues, font un seul épisode (mode commun) ; @@ -207,7 +208,7 @@ def _episode(g, total): text = f"{who} jumped less than a day before the last measurement and has not come back yet: check again later." else: label = "Sudden jump, back to normal" - text = f"{who} jumped and came back within a day: most likely a measurement artefact, not a movement." + text = f"{who} jumped and came back within a day: the cause is not established, look at the images." end = g["last"] if lasting or recent else g["end"] # pas grisé : le dernier saut, pas les retours return {"start": donnees.iso(g["start"]), "end": donnees.iso(end), "kind": "sauts", "label": label, "text": text, "ignore": not lasting and not recent, "sensors": sorted(g["sensors"]), diff --git a/detectors/visibilite.py b/detectors/visibilite.py index 68b9048..61c513f 100644 --- a/detectors/visibilite.py +++ b/detectors/visibilite.py @@ -21,6 +21,9 @@ Méthode (seuils provisoires ci-dessous) : jour (×1,5 à ×3, la turbulence) faisait durer la visibilité réduite des heures sans aucun rejet (28.09 10:00 → 12:15, 29.09 jusqu'à 14:15) ; les références ne comptent pas : R3 y passe son seuil presque toute la journée. Benchmark : le seul épisode perdu est celui, faux, de E-010. +7. Poor visibility ou objet (frontière « Visibility ou Obstruction » de labeling/familles.md ; boucle /detector-learner + BREITHORN, lot 01) : une gêne qui ne touche qu'au plus QUELQUES cibles, et aucune référence, n'est pas diffuse : c'est + un objet devant elles (un véhicule stationné), un épisode « Target obscured » de toute sa durée, sans niveau. Résultats (2026-10-23 ; vérité : events/INDEX.md) : - PS_DES_COUDRES (E-001, buée 13.10 23:45 → 14.10 05:15, 2 références sur 3) : Poor visibility 13.10 23:45 → 14.10 04:45, REF_G et @@ -72,6 +75,8 @@ CIBLE_ECART = timedelta(hours=6) # provisoire, réglé sur E-005 (feuilles : 7 FACTEUR_REJET = 1.2 # provisoire : un rejet à 10 MAD compte aussi (boucle FLORIDA, lot 01 : niveaux de 0,6, ×2 hors d'atteinte) ; # écarte C24 de E-009 (niveau 0,68 au ras du seuil 0,7, rejeté à ×1,04) MOITIE = 0.5 # provisoire : « on ne voit rien » ; réglé sur NORDEND (09.10 23:00 : 68 % rejetées) et E-005 (pluie : 24 à 33 %) +QUELQUES = 3 # provisoire : Poor visibility sur au plus 3 cibles, sans référence : un objet, Target obscured (7) ; + # boucle /detector-learner BREITHORN, lot 01 (véhicules stationnés devant 2 ou 3 cibles sur 12) def _pas(mesures): @@ -167,6 +172,9 @@ def detect(mesures): gardees = [(r[0], r[-1], cs) for a, b, cs in gardees if (r := [t for t in instants if a <= t <= b and t in refuses])] niveau = _niveaux(mesures, instants) for a, b, cs in gardees: # un épisode par période de même niveau (5) ; le texte vient de categories.py + if len(cs) <= QUELQUES and not cs & refs: # un objet devant quelques cibles, pas une gêne diffuse (7) + out.append(_episode(a, b, "Target obscured", "", cs)) + continue seg = [] for t in [t for t in instants if a <= t <= b] + [None]: if seg and (t is None or niveau[t] != niveau[seg[0]]): diff --git a/vues-deplacements/contexte/seuils-du-journal.md b/vues-deplacements/contexte/seuils-du-journal.md index 48f91ef..836397d 100644 --- a/vues-deplacements/contexte/seuils-du-journal.md +++ b/vues-deplacements/contexte/seuils-du-journal.md @@ -21,6 +21,7 @@ Les détecteurs doivent tout détecter (l'utilisateur, 2026-10-26, D-068) : un r | | `ECART` | 2,5 pas | gigue des horodatages | | | `FACTEUR_REJET` | 1,2 | boucle FLORIDA, lot 01 : un rejet à 10 MAD est haut sans doubler (cibles au niveau 0,6) ; écarte C24 de E-009 (0,68, rejetée à ×1,04) | | | `MOITIE` | 0,5 | niveau « none » (point 38) : NORDEND 09/10 23:00 (68 % rejetées) contre pluie de E-005 (24 à 33 %) | +| | `QUELQUES` | 3 cibles | Poor visibility sur au plus 3 cibles, sans référence : un objet devant elles, Target obscured (frontière « Visibility ou Obstruction » de `labeling/familles.md`) ; boucle /detector-learner BREITHORN, lot 01 (véhicules stationnés devant 2 ou 3 cibles sur 12) | | `sauts` | `K` | 20 bruits | E-001 (à 15, deux cibles saines grisées) ; ne pas baisser pour les trains, vus par `visibilite` (point 12) | | | `K_DURABLE` | 7 bruits | saut sous K qui reste (point 8 de `sauts.py`) : boucle NIEDERHORN, lot 01 (e09, corr_y −0,19 px d'un coup, 8 bruits, resté 5 jours) | | | `PALIER` | 8 variations ordinaires | même point : écart des médianes du jour d'après et du jour d'avant, en variations ordinaires du niveau d'un jour au suivant ; boucle NIEDERHORN, lot 01 (e09 : 13 ; E-001, cibles saines : 6 au plus) |