Detector-learner MICHIGAN: modification 1
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
1 parent
b54deb35e0
commit
2c6ac208e1
3 files changed
+185
No files matched your search
@@ -0,0 +1,55 @@
|
||||
BREITHORN : 2026-10-03T00:00Z → 2026-11-01T00:00Z, 26 étiquettes
|
||||
trouvées justes
|
||||
Displacement 171/171 (100 %) 171/171 (100 %)
|
||||
No data 2/2 (100 %) 2/2 (100 %)
|
||||
Obstruction 38/71 (54 %) 38/38 (100 %)
|
||||
Visibility — 0/25 (0 %)
|
||||
|
||||
JUNGFRAU : 2026-09-30T00:00Z → 2026-10-26T00:00Z, 22 étiquettes
|
||||
trouvées justes
|
||||
Displacement — 0/2433 (0 %)
|
||||
No data — 0/4 (0 %)
|
||||
Obstruction — 0/191 (0 %)
|
||||
Target issue 1147/1147 (100 %) 1147/2433 (47 %)
|
||||
Thermal displacement 406/1080 (38 %) 406/889 (46 %)
|
||||
Visibility 174/256 (68 %) 174/287 (61 %)
|
||||
|
||||
MICHIGAN : 2026-10-05T00:00Z → 2026-11-01T00:00Z, 13 étiquettes
|
||||
trouvées justes
|
||||
Displacement 9/9 (100 %) 9/159 (6 %)
|
||||
No data 2/2 (100 %) 2/2 (100 %)
|
||||
Target issue 132/133 (99 %) 132/132 (100 %)
|
||||
Thermal displacement 46/135 (34 %) 46/46 (100 %)
|
||||
|
||||
NEBRASKA : 2026-10-07T00:00Z → 2026-11-01T00:00Z, 8 étiquettes
|
||||
trouvées justes
|
||||
Displacement 1/53 (2 %) 1/1 (100 %)
|
||||
No data 2/2 (100 %) 2/2 (100 %)
|
||||
Target issue 132/133 (99 %) 132/132 (100 %)
|
||||
Thermal displacement 13/91 (14 %) 13/13 (100 %)
|
||||
Visibility 0/10 (0 %) —
|
||||
|
||||
NORDEND : 2026-08-10T00:00Z → 2026-08-16T00:00Z, 19 étiquettes
|
||||
trouvées justes
|
||||
No data 0/2 (0 %) —
|
||||
Obstruction 0/6 (0 %) 0/83 (0 %)
|
||||
Thermal displacement 316/332 (95 %) 316/318 (99 %)
|
||||
Visibility 11/111 (10 %) 11/13 (85 %)
|
||||
|
||||
WILDSTRUBEL : 2026-09-01T00:00Z → 2026-09-07T00:00Z, 30 étiquettes
|
||||
trouvées justes
|
||||
Displacement — 0/3 (0 %)
|
||||
Obstruction 105/294 (36 %) 105/191 (55 %)
|
||||
Thermal displacement — 0/126 (0 %)
|
||||
Visibility 106/290 (37 %) 106/111 (95 %)
|
||||
|
||||
Total
|
||||
trouvées justes
|
||||
Displacement 181/233 (78 %) 181/2767 (7 %)
|
||||
No data 6/8 (75 %) 6/10 (60 %)
|
||||
Obstruction 143/371 (39 %) 143/503 (28 %)
|
||||
Target issue 1411/1413 (100 %) 1411/2697 (52 %)
|
||||
Thermal displacement 781/1638 (48 %) 781/1392 (56 %)
|
||||
Visibility 291/667 (44 %) 291/436 (67 %)
|
||||
|
||||
historique : detector-learner/historique.csv (version b54deb3)
|
||||
@@ -0,0 +1,97 @@
|
||||
# MICHIGAN : modification 1
|
||||
|
||||
## Ce qui a changé
|
||||
|
||||
**S1, commit b34d2b7** : `detectors/thermal_displacement.py`, `detectors/categories.py`
|
||||
- Règle ajoutée dans `thermal_displacement.py`, `glissades(mesures)`, une troisième voie de `detect` qui ne tourne que si les deux voies du cycle de 24 h (courbes corrigées, puis positions brutes) ne donnent rien. Un instant est une glissade de la caméra si deux conditions sont réunies : les positions brutes x ou y d'au moins `PART` (0,5) des capteurs, références comprises, s'écartent du même côté d'au moins `ECART` bruits de leur médiane du jour d'avant ; et corr_x ou corr_y d'au moins `PART` des cibles font de même. Le bruit est la médiane des pas de chaque série. Les glissades à moins d'un jour l'une de l'autre font un seul épisode, sur tous les capteurs.
|
||||
- Constante ajoutée : `ECART = 3` (bruits). À 2, la règle prenait aussi des instants Displacement d'une autre station.
|
||||
- Sorte ajoutée : « Camera thermal movement », de la famille Thermal displacement. Elle a sa propre phrase, en anglais. Elle entre dans `HOTES` de `categories.py` : un saut revenu qui la chevauche y est absorbé. Les sortes existantes (« expansion », « contraction ») disent un sens par rapport à la chaleur du jour, que cette voie ne connaît pas.
|
||||
- Registre : ligne `ECART` ajoutée. Docstring : paragraphe « Glissade commune, sans cycle ».
|
||||
|
||||
**S2 (partie dérive lente), commit d231ed0** : `detectors/displacement.py`
|
||||
- Règle modifiée dans `_derive` : un jour compte s'il a au moins `HEURES` heures mesurées sur 24, rapporté aux heures que la station mesure. Avant : au moins 20 heures distinctes. Exemple : 5 heures sur 6 à une mesure toutes les 4 h ; une station à 15 min ou à l'heure garde 20 sur 24. La valeur de `HEURES` (20) ne change pas.
|
||||
- Règle ajoutée dans `derive`, `_commune` : la dérive est celle de la caméra, et le détecteur ne rend aucun « Slow drift », si deux conditions sont réunies : au moins `GROS` (0,5) des cibles dérivent du même côté sur corr_x ou corr_y ; et au moins `GROS` des capteurs, références comprises, dérivent du même côté sur leurs positions brutes x ou y. Pas de constante nouvelle : `GROS` est la part des cibles d'un « Large shift ».
|
||||
- Registre : lignes `HEURES` et `GROS` complétées. Docstring : points 1 et 5 de la dérive lente.
|
||||
|
||||
**S4, commit b54deb3** : `detectors/displacement.py`
|
||||
- Règle modifiée dans `_sauts` : un saut est revenu si une heure de mesures de suite est à moins de la moitié du saut. Avant : `BASE` mesures de suite. Le nombre de mesures vient de la cadence de la série, `round(1 h / pas)`, entre 1 et `BASE`. Il reste 4 à 15 min et vaut 1 à 4 h. `BASE` (4) garde son rôle pour le niveau d'avant.
|
||||
- Registre : ligne `BASE` complétée. Docstring : point 2.
|
||||
|
||||
## Pourquoi
|
||||
|
||||
- **S1** : quand la caméra bouge avec la température sans revenir chaque jour à la même heure, toutes les cibles s'écartent ensemble de leur niveau, et toutes les positions brutes glissent avec elles. Les étiquettes en font un Thermal displacement, mais le détecteur ne connaissait que le cycle de 24 h répété. La condition sur les positions brutes est la frontière : une bascule de la seule pose calculée, positions brutes immobiles, reste aux sauts.
|
||||
- **S2** : à cadence lâche, aucun jour n'atteignait 20 heures distinctes, et la dérive lente ne pouvait rien voir. Rendre le seuil relatif à la cadence la rend visible. Mais une dérive commune à toutes les cibles et à toutes les positions brutes est étiquetée Thermal displacement : la laisser en « Slow drift » faisait reculer une autre station (Displacement justes), d'où la règle `_commune`. La faire passer en Thermal displacement faisait reculer la même station en Thermal justes : voir « Pas corrigé ».
|
||||
- **S4** : le retour d'un saut se jugeait sur 4 mesures, pensées comme une heure à 15 min, soit 16 h à une mesure toutes les 4 h. Un pic commun revenu à la mesure suivante devenait alors « Large shift » quand l'excursion suivante commençait avant. Jugé sur une heure, il redevient un saut revenu, absorbé par son hôte.
|
||||
|
||||
## Avant / après sur la station
|
||||
|
||||
Avant (`python3 detectors/categories.py data/MICHIGAN --du 2026-10-05 --au 2026-11-01 2>&1`) :
|
||||
```
|
||||
2026-10-09T12:00Z → 2026-10-31T20:00Z Target issue grisé | Degraded target | 1 capteurs | absorbés : —
|
||||
2026-10-15T20:00Z → 2026-10-16T12:00Z No data gardé | No data | tous les capteurs | absorbés : —
|
||||
2026-10-28T08:00Z → 2026-10-28T08:00Z Displacement gardé | Large shift | 12 capteurs | absorbés : —
|
||||
```
|
||||
|
||||
Après (même commande, aucune ligne `sauté`) :
|
||||
```
|
||||
2026-10-03T00:00Z → 2026-10-31T20:00Z Displacement gardé | Slow drift | 4 capteurs | absorbés : Slow drift 10-03T00:00, Slow drift 10-03T00:00, Slow drift 10-03T00:00
|
||||
2026-10-09T12:00Z → 2026-10-31T20:00Z Target issue grisé | Degraded target | 1 capteurs | absorbés : —
|
||||
2026-10-09T12:00Z → 2026-10-09T12:00Z Thermal displacement gardé | Camera thermal movement | 17 capteurs | absorbés : —
|
||||
2026-10-11T12:00Z → 2026-10-11T12:00Z Thermal displacement gardé | Camera thermal movement | 17 capteurs | absorbés : —
|
||||
2026-10-15T20:00Z → 2026-10-16T12:00Z No data gardé | No data | tous les capteurs | absorbés : —
|
||||
2026-10-18T04:00Z → 2026-10-18T04:00Z Thermal displacement gardé | Camera thermal movement | 17 capteurs | absorbés : —
|
||||
2026-10-19T08:00Z → 2026-10-20T04:00Z Thermal displacement gardé | Camera thermal movement | 17 capteurs | absorbés : —
|
||||
2026-10-21T08:00Z → 2026-10-22T16:00Z Thermal displacement gardé | Camera thermal movement | 17 capteurs | absorbés : —
|
||||
2026-10-24T00:00Z → 2026-10-25T00:00Z Thermal displacement gardé | Camera thermal movement | 17 capteurs | absorbés : —
|
||||
2026-10-26T08:00Z → 2026-10-27T00:00Z Thermal displacement gardé | Camera thermal movement | 17 capteurs | absorbés : —
|
||||
2026-10-28T08:00Z → 2026-10-30T20:00Z Thermal displacement gardé | Camera thermal movement | 17 capteurs | absorbés : Sudden jump, back to normal 10-28T08:00
|
||||
```
|
||||
|
||||
Lecture :
|
||||
- Les glissades tombent toutes dans la dérive thermique étiquetée (L4, 09.10 12:00 → 01.11). Elles couvrent L7 (19.10 08:00), L8 (24.10 00:00), L9 (26.10 08:00-12:00), L10 (26.10 20:00 → 27.10 00:00), L11 (28.10 08:00), L12 et L13 (28.10 08:00 → 30.10 20:00).
|
||||
- Le « Large shift » du 28.10 08:00 est devenu un saut revenu, absorbé dans le Thermal displacement (S4).
|
||||
- L2 (06.10 04:00) reste manquée : les positions brutes glissent, mais les courbes corrigées des cibles ne s'écartent pas assez.
|
||||
- L'instant 18.10 04:00 de L6 (Displacement) est pris en Thermal : les positions brutes de 10 capteurs sur 17 y glissent du même côté. Il est aussi dans L4, donc juste au score.
|
||||
- Le « Slow drift » sur 4 cibles (COLH18', COLH19N', POUH18', POUH19N') est nouveau : la dérive de L4 vue, mais dans la famille Displacement, comme la critique le prévoyait sans S1 pour la dérive. Seules 3 ou 4 cibles sur 14 passent les critères de la dérive : elle n'est pas « commune » au sens de `_commune`.
|
||||
|
||||
Bloc MICHIGAN, avant → après :
|
||||
```
|
||||
Displacement 0/9 (0 %) 0/1 (0 %) → 9/9 (100 %) 9/159 (6 %)
|
||||
Thermal displacement 0/135 (0 %) — → 46/135 (34 %) 46/46 (100 %)
|
||||
```
|
||||
No data et Target issue sont inchangés. Les 9 instants Displacement trouvés le sont par la dérive lente, qui couvre L1 et L6 sans les voir pour eux-mêmes.
|
||||
|
||||
## Non-régression
|
||||
|
||||
Lignes changées dans les autres blocs (benchmark avant relancé sur l'état de départ, voir « Difficultés ») :
|
||||
```
|
||||
BREITHORN Displacement 11/171 (6 %) 11/11 (100 %) → 171/171 (100 %) 171/171 (100 %) (S2)
|
||||
NEBRASKA Displacement 1/53 (2 %) 1/3 (33 %) → 1/53 (2 %) 1/1 (100 %) (S1 : 1/2, S4 : 1/1)
|
||||
NEBRASKA Thermal displacement 0/91 (0 %) — → 13/91 (14 %) 13/13 (100 %) (S1)
|
||||
```
|
||||
JUNGFRAU, NORDEND et WILDSTRUBEL sont inchangés. Aucun recul.
|
||||
|
||||
Total :
|
||||
```
|
||||
Displacement 12/233 (5 %) 12/2451 (0 %) → 181/233 (78 %) 181/2767 (7 %)
|
||||
Thermal displacement 722/1638 (44 %) 722/1333 (54 %) → 781/1638 (48 %) 781/1392 (56 %)
|
||||
```
|
||||
|
||||
Benchmarks : `benchmark-1-S1.txt`, `benchmark-1-S2.txt`, `benchmark-1-S4.txt`.
|
||||
|
||||
## À trancher par l'utilisateur
|
||||
|
||||
Ces étiquettes n'ont fait reculer aucune station : les règles les séparent par la condition « positions brutes de la plupart des capteurs, du même côté ». Elles bornent les règles.
|
||||
- **Les excursions de la caméra du 28 au 30.10.** BREITHORN étiquette Displacement le 28.10 00:00 → 12:00, le 28.10 16:00 → 29.10 12:00 et le 29.10 20:00 → 30.10 12:00 (rotation et échelle de la caméra, cibles en sens opposés). MICHIGAN étiquette Thermal displacement le 28.10 04:00 → 16:00, le 28.10 16:00 → 29.10 12:00 et le 29.10 20:00 → 30.10 12:00 (glissade commune des positions brutes). Mêmes nuits, retour à midi dans les deux cas. Ce qu'elles empêchent : baisser `ECART` (à 2, des instants Displacement de BREITHORN deviennent Thermal), ou faire de toute excursion commune de la caméra un Thermal displacement.
|
||||
- **La dérive lente d'octobre, caméra qui s'incline.** BREITHORN étiquette Displacement du 03.10 au 01.11 (quatre étiquettes, six cibles qui dérivent avec la caméra). NEBRASKA étiquette Thermal displacement du 16.10 20:00 au 01.11 (toutes les cibles), et MICHIGAN du 09.10 12:00 au 01.11 (toutes les cibles). Ce qu'elles empêchent : une seule famille pour la dérive lente commune ; aujourd'hui, BREITHORN la garde en « Slow drift » et NEBRASKA ne la signale pas.
|
||||
|
||||
## Pas corrigé
|
||||
|
||||
- **S1, dérive commune en Thermal displacement.** Faire passer une dérive lente commune (cibles et positions brutes) en Thermal displacement fait reculer NEBRASKA en Thermal justes : environ 100 % → 63 %. L'épisode de la dérive part du premier jour complet (07.10), avant l'étiquette thermique (16.10 20:00), sur des jours étiquetés Displacement. La règle `_commune` ne fait donc que retirer ce « Slow drift » de la famille Displacement, sans le signaler ailleurs. Sur MICHIGAN, la dérive n'est commune qu'à 3 ou 4 cibles et reste « Slow drift ».
|
||||
- **S2, partie thermique.** Rendre `HEURES_MIN` et le profil de `_axe` relatifs à la cadence demande de refaire le profil, les heures chaudes et la nuit (`NUIT`, `ecarts`), tous pensés en 24 heures fixes : trop lourd. Et un cycle trouvé à cadence lâche couperait la voie des glissades, qui ne tourne que sans cycle.
|
||||
- **S3, excursion commune revenue en Displacement.** Le seul cas Displacement visé (17.10 16:00 → 18.10 04:00) chevauche à 04:00 une glissade de la caméra : un saut revenu y serait absorbé en Thermal displacement. Il resterait au mieux un instant, au prix d'un seuil commun plus bas que `K_PIC`, qui risque de prendre la vague quotidienne des stations à 15 min.
|
||||
- **L1 (marche durable de deux cibles au début de la plage, pas de suggestion).** Le saut fait environ 16 bruits face au bruit des jours d'avant, mais le bruit d'une série se calcule sur toute la série, beaucoup plus agitée après la perte d'une référence. Il tombe alors sous `K_DURABLE`. Un bruit local serait une règle nouvelle, à effets larges.
|
||||
|
||||
## Difficultés
|
||||
|
||||
- Le benchmark relancé sur l'état de départ, sans modification, ne redonnait pas `benchmark-avant.txt` : la ligne Visibility de JUNGFRAU et le Total Visibility différaient. `labeling/auto/JUNGFRAU.jsonl` était modifié sans être commité au début de la séance, sans doute par une autre session ; `labeling/labeling.py` l'a été aussi pendant la séance, puis commité par elle (bb1fd1a). J'ai comparé chaque suggestion à ce benchmark relancé, pas au fichier `benchmark-avant.txt`, et je n'ai touché à aucun de ces fichiers.
|
||||
@@ -212,3 +212,36 @@ date,seance,etape,version,station,famille,etiquetees,signalees,les_deux
|
||||
2026-11-03T14:23Z,2026-11-03T1423Z_MICHIGAN,avant,03ce530,Total,Target issue,1413,2697,1411
|
||||
2026-11-03T14:23Z,2026-11-03T1423Z_MICHIGAN,avant,03ce530,Total,Thermal displacement,1638,1333,722
|
||||
2026-11-03T14:23Z,2026-11-03T1423Z_MICHIGAN,avant,03ce530,Total,Visibility,633,436,262
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,BREITHORN,Displacement,171,171,171
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,BREITHORN,No data,2,2,2
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,BREITHORN,Obstruction,71,38,38
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,BREITHORN,Visibility,0,25,0
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,JUNGFRAU,Displacement,0,2433,0
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,JUNGFRAU,No data,0,4,0
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,JUNGFRAU,Obstruction,0,191,0
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,JUNGFRAU,Target issue,1147,2433,1147
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,JUNGFRAU,Thermal displacement,1080,889,406
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,JUNGFRAU,Visibility,256,287,174
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,MICHIGAN,Displacement,9,159,9
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,MICHIGAN,No data,2,2,2
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,MICHIGAN,Target issue,133,132,132
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,MICHIGAN,Thermal displacement,135,46,46
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,NEBRASKA,Displacement,53,1,1
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,NEBRASKA,No data,2,2,2
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,NEBRASKA,Target issue,133,132,132
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,NEBRASKA,Thermal displacement,91,13,13
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,NEBRASKA,Visibility,10,0,0
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,NORDEND,No data,2,0,0
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,NORDEND,Obstruction,6,83,0
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,NORDEND,Thermal displacement,332,318,316
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,NORDEND,Visibility,111,13,11
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,WILDSTRUBEL,Displacement,0,3,0
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,WILDSTRUBEL,Obstruction,294,191,105
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,WILDSTRUBEL,Thermal displacement,0,126,0
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,WILDSTRUBEL,Visibility,290,111,106
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,Total,Displacement,233,2767,181
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,Total,No data,8,10,6
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,Total,Obstruction,371,503,143
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,Total,Target issue,1413,2697,1411
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,Total,Thermal displacement,1638,1392,781
|
||||
2026-11-03T14:37Z,2026-11-03T1423Z_MICHIGAN,modification 1,b54deb3,Total,Visibility,667,436,291
|
||||
|
Reference in new issue
Block a user