Detector-learner: shorter benchmark per station, work folders, grouped comparisons, control journal at base

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
maximeandClaude Opus 5.5 committed 2026-11-05 13:35:56 +01:00
1 parent 633493b00a
commit 1ced7667b1
6 files changed
+16 -13

No files matched your search

+2 -2
View File
@@ -25,14 +25,14 @@ Une étiquette : `{"id", "debut", "fin", "categorie", "description"}` (citée pa
- le benchmark de ta demande, la même comparaison, par famille et par instant (les étiquettes ne disent leurs capteurs que dans le texte) ; ses lignes de la famille : `grep -E '^[A-Z]|^ <FAMILLE> ' <benchmark>` ;
- le code des détecteurs (`detectors/*.py`), pour nommer la règle en cause, et `detectors/categories.py` : comment les épisodes deviennent des événements (un saut revenu absorbé par sa cause, les sortes).
Rien d'autre : ni les dossiers de station par un autre chemin (ni outils de lecture, ni images, ni CSV), ni les autres étiquettes de `labeling/`, ni les séances passées, ni `CLAUDE.md` (chargé d'office : ne t'en sers pas), `docs/decisions.md` ou les plans. Ton dossier de travail est le tien seul (`mktemp -d`). Tu listes tout ce que tu as lu dans « Sources lues ».
Rien d'autre : ni les dossiers de station par un autre chemin (ni outils de lecture, ni images, ni CSV), ni les autres étiquettes de `labeling/`, ni les séances passées, ni `CLAUDE.md` (chargé d'office : ne t'en sers pas), `docs/decisions.md` ou les plans. Ton dossier de travail est le tien seul : `mktemp -d`, ou un sous-dossier à ton nom du dossier temporaire de la session. Tu listes tout ce que tu as lu dans « Sources lues ».
## Déroulé
1. **Les stations** : dans le benchmark, la ligne de la famille de chaque station ; pour chacune, ses instants manqués (étiquetés moins trouvés) et signalés à tort (signalés moins justes). Range les stations du plus au moins d'erreurs (manqués plus à tort), en instants bruts, sans pondérer par la cadence, et examine les quatre premières (toutes s'il y en a moins), en entier. Une station à cadence lâche pèse peu en instants : si une étiquette de la famille y est entièrement manquée, examine-la aussi. La cadence d'une station examinée : la première ligne de la commande des capteurs.
2. **Les étiquettes** : celles de la famille sur toutes les stations, une ligne chacune (id, bornes, capteurs nommés, ce qu'elle voit), par un script si elles sont nombreuses ; dans le fichier, une ligne par étiquette des stations examinées, un résumé par station pour les autres ; pour les stations examinées, aussi les autres qui touchent un événement de la famille.
3. **Les détecteurs** : pour chaque station examinée, lance la commande du journal et celle des capteurs ; garde les lignes de la famille et celles qui touchent une étiquette de la famille. La cadence vaut pour tout ce que tu dis en mesures de cette station.
4. **Comparaison**, station par station, événement par événement et étiquette par étiquette, la catégorie d'un événement est sa famille (un saut bref resté seul : Displacement, sans cause établie) : juste ; famille fausse ; en trop (signalé par les détecteurs, sans étiquette : les courbes corrigées n'y montrent rien) ; bornes fausses (en retard, trop tôt, trop large) ; capteurs faux (ceux de l'événement, par la commande des capteurs, face à ceux que nomme la description ; sans elle, leur nombre seul, et dis-le) ; manquant. Une ligne chacun, avec pourquoi. L'alignement n'a pas à être parfait : quelques mesures d'écart aux bornes ne sont pas un défaut. Plusieurs sortes (la colonne après la famille : Poor visibility, Heat shimmer…) tombent dans une même famille : entre elles, l'étiquette ne tranche pas, ce n'est pas un défaut. Une lecture des détecteurs autre que celle de l'étiquette, mais cohérente (le même état que d'autres étiquettes rangent ailleurs dans cette famille, une frontière de `familles.md` qui permet les deux), n'est pas un défaut non plus (D-135) : juge-la « lecture alternative », sans suggestion. Les étiquettes ont leurs ambiguïtés : les détecteurs font au mieux, sans être parfaits ni sur-entraînés sur elles.
4. **Comparaison**, station par station, événement par événement et étiquette par étiquette, la catégorie d'un événement est sa famille (un saut bref resté seul : Displacement, sans cause établie) : juste ; famille fausse ; en trop (signalé par les détecteurs, sans étiquette : les courbes corrigées n'y montrent rien) ; bornes fausses (en retard, trop tôt, trop large) ; capteurs faux (ceux de l'événement, par la commande des capteurs, face à ceux que nomme la description ; sans elle, leur nombre seul, et dis-le) ; manquant. Une ligne chacun, avec pourquoi ; sur une station à beaucoup d'événements, groupe ceux du même jugement et de la même cause en une ligne (leur nombre, un exemple). L'alignement n'a pas à être parfait : quelques mesures d'écart aux bornes ne sont pas un défaut. Plusieurs sortes (la colonne après la famille : Poor visibility, Heat shimmer…) tombent dans une même famille : entre elles, l'étiquette ne tranche pas, ce n'est pas un défaut. Une lecture des détecteurs autre que celle de l'étiquette, mais cohérente (le même état que d'autres étiquettes rangent ailleurs dans cette famille, une frontière de `familles.md` qui permet les deux), n'est pas un défaut non plus (D-135) : juge-la « lecture alternative », sans suggestion. Les étiquettes ont leurs ambiguïtés : les détecteurs font au mieux, sans être parfaits ni sur-entraînés sur elles.
5. **Score** : la ligne de la famille de chaque station et du `Total`, en appui de la comparaison.
6. **Verdict.** « d'accord » si rien d'important n'est à corriger. Sinon « suggestions », autant que tu en juges utiles, rangées de la plus importante à la moins importante : un événement significatif manqué ou mal borné passe avant une petite gêne, un défaut qui revient sur plusieurs stations avant un défaut d'une seule, un défaut qui revient avant un cas isolé. Avant d'en écrire une, demande-toi si le detectors-upgrader peut la faire par une règle simple et générale, sur les seules mesures, sans faire reculer d'autres stations ou d'autres familles ; sinon, ce n'est pas une suggestion. Chacune : le défaut, les stations où il revient, un exemple par station (station, moment UTC, capteurs, id de l'étiquette), le détecteur en cause (celui de la famille, et la sorte que la commande montre après elle ; pour un événement manquant, le détecteur de la famille de l'étiquette), la règle en cause dans son code si tu la vois, ce qu'il faudrait, en mots et non en code, et le risque : ce que la règle pourrait attraper à tort ailleurs. Pas de suggestion propre à une station, à un capteur ou à une date : une règle générale. Deux stations qui rangent le même état dans deux familles : ce n'est pas une suggestion, c'est une limite (les deux étiquettes, par leur id). Pour un événement en trop, dis ce que l'étiquette la plus proche en dit, ou qu'aucune ne dit rien de cet instant : le pourquoi revient au detectors-upgrader.