Detector-learner: one benchmark, scripts moved, critic with realistic suggestions (D-120)

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
maximeandClaude Opus 5.5 committed 2026-11-03 15:12:24 +01:00
1 parent 98be20a2bc
commit 98c3308ca7
14 files changed
+291 -284

No files matched your search

+19 -12
View File
@@ -104,15 +104,32 @@ Toutes les stations de `data/` d'un coup, chacune sur sa plage (une page ouverte
Les étiquettes de `labeling/auto/<SERIE>.jsonl` déjà faites et relues, dans une session Claude Code neuve, **en mode auto**, à la racine de Support-Agent, sur `master` :
```
/detector-learner data/<SERIE> [--du <DEBUT> --au <FIN>] [--ameliorer]
/detector-learner data/<SERIE> [--ameliorer]
```
- Sans dates : la plage des étiquettes de la station. Ni analyste ni base d'events (D-116) : critique, modification et contrôle des détecteurs ; le contrôle juge sur le benchmark des étiquettes de `labeling/auto/` (`python3 .claude/skills/detector-learner/regression.py`, historique `detector-learner/historique.csv`), station par station hors celle du lot, et son `Total`.
- La plage : toutes les étiquettes de la station. Ni analyste ni base d'events (D-116) : critique, modification et contrôle des détecteurs. Une seule mesure, le benchmark sur toutes les étiquettes de `labeling/auto/` (historique `detector-learner/historique.csv`) : le bloc de la station est son score, les autres blocs la non-régression, sur laquelle juge le contrôle, avec le `Total`.
- À la fin, la page `out/detector-learner_<séance>_<SERIE>.html` : les étiquettes face aux détecteurs, famille par famille.
- `--ameliorer` (facultatif) : en fin de séance, l'améliorateur corrige le skill et ses agents d'après les difficultés relevées (D-071).
- Commits directement sur `master` ; bilan dans `detector-learner/<séance>_<SERIE>/bilan.md` ; `git revert` de ce qu'on ne garde pas.
Le benchmark à la main (sans rien écrire dans l'historique), le score d'une plage, la page d'une séance :
```bash
python3 .claude/skills/detector-learner/regression.py
```
```bash
python3 .claude/skills/detector-learner/score.py data/<SERIE> --du <DEBUT> --au <FIN>
```
```bash
python3 .claude/skills/detector-learner/comparaison.py data/<SERIE> detector-learner/<séance>_<SERIE> --du <DEBUT> --au <FIN>
```
# Améliorer les détecteurs (events-learner)
Ne tourne plus : ses agents des détecteurs servent `/detector-learner` (D-118). Gardé pour l'historique.
D'abord, étiqueter le lot (D-112) : `@etiqueteur data/<SERIE> du <DEBUT> au <FIN>`, puis relire ses étiquettes (`labeling/auto/<SERIE>.jsonl`, menu Labels de l'outil d'étiquetage). Puis, dans une session Claude Code neuve, **en mode auto**, à la racine de Support-Agent (pas dans le dev container), une fois les déplacements **et les images** pompés :
```
@@ -129,16 +146,6 @@ D'abord, étiqueter le lot (D-112) : `@etiqueteur data/<SERIE> du <DEBUT> au <FI
- À la fin, la page `out/events-learner_<séance>_<SERIE>.html` s'ouvre (D-066) : la page des détecteurs (`detectors-view/detecteurs.py`, ci-dessus) sur la plage, images et timelapse compris ; dessous les courbes, famille par famille, les étiquettes (bleu) face aux détecteurs (orange) ; le score de la séance (par famille et par instant) et le benchmark.
- Le benchmark (D-069) : les détecteurs face au diagnostic gardé dans chaque event de la base (`events/E-*/etiquettes.json`), lancé au début du lot et après chaque modification ; chaque passage s'ajoute à `vues-deplacements/benchmark/historique.csv`, avec la version des détecteurs.
Le score d'un lot, et la page d'une séance :
```bash
python3 .claude/skills/events-learner/score.py data/<SERIE> --du <DEBUT> --au <FIN>
```
```bash
python3 .claude/skills/events-learner/comparaison.py data/<SERIE> events-learner/<séance>_<SERIE> --du <DEBUT> --au <FIN>
```
Lancer le benchmark à la main (sans rien écrire dans l'historique) :
```bash