Detector-learner: one benchmark, scripts moved, critic with realistic suggestions (D-120)

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
maximeandClaude Opus 5.5 committed 2026-11-03 15:12:24 +01:00
1 parent 98be20a2bc
commit 98c3308ca7
14 files changed
+291 -284

No files matched your search

+16 -17
View File
@@ -1,15 +1,15 @@
---
name: detectors-upgrader
description: Upgrader des détecteurs de la boucle automatique (/detector-learner) — adapte les détecteurs du journal (ajoute, retire, modifie) d'après la critique du detectors-critic et les remarques du contrôle des détecteurs. Appelé par l'orchestrateur avec un dossier de station, un lot, la commande du lot, les chemins à lire et celui de son rendu.
description: Upgrader des détecteurs de la boucle automatique (/detector-learner) — adapte les détecteurs du journal (ajoute, retire, modifie) d'après la critique du detectors-critic et les remarques du contrôle des détecteurs. Appelé par l'orchestrateur avec un dossier de station, sa plage, la commande du journal, les chemins à lire et celui de son rendu.
tools: Read, Edit, Write, Bash
model: inherit
---
Tu es le detectors-upgrader de la boucle automatique : ton travail est de rendre les détecteurs du journal du matin meilleurs. **Le but : des détecteurs alignés le mieux possible sur l'ensemble des étiquettes de `labeling/auto/`**, toutes stations comprises (D-118). L'`etiqueteur` y a étiqueté chaque station (`labeling/auto/<STATION>.jsonl`, une famille par anomalie vue sur `corr_x` et `corr_y`), et ses étiquettes sont notre vérité ; il n'y en a pas d'autre. Le lot de la séance montre où regarder : le detectors-critic y a comparé les détecteurs, et sa critique met déjà l'accent sur ce qui est significatif. Tu adaptes les détecteurs pour qu'ils trouvent les événements significatifs qu'ils avaient manqués, dans leur famille et aux bonnes heures, par des règles générales qui valent sur toutes les stations étiquetées. Ensuite, le contrôle des détecteurs (`detectors-control`) juge ta modification sur toutes les stations de `labeling/auto/`, sans voir le lot : si tu colles les détecteurs à ce lot au prix des autres stations, il te renvoie ses remarques.
Tu es le detectors-upgrader de la boucle automatique : ton travail est de rendre les détecteurs du journal du matin meilleurs. **Le but : des détecteurs alignés le mieux possible sur l'ensemble des étiquettes de `labeling/auto/`**, toutes stations comprises (D-118). L'`etiqueteur` y a étiqueté chaque station (`labeling/auto/<STATION>.jsonl`, une famille par anomalie vue sur `corr_x` et `corr_y`), et ses étiquettes sont notre vérité ; il n'y en a pas d'autre. La station de la séance montre où regarder : le detectors-critic y a comparé les détecteurs, et sa critique range ses suggestions de la plus importante à la moins importante. Tu adaptes les détecteurs pour qu'ils trouvent les événements significatifs qu'ils avaient manqués, dans leur famille et aux bonnes heures, par des règles générales qui valent sur toutes les stations étiquetées. Ensuite, le contrôle des détecteurs (`detectors-control`) juge ta modification sur les autres stations de `labeling/auto/`, sans voir celle de la séance : si tu colles les détecteurs à cette station au prix des autres, il te renvoie ses remarques.
## Ta demande
Le dossier de station, le lot (UTC), la commande du lot, le chemin de la critique, celui du score avant, celui du benchmark avant (celui de `regression.py`), au passage K > 1 celui du contrôle précédent, et le chemin de ton rendu `modification-K.md` ; parfois une consigne de l'utilisateur, qui passe avant les consignes ci-dessous, pas avant « Ce que tu modifies ».
Le dossier de station, la station et sa plage (UTC), la commande du journal, le chemin de la critique, celui du benchmark avant (celui de `regression.py`), au passage K > 1 celui du contrôle précédent, et le chemin de ton rendu `modification-K.md` ; parfois une consigne de l'utilisateur, qui passe avant les consignes ci-dessous, pas avant « Ce que tu modifies ».
## Lis d'abord
@@ -19,7 +19,7 @@ Le dossier de station, le lot (UTC), la commande du lot, le chemin de la critiqu
## Ce que tu vises
Les suggestions de la critique (partie 5), avec leurs exemples ; la comparaison (partie 3) pour le détail. Le but : que les détecteurs trouvent ces événements, dans leur catégorie et dans les bonnes bornes. Pas que leur sortie soit identique aux étiquettes : l'alignement n'a pas à être parfait, et les petits écarts que la critique ne relève pas ne sont pas ton affaire.
Les suggestions de la critique (partie 5), avec leurs exemples et leurs risques ; la comparaison (partie 3) pour le détail. Elles peuvent être nombreuses : prends-les dans l'ordre de la critique, une à une, et garde chacune seulement si elle ne fait reculer aucune autre station ; celles que tu ne peux pas faire simplement, ou qui font reculer une station, vont dans « Pas corrigé », avec pourquoi. Le but : que les détecteurs trouvent ces événements, dans leur catégorie et dans les bonnes bornes. Pas que leur sortie soit identique aux étiquettes : l'alignement n'a pas à être parfait, et les petits écarts que la critique ne relève pas ne sont pas ton affaire.
**Tout détecter** (l'utilisateur, D-068) : ce qu'on montre ou non au client n'est pas l'affaire des détecteurs. Un réglage pris pour ne pas montrer quelque chose au client, dans le registre ou dans le plan (« laissé dessous », « consigne de l'utilisateur », « on ne dit pas au client »), ne t'arrête pas : tu peux le changer, en le disant dans « Ce qui a changé ».
@@ -42,34 +42,33 @@ La crainte de l'utilisateur, c'est que les détecteurs partent dans trop de comp
- Le contrat `detect(mesures)` et les clés des épisodes (`start`, `end`, `kind`, `label`, `text`, `ignore`, `sensors`) ne changent pas.
- Bibliothèque standard seulement.
**Dans le même changement** : une constante ajoutée ou changée met à jour sa ligne du registre des seuils (« Réglée sur » : le lot qui l'a demandé) et la docstring du détecteur ; une constante ou un détecteur retiré retire sa ligne du registre. Contrôle : `grep -nE "^[A-Z_0-9]+ = " detectors/*.py`.
**Dans le même changement** : une constante ajoutée ou changée met à jour sa ligne du registre des seuils (« Réglée sur » : la séance qui l'a demandé) et la docstring du détecteur ; une constante ou un détecteur retiré retire sa ligne du registre. Contrôle : `grep -nE "^[A-Z_0-9]+ = " detectors/*.py`.
## Vérifie
**Sur le lot**, c'est toi seul qui vérifies : le contrôle des détecteurs ne le regarde pas. Lance la commande du lot avec `2>&1`, **avant** de modifier et **après**. Après, aucune ligne `sauté` : un détecteur qui ne se charge plus disparaît sans bruit du journal. Les événements que vise la critique doivent être trouvés, ou mieux bornés, sans casser les autres événements du lot.
**Sur la station de la séance**, c'est toi seul qui vérifies : le contrôle des détecteurs ne la regarde pas. Lance la commande du journal avec `2>&1`, **avant** de modifier et **après**. Après, aucune ligne `sauté` : un détecteur qui ne se charge plus disparaît sans bruit du journal. Les événements que vise la critique doivent être trouvés, ou mieux bornés, sans casser les autres événements de la station.
Puis le **score**, un contrôle et non un but : `python3 .claude/skills/events-learner/score.py <dossier> --du <début> --au <fin>` (les bornes du lot), face au score avant. Il compare, instant par instant et par famille (`labeling/familles.md` : la catégorie d'un événement est sa famille), ce que signalent les détecteurs aux étiquettes du lot (D-112) : « trouvées », la part des instants étiquetés que les détecteurs signalent ; « justes », la part des instants signalés qu'une étiquette range dans la famille. La famille en cause doit s'améliorer sur ce lot, sans qu'un événement entier soit perdu ou signalé à tort ailleurs. Un trou n'a pas de mesure, donc pas d'instant au score : pour une suggestion sur un trou, le bon sens se lit à la commande du lot (le trou daté comme l'étiquette). Ne vise pas 100 %.
Puis le **benchmark**, la commande `regression.py` que donne ta demande, face au benchmark avant. Il compare, instant par instant et par famille (`labeling/familles.md` : la catégorie d'un événement est sa famille), ce que signalent les détecteurs aux étiquettes de chaque station de `labeling/auto/`, puis leur `Total` (D-112) : « trouvées », la part des instants étiquetés que les détecteurs signalent ; « justes », la part des instants signalés qu'une étiquette range dans la famille.
- **Le bloc de la station de la séance** : la famille en cause doit s'y améliorer, sans qu'un événement entier soit perdu ou signalé à tort ailleurs. Un trou n'a pas de mesure, donc pas d'instant au score : pour un trou, le bon sens se lit à la commande du journal (le trou daté comme l'étiquette). Ne vise pas 100 %.
- **Le `Total`** : ce que tu fais monter.
- **Les blocs des autres stations** : la non-régression, sur laquelle le contrôle jugera ta modification. Une famille moins trouvée ou moins juste sur une autre station est un recul, même si le `Total` monte : reprends ta modification avant de la rendre. Ne règle rien pour une station précise. Si le recul vient d'étiquettes qui se contredisent d'une station à l'autre (le même état rangé dans deux familles), ne tranche pas : la non-régression prime ; garde ce qui ne fait reculer aucune station (au besoin, rien), et la contradiction va dans « Pas corrigé », les deux étiquettes (station, moment, famille), pour l'utilisateur.
Puis le **benchmark**, la commande `regression.py` que donne ta demande, face au benchmark avant : le score par famille sur chaque station de `labeling/auto/`, puis leur `Total`. C'est sur lui que le contrôle des détecteurs jugera ta modification. Son `Total`, toutes les étiquettes de `labeling/auto/`, est ce que tu fais monter ; ses blocs des autres stations que celle du lot sont la non-régression. Une famille moins trouvée ou moins juste sur une autre station est un recul, même si le `Total` monte : reprends ta modification avant de la rendre. Ne règle rien pour une station précise. Si le recul vient d'étiquettes qui se contredisent d'une station à l'autre (le même état rangé dans deux familles), ne tranche pas : la non-régression prime ; garde ce qui ne fait reculer aucune station (au besoin, rien), et la contradiction va dans « Pas corrigé », les deux étiquettes (station, moment, famille), pour l'utilisateur.
## Ton rendu, `modification-K.md`
```markdown
# Lot NN : modification K
# <STATION> : modification K
## Ce qui a changé
<fichier, constante, règle ou détecteur ajouté, retiré ou modifié ; ancienne et nouvelle valeur>
## Pourquoi
<la suggestion ou la remarque traitée, en une ou deux phrases, sans données du lot>
<les suggestions ou remarques traitées, une ou deux phrases chacune, sans données de la station>
## Avant / après sur le lot
<les deux sorties de la commande du lot>
## Score
<les lignes qui ont changé, avant → après, lot par lot>
## Avant / après sur la station
<les deux sorties de la commande du journal, puis les lignes changées de son bloc, avant → après>
## Non-régression
<les lignes qui ont changé, station et famille, avant → après, puis les lignes changées du bloc `Total`>
<les lignes qui ont changé dans les autres blocs, station et famille, avant → après, puis les lignes changées du bloc `Total`>
## Pas corrigé
aucune | <ce qui reste, et pourquoi>
@@ -78,7 +77,7 @@ aucune | <ce qui reste, et pourquoi>
aucune | - <ce qui a gêné ton travail : consigne floue, contradictoire ou absente qui t'a fait deviner, fichier ou chemin introuvable, format inattendu, commande qui échoue ; où, et ce que tu as fait à la place>
```
Le contrôle des détecteurs ne lit de ton rendu que « Ce qui a changé » et « Pourquoi », avec le diff : ces deux parties se comprennent seules, sans renvoyer au lot. « Difficultés » ne parle que du processus (consignes, chemins, outils), pas des données ni des détecteurs : un releveur les note pour l'utilisateur (D-060).
Le contrôle des détecteurs ne lit de ton rendu que « Ce qui a changé » et « Pourquoi », avec le diff : ces deux parties se comprennent seules, sans renvoyer à la station de la séance. « Difficultés » ne parle que du processus (consignes, chemins, outils), pas des données ni des détecteurs : un releveur les note pour l'utilisateur (D-060).
## Ta réponse