Labeler agent: an analyst that only produces labels (etiqueteur, D-106), one category per label (D-107), anomalies only and one Thermal displacement category (D-108); second trial on JUNGFRAU 30.09-05.10, 15 labels; the labeling tool gets a Category box above the text, to add and to edit
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
1 parent
fe025612cc
commit
8266293ed3
44 files changed
+3902
-94
No files matched your search
+23
-2
@@ -973,7 +973,7 @@ Règles du journal :
|
||||
- **Conséquence** : une séance de `/events-learner` appelle six agents ; l'analyste, qui peut écrire des scripts, coûtera sans doute plus. Lire en brut garde une part de ce qu'apportait le correcteur, qui a trouvé la seule erreur de lecture commune (rejets des références, WILDSTRUBEL, 2026-10-27). Un changement de `donnees.py` se voit d'une séance à l'autre dans l'historique du benchmark. Sans retrait ni contrôle, les outils peuvent encore grossir : à observer.
|
||||
|
||||
## D-098 — 2026-10-30 — L'expert étiquette lui-même : `labeling/`
|
||||
- **Statut** : active, à l'essai ; point 68 du plan du journal du matin ; complétée par D-100 (les events validés y ont leurs étiquettes).
|
||||
- **Statut** : active, à l'essai ; point 68 du plan du journal du matin ; complétée par D-100 (les events validés y ont leurs étiquettes) ; « sans catégorie » remplacé par D-107 (une catégorie du journal au choix).
|
||||
- **Décision** : un outil local et très simple, `labeling/labeling.py`, qui ne sert qu'à se repérer dans le temps et à écrire ; les données se consultent sur le monitoring. Le data loader de la page Status, un plot à la fois (menu Advanced d'Explore, plus les métriques système numériques, sans les identifiants), une barre de temps alignée où l'on sélectionne une plage, du texte, et Add écrit aussitôt. Des étiquettes en langage naturel, **sans catégorie**, dans `labeling/<STATION>.jsonl`, une ligne chacune (`debut`, `fin`, `description`), versionné ; zones grisées sur tous les plots, chevauchements admis ; un clic sur une étiquette permet de lire et de modifier son texte (Save, demande de l'utilisateur, 2026-10-30) de corriger ses bornes et de la retirer (Delete, 2026-11-02).
|
||||
- **Pourquoi** : l'utilisateur, 2026-10-30 : que l'analyste prenne connaissance des phénomènes sur des cas étiquetés par l'expert, en plus de ce qu'on lui explique (point 67) ; pas de catégorie pour ne pas borner, on en déduira après coup ; le but est d'avoir les étiquettes, pas une application. Constat de Claude : la seule vérité du projet était l'analyste (`score.py`, benchmark).
|
||||
- **Options écartées** : l'étiquetage dans la page Status, avec les status des détecteurs, `error_value`, une température et une catégorie facultative (première proposition de Claude) : l'outil doit rester simple, le monitoring montre le reste ; le format de `etiquettes.json` : ses champs obligatoires (catégorie, preuve, capteurs) bornent, et un seul objet JSON se réécrit à chaque ajout.
|
||||
@@ -1023,9 +1023,30 @@ Règles du journal :
|
||||
- **Conséquence** : premier passage le 2026-11-02, 23 étiquettes, 14 phénomènes ; la relecture face aux étiquettes a renforcé le skill (prudence de l'expert gardée, jour et nuit seulement s'il les dit, « non dite » plutôt qu'« inconnue », règles et faux amis tenus à ses phrases). L'analyste ne la lit pas encore (ni `analyser-lot` ni `/labels-learner`) : à brancher avec les étiquettes automatiques.
|
||||
|
||||
## D-105 — 2026-11-02 — Les étiquettes automatiques : l'analyste étiquette un lot seul, au format de l'expert
|
||||
- **Statut** : active, à l'essai ; point 71 du plan du journal du matin ; complète D-102 et D-104.
|
||||
- **Statut** : active, à l'essai ; point 71 du plan du journal du matin ; complète D-102 et D-104 ; l'agent qui étiquette : remplacé par D-106.
|
||||
- **Décision** : l'agent `analyste`, sur une consigne à part (`.claude/skills/analyser-lot/etiquettes-auto.md`), lit un lot avec les outils de `lire-les-donnees`, la carte des étiquettes en entier, la chaîne de mesure et la carte des événements, sans `labeling/manual/` ni les détecteurs, et ajoute ses étiquettes à `labeling/auto/<STATION>.jsonl`, au format de l'expert (`debut`, `fin`, `description` qualitative, sans valeurs) ; ses mesures, sa confiance et ce que la documentation lui a donné ou manqué vont dans `labeling/auto/<date>_<STATION>/analyse.md`. L'outil d'étiquetage les montre par son menu Labels (`manual` ou `auto`). L'utilisateur juge leur qualité. Premier lot : JUNGFRAU, du 2026-10-20 au 2026-10-26 exclu.
|
||||
- **Pourquoi** : l'utilisateur, 2026-11-02 : mesurer les performances de l'analyste sur des données avec la documentation mise en place ; il vérifie ensuite la qualité des étiquettes. Le lot est sur une station de la carte (son contexte est légitime : l'expert connaît son site) mais hors de ses étiquettes : la carte cite chaque étiquette et dit ce qui s'y passe, l'analyste y lirait la réponse.
|
||||
- **Options écartées** : `analyser-lot` tel quel (catégories pour `/events-learner`, pas de carte des étiquettes) ; une plage déjà étiquetée par l'expert (fuite par la carte) ; NADELHORN, absente de la carte (proposée par Claude comme test à froid ; l'utilisateur a choisi JUNGFRAU) ; une forme structurée (catégorie, capteurs) : le même format que l'expert se compare d'égal à égal.
|
||||
- **Conséquence** : pas de score automatique : les étiquettes de l'expert ne couvrent pas tout, le jugement est le sien. Rien n'est commité avant qu'il ait validé l'essai.
|
||||
|
||||
## D-106 — 2026-11-02 — Un agent d'étiquetage : l'`etiqueteur`
|
||||
- **Statut** : active, à l'essai ; point 71 du plan du journal du matin ; remplace D-105 pour l'agent, le reste tient.
|
||||
- **Décision** : un agent à part, `etiqueteur` (`.claude/agents/etiqueteur.md`), un analyste qui ne produit que des étiquettes : la consigne de l'essai de D-105 (`.claude/skills/analyser-lot/etiquettes-auto.md`, retirée) devient son corps, sans `CLAUDE.md` ; mêmes lectures permises, même format d'étiquettes, même analyse. Il ne reçoit que le dossier de station et le lot ; les étiquettes vont par défaut dans `labeling/auto/<STATION>.jsonl` (créé s'il manque), l'analyse dans `labeling/auto/<date>_<STATION>_<début du lot>/`. Ses scripts dans `outils/` sont permis en plus de ce que permet `lire-les-donnees` (difficulté relevée par l'essai JUNGFRAU). Appel : `@etiqueteur data/<STATION> du <début> au <fin>`.
|
||||
- **Pourquoi** : l'utilisateur, 2026-11-02 : un agent d'étiquetage, peut-être mieux qu'une consigne à part de l'analyste. Un rôle par responsabilité (D-088) : l'analyste reste la vérité de `/events-learner` et de `/labels-learner`, sa consigne ne porte plus deux métiers.
|
||||
- **Options écartées** : garder l'analyste avec une consigne nommée dans la demande (D-105) : chaque appel doit la nommer, et l'agent porte deux rôles.
|
||||
- **Conséquence** : `analyser-lot` ne sert plus aux étiquettes automatiques ; pas d'essai de l'agent lui-même avant que l'utilisateur le lance.
|
||||
- **Précisions de l'utilisateur, 2026-11-02** : une étiquette n'est qu'un seul événement, jamais un ensemble ; un événement qui se répète s'étiquette à chaque fois ; le travail est exhaustif mais précis. Elles remplacent « un phénomène thermique de plusieurs jours : une étiquette pour toute la plage » : la vague de chaque jour a son étiquette, un seul événement de plusieurs jours (une montée lente) garde la sienne.
|
||||
|
||||
## D-107 — 2026-11-02 — Une catégorie dans l'étiquette
|
||||
- **Statut** : active, à l'essai ; point 71 du plan du journal du matin ; précise D-098 (texte « sans catégorie ») et D-106 ; les deux thermiques réunies par D-108.
|
||||
- **Décision** : une étiquette peut porter un champ `categorie`, entre les bornes et le texte : `{"debut", "fin", "categorie", "description"}`. Ses valeurs : les clés des douze catégories du journal (D-074, section 4 de `events/carte-des-evenements.md`, `CATEGORIES` de `detectors/categories.py`), ou `aucune` (ne touche pas les courbes), comme le champ `categorie` des étiquettes de l'analyste (`analyser-lot`). L'`etiqueteur` en donne une, obligatoire, à chaque étiquette (deux phénomènes de catégories différentes : deux étiquettes) et dit pourquoi dans son analyse. L'outil d'étiquetage a un menu Category, à l'Add et à l'édition, facultatif (les 24 étiquettes de l'expert n'en ont pas), la catégorie en tête du texte dans la barre et au survol ; un Save qui la change retire `revue`, comme pour le texte.
|
||||
- **Pourquoi** : l'utilisateur, 2026-11-02 : l'étiqueteur doit donner une catégorie à l'événement ; l'outil, un champ pour la mettre, et un champ dans l'étiquette. Les catégories du journal plutôt que les phénomènes de la carte des étiquettes : une liste fixe, celle des détecteurs, déjà celle de l'analyste ; c'est la forme structurée que le point 71 attendait pour comparer aux détecteurs.
|
||||
- **Options écartées** : les phénomènes de la carte des étiquettes (refaite par `/labels-map`, ses titres changent) ; les familles A à G de la carte des événements (trop larges pour les détecteurs) ; la catégorie obligatoire dans l'outil (les étiquettes déjà écrites n'en ont pas).
|
||||
- **Conséquence** : `/review-labels` et `/labels-map` ne lisent pas encore la catégorie ; à brancher quand l'utilisateur le demande.
|
||||
|
||||
## D-108 — 2026-11-02 — Étiquettes : un seul déplacement thermique, les anomalies seulement
|
||||
- **Statut** : active, à l'essai ; point 71 du plan du journal du matin ; précise D-106 et D-107.
|
||||
- **Décision** : dans les étiquettes, `dilatation_thermique` et `contraction_thermique` deviennent une seule catégorie, `deplacement_thermique` (« Thermal displacement ») : le sens ne compte pas ; l'aller puis le retour restent deux événements, deux étiquettes. Le journal et ses détecteurs gardent leurs deux catégories. L'`etiqueteur` n'étiquette que les anomalies : ce qui se voit sur les courbes corrigées ou les prive de données ; ce que la caméra compense sans rien laisser sur les courbes corrigées va dans son analyse, pas dans une étiquette (il n'a donc plus de raison d'écrire `aucune`, que l'outil garde pour l'expert). Les 12 étiquettes thermiques de JUNGFRAU du 30.09 au 05.10 passées à `deplacement_thermique`.
|
||||
- **Pourquoi** : l'utilisateur, 2026-11-02, après le deuxième essai de l'étiqueteur (JUNGFRAU, 30.09 → 05.10, « globalement bon ») : le sens d'un déplacement thermique n'est pas important ; un phénomène compensé par la caméra, dont les courbes corrigées ne montrent rien, ne vaut pas une classification.
|
||||
- **Options écartées** : changer aussi les catégories du journal (phrases du site, détecteurs, benchmark) : pas demandé ; la comparaison avec les détecteurs réunit les deux thermiques.
|
||||
- **Conséquence** : les étiquettes ne prennent plus toutes leurs clés dans le journal ; un script qui les compare aux détecteurs lit `deplacement_thermique` comme l'une ou l'autre.
|
||||
@@ -1739,6 +1739,9 @@ Un seul passage de l'analyste par phénomène, au lieu de deux : moins coûteux
|
||||
- [ ] Revue de la carte par l'utilisateur, et ses six écarts avec la carte des événements.
|
||||
- [ ] La carte lue par l'analyste, puis les étiquettes automatiques (`labeling/auto/`).
|
||||
- 2026-11-02, premier essai (D-105) : l'analyste, sur la consigne `.claude/skills/analyser-lot/etiquettes-auto.md` (la carte des étiquettes en entier, ni `labeling/manual/` ni les détecteurs), étiquette JUNGFRAU du 20 au 25.10, une plage sans étiquette de l'expert, entre ses étiquettes du 16-19.10 et du 26.10 (pas de fuite par la carte) ; étiquettes au format de l'expert dans `labeling/auto/JUNGFRAU.jsonl`, analyse dans `labeling/auto/2026-11-02_JUNGFRAU/` ; l'outil les montre par son menu Labels (`manual` ou `auto`). L'utilisateur juge leur qualité.
|
||||
- 2026-11-02 (D-106) : un agent à part, l'`etiqueteur` (`.claude/agents/etiqueteur.md`), un analyste qui ne produit que des étiquettes ; la consigne de l'essai devient son corps, `etiquettes-auto.md` retiré. Appel : `@etiqueteur data/<STATION> du <début> au <fin>`. Pas encore lancé.
|
||||
- 2026-11-02 (D-107) : une catégorie du journal (ou `aucune`) dans l'étiquette, champ `categorie` ; obligatoire pour l'étiqueteur, au choix dans l'outil (menu Category).
|
||||
- 2026-11-02 (D-108) : deuxième essai, JUNGFRAU 30.09 → 05.10 (`labeling/auto/2026-11-02_JUNGFRAU_2026-09-30/`), 15 étiquettes, globalement bon ; les deux thermiques réunies en `deplacement_thermique` ; les anomalies seulement.
|
||||
|
||||
---
|
||||
|
||||
@@ -1944,3 +1947,7 @@ Une ligne par séance : date, point(s) traités, ce qui a changé, ce qui reste.
|
||||
- 2026-11-02 : point 71 ajouté (idée de l'utilisateur : un intégrateur des étiquettes) : avis de Claude, trois usages, la forme structurée comme pièce commune ; à discuter après la revue des étiquettes.
|
||||
- 2026-11-02 : point 71, demande de l'utilisateur : la carte des étiquettes ; skill `/labels-map` (D-104), carte écrite, relue face aux étiquettes, skill renforcé.
|
||||
- 2026-11-02 : point 71, l'utilisateur : mesurer l'analyste sur un lot avec la documentation en place ; premier essai des étiquettes automatiques sur JUNGFRAU du 20 au 25.10 (D-105).
|
||||
- 2026-11-02 : point 71, demande de l'utilisateur : un agent d'étiquetage, l'`etiqueteur`, inspiré de l'analyste (D-106).
|
||||
- 2026-11-02 : point 71, demande de l'utilisateur : une catégorie dans l'étiquette, donnée par l'étiqueteur, choisie dans l'outil (D-107).
|
||||
- 2026-11-02 : point 71, précisions de l'utilisateur pour l'étiqueteur : une étiquette, un seul événement ; un événement répété, une étiquette par fois ; exhaustif mais précis (D-106).
|
||||
- 2026-11-02 : point 71, deuxième essai de l'étiqueteur, JUNGFRAU 30.09 → 05.10, 15 étiquettes, « globalement bon » ; l'utilisateur : un seul « Thermal displacement », aller et retour deux événements ; les anomalies seulement, rien de ce que la caméra compense (D-108).
|
||||
Reference in new issue
Block a user