Labeler agent: an analyst that only produces labels (etiqueteur, D-106), one category per label (D-107), anomalies only and one Thermal displacement category (D-108); second trial on JUNGFRAU 30.09-05.10, 15 labels; the labeling tool gets a Category box above the text, to add and to edit
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
1 parent
fe025612cc
commit
8266293ed3
44 files changed
+3902
-94
No files matched your search
+23
-2
@@ -973,7 +973,7 @@ Règles du journal :
|
||||
- **Conséquence** : une séance de `/events-learner` appelle six agents ; l'analyste, qui peut écrire des scripts, coûtera sans doute plus. Lire en brut garde une part de ce qu'apportait le correcteur, qui a trouvé la seule erreur de lecture commune (rejets des références, WILDSTRUBEL, 2026-10-27). Un changement de `donnees.py` se voit d'une séance à l'autre dans l'historique du benchmark. Sans retrait ni contrôle, les outils peuvent encore grossir : à observer.
|
||||
|
||||
## D-098 — 2026-10-30 — L'expert étiquette lui-même : `labeling/`
|
||||
- **Statut** : active, à l'essai ; point 68 du plan du journal du matin ; complétée par D-100 (les events validés y ont leurs étiquettes).
|
||||
- **Statut** : active, à l'essai ; point 68 du plan du journal du matin ; complétée par D-100 (les events validés y ont leurs étiquettes) ; « sans catégorie » remplacé par D-107 (une catégorie du journal au choix).
|
||||
- **Décision** : un outil local et très simple, `labeling/labeling.py`, qui ne sert qu'à se repérer dans le temps et à écrire ; les données se consultent sur le monitoring. Le data loader de la page Status, un plot à la fois (menu Advanced d'Explore, plus les métriques système numériques, sans les identifiants), une barre de temps alignée où l'on sélectionne une plage, du texte, et Add écrit aussitôt. Des étiquettes en langage naturel, **sans catégorie**, dans `labeling/<STATION>.jsonl`, une ligne chacune (`debut`, `fin`, `description`), versionné ; zones grisées sur tous les plots, chevauchements admis ; un clic sur une étiquette permet de lire et de modifier son texte (Save, demande de l'utilisateur, 2026-10-30) de corriger ses bornes et de la retirer (Delete, 2026-11-02).
|
||||
- **Pourquoi** : l'utilisateur, 2026-10-30 : que l'analyste prenne connaissance des phénomènes sur des cas étiquetés par l'expert, en plus de ce qu'on lui explique (point 67) ; pas de catégorie pour ne pas borner, on en déduira après coup ; le but est d'avoir les étiquettes, pas une application. Constat de Claude : la seule vérité du projet était l'analyste (`score.py`, benchmark).
|
||||
- **Options écartées** : l'étiquetage dans la page Status, avec les status des détecteurs, `error_value`, une température et une catégorie facultative (première proposition de Claude) : l'outil doit rester simple, le monitoring montre le reste ; le format de `etiquettes.json` : ses champs obligatoires (catégorie, preuve, capteurs) bornent, et un seul objet JSON se réécrit à chaque ajout.
|
||||
@@ -1023,9 +1023,30 @@ Règles du journal :
|
||||
- **Conséquence** : premier passage le 2026-11-02, 23 étiquettes, 14 phénomènes ; la relecture face aux étiquettes a renforcé le skill (prudence de l'expert gardée, jour et nuit seulement s'il les dit, « non dite » plutôt qu'« inconnue », règles et faux amis tenus à ses phrases). L'analyste ne la lit pas encore (ni `analyser-lot` ni `/labels-learner`) : à brancher avec les étiquettes automatiques.
|
||||
|
||||
## D-105 — 2026-11-02 — Les étiquettes automatiques : l'analyste étiquette un lot seul, au format de l'expert
|
||||
- **Statut** : active, à l'essai ; point 71 du plan du journal du matin ; complète D-102 et D-104.
|
||||
- **Statut** : active, à l'essai ; point 71 du plan du journal du matin ; complète D-102 et D-104 ; l'agent qui étiquette : remplacé par D-106.
|
||||
- **Décision** : l'agent `analyste`, sur une consigne à part (`.claude/skills/analyser-lot/etiquettes-auto.md`), lit un lot avec les outils de `lire-les-donnees`, la carte des étiquettes en entier, la chaîne de mesure et la carte des événements, sans `labeling/manual/` ni les détecteurs, et ajoute ses étiquettes à `labeling/auto/<STATION>.jsonl`, au format de l'expert (`debut`, `fin`, `description` qualitative, sans valeurs) ; ses mesures, sa confiance et ce que la documentation lui a donné ou manqué vont dans `labeling/auto/<date>_<STATION>/analyse.md`. L'outil d'étiquetage les montre par son menu Labels (`manual` ou `auto`). L'utilisateur juge leur qualité. Premier lot : JUNGFRAU, du 2026-10-20 au 2026-10-26 exclu.
|
||||
- **Pourquoi** : l'utilisateur, 2026-11-02 : mesurer les performances de l'analyste sur des données avec la documentation mise en place ; il vérifie ensuite la qualité des étiquettes. Le lot est sur une station de la carte (son contexte est légitime : l'expert connaît son site) mais hors de ses étiquettes : la carte cite chaque étiquette et dit ce qui s'y passe, l'analyste y lirait la réponse.
|
||||
- **Options écartées** : `analyser-lot` tel quel (catégories pour `/events-learner`, pas de carte des étiquettes) ; une plage déjà étiquetée par l'expert (fuite par la carte) ; NADELHORN, absente de la carte (proposée par Claude comme test à froid ; l'utilisateur a choisi JUNGFRAU) ; une forme structurée (catégorie, capteurs) : le même format que l'expert se compare d'égal à égal.
|
||||
- **Conséquence** : pas de score automatique : les étiquettes de l'expert ne couvrent pas tout, le jugement est le sien. Rien n'est commité avant qu'il ait validé l'essai.
|
||||
|
||||
## D-106 — 2026-11-02 — Un agent d'étiquetage : l'`etiqueteur`
|
||||
- **Statut** : active, à l'essai ; point 71 du plan du journal du matin ; remplace D-105 pour l'agent, le reste tient.
|
||||
- **Décision** : un agent à part, `etiqueteur` (`.claude/agents/etiqueteur.md`), un analyste qui ne produit que des étiquettes : la consigne de l'essai de D-105 (`.claude/skills/analyser-lot/etiquettes-auto.md`, retirée) devient son corps, sans `CLAUDE.md` ; mêmes lectures permises, même format d'étiquettes, même analyse. Il ne reçoit que le dossier de station et le lot ; les étiquettes vont par défaut dans `labeling/auto/<STATION>.jsonl` (créé s'il manque), l'analyse dans `labeling/auto/<date>_<STATION>_<début du lot>/`. Ses scripts dans `outils/` sont permis en plus de ce que permet `lire-les-donnees` (difficulté relevée par l'essai JUNGFRAU). Appel : `@etiqueteur data/<STATION> du <début> au <fin>`.
|
||||
- **Pourquoi** : l'utilisateur, 2026-11-02 : un agent d'étiquetage, peut-être mieux qu'une consigne à part de l'analyste. Un rôle par responsabilité (D-088) : l'analyste reste la vérité de `/events-learner` et de `/labels-learner`, sa consigne ne porte plus deux métiers.
|
||||
- **Options écartées** : garder l'analyste avec une consigne nommée dans la demande (D-105) : chaque appel doit la nommer, et l'agent porte deux rôles.
|
||||
- **Conséquence** : `analyser-lot` ne sert plus aux étiquettes automatiques ; pas d'essai de l'agent lui-même avant que l'utilisateur le lance.
|
||||
- **Précisions de l'utilisateur, 2026-11-02** : une étiquette n'est qu'un seul événement, jamais un ensemble ; un événement qui se répète s'étiquette à chaque fois ; le travail est exhaustif mais précis. Elles remplacent « un phénomène thermique de plusieurs jours : une étiquette pour toute la plage » : la vague de chaque jour a son étiquette, un seul événement de plusieurs jours (une montée lente) garde la sienne.
|
||||
|
||||
## D-107 — 2026-11-02 — Une catégorie dans l'étiquette
|
||||
- **Statut** : active, à l'essai ; point 71 du plan du journal du matin ; précise D-098 (texte « sans catégorie ») et D-106 ; les deux thermiques réunies par D-108.
|
||||
- **Décision** : une étiquette peut porter un champ `categorie`, entre les bornes et le texte : `{"debut", "fin", "categorie", "description"}`. Ses valeurs : les clés des douze catégories du journal (D-074, section 4 de `events/carte-des-evenements.md`, `CATEGORIES` de `detectors/categories.py`), ou `aucune` (ne touche pas les courbes), comme le champ `categorie` des étiquettes de l'analyste (`analyser-lot`). L'`etiqueteur` en donne une, obligatoire, à chaque étiquette (deux phénomènes de catégories différentes : deux étiquettes) et dit pourquoi dans son analyse. L'outil d'étiquetage a un menu Category, à l'Add et à l'édition, facultatif (les 24 étiquettes de l'expert n'en ont pas), la catégorie en tête du texte dans la barre et au survol ; un Save qui la change retire `revue`, comme pour le texte.
|
||||
- **Pourquoi** : l'utilisateur, 2026-11-02 : l'étiqueteur doit donner une catégorie à l'événement ; l'outil, un champ pour la mettre, et un champ dans l'étiquette. Les catégories du journal plutôt que les phénomènes de la carte des étiquettes : une liste fixe, celle des détecteurs, déjà celle de l'analyste ; c'est la forme structurée que le point 71 attendait pour comparer aux détecteurs.
|
||||
- **Options écartées** : les phénomènes de la carte des étiquettes (refaite par `/labels-map`, ses titres changent) ; les familles A à G de la carte des événements (trop larges pour les détecteurs) ; la catégorie obligatoire dans l'outil (les étiquettes déjà écrites n'en ont pas).
|
||||
- **Conséquence** : `/review-labels` et `/labels-map` ne lisent pas encore la catégorie ; à brancher quand l'utilisateur le demande.
|
||||
|
||||
## D-108 — 2026-11-02 — Étiquettes : un seul déplacement thermique, les anomalies seulement
|
||||
- **Statut** : active, à l'essai ; point 71 du plan du journal du matin ; précise D-106 et D-107.
|
||||
- **Décision** : dans les étiquettes, `dilatation_thermique` et `contraction_thermique` deviennent une seule catégorie, `deplacement_thermique` (« Thermal displacement ») : le sens ne compte pas ; l'aller puis le retour restent deux événements, deux étiquettes. Le journal et ses détecteurs gardent leurs deux catégories. L'`etiqueteur` n'étiquette que les anomalies : ce qui se voit sur les courbes corrigées ou les prive de données ; ce que la caméra compense sans rien laisser sur les courbes corrigées va dans son analyse, pas dans une étiquette (il n'a donc plus de raison d'écrire `aucune`, que l'outil garde pour l'expert). Les 12 étiquettes thermiques de JUNGFRAU du 30.09 au 05.10 passées à `deplacement_thermique`.
|
||||
- **Pourquoi** : l'utilisateur, 2026-11-02, après le deuxième essai de l'étiqueteur (JUNGFRAU, 30.09 → 05.10, « globalement bon ») : le sens d'un déplacement thermique n'est pas important ; un phénomène compensé par la caméra, dont les courbes corrigées ne montrent rien, ne vaut pas une classification.
|
||||
- **Options écartées** : changer aussi les catégories du journal (phrases du site, détecteurs, benchmark) : pas demandé ; la comparaison avec les détecteurs réunit les deux thermiques.
|
||||
- **Conséquence** : les étiquettes ne prennent plus toutes leurs clés dans le journal ; un script qui les compare aux détecteurs lit `deplacement_thermique` comme l'une ou l'autre.
|
||||
Reference in new issue
Block a user