Labeling tool: the open label's bounds are edited in two UTC date fields and saved with its text; plan point 71, an integrator for the labels
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
1 parent
3a07d45ffe
commit
c72ef6fdf1
4 files changed
+37
-18
No files matched your search
+1
-1
@@ -974,7 +974,7 @@ Règles du journal :
|
||||
|
||||
## D-098 — 2026-10-30 — L'expert étiquette lui-même : `labeling/`
|
||||
- **Statut** : active, à l'essai ; point 68 du plan du journal du matin ; complétée par D-100 (les events validés y ont leurs étiquettes).
|
||||
- **Décision** : un outil local et très simple, `labeling/labeling.py`, qui ne sert qu'à se repérer dans le temps et à écrire ; les données se consultent sur le monitoring. Le data loader de la page Status, un plot à la fois (menu Advanced d'Explore, plus les métriques système numériques, sans les identifiants), une barre de temps alignée où l'on sélectionne une plage, du texte, et Add écrit aussitôt. Des étiquettes en langage naturel, **sans catégorie**, dans `labeling/<STATION>.jsonl`, une ligne chacune (`debut`, `fin`, `description`), versionné ; zones grisées sur tous les plots, chevauchements admis ; un clic sur une étiquette permet de lire et de modifier son texte (Save, demande de l'utilisateur, 2026-10-30) et de la retirer (Delete, 2026-11-02) ; ses bornes se corrigent dans le fichier.
|
||||
- **Décision** : un outil local et très simple, `labeling/labeling.py`, qui ne sert qu'à se repérer dans le temps et à écrire ; les données se consultent sur le monitoring. Le data loader de la page Status, un plot à la fois (menu Advanced d'Explore, plus les métriques système numériques, sans les identifiants), une barre de temps alignée où l'on sélectionne une plage, du texte, et Add écrit aussitôt. Des étiquettes en langage naturel, **sans catégorie**, dans `labeling/<STATION>.jsonl`, une ligne chacune (`debut`, `fin`, `description`), versionné ; zones grisées sur tous les plots, chevauchements admis ; un clic sur une étiquette permet de lire et de modifier son texte (Save, demande de l'utilisateur, 2026-10-30) de corriger ses bornes et de la retirer (Delete, 2026-11-02).
|
||||
- **Pourquoi** : l'utilisateur, 2026-10-30 : que l'analyste prenne connaissance des phénomènes sur des cas étiquetés par l'expert, en plus de ce qu'on lui explique (point 67) ; pas de catégorie pour ne pas borner, on en déduira après coup ; le but est d'avoir les étiquettes, pas une application. Constat de Claude : la seule vérité du projet était l'analyste (`score.py`, benchmark).
|
||||
- **Options écartées** : l'étiquetage dans la page Status, avec les status des détecteurs, `error_value`, une température et une catégorie facultative (première proposition de Claude) : l'outil doit rester simple, le monitoring montre le reste ; le format de `etiquettes.json` : ses champs obligatoires (catégorie, preuve, capteurs) bornent, et un seul objet JSON se réécrit à chaque ajout.
|
||||
- **Conséquence** : `score.py` ne lit pas ces étiquettes (pas de catégorie, et un instant sans étiquette n'y veut pas dire « rien vu »). Comment l'analyste s'en sert reste à décider, une fois assez d'étiquettes écrites (point 69 du plan : `/labels-learner` proposé). Une étiquette n'entre dans `events/` que par `/new-event` ou l'`event-builder`.
|
||||
|
||||
@@ -127,6 +127,7 @@ Types : **Comprendre** (lire, expliquer, rien ne change), **Décider** (l'utilis
|
||||
| 68 | L'expert étiquette lui-même : un outil web | Décider, Coder | — | construit le 2026-10-30 (D-098), `labeling/` ; à essayer par l'utilisateur |
|
||||
| 69 | Apprendre des étiquettes de l'expert : `/labels-learner` | Décider, Coder | 67, 68 | `/labels-learner` construit le 2026-11-02 (D-099) ; premier essai, sur la perte de référence, à lancer par l'utilisateur |
|
||||
| 70 | Des étiquettes proposées par l'analyste, vérifiées par l'expert | Décider, Coder | 48, 68, 69 | 2026-11-02 : les étiquettes d'abord, base de connaissance (D-100) ; étiquettes des events validés en cours |
|
||||
| 71 | Un intégrateur : ce que deviennent les étiquettes | Décider | 69, 70 | idée du 2026-11-02 ; avis de Claude, à discuter après la revue des étiquettes |
|
||||
|
||||
Chemins conseillés : le plus simple et le plus parlant d'abord, **11 (visibilité simple), 38 (ses statuts : bonne, moyenne, nulle) puis 7 (bouton `Images`)**, qui marchent sans le classement ; le cœur du retour, c'est **5 → 6 → 7 → 8 → 9 → 10** ; les points 1 à 4 se lisent avant si l'on veut d'abord tout comprendre ; le point 27 se lance en parallèle (il n'attend rien).
|
||||
|
||||
@@ -1721,6 +1722,18 @@ Un seul passage de l'analyste par phénomène, au lieu de deux : moins coûteux
|
||||
- [ ] Le but 2 (les détecteurs) et les propositions de l'analyste : plus tard.
|
||||
- [x] Un vérificateur des étiquettes de l'utilisateur, l'agent `label-reviewer` (D-101) : il pointe les incohérences et pose ses questions ; construit le 2026-11-02, premier essai à faire.
|
||||
|
||||
### Point 71 : Un intégrateur : ce que deviennent les étiquettes
|
||||
|
||||
**Idée de l'utilisateur (2026-11-02).** Avec 43 étiquettes (7 stations), assez pour commencer à construire ; l'utilisateur les revoit d'abord avec le `label-reviewer`. Les étiquettes sont une base de connaissance, mais seulement une base : il faudra un intégrateur.
|
||||
|
||||
**Avis de Claude.** L'étiquette sert trois usages, qui demandent chacun leur intégration :
|
||||
1. **Le savoir écrit** (le mécanisme, les signatures, les faux amis) : existe, `/labels-learner` puis le `documentaliste` (D-099), jamais lancé. Le lancer une fois avant de construire autre chose.
|
||||
2. **L'analyste mesuré** (D-100 : son travail est de refaire la classification de l'expert sur les plages) : manque. L'analyste lit une plage étiquetée sans l'étiquette, puis on compare ; le texte libre ne se compare pas par script, il faut un juge (un agent qui dit d'accord, en partie, en désaccord) ou une forme structurée.
|
||||
3. **Les détecteurs, puis l'apprentissage automatique** : manque ; il leur faut une forme structurée (catégorie, capteurs, plage) et des périodes couvertes en entier (point 70, but 2).
|
||||
- La pièce commune à 2 et 3 : **dériver, d'une étiquette revue, sa forme structurée** (catégorie de la carte, capteurs, cause, preuve), après coup, comme D-098 le prévoyait, l'expert gardant le dernier mot. C'est peut-être cela, l'intégrateur.
|
||||
- Pas un seul agent qui fait tout : un rôle par responsabilité (D-088) ; l'intégrateur serait un processus, comme `/events-learner`, qui enchaîne des agents existants.
|
||||
- Questions : l'ordre (1 d'abord, puis la forme structurée ?) ; la forme structurée, dans la ligne de l'étiquette ou à côté ; un juge pour mesurer l'analyste, ou la forme structurée seulement.
|
||||
|
||||
---
|
||||
|
||||
## Annexe A — Les rapports des agents du 2026-10-23, résumés
|
||||
@@ -1920,3 +1933,4 @@ Une ligne par séance : date, point(s) traités, ce qui a changé, ce qui reste.
|
||||
- 2026-11-02 : point 70, demande de l'utilisateur : les étiquettes des events dans les fichiers des stations, que charge son outil ; 30 étiquettes décodées et ajoutées, `labeling/E-xxx.jsonl` abandonnés.
|
||||
- 2026-11-02 : point 70, l'utilisateur : champ `source` retiré des étiquettes des events, même format que les autres.
|
||||
- 2026-11-02 : point 70, l'utilisateur : `labeling/manual/` (à la main, vérifiées avec le `label-reviewer`) et `labeling/auto/` (ce que l'analyste trouvera seul) (D-102) ; les 43 étiquettes dans `manual/`.
|
||||
- 2026-11-02 : point 71 ajouté (idée de l'utilisateur : un intégrateur des étiquettes) : avis de Claude, trois usages, la forme structurée comme pièce commune ; à discuter après la revue des étiquettes.
|
||||
Reference in new issue
Block a user