Labeling processes: lessons from the auto-label reviews (D-130)
- The labeler writes to its own folder (etiquettes.jsonl); labeling/auto/ only holds reviewed labels, merged by /review-auto-labels (new apply script: dated, sorted, checked). - labeling/controle.py also checks a proposed file; the labeler and reviewers run it before handing back. Reviewers keep their measurements in revue.md, never in the labels. - Reviewer instructions explicitly add their scripts, .venv/bin/python and for loops to the lire-les-donnees commands (the contradiction raised by 12 reviews). - Expert validation optional in /review-auto-labels; an expert hint given to the labeler is written in the labels it touches. Cross-review ends with the releveur. - docs/ameliorations-processus.md: 17 entries from this review, by the releveur. Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
1 parent
35b5ed4d74
commit
d55de98746
19 files changed
+470
-37
No files matched your search
@@ -72,7 +72,7 @@ Séance de référence des entrées ci-dessous : 2026-10-27T0835Z, WILDSTRUBEL,
|
||||
|
||||
Séance de référence des entrées ci-dessous : 2026-10-26T1149Z, NORDEND, lot 01 et contrôle (S1 dans les occurrences) ; puis 2026-10-26T1729Z, CLARIDEN, lot 01 (S2). Les faits vérifiés dans le dépôt sont donnés comme tels ; ce qui ne vient que du dire d'un agent est marqué « selon l'agent ».
|
||||
|
||||
- **Commandes Bash hors de la liste du skill** (2026-10-26, *contradiction*) : le skill de lecture ne permet que les outils, `ls`, `grep` et `date`, un tube vers `grep` seulement. Les lecteurs ont pourtant eu besoin de `head`, `tail`, `sed`, `cut`, `wc`, de `grep` sur un fichier de résultats et de `mkdir -p` : sortie trop longue à lire, chemin du PNG à isoler. Ils l'ont fait sans savoir si c'était permis (une commande `grep | cut | sed` n'a rendu aucune sortie). Le `mkdir -p` paraît inutile : `ensemble.py`, `graphique.py` et `vignettes.py` créent leur dossier de sortie (`ensemble.py:87`, `graphique.py:83`, `vignettes.py:60`) ; C-002 dit pourtant en avoir eu besoin, non vérifié. *En cause* : `.claude/skills/lire-les-donnees/SKILL.md:33` (liste de commandes ; `:34` dans l'arbre de travail du 2026-10-26), `.claude/agents/lecteur.md:25`. *Occurrences* : S1 lot 01 lecture-1 (`grep -v` sur fichier), lecture-2 (`tail`, `head`), lecture-3 (`wc -l`, `head`, `tail`), lecture-4 (`sed`, `grep` sur fichier) ; S1 contrôle C-002 (`sed`, `mkdir -p`), C-004 (`mkdir -p`, `head`), C-005 (`cut`, `sed`) ; Étiquetage E1 C-002 (`sed -n` pour relire la sortie trop longue d'`ensemble.py` rangée par l'outil, `head` et `tr` pour l'affichage) ; /boucle B3 lot 01 analyste (table d'`ensemble.py` de 1 215 lignes sur un lot de 10 jours, coupée à l'affichage, redirigée dans un fichier pour la lire en deux fois ; liste en `.claude/skills/lire-les-donnees/SKILL.md:34`) ; S2 lot 01 lecture-1 (sortie d'`ensemble.py` de plus de 900 lignes redirigée dans un fichier, relue par `sed`), lecture-2 (`ensemble.py` 947 lignes, `plages.py` 575 lignes, redirigées ; `awk` dans un tube une fois), lecture-3 (`ensemble.py`, `--rigide` et `plages.py` redirigés, relus par `sed -n`, `head`, `cut`, `tr`, `awk`, `wc`) ; la redirection elle-même n'est ni permise ni interdite par la liste. *Piste* : voir l'entrée suivante, qui en est la cause première.
|
||||
- **Commandes Bash hors de la liste du skill** (2026-10-26, *contradiction*) : le skill de lecture ne permet que les outils, `ls`, `grep` et `date`, un tube vers `grep` seulement. Les lecteurs ont pourtant eu besoin de `head`, `tail`, `sed`, `cut`, `wc`, de `grep` sur un fichier de résultats et de `mkdir -p` : sortie trop longue à lire, chemin du PNG à isoler. Ils l'ont fait sans savoir si c'était permis (une commande `grep | cut | sed` n'a rendu aucune sortie). Le `mkdir -p` paraît inutile : `ensemble.py`, `graphique.py` et `vignettes.py` créent leur dossier de sortie (`ensemble.py:87`, `graphique.py:83`, `vignettes.py:60`) ; C-002 dit pourtant en avoir eu besoin, non vérifié. *En cause* : `.claude/skills/lire-les-donnees/SKILL.md:33` (liste de commandes ; `:34` dans l'arbre de travail du 2026-10-26), `.claude/agents/lecteur.md:25`. *Occurrences* : S1 lot 01 lecture-1 (`grep -v` sur fichier), lecture-2 (`tail`, `head`), lecture-3 (`wc -l`, `head`, `tail`), lecture-4 (`sed`, `grep` sur fichier) ; S1 contrôle C-002 (`sed`, `mkdir -p`), C-004 (`mkdir -p`, `head`), C-005 (`cut`, `sed`) ; Étiquetage E1 C-002 (`sed -n` pour relire la sortie trop longue d'`ensemble.py` rangée par l'outil, `head` et `tr` pour l'affichage) ; /boucle B3 lot 01 analyste (table d'`ensemble.py` de 1 215 lignes sur un lot de 10 jours, coupée à l'affichage, redirigée dans un fichier pour la lire en deux fois ; liste en `.claude/skills/lire-les-donnees/SKILL.md:34`) ; S2 lot 01 lecture-1 (sortie d'`ensemble.py` de plus de 900 lignes redirigée dans un fichier, relue par `sed`), lecture-2 (`ensemble.py` 947 lignes, `plages.py` 575 lignes, redirigées ; `awk` dans un tube une fois), lecture-3 (`ensemble.py`, `--rigide` et `plages.py` redirigés, relus par `sed -n`, `head`, `cut`, `tr`, `awk`, `wc`) ; revue des étiquettes RA, revue MICHIGAN (table d'`ensemble.py --rigide` plus longue qu'un appel n'affiche, lue dans sa sortie enregistrée par `grep` sur les dates), revue NEBRASKA (`jours.py --bornes` sur un mois, relu par morceaux depuis le fichier) ; la redirection elle-même n'est ni permise ni interdite par la liste. *Piste* : voir l'entrée suivante, qui en est la cause première.
|
||||
|
||||
- **Sortie d'`inventaire.py` trop longue pour s'afficher** (2026-10-26, *commande*) : sur ce dépôt, l'inventaire rend 72 à 73 Ko (selon les agents : 841 lignes « autres fichiers », 29 exports, 696 images, 923 lignes avec `--debut`/`--fin`) ; Bash la range dans un fichier de résultats que le lecteur doit relire par `grep`, `sed` ou `head`, d'où l'entrée précédente. Le skill n'annonce pas cette longueur. Non revérifié (taille donnée par les agents). *En cause* : `.claude/skills/lire-les-donnees/SKILL.md:21` (ligne de l'outil), `:38` (méthode : « Inventaire »). *Occurrences* : S1 lot 01 lecture-1, lecture-2, lecture-3, lecture-4. *Piste* : que l'outil n'imprime pas la liste des fichiers hors déplacements.
|
||||
|
||||
@@ -106,7 +106,7 @@ Séance de référence des entrées ci-dessous : 2026-10-26T1149Z, NORDEND, lot
|
||||
|
||||
- **Contrôle : parallélisme non précisé** (2026-10-26, *consigne floue*) : le skill décrit le contrôle cas par cas (lecteur puis correcteur, pour chaque `C-xxx`) sans dire si les cinq cas peuvent tourner en parallèle ; l'orchestrateur l'a fait. *En cause* : `.claude/skills/aiguiser/SKILL.md:46-52`. *Occurrences* : S1, orchestrateur.
|
||||
|
||||
- **Exports au nom d'une autre station dans le dossier de station** (2026-10-26, *consigne absente*) : `data/CLARIDEN/displacement/` contient, en plus des `CLARIDEN_…`, `L9 BCN_advanced_20260917_20260920.csv` et `L9 BCN_20260918_to_20260920_1hour.csv` (vérifié) ; rien ne dit s'ils font partie de la station. Les outils les prennent sans le dire : tout CSV à colonne `sensor_name` est un export « advanced », et un même capteur au même instant ne garde qu'un relevé (vérifié : `agents/diagnostic/outils/donnees.py:33-34`, `:61`). Les lecteurs n'ont pas su s'il y avait des mesures en double du 17 au 20/09 ; le correcteur a vérifié qu'ils doublent les lignes de CLARIDEN et ne les a pas chargés. *En cause* : `.claude/skills/lire-les-donnees/SKILL.md:21` (inventaire), `.claude/agents/correcteur.md:19` (« les exports « advanced » de `displacement/` »). *Occurrences* : S2 lot 01 lecture-1, lecture-2, ecart-1.
|
||||
- **Exports au nom d'une autre station dans le dossier de station** (2026-10-26, *consigne absente*) : `data/CLARIDEN/displacement/` contient, en plus des `CLARIDEN_…`, `L9 BCN_advanced_20260917_20260920.csv` et `L9 BCN_20260918_to_20260920_1hour.csv` (vérifié) ; rien ne dit s'ils font partie de la station. Les outils les prennent sans le dire : tout CSV à colonne `sensor_name` est un export « advanced », et un même capteur au même instant ne garde qu'un relevé (vérifié : `agents/diagnostic/outils/donnees.py:33-34`, `:61`). Les lecteurs n'ont pas su s'il y avait des mesures en double du 17 au 20/09 ; le correcteur a vérifié qu'ils doublent les lignes de CLARIDEN et ne les a pas chargés. *En cause* : `.claude/skills/lire-les-donnees/SKILL.md:21` (inventaire), `.claude/agents/correcteur.md:19` (« les exports « advanced » de `displacement/` »). *Occurrences* : S2 lot 01 lecture-1, lecture-2, ecart-1 ; revue des étiquettes RA, revue NIEDERHORN (`data/NIEDERHORN/displacement/` contient deux exports « Sixense OLS Project Toronto… », vérifié, qui doublent des relevés du 30.09 au 03.10 selon l'agent ; outils lancés sur le miroir de l'etiqueteur, `labeling/auto/etiqueteur/NIEDERHORN_2026-10-01/donnees/`, comme lui).
|
||||
|
||||
- **Écart seul : les figures de la lecture font-elles partie des « rendus que ta demande cite » ?** (2026-10-26, *consigne floue*) : la demande cite `lecture-J.md`, pas son dossier de figures ; le correcteur ne lit, dans `vues-deplacements/`, que « les rendus que ta demande cite ». Pour départager outil, mode d'emploi et lecteur, il a ouvert trois figures de `lecture-2/`, en les tenant pour une partie de la lecture (puis trois de `lecture-3/` à l'écart suivant). *En cause* : `.claude/agents/correcteur.md:20` et `:22` ; `.claude/skills/aiguiser/SKILL.md:38`. *Occurrences* : S2 lot 01 ecart-2, ecart-3.
|
||||
|
||||
@@ -177,3 +177,41 @@ Séance de référence des entrées ci-dessous : 2026-11-03T1249Z, NEBRASKA, lot
|
||||
- **Corriger `etiquettes.json` après la fiche : ni Edit, ni script permis** (2026-10-26, *consigne absente*) : la correction par la fiche n'est décrite nulle part ailleurs que dans « puis corrigées par la fiche » ; l'analyste n'a que Read, Bash et Write (vérifié), et `critiquer-lot` interdit tout autre script. Les agents ont corrigé le JSON par Bash : `sed -i` enchaîné à `grep` et au contrôle (C-002), un court script Python (C-004, qui dit qu'il aurait dû tout réécrire avec Write) ; contrôle « bon » ensuite. *En cause* : `.claude/agents/analyste.md:4` ; `.claude/skills/critiquer-lot/SKILL.md:27` ; `.claude/skills/nouveau-cas/SKILL.md:57`. *Occurrences* : E1 C-002 ; E1 C-004.
|
||||
|
||||
- **`ensemble.py --capteurs` écrase les figures de la lecture complète** (2026-10-26, *commande*) : le nom des PNG (`commun`, `multiples`, `residus`) ne porte que la station et les bornes, pas les capteurs (vérifié : `agents/diagnostic/outils/ensemble.py:96`) ; un passage sur un sous-ensemble remplace les figures de tous les capteurs. L'analyste a relancé sans `--capteurs` pour les retrouver. *En cause* : `agents/diagnostic/outils/ensemble.py:96`. *Occurrences* : E1 C-003.
|
||||
|
||||
## Revue des étiquettes automatiques (/review-auto-labels, /cross-review-labels)
|
||||
|
||||
Processus de référence : 2026-11-04 et 2026-11-05 (RA dans les occurrences) : revues par station (`labeling/auto/revue/<STATION>_<début>/`, « revue <STATION> »), revue croisée par famille (`labeling/auto/revue-croisee/2026-11-04/<famille>/`, « croisée <famille> »), finition (`…/finition/<x>/`, « finition <x> »), cohérence finale (`…/derniers/coherence/`), réécriture des descriptions en mots, trois lots de l'etiqueteur (`labeling/auto/etiqueteur/<lot>/`, « etiqueteur <lot> »), carte refaite par cinq documentalistes. Les lignes citées sont celles de l'arbre de travail du 2026-11-05 après le commit `35b5ed4`, avec des consignes modifiées non commitées (`.claude/agents/etiqueteur.md`, `.claude/skills/review-auto-labels/`, `.claude/skills/cross-review-labels/`, `labeling/controle.py`) : les mentions **traité** qui s'y appuient valent sous réserve de leur commit. Ce qui ne vient que du dire d'un agent est marqué « selon l'agent ».
|
||||
|
||||
- **Scripts et boucles : `lire-les-donnees` les interdit, les consignes de revue les permettent** (2026-11-04, *contradiction*) : `lire-les-donnees` réserve Bash à ses outils, `ls`, `grep` et `date`, une commande par appel, sans boucle `for`, « N'écris aucun autre script » (vérifié ; l'appelant peut ajouter des commandes). Les consignes de revue disent que ces règles d'usage valent pour le relecteur et lui donnent, dans la même phrase, ses scripts dans `outils/`, sans rien dire des boucles (vérifié). Tous ont suivi la revue ; plusieurs ont lancé des boucles `for` (vignettes, `resume.py`, `metriques.py`, `ensemble.py --rigide`) ou des `python3 -c`, sans savoir si c'était permis. *En cause* : `.claude/skills/review-auto-labels/analyste.md:66` ; `.claude/skills/review-auto-labels/coherence.md:13`, `:57` ; `.claude/skills/cross-review-labels/analyste.md:15`, `:65` ; `.claude/agents/etiqueteur.md:30` (scripts « en plus », boucles non dites) contre `.claude/skills/lire-les-donnees/SKILL.md:39`. *Occurrences* : revue BREITHORN (boucle de vignettes) ; revue FLORIDA (boucle) ; revue JUNGFRAU (scripts) ; revue MICHIGAN (boucle sur `resume.py`, `grep` sur les sorties) ; revue NORDEND_2026-08-10 (scripts, boucle sur `serie.py`, `python3 -c`) ; revue SNCF01 (quatre scripts, petites boucles) ; revue WILDSTRUBEL_2026-09-01 (scripts) ; revue WILDSTRUBEL_2026-09-07 (scripts, boucle sur `vignettes.py`) ; cohérence BREITHORN-MICHIGAN-NEBRASKA (boucle sur `metriques.py`) ; croisée Displacement (boucle sur `--rigide`) ; finition wildstrubel (scripts) ; etiqueteur NORDEND_2026-08-16 (une boucle). Voir aussi l'entrée /aiguiser « Commandes Bash hors de la liste du skill ». **traité** (2026-11-05 : les consignes de revue, de cohérence, de revue croisée et de l'etiqueteur ajoutent explicitement leurs scripts, `.venv/bin/python` et les boucles `for` aux commandes de `lire-les-donnees`).
|
||||
|
||||
- **Consignes changées en cours de revue par station** (2026-11-04, *consigne absente*) : deux messages de l'orchestrateur en cours de travail : partir des étiquettes et de l'analyse, ne pas refaire l'étiquetage ; puis ajouter la section « Nouveaux cas », les propositions étant appliquées sans validation de l'expert. Le travail déjà fait (inventaire, lecture large du lot) a été gardé pour les bornes et les trous. L'application sans validation contredisait le skill (l'expert décide, §3). *En cause* : `.claude/skills/review-auto-labels/SKILL.md` §3 (au commit `35b5ed4`) ; `.claude/skills/review-auto-labels/analyste.md:3` (« l'expert (l'utilisateur) décide de tes propositions », toujours là, vérifié). *Occurrences* : revue FLORIDA ; revue JUNGFRAU ; revue NIEDERHORN ; revue NORDEND_2026-08-10 ; revue SNCF01 ; revue WILDSTRUBEL_2026-09-01.(auparavant : traité en partie, non commité : « ne refais pas l'étiquetage » et « Nouveaux cas » dans `analyste.md:3`, `:54` ; application sans validation prévue, `review-auto-labels/SKILL.md:27` ; reste `analyste.md:3`, qui ne le dit pas). **traité** (2026-11-05 : `analyste.md:3` dit aussi que ses choix sans réponse s'appliquent quand l'utilisateur n'arbitre pas).
|
||||
|
||||
- **Indication de l'expert donnée à l'etiqueteur : lisible seulement dans son analyse** (2026-11-04, *consigne absente*) : l'indication de l'expert sur l'effet thermique à BREITHORN n'apparaît que dans la section « Difficultés » de l'analyse de l'etiqueteur (« La consigne a changé deux fois en cours de travail (distance des cibles, puis effet thermique écarté et tilt) », vérifié : `labeling/auto/etiqueteur/BREITHORN_2026-10-01/analyse.md:210`) ; le relecteur n'a pu la lire dans les mots de l'expert. Rien ne dit où consigner une indication de l'expert donnée en conversation à l'etiqueteur. *En cause* : `.claude/agents/etiqueteur.md:15` (« Ce que tu reçois »), `:52-75` (plan de l'analyse) ; `.claude/skills/review-auto-labels/analyste.md:18` (« d'après l'expert », dans une étiquette seulement). *Occurrences* : revue BREITHORN. **traité** (2026-11-05 : l'etiqueteur l'écrit dans les étiquettes qu'elle touche, « d'après l'expert », et dans son analyse, section 3).
|
||||
|
||||
- **Les ids des étiquettes sont des numéros de ligne** (2026-11-04, *format*) : la revue croisée identifie chaque étiquette par `<STATION>#<ligne>` du fichier du moment, et rien ne doit écrire dans `labeling/auto/` jusqu'à l'application ; les revues par station numérotent, elles, par la ligne du fichier relu. Les deux numérotations divergent après chaque application (la 74 de la revue WILDSTRUBEL est WILDSTRUBEL#76, sa 86 est #98, selon l'agent ; les numéros de la croisée Thermal displacement ne sont plus ceux de la finition, convertis par les bornes). Une autre session a écrit dans `labeling/auto/LENZSPITZE.jsonl` pendant la revue croisée : la comparaison à la copie l'a détecté, mais l'application aurait pu viser les mauvaises lignes. Les scripts qui proposent à partir des JSONL du moment sont à relancer après tout changement. *En cause* : `.claude/skills/cross-review-labels/SKILL.md:19`, `:32` ; `.claude/skills/review-auto-labels/analyste.md:66` (« se numérote par sa ligne dans le fichier relu »). *Occurrences* : RA orchestrateur (LENZSPITZE) ; croisée Displacement ; finition divers ; cohérence BREITHORN-MICHIGAN-NEBRASKA (`proposer.py` à relancer). *Piste* : un identifiant stable porté par chaque étiquette.
|
||||
|
||||
- **Les relecteurs de la finition ont mis leurs mesures dans les descriptions** (2026-11-04, *consigne absente*) : degrés, pixels, bruits ; 171 descriptions réécrites en mots ensuite. La règle était dans `labeling/regles-d-etiquetage.md:72`, que les relecteurs lisent, mais la consigne de la revue croisée (reprise par la finition, « même méthode ») ne la rappelait pas au moment d'écrire `modifications.jsonl`, et seul l'orchestrateur comptait les chiffres, après application. *En cause* : `.claude/skills/cross-review-labels/analyste.md:57-65` et `.claude/skills/cross-review-labels/SKILL.md:38`, `:42` (au commit `35b5ed4`). *Occurrences* : RA orchestrateur (finition). **traité** (non commité : « Tes mesures vont dans `revue.md`, jamais dans les étiquettes » et contrôle par `labeling/controle.py` avant de rendre, `cross-review-labels/analyste.md:67`, `review-auto-labels/analyste.md:30` ; compte des chiffres par `labeling/controle.py`, `cross-review-labels/SKILL.md:42`).
|
||||
|
||||
- **Comptage des chiffres : le premier motif prenait noms de cibles et dates pour des valeurs** (2026-11-04, *commande*) : le skill demande de compter les valeurs chiffrées sans donner le script ; le premier motif de l'orchestrateur relevait des noms de cibles (F4.2) et des dates (05.10). *En cause* : `.claude/skills/cross-review-labels/SKILL.md:42` (au commit `35b5ed4`, « Compte-les », sans outil). *Occurrences* : RA orchestrateur. **traité** (non commité : le motif, sans chiffre précédé d'une lettre ou d'un point, est dans `labeling/controle.py:21`, que `cross-review-labels/SKILL.md:42` nomme).
|
||||
|
||||
- **Une règle écrite par l'orchestrateur, retirée par l'utilisateur** (2026-11-04, *autre*) : la règle « jamais probable ni sans doute » a été écrite dans les règles d'étiquetage puis retirée par l'utilisateur, qui la jugeait inutile. Le skill fait verser les règles tranchées dans `labeling/regles-d-etiquetage.md` sans les soumettre d'abord à l'utilisateur (la revue par station, elle, propose « Pour l'etiqueteur » sans l'appliquer). *En cause* : `.claude/skills/cross-review-labels/SKILL.md:43` contre `.claude/skills/review-auto-labels/SKILL.md` §4 (« propose-la à l'utilisateur, sans l'appliquer »). *Occurrences* : RA orchestrateur.
|
||||
|
||||
- **L'etiqueteur écrivait par défaut dans `labeling/auto/`** (2026-11-04, *chemin*) : par défaut, ses étiquettes étaient ajoutées à `labeling/auto/<STATION>.jsonl` (vérifié : `git show 35b5ed4:.claude/agents/etiqueteur.md`, lignes 15 et 40) : des étiquettes non relues s'y seraient mêlées aux relues. L'orchestrateur a redirigé les trois lots dans `labeling/auto/etiqueteur/<lot>/etiquettes.jsonl` (vérifié). *En cause* : `.claude/agents/etiqueteur.md:15`, `:40` (au commit `35b5ed4`). *Occurrences* : RA orchestrateur. **traité** (non commité : `etiqueteur.md:15`, `:40`, « Tu n'écris jamais dans `labeling/auto/<STATION>.jsonl` » ; `review-auto-labels/SKILL.md` §1 relit un lot pas encore versé).
|
||||
|
||||
- **Limite d'usage : agents arrêtés en cours de travail** (2026-11-04, *autre*) : la limite d'usage a arrêté cinq agents ; l'orchestrateur les a repris par message, sans perte ; le relecteur de WILDSTRUBEL_2026-09-07 n'a rien refait, réutilisant les sorties déjà écrites. Aucun des deux skills ne dit comment reprendre un agent arrêté (vérifié : `grep`). *En cause* : `.claude/skills/review-auto-labels/SKILL.md`, `.claude/skills/cross-review-labels/SKILL.md` (rien sur la reprise). *Occurrences* : RA orchestrateur (cinq agents) ; revue WILDSTRUBEL_2026-09-07.
|
||||
|
||||
- **`jours.py --bornes` : niveau de nuit et seuil en bruits fragiles** (2026-11-04, *commande*) : chaque jour se mesure face à la nuit qui le précède, au seuil en bruits du pas natif. Selon les agents : quand la caméra dérive toute la nuit, les « après » tombent à « - » ou le dernier dépassement déborde sur la nuit suivante (NORDEND ; le pan de NIEDERHORN monte d'environ 0,01° de 22:00 à 09:00) ; sur une pose très bruitée, le seuil est inutilisable (FLORIDA) ; la suite du tilt s'arrête sur un point isolé de la nuit (WILDSTRUBEL). Les agents ont daté par leurs propres scripts (`debut_matin.py`, `pose_jour.py`) ou sur les médianes. Les règles disent déjà de ne pas prendre le premier écart de `jours.py --bornes` pour le début d'un cycle (`labeling/regles-d-etiquetage.md:35`). *En cause* : `agent-tools/jours.py` (`--bornes`) ; `.claude/skills/lire-les-donnees/SKILL.md:27`, `:48`. *Occurrences* : revue FLORIDA ; revue NORDEND_2026-08-10 ; finition niederhorn ; etiqueteur WILDSTRUBEL_2026-09-07.
|
||||
|
||||
- **`ensemble.py --rigide` : pas de suite par cible, et les rejets dominent sur plusieurs jours** (2026-11-04, *commande*) : la table au pas ne donne `dx`, `dy` que des références ; par cible, seulement le minimum, le maximum et la valeur au dernier instant (vérifié : `.claude/skills/lire-les-donnees/SKILL.md:25`). Pour suivre une cible pas à pas, les agents ont écrit `residu.py` puis `perspective.py`. Selon les agents, sur plusieurs jours le résumé est noyé par les mesures rejetées (voitures garées à WILDSTRUBEL ; résidus de plusieurs pixels des mesures rejetées la nuit à NORDEND). *En cause* : `agent-tools/ensemble.py` (`--rigide`) ; `.claude/skills/lire-les-donnees/SKILL.md:25`. *Occurrences* : revue NEBRASKA ; finition divers (« la revue NEBRASKA l'avait déjà demandé ») ; revue WILDSTRUBEL_2026-09-07 ; finition nordend.
|
||||
|
||||
- **Bruits absurdes des références après la perte d'une référence** (2026-11-04, *commande*) : selon l'agent, après la perte d'une référence de NEBRASKA, les `bruits` des références dans les tables de résidus et de `plages.py` sont absurdes (corrections à zéro, bruit de l'ordre de 1e-13) ; il les a ignorés. Non vérifié. *En cause* : `agent-tools/ensemble.py` (bruit propre de `--residus`), `agent-tools/plages.py`. *Occurrences* : revue NEBRASKA.
|
||||
|
||||
- **Cohérence entre stations : aucun outil pour une ligne de temps commune** (2026-11-04, *consigne absente*) : la consigne demande de poser les étiquettes des stations sur une même ligne de temps et de mesurer chacune aux mêmes heures ; les outils de lecture prennent un dossier de station (vérifié : `lire-les-donnees`, table des outils). Le relecteur a écrit `outils/ligne_commune.py`. *En cause* : `.claude/skills/review-auto-labels/coherence.md:20`. *Occurrences* : cohérence BREITHORN-MICHIGAN-NEBRASKA.
|
||||
|
||||
- **Colonne `simultanées` : toutes familles mêlées** (2026-11-04, *format*) : `table.py` remplit `simultanées` avec toute étiquette de moins de 24 h d'une autre station qui chevauche, sans regarder la famille (vérifié : `labeling/auto/revue-croisee/2026-11-04/outils/table.py:18-21`) ; la consigne dit « les stations étiquetées au même moment ». Selon l'agent, le long arrêt de WILDSTRUBEL la remplit aussi et a faussé son premier relevé des chevauchements ; il a refait la comparaison minute par minute sur les données. *En cause* : `labeling/auto/revue-croisee/2026-11-04/outils/table.py:18-21` ; `.claude/skills/cross-review-labels/analyste.md:11`. *Occurrences* : croisée No data.
|
||||
|
||||
- **Demande du relecteur Visibility : un fait faux sur l'étiquette de l'expert** (2026-11-04, *autre*) : la demande disait que l'étiquette de l'expert du 27/09 (WILDSTRUBEL) porte `None` en famille, comme le reprend la question 2 de la revue WILDSTRUBEL ; les étiquettes de `labeling/manual/` n'ont aucun champ `categorie` (vérifié : aucune clé `categorie` dans `labeling/manual/*.jsonl`). Le relecteur a tranché sur les données et le texte de l'expert. *En cause* : `.claude/skills/cross-review-labels/SKILL.md:27` (questions des revues par station recopiées dans le prompt, sans vérification). *Occurrences* : croisée Visibility.
|
||||
|
||||
- **Bornes : cadence, bord d'un trou, cycle thermique non tranchés** (2026-11-04, *consigne floue*) : « au quart d'heure près » ne tient pas à 10 et 5 min, et les revues CLARIDEN et LENZSPITZE l'avaient lu autrement ; au bord d'un trou, « la mesure juste avant » est de l'autre côté du trou (l'etiqueteur a pris le quart d'heure voisin ou la reprise) ; la borne d'un réchauffement ou d'un refroidissement dépend d'un choix (saut du tilt, minimum de `corr_x`, retour du pan) que la documentation ne fixait pas. *En cause* : `labeling/regles-d-etiquetage.md` §2 avant la revue croisée. *Occurrences* : croisée Obstruction ; etiqueteur NORDEND_2026-08-16 ; etiqueteur NORDEND_2026-09-09. **traité** (2026-11-05, commit `35b5ed4` : `labeling/regles-d-etiquetage.md:22` (minute de la mesure), `:28` (bord d'un trou), `:34-36` (cycle thermique) ; à vérifier au prochain lot si l'etiqueteur les avait déjà).
|
||||
|
||||
- **`ensemble.py --residus non` : forme non documentée** (2026-11-04, *commande*) : `--table` accepte `non`, `--residus` attend une chaîne vide pour « aucune » (vérifié : `agent-tools/ensemble.py:187`), ce que la ligne du skill ne dit pas ; avec `--residus non`, la commande n'a rien imprimé, selon l'agent, qui a relancé sans. *En cause* : `.claude/skills/lire-les-donnees/SKILL.md:25` ; `agent-tools/ensemble.py:187`. *Occurrences* : etiqueteur NORDEND_2026-09-09.
|
||||
+2
-1
@@ -1205,7 +1205,8 @@ Règles du journal :
|
||||
- **Décision** :
|
||||
- Toutes les étiquettes de `labeling/auto/` sont relues par station (`/review-auto-labels`, un analyste par station), puis par une **revue croisée** (`/cross-review-labels`, nouveau skill) : un analyste par famille compare les stations entre elles, tranche les règles où les revues par station divergeaient, trouve les étiquettes d'une autre famille ; une passe de finition reprend ce qui reste (`labeling/auto/revue-croisee/2026-11-04/`, dont `reste-a-faire.md`). Les trois plages jamais étiquetées (WILDSTRUBEL 07/09 → 01/10, NORDEND 16/08 → 01/10) sont étiquetées puis relues. Les propositions des relecteurs sont appliquées **sans validation de l'expert** (l'utilisateur, 2026-11-04) ; `revue` dit la date de la relecture.
|
||||
- **Toute la connaissance métier qui sert au labeling est dans `labeling/`** : `regles-d-etiquetage.md` (nouveau : comment poser une étiquette, la seule source de ces règles), `familles.md` (les frontières tranchées), `connaissances/` (nouveau : chaîne de mesure, colonnes des déplacements, trous, images de la caméra, cycle thermique, métriques de qualité, cas annotés, incident de Barcelone, déplacés de `docs/`), la carte des étiquettes (refaite sur les étiquettes revues, les events et les cas). L'etiqueteur et les relecteurs ne lisent plus rien d'autre ; ce qu'un event apprend entre dans la carte, `events/` reste l'archive des events et de leurs données.
|
||||
- `labeling/controle.py` contrôle les étiquettes automatiques face aux règles (champs, familles, bornes, doublons, valeurs chiffrées, heures locales, causes au conditionnel).
|
||||
- `labeling/controle.py` contrôle les étiquettes automatiques face aux règles (champs, familles, bornes, doublons, valeurs chiffrées, heures locales), sur `labeling/auto/` ou sur un fichier proposé ; l'etiqueteur et les relecteurs le lancent avant de rendre.
|
||||
- **`labeling/auto/` ne contient que des étiquettes relues** : l'etiqueteur écrit dans son dossier (`labeling/auto/etiqueteur/<STATION>_<début>/etiquettes.jsonl`), `/review-auto-labels` les verse après revue ; les relecteurs mettent leurs mesures dans leur `revue.md`, jamais dans les étiquettes.
|
||||
- **Pourquoi** : l'utilisateur, 2026-11-04 : relire sur le même lot que l'étiqueteur n'apporte pas forcément ; changer la granularité, comparer les stations entre elles ; à la fin, toutes les étiquettes « auto » validées et justes, toute leur connaissance documentée, et dans `labeling/`. Constat : les revues par station retrouvaient les mêmes défauts une à une (bornes posées sur la mesure touchée ou coupées à minuit, textes recopiés d'un jour à l'autre, mouvement thermique compensé non étiqueté, trous communs non dits communs) ; la revue croisée les a tranchés une fois pour toutes (209 étiquettes modifiées, 17 retirées, 28 ajoutées), la finition a réécrit jour par jour les textes thermiques recopiés.
|
||||
- **Options écartées** : une revue croisée par phénomène, avec un tri préalable de toutes les étiquettes (plus juste sur les familles mal rangées, mais un tri de plus ; chaque analyste de famille cherche ses phénomènes dans les autres familles par l'index) ; refaire l'étiquetage (le travail de l'étiqueteur a de la valeur) ; laisser la connaissance dans `docs/` et `events/` (l'utilisateur la veut dans `labeling/`).
|
||||
- **Conséquence** : 991 étiquettes automatiques sur 11 stations, toutes revues. Les relecteurs avaient mis leurs mesures dans les descriptions : réécrites en mots (D-103), les mesures restent dans les `revue.md`. Une autre session a relu LENZSPITZE avec les métriques de qualité pendant ce travail (D-129) ; ses changements sont gardés. Les events sont rattachés à leurs stations ; les données ont montré que PS_DES_COUDRES est JUNGFRAU (les données codées de E-001 sont celles de `data/JUNGFRAU/`, valeur pour valeur). Les contradictions entre l'expert et les étiquettes automatiques ont été vérifiées sur les données : là où elles donnaient raison à l'expert, les étiquettes sont corrigées (NORDEND, les références restantes à zéro) ; les autres sont dans la carte (section 6), à trancher par lui. Les causes non établies gardent leur nuance (« sans doute », « probable ») ; seule une conclusion qui rassure sans cause établie est interdite (l'utilisateur, 2026-11-05).
|
||||
Reference in new issue
Block a user