Stable ids for auto labels, a summary for the label map, reading tools improved (D-131)

- Every auto label carries an id (<STATION>-<n>, labeling/ids.py), kept on edit, given to
  new labels by labeling.py and by the reviews; controle.py requires it, unique. The
  cross-review matches labels by id, and an applied review is locked (applique.md).
- The label map starts with a summary (labels-map/sommaire.py): readers take the summary and
  sections 2-4 in full, then only the cards of the phenomena they meet.
- Tool-builder session on the reviewers' difficulties: jours.py --lissage/--fraction,
  ensemble.py --suivre and rejected measures left out of --rigide, --residus non, zero noise
  after a lost reference, new agent-tools/stations.py (several stations on one timeline),
  long outputs convention in lire-les-donnees.

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
maximeandClaude Opus 5.5 committed 2026-11-05 08:49:54 +01:00
1 parent d55de98746
commit c6e9df0e46
41 files changed
+1596 -1075

No files matched your search

+6 -6
View File
@@ -72,7 +72,7 @@ Séance de référence des entrées ci-dessous : 2026-10-27T0835Z, WILDSTRUBEL,
Séance de référence des entrées ci-dessous : 2026-10-26T1149Z, NORDEND, lot 01 et contrôle (S1 dans les occurrences) ; puis 2026-10-26T1729Z, CLARIDEN, lot 01 (S2). Les faits vérifiés dans le dépôt sont donnés comme tels ; ce qui ne vient que du dire d'un agent est marqué « selon l'agent ».
- **Commandes Bash hors de la liste du skill** (2026-10-26, *contradiction*) : le skill de lecture ne permet que les outils, `ls`, `grep` et `date`, un tube vers `grep` seulement. Les lecteurs ont pourtant eu besoin de `head`, `tail`, `sed`, `cut`, `wc`, de `grep` sur un fichier de résultats et de `mkdir -p` : sortie trop longue à lire, chemin du PNG à isoler. Ils l'ont fait sans savoir si c'était permis (une commande `grep | cut | sed` n'a rendu aucune sortie). Le `mkdir -p` paraît inutile : `ensemble.py`, `graphique.py` et `vignettes.py` créent leur dossier de sortie (`ensemble.py:87`, `graphique.py:83`, `vignettes.py:60`) ; C-002 dit pourtant en avoir eu besoin, non vérifié. *En cause* : `.claude/skills/lire-les-donnees/SKILL.md:33` (liste de commandes ; `:34` dans l'arbre de travail du 2026-10-26), `.claude/agents/lecteur.md:25`. *Occurrences* : S1 lot 01 lecture-1 (`grep -v` sur fichier), lecture-2 (`tail`, `head`), lecture-3 (`wc -l`, `head`, `tail`), lecture-4 (`sed`, `grep` sur fichier) ; S1 contrôle C-002 (`sed`, `mkdir -p`), C-004 (`mkdir -p`, `head`), C-005 (`cut`, `sed`) ; Étiquetage E1 C-002 (`sed -n` pour relire la sortie trop longue d'`ensemble.py` rangée par l'outil, `head` et `tr` pour l'affichage) ; /boucle B3 lot 01 analyste (table d'`ensemble.py` de 1 215 lignes sur un lot de 10 jours, coupée à l'affichage, redirigée dans un fichier pour la lire en deux fois ; liste en `.claude/skills/lire-les-donnees/SKILL.md:34`) ; S2 lot 01 lecture-1 (sortie d'`ensemble.py` de plus de 900 lignes redirigée dans un fichier, relue par `sed`), lecture-2 (`ensemble.py` 947 lignes, `plages.py` 575 lignes, redirigées ; `awk` dans un tube une fois), lecture-3 (`ensemble.py`, `--rigide` et `plages.py` redirigés, relus par `sed -n`, `head`, `cut`, `tr`, `awk`, `wc`) ; revue des étiquettes RA, revue MICHIGAN (table d'`ensemble.py --rigide` plus longue qu'un appel n'affiche, lue dans sa sortie enregistrée par `grep` sur les dates), revue NEBRASKA (`jours.py --bornes` sur un mois, relu par morceaux depuis le fichier) ; la redirection elle-même n'est ni permise ni interdite par la liste. *Piste* : voir l'entrée suivante, qui en est la cause première.
- **Commandes Bash hors de la liste du skill** (2026-10-26, *contradiction*) : le skill de lecture ne permet que les outils, `ls`, `grep` et `date`, un tube vers `grep` seulement. Les lecteurs ont pourtant eu besoin de `head`, `tail`, `sed`, `cut`, `wc`, de `grep` sur un fichier de résultats et de `mkdir -p` : sortie trop longue à lire, chemin du PNG à isoler. Ils l'ont fait sans savoir si c'était permis (une commande `grep | cut | sed` n'a rendu aucune sortie). Le `mkdir -p` paraît inutile : `ensemble.py`, `graphique.py` et `vignettes.py` créent leur dossier de sortie (`ensemble.py:87`, `graphique.py:83`, `vignettes.py:60`) ; C-002 dit pourtant en avoir eu besoin, non vérifié. *En cause* : `.claude/skills/lire-les-donnees/SKILL.md:33` (liste de commandes ; `:34` dans l'arbre de travail du 2026-10-26), `.claude/agents/lecteur.md:25`. *Occurrences* : S1 lot 01 lecture-1 (`grep -v` sur fichier), lecture-2 (`tail`, `head`), lecture-3 (`wc -l`, `head`, `tail`), lecture-4 (`sed`, `grep` sur fichier) ; S1 contrôle C-002 (`sed`, `mkdir -p`), C-004 (`mkdir -p`, `head`), C-005 (`cut`, `sed`) ; Étiquetage E1 C-002 (`sed -n` pour relire la sortie trop longue d'`ensemble.py` rangée par l'outil, `head` et `tr` pour l'affichage) ; /boucle B3 lot 01 analyste (table d'`ensemble.py` de 1 215 lignes sur un lot de 10 jours, coupée à l'affichage, redirigée dans un fichier pour la lire en deux fois ; liste en `.claude/skills/lire-les-donnees/SKILL.md:34`) ; S2 lot 01 lecture-1 (sortie d'`ensemble.py` de plus de 900 lignes redirigée dans un fichier, relue par `sed`), lecture-2 (`ensemble.py` 947 lignes, `plages.py` 575 lignes, redirigées ; `awk` dans un tube une fois), lecture-3 (`ensemble.py`, `--rigide` et `plages.py` redirigés, relus par `sed -n`, `head`, `cut`, `tr`, `awk`, `wc`) ; revue des étiquettes RA, revue MICHIGAN (table d'`ensemble.py --rigide` plus longue qu'un appel n'affiche, lue dans sa sortie enregistrée par `grep` sur les dates), revue NEBRASKA (`jours.py --bornes` sur un mois, relu par morceaux depuis le fichier) ; la redirection elle-même n'est ni permise ni interdite par la liste. *Piste* : voir l'entrée suivante, qui en est la cause première. **traité** (2026-11-05 : `lire-les-donnees`, Conventions, dit quoi faire d'une sortie trop longue : la raccourcir par les options des outils (`--table`, `--min-mesures`, `--capteurs`, `--colonnes`), en lire une section par un tube vers `grep`, ou la ranger par `<commande> > <sortie>/<nom>.txt` dans le même appel et lire ce fichier par Read (`offset`, `limit`) ou `grep`, sans `head`, `tail`, `sed`, `cut` ; les outils créent leur dossier de sortie, pas de `mkdir` ; les lignes de `jours.py --bornes` commencent par le nom de leur suite, pour un `grep`).
- **Sortie d'`inventaire.py` trop longue pour s'afficher** (2026-10-26, *commande*) : sur ce dépôt, l'inventaire rend 72 à 73 Ko (selon les agents : 841 lignes « autres fichiers », 29 exports, 696 images, 923 lignes avec `--debut`/`--fin`) ; Bash la range dans un fichier de résultats que le lecteur doit relire par `grep`, `sed` ou `head`, d'où l'entrée précédente. Le skill n'annonce pas cette longueur. Non revérifié (taille donnée par les agents). *En cause* : `.claude/skills/lire-les-donnees/SKILL.md:21` (ligne de l'outil), `:38` (méthode : « Inventaire »). *Occurrences* : S1 lot 01 lecture-1, lecture-2, lecture-3, lecture-4. *Piste* : que l'outil n'imprime pas la liste des fichiers hors déplacements.
@@ -200,13 +200,13 @@ Processus de référence : 2026-11-04 et 2026-11-05 (RA dans les occurrences) :
- **Limite d'usage : agents arrêtés en cours de travail** (2026-11-04, *autre*) : la limite d'usage a arrêté cinq agents ; l'orchestrateur les a repris par message, sans perte ; le relecteur de WILDSTRUBEL_2026-09-07 n'a rien refait, réutilisant les sorties déjà écrites. Aucun des deux skills ne dit comment reprendre un agent arrêté (vérifié : `grep`). *En cause* : `.claude/skills/review-auto-labels/SKILL.md`, `.claude/skills/cross-review-labels/SKILL.md` (rien sur la reprise). *Occurrences* : RA orchestrateur (cinq agents) ; revue WILDSTRUBEL_2026-09-07.
- **`jours.py --bornes` : niveau de nuit et seuil en bruits fragiles** (2026-11-04, *commande*) : chaque jour se mesure face à la nuit qui le précède, au seuil en bruits du pas natif. Selon les agents : quand la caméra dérive toute la nuit, les « après » tombent à « - » ou le dernier dépassement déborde sur la nuit suivante (NORDEND ; le pan de NIEDERHORN monte d'environ 0,01° de 22:00 à 09:00) ; sur une pose très bruitée, le seuil est inutilisable (FLORIDA) ; la suite du tilt s'arrête sur un point isolé de la nuit (WILDSTRUBEL). Les agents ont daté par leurs propres scripts (`debut_matin.py`, `pose_jour.py`) ou sur les médianes. Les règles disent déjà de ne pas prendre le premier écart de `jours.py --bornes` pour le début d'un cycle (`labeling/regles-d-etiquetage.md:35`). *En cause* : `agent-tools/jours.py` (`--bornes`) ; `.claude/skills/lire-les-donnees/SKILL.md:27`, `:48`. *Occurrences* : revue FLORIDA ; revue NORDEND_2026-08-10 ; finition niederhorn ; etiqueteur WILDSTRUBEL_2026-09-07.
- **`jours.py --bornes` : niveau de nuit et seuil en bruits fragiles** (2026-11-04, *commande*) : chaque jour se mesure face à la nuit qui le précède, au seuil en bruits du pas natif. Selon les agents : quand la caméra dérive toute la nuit, les « après » tombent à « - » ou le dernier dépassement déborde sur la nuit suivante (NORDEND ; le pan de NIEDERHORN monte d'environ 0,01° de 22:00 à 09:00) ; sur une pose très bruitée, le seuil est inutilisable (FLORIDA) ; la suite du tilt s'arrête sur un point isolé de la nuit (WILDSTRUBEL). Les agents ont daté par leurs propres scripts (`debut_matin.py`, `pose_jour.py`) ou sur les médianes. Les règles disent déjà de ne pas prendre le premier écart de `jours.py --bornes` pour le début d'un cycle (`labeling/regles-d-etiquetage.md:35`). *En cause* : `agent-tools/jours.py` (`--bornes`) ; `.claude/skills/lire-les-donnees/SKILL.md:27`, `:48`. *Occurrences* : revue FLORIDA ; revue NORDEND_2026-08-10 ; finition niederhorn ; etiqueteur WILDSTRUBEL_2026-09-07. **traité** (2026-11-05 : `jours.py --bornes` prend `--lissage N` (écart lissé par la médiane de N mesures : un point isolé ne coupe plus la suite) et `--fraction F` (seuil de chaque jour à F fois son plus grand écart, au lieu de `--k` bruits) ; `lire-les-donnees` conseille, quand la caméra dérive toute la nuit, une nuit courte juste avant le matin (`--nuit 3-5`), comme `debut_matin.py` ; essayé sur NORDEND du 10 au 17/10).
- **`ensemble.py --rigide` : pas de suite par cible, et les rejets dominent sur plusieurs jours** (2026-11-04, *commande*) : la table au pas ne donne `dx`, `dy` que des références ; par cible, seulement le minimum, le maximum et la valeur au dernier instant (vérifié : `.claude/skills/lire-les-donnees/SKILL.md:25`). Pour suivre une cible pas à pas, les agents ont écrit `residu.py` puis `perspective.py`. Selon les agents, sur plusieurs jours le résumé est noyé par les mesures rejetées (voitures garées à WILDSTRUBEL ; résidus de plusieurs pixels des mesures rejetées la nuit à NORDEND). *En cause* : `agent-tools/ensemble.py` (`--rigide`) ; `.claude/skills/lire-les-donnees/SKILL.md:25`. *Occurrences* : revue NEBRASKA ; finition divers (« la revue NEBRASKA l'avait déjà demandé ») ; revue WILDSTRUBEL_2026-09-07 ; finition nordend.
- **`ensemble.py --rigide` : pas de suite par cible, et les rejets dominent sur plusieurs jours** (2026-11-04, *commande*) : la table au pas ne donne `dx`, `dy` que des références ; par cible, seulement le minimum, le maximum et la valeur au dernier instant (vérifié : `.claude/skills/lire-les-donnees/SKILL.md:25`). Pour suivre une cible pas à pas, les agents ont écrit `residu.py` puis `perspective.py`. Selon les agents, sur plusieurs jours le résumé est noyé par les mesures rejetées (voitures garées à WILDSTRUBEL ; résidus de plusieurs pixels des mesures rejetées la nuit à NORDEND). *En cause* : `agent-tools/ensemble.py` (`--rigide`) ; `.claude/skills/lire-les-donnees/SKILL.md:25`. *Occurrences* : revue NEBRASKA ; finition divers (« la revue NEBRASKA l'avait déjà demandé ») ; revue WILDSTRUBEL_2026-09-07 ; finition nordend. **traité** (2026-11-05 : `ensemble.py --rigide` prend `--suivre A,B` (dx, dy de ces capteurs dans la table au pas) ; les mesures rejetées sortent de l'ajustement, de la bande des cibles, de `cib_med`, `cib_max` et des colonnes, et viennent à part dans le résumé par capteur ; sur le PNG, une référence rejetée est une croix hors de l'échelle ; essayé sur WILDSTRUBEL du 23 au 27/09 : la rotation ajustée, écrasée à ±4° par les rejets, montre le cycle de ±0,03°).
- **Bruits absurdes des références après la perte d'une référence** (2026-11-04, *commande*) : selon l'agent, après la perte d'une référence de NEBRASKA, les `bruits` des références dans les tables de résidus et de `plages.py` sont absurdes (corrections à zéro, bruit de l'ordre de 1e-13) ; il les a ignorés. Non vérifié. *En cause* : `agent-tools/ensemble.py` (bruit propre de `--residus`), `agent-tools/plages.py`. *Occurrences* : revue NEBRASKA.
- **Bruits absurdes des références après la perte d'une référence** (2026-11-04, *commande*) : selon l'agent, après la perte d'une référence de NEBRASKA, les `bruits` des références dans les tables de résidus et de `plages.py` sont absurdes (corrections à zéro, bruit de l'ordre de 1e-13) ; il les a ignorés. Non vérifié. *En cause* : `agent-tools/ensemble.py` (bruit propre de `--residus`), `agent-tools/plages.py`. *Occurrences* : revue NEBRASKA. **traité** (2026-11-05 : vérifié : quand la compensation ne retient que deux références (REFCOLH22 rejetée depuis le 09/10), le `corr` des deux autres vaut 0 à 1e-13 près ; le bruit propre (`ensemble.py --residus`, `plages.py`, `jours.py`) passe par une fonction commune, `resume.bruit_propre`, qui rend 0 sous 1e-9 : bruits « - », plus de milliards de bruits ni de colonnes collées ; `lire-les-donnees` dit pourquoi ces `corr` sont nuls et de lire ces références par `x`, `y`).
- **Cohérence entre stations : aucun outil pour une ligne de temps commune** (2026-11-04, *consigne absente*) : la consigne demande de poser les étiquettes des stations sur une même ligne de temps et de mesurer chacune aux mêmes heures ; les outils de lecture prennent un dossier de station (vérifié : `lire-les-donnees`, table des outils). Le relecteur a écrit `outils/ligne_commune.py`. *En cause* : `.claude/skills/review-auto-labels/coherence.md:20`. *Occurrences* : cohérence BREITHORN-MICHIGAN-NEBRASKA.
- **Cohérence entre stations : aucun outil pour une ligne de temps commune** (2026-11-04, *consigne absente*) : la consigne demande de poser les étiquettes des stations sur une même ligne de temps et de mesurer chacune aux mêmes heures ; les outils de lecture prennent un dossier de station (vérifié : `lire-les-donnees`, table des outils). Le relecteur a écrit `outils/ligne_commune.py`. *En cause* : `.claude/skills/review-auto-labels/coherence.md:20`. *Occurrences* : cohérence BREITHORN-MICHIGAN-NEBRASKA. **traité** (2026-11-05 : nouvel outil `agent-tools/stations.py`, d'après `ligne_commune.py` : plusieurs dossiers de station sur une même grille de `--pas` ; température, pose, `corr` des cibles, rejets des cibles et des références ; les trous (sans mesure, sans température) avec les stations concernées, un trou commun sur une ligne ; r des valeurs et r des pas entre stations ; PNG un panneau par colonne, un trait par station ; dans le tableau et la méthode de `lire-les-donnees` ; essayé sur BREITHORN, MICHIGAN, NEBRASKA d'octobre : le trou du 16/10 00:00-08:00 sort commun aux trois).
- **Colonne `simultanées` : toutes familles mêlées** (2026-11-04, *format*) : `table.py` remplit `simultanées` avec toute étiquette de moins de 24 h d'une autre station qui chevauche, sans regarder la famille (vérifié : `labeling/auto/revue-croisee/2026-11-04/outils/table.py:18-21`) ; la consigne dit « les stations étiquetées au même moment ». Selon l'agent, le long arrêt de WILDSTRUBEL la remplit aussi et a faussé son premier relevé des chevauchements ; il a refait la comparaison minute par minute sur les données. *En cause* : `labeling/auto/revue-croisee/2026-11-04/outils/table.py:18-21` ; `.claude/skills/cross-review-labels/analyste.md:11`. *Occurrences* : croisée No data.
@@ -214,4 +214,4 @@ Processus de référence : 2026-11-04 et 2026-11-05 (RA dans les occurrences) :
- **Bornes : cadence, bord d'un trou, cycle thermique non tranchés** (2026-11-04, *consigne floue*) : « au quart d'heure près » ne tient pas à 10 et 5 min, et les revues CLARIDEN et LENZSPITZE l'avaient lu autrement ; au bord d'un trou, « la mesure juste avant » est de l'autre côté du trou (l'etiqueteur a pris le quart d'heure voisin ou la reprise) ; la borne d'un réchauffement ou d'un refroidissement dépend d'un choix (saut du tilt, minimum de `corr_x`, retour du pan) que la documentation ne fixait pas. *En cause* : `labeling/regles-d-etiquetage.md` §2 avant la revue croisée. *Occurrences* : croisée Obstruction ; etiqueteur NORDEND_2026-08-16 ; etiqueteur NORDEND_2026-09-09. **traité** (2026-11-05, commit `35b5ed4` : `labeling/regles-d-etiquetage.md:22` (minute de la mesure), `:28` (bord d'un trou), `:34-36` (cycle thermique) ; à vérifier au prochain lot si l'etiqueteur les avait déjà).
- **`ensemble.py --residus non` : forme non documentée** (2026-11-04, *commande*) : `--table` accepte `non`, `--residus` attend une chaîne vide pour « aucune » (vérifié : `agent-tools/ensemble.py:187`), ce que la ligne du skill ne dit pas ; avec `--residus non`, la commande n'a rien imprimé, selon l'agent, qui a relancé sans. *En cause* : `.claude/skills/lire-les-donnees/SKILL.md:25` ; `agent-tools/ensemble.py:187`. *Occurrences* : etiqueteur NORDEND_2026-09-09.
- **`ensemble.py --residus non` : forme non documentée** (2026-11-04, *commande*) : `--table` accepte `non`, `--residus` attend une chaîne vide pour « aucune » (vérifié : `agent-tools/ensemble.py:187`), ce que la ligne du skill ne dit pas ; avec `--residus non`, la commande n'a rien imprimé, selon l'agent, qui a relancé sans. *En cause* : `.claude/skills/lire-les-donnees/SKILL.md:25` ; `agent-tools/ensemble.py:187`. *Occurrences* : etiqueteur NORDEND_2026-09-09. **traité** (2026-11-05 : `ensemble.py --residus non` vaut « aucune », comme `--table non` (avant : « Colonnes inconnus : non » sur la sortie d'erreur) ; la ligne du skill le dit).