From 17866afab0e3a80a7abcf93faa962e6bd51319d9 Mon Sep 17 00:00:00 2001 From: maxime Date: Thu, 5 Nov 2026 12:11:53 +0100 Subject: [PATCH] Detector-learner Obstruction: process difficulties Co-Authored-By: Claude Opus 5.5 --- docs/ameliorations-processus.md | 16 +++++++++++++++- 1 file changed, 15 insertions(+), 1 deletion(-) diff --git a/docs/ameliorations-processus.md b/docs/ameliorations-processus.md index 73cdd33..9556966 100644 --- a/docs/ameliorations-processus.md +++ b/docs/ameliorations-processus.md @@ -116,7 +116,7 @@ Séance de référence des entrées ci-dessous : 2026-10-26T1149Z, NORDEND, lot ## /detector-learner -Séance de référence des entrées ci-dessous : 2026-11-03T1249Z, NEBRASKA, lot 01 (DL1 dans les occurrences), rendus dans `detector-learner/2026-11-03T1249Z_NEBRASKA/`. Les lignes citées sont celles du dépôt à la fin de la séance (commit `165e1c2`, `labeling/familles.md` modifié, non commité). Ce qui ne vient que du dire d'un agent est marqué « selon l'agent ». Seconde séance : 2026-11-03T1317Z, BREITHORN, lot 01, de 13:17 à 13:36 UTC (DL2), rendus dans `detector-learner/2026-11-03T1317Z_BREITHORN/` ; ses lignes citées sont celles du commit `f197ef0`. Troisième séance : 2026-11-03T1423Z, MICHIGAN, lot 01, de 14:23 à 14:40 UTC (DL3), rendus dans `detector-learner/2026-11-03T1423Z_MICHIGAN/` ; ses lignes citées sont celles du commit `5077a35`. Quatrième séance, la première par famille (D-132) : 2026-11-05T0814Z, famille Displacement, sur les 11 stations de `labeling/auto/`, de 08:14 à 09:39 UTC (DL4), rendus dans `detector-learner/2026-11-05T0814Z_Displacement/` ; ses lignes citées sont celles du commit `156db91`. +Séance de référence des entrées ci-dessous : 2026-11-03T1249Z, NEBRASKA, lot 01 (DL1 dans les occurrences), rendus dans `detector-learner/2026-11-03T1249Z_NEBRASKA/`. Les lignes citées sont celles du dépôt à la fin de la séance (commit `165e1c2`, `labeling/familles.md` modifié, non commité). Ce qui ne vient que du dire d'un agent est marqué « selon l'agent ». Seconde séance : 2026-11-03T1317Z, BREITHORN, lot 01, de 13:17 à 13:36 UTC (DL2), rendus dans `detector-learner/2026-11-03T1317Z_BREITHORN/` ; ses lignes citées sont celles du commit `f197ef0`. Troisième séance : 2026-11-03T1423Z, MICHIGAN, lot 01, de 14:23 à 14:40 UTC (DL3), rendus dans `detector-learner/2026-11-03T1423Z_MICHIGAN/` ; ses lignes citées sont celles du commit `5077a35`. Quatrième séance, la première par famille (D-132) : 2026-11-05T0814Z, famille Displacement, sur les 11 stations de `labeling/auto/`, de 08:14 à 09:39 UTC (DL4), rendus dans `detector-learner/2026-11-05T0814Z_Displacement/` ; ses lignes citées sont celles du commit `156db91`. Cinquième séance : 2026-11-05T0954Z, famille Obstruction, de 09:54 à 11:09 UTC (DL5), rendus dans `detector-learner/2026-11-05T0954Z_Obstruction/` ; ses lignes citées sont celles du commit `a11ee22`. - **Consigne de l'utilisateur en cours de séance : aligner détecteurs et catégories sur les familles** (2026-11-03, *contradiction*) : le skill tourne seul (aucune question) et chaque demande est donnée telle quelle, « rien d'autre » ; l'utilisateur a pourtant demandé, pendant la séance, d'aligner les détecteurs et les catégories du journal sur les nouvelles familles des étiquettes (dont `trou`, ajoutée à `labeling/familles.md`, vérifié : `git diff`). L'orchestrateur l'a relayée au critique en cours de travail, puis ajoutée à la demande de l'upgrader. Elle heurte deux consignes : « au plus deux » suggestions (le critique a fondu ses deux défauts de cadence en S1 pour faire de l'alignement S2) et « pas de nouvelle catégorie » (l'upgrader n'a su jusqu'où aller : renommer les douze catégories en six familles, ou changer le seul classement ; il n'a fait que le second, `categories.py` étant lu hors de son périmètre par `score.py`, `detectors-view/status.py`, `detectors-view/detecteurs.py` et `vues-deplacements/maquette/explore.py`, vérifié par `grep`). *En cause* : `.claude/skills/detector-learner/SKILL.md:10`, `:23`, `:30`, `:33` ; `.claude/agents/detectors-critic.md:35` ; `.claude/agents/detectors-upgrader.md:28`, `:40`. *Occurrences* : DL1 orchestrateur ; DL1 critique ; DL1 modification 1. **traité** (2026-11-03 : une consigne de l'utilisateur en cours de séance est ajoutée telle quelle à la demande des agents suivants et notée au bilan ; elle passe avant leurs consignes (nombre de suggestions, catégories), pas avant leur périmètre, le reste va dans « Pas corrigé » (`detector-learner/SKILL.md` §2, `detectors-critic.md` « Ta demande » et « Verdict », `detectors-upgrader.md` « Ta demande ») ; s'aligner sur les familles, c'est classer chaque événement dans une catégorie que la correspondance range dans la famille de l'étiquette, sans catégorie nouvelle ni renommée, lues hors de `detectors/` (`detectors-upgrader.md`, « Interdits »)). @@ -168,6 +168,20 @@ Séance de référence des entrées ci-dessous : 2026-11-03T1249Z, NEBRASKA, lot - **`regression.py` ne mesure que les détecteurs du dépôt** (2026-11-05, *commande*) : le benchmark lit `detectors/` à la racine du dépôt (vérifié : `regression.py:19`) et dure environ 75 s selon l'agent ; pour comparer plusieurs réglages sans toucher au dépôt, l'upgrader a lancé chaque variante dans une copie légère du dépôt dans son dossier temporaire (`detectors/`, `agent-tools/`, scripts du skill, liens vers `data/` et `labeling/auto/`). Aucune consigne n'en parle (voir l'entrée « Dossier temporaire partagé entre agents »). *En cause* : `.claude/skills/detector-learner/regression.py:19` ; `.claude/agents/detectors-upgrader.md:51`, `:58`. *Occurrences* : DL4 modification 1. **traité** (2026-11-05 : l'upgrader sait essayer une variante dans une copie, dans son propre dossier de travail). +- **Données de `data/` repompées pendant la séance : rien ne le relève** (2026-11-05, *consigne absente*) : une autre session a repompé `data/LENZSPITZE/` pendant la séance (vérifié : les fichiers des 24 et 25.10 réécrits à 10:15 UTC, après le benchmark avant de 09:55 UTC et la critique de 10:11 UTC) ; `benchmark-avant.txt` porte sur les anciennes données de LENZSPITZE, les suivants sur les nouvelles. Le relevé du début et d'avant le bilan ne regarde que des chemins versionnés par `git status` ; `data/` est hors de git (D-065), rien ne le voit. L'upgrader l'a découvert seul et a relancé le benchmark avant (`benchmark-avant-relance.txt`, qu'il a laissé non commité, sa consigne ne nommant que `benchmark-K-S.txt` ; l'orchestrateur l'a commité avec la modification 1) ; l'orchestrateur, prévenu par l'upgrader, a ajouté une note hors du gabarit à la demande du contrôle, qui a refait de son côté le benchmark avant sur les détecteurs de la base (`git archive`) et trouvé le même résultat. *En cause* : `.claude/skills/detector-learner/SKILL.md:17` (relevé par `git status` sur des chemins versionnés), `:27` (benchmark avant fait une fois), `:37` (demande du contrôle sans place pour un benchmark avant refait) ; `.claude/agents/detectors-upgrader.md:61`. *Occurrences* : DL5 orchestrateur ; DL5 modification 1 ; DL5 validation 1 ; DL5 bilan, « Erreurs ». Même effet que l'entrée traitée « Étiquettes modifiées par une autre session pendant la séance », par un chemin que son correctif ne couvre pas. + +- **Benchmark compté par instant, sans les capteurs : des instants trouvés par coïncidence** (2026-11-05, *autre*) : le score rapproche étiquettes et événements par famille et par instant, les étiquettes ne disant leurs capteurs que dans le texte (vérifié : `score.py:14`, `:113`) ; un événement d'une autre famille sur d'autres cibles compte comme une étiquette trouvée (NORDEND, une étiquette Obstruction d'une cible « trouvée » par des Target obscured sur deux autres). Pour savoir si une baisse de « trouvées » était un vrai recul, l'upgrader et le contrôle ont chacun écrit un script croisant, étiquette par étiquette, les épisodes et les capteurs cités dans les descriptions ; la règle du recul (D-135) ne nomme pas ce cas, que l'upgrader a mis dans « À trancher » et le contrôle dans « Réserves ». *En cause* : `.claude/skills/detector-learner/score.py:14`, `:113` ; `.claude/agents/detectors-critic.md:25` ; `.claude/agents/detectors-control.md:29` ; `.claude/agents/detectors-upgrader.md:53`. *Occurrences* : DL5 critique ; DL5 modification 1 ; DL5 validation 1. *Piste* (de l'agent du contrôle) : un score par capteur. + +- **Commande des capteurs sans la sorte : appariement avec le journal à l'ordre des lignes** (2026-11-05, *format*) : la commande des capteurs imprime début, fin, catégorie et capteurs, sans la sorte que le journal donne après la famille (vérifié : `capteurs.py:29`) ; le critique a apparié les deux sorties ligne à ligne, dans l'ordre, les deux ayant le même nombre de lignes à chaque station. *En cause* : `.claude/skills/detector-learner/capteurs.py:29` ; `.claude/skills/detector-learner/SKILL.md:21`. *Occurrences* : DL5 critique. + +- **Une ligne par étiquette et par événement : 224 étiquettes, jugées par script** (2026-11-05, *format*) : la critique demande une ligne par étiquette de la famille sur toutes les stations, puis une ligne par événement, étiquette et défaut (vérifié : `detectors-critic.md:33`, `:35`, `:52`) ; Obstruction en compte 224 sur 9 stations (vérifié). Le critique a produit les parties 2 à 4 par un script, jugeant les capteurs faux en cherchant leurs noms dans la description, relu à la main pour les seuls cas cités ; selon l'agent, une ligne non citée peut garder un jugement approximatif. *En cause* : `.claude/agents/detectors-critic.md:33`, `:35`, `:52`. *Occurrences* : DL5 critique. + +- **Le critique suit une consigne retirée juste avant la séance** (2026-11-05, *autre*) : le critique trouve floue la phrase « une station à 15 min compte seize fois plus qu'une station à 4 h » et son rendu a la colonne cadence dans le tableau des stations ; les deux ont été retirés par `d1a372d` à 09:54 UTC (entrées traitées « Rang des stations » et « Cadence de chaque station demandée »), une minute avant le benchmark avant, et la consigne courante dit « en instants bruts, sans pondérer par la cadence » (vérifié : `detectors-critic.md:32`, aucune « seize fois » dans `.claude/`). Le contrôle, lui, a la partie « Réserves » ajoutée par le même commit, et le critique a lancé le nouveau `capteurs.py`. Cause supposée, non vérifiée : la définition du critique a été lue avant le commit. *En cause* : `.claude/agents/detectors-critic.md:32`, `:49` ; commit `d1a372d`. *Occurrences* : DL5 critique. + +- **Dossier temporaire : le critique n'a pas de consigne** (2026-11-05, *consigne absente*) : selon l'agent, le dossier temporaire de la session contenait des fichiers d'une séance précédente (`bench*.txt`, `win*.txt`), qu'il n'a pas lus ; le correctif de l'entrée traitée « Dossier temporaire partagé entre agents » ne donne un dossier propre (`mktemp -d`) qu'à l'upgrader et au contrôle (vérifié : rien dans `detectors-critic.md`). *En cause* : `.claude/agents/detectors-critic.md` (rien sur le dossier de travail) contre `.claude/agents/detectors-control.md` et `.claude/agents/detectors-upgrader.md` (`mktemp -d`). *Occurrences* : DL5 critique. + +- **`CLAUDE.md` chargé d'office, que le critique ne doit pas lire** (2026-11-05, *contradiction*) : la consigne du critique interdit de lire `CLAUDE.md` (vérifié : `detectors-critic.md:28`) ; le `CLAUDE.md` du projet est pourtant chargé d'office dans son contexte. Il ne s'en est pas servi, selon l'agent. *En cause* : `.claude/agents/detectors-critic.md:28` (comparer l'entrée de `/aiguiser` « `vues-deplacements/CLAUDE.md` et l'état git injectés malgré `omitClaudeMd: true` »). *Occurrences* : DL5 critique. + ## Étiquetage des cas (benchmark) Étiquettes de chaque cas de la base pour le benchmark des détecteurs (D-069, point 48 du plan) : un analyste par cas, étape 1 de `critiquer-lot` seule, puis correction par la fiche ; repris par `/nouveau-cas` (`.claude/skills/nouveau-cas/SKILL.md:57`). Séance de référence : 2026-10-26, C-001 à C-005 en parallèle, rendus écrits de 15:37 à 15:41 UTC dans `vues-deplacements/benchmark/etiquetage/C-00x.md`, rangés depuis dans le dossier de chaque cas (`agents/diagnostic/cas/C-00x/etiquetage.md`, demande de l'utilisateur : tout au même endroit ; hors de `vues-deplacements/`, l'écriture du rendu n'y charge plus `vues-deplacements/CLAUDE.md`) (E1 dans les occurrences). Les lignes citées sont celles de l'arbre de travail du 2026-10-26 (skills modifiés, non commités). Ce qui ne vient que du dire d'un agent est marqué « selon l'agent ».