Loop: upgrader and validator become detectors-upgrader and detectors-control (D-089)

- detectors-upgrader: makes the detectors better on the batch from the
  analyst's critique; adds, removes or modifies, removing first; targets
  the significant events missed or badly bounded, not a perfect match.
- detectors-control: the guard against overfitting; never looks at the
  batch, judges the diff and the benchmark on the event base, decides,
  and sends its remarks back to the upgrader.

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
maximeandClaude Opus 5.5 committed 2026-10-29 08:45:57 +01:00
1 parent ba2e9da3ab
commit 21f8cd1db6
14 files changed
+243 -190

No files matched your search

@@ -105,6 +105,7 @@ Types : **Comprendre** (lire, expliquer, rien ne change), **Décider** (l'utilis
| 49 | Le graphe des éventualités du terrain et deux catégories nouvelles | Décider, Coder | 5 | catégories (D-074) dans la carte, l'analyste et les détecteurs le 2026-10-27 ; à entraîner par `/boucle` |
| 50 | Une ligne Status : la compilation de tous les détecteurs | Décider, Coder | 47, 49 | ligne Status dans `detecteurs.py` le 2026-10-27, refaite le même jour : ce qui se passe, l'événement qui englobe ; ordre des catégories à confirmer |
| 51 | Un analyste qui progresse de séance en séance | Décider | 45, 48 | idée du 2026-10-28 ; compilation dans `events/` (l'utilisateur), la carte apprend à chaque validation (D-087) ; l'analyste consulte la base quand il veut (D-088) ; pas de mesure ; écart E-011 ouvert |
| 52 | Un upgrader et un validateur qui ne laissent pas dériver les détecteurs | Essayer | 51 | `detectors-upgrader` et `detectors-control` (D-089, 2026-10-29) ; à essayer sur une séance |
| | **VIII. Suivi du chantier** | | | |
| 37 | Ménage : commit, `CLAUDE.md`, Mermaid, sorties | Lancer | — | validé le 2026-10-24 |
@@ -1102,6 +1103,39 @@ Rapport de l'agent : `vues-deplacements/contexte/donnees-et-boucle.md`. Script :
**Fini quand.** D'une séance à l'autre, l'analyste profite de ce que l'utilisateur a validé ou corrigé.
### Point 52 : Un upgrader et un validateur qui ne laissent pas dériver les détecteurs
**L'idée** (l'utilisateur, 2026-10-29). Après l'analyste (point 51), améliorer la suite de `/boucle` : l'upgrader et le validateur.
**Constat (Claude, 2026-10-29).**
- Le validateur n'a jamais renvoyé une modification : quatre séances avec bilan, quatre « accepté » au premier passage. Il relance le même score et le même benchmark que l'upgrader.
- Les deux jugent une modification face à l'état juste avant, et ne comptent comme recul net qu'un événement entier perdu ou signalé à tort ; des mesures signalées à tort, « même nombreuses », passent. Exemple : WILDSTRUBEL, modification 1, sur les cinq events fondateurs (E-001 à E-005) : +1 310 mesures signalées, 0 juste de plus ; le validateur l'a vu (« les justes baissent sur E-002 et E-003… ce sont des mesures, pas des événements ») et accepté.
- Sur ces cinq events, du premier benchmark au dernier : signalées 10 847 → 15 257, justes 8 445 → 7 612 (part des signalées qui sont justes : 78 % → 50 %). La plus grosse part vient d'un changement hors de la boucle (un détecteur pour chaque catégorie, D-074, entre FLORIDA et WILDSTRUBEL) ; la boucle y ajoute peu à peu.
- L'échelle de l'upgrader n'a que des marches qui ajoutent (constante, règle, détecteur) ; aucune n'enlève. Les détecteurs font 1 183 lignes.
**Proposition de Claude (à valider).**
- **Le validateur garde la base** : sur le lot, il reste « pas trop strict » ; sur le benchmark, une catégorie que la suggestion ne vise pas ne gagne pas de mesures signalées à tort, même aux bornes d'un événement juste. L'upgrader a le même critère, pour ne pas perdre un passage.
- **L'upgrader peut enlever** : une première marche, retirer ou simplifier une règle, quand le défaut vient d'elle.
**Questions à l'utilisateur.**
1. La dérive (plus de mesures signalées, pas plus de justes) te gêne-t-elle, ou « tout détecter » (D-068) la veut-il ?
**Précisions de l'utilisateur (2026-10-29).**
- On se concentre sur l'upgrader, renommé `detectors-upgrader` : il ne touche qu'aux détecteurs, mais tout lui est possible sur eux : ajouter, retirer, modifier un détecteur.
- Son but : des détecteurs meilleurs sur un lot donné, d'après la critique. Il vise les événements significatifs du lot que les détecteurs ont manqués, ou mal bornés dans le temps ; pas un résultat identique à celui de l'analyste, l'alignement n'a pas à être parfait.
- Le validateur reste le contrepoids : ne pas sur-apprendre le lot courant au prix des events de la base ; il faut absolument un moyen de contrebalancer.
- L'analyste est la vérité : l'upgrader lit la critique, qui met déjà l'accent sur ce qui est significatif, et adapte les détecteurs ; pas de question de « fausses alarmes » à part.
- Le contrepoids, `control-detectors` (le validateur renommé) : il lance les détecteurs sur la base d'events (benchmark), regarde toutes les modifications de l'upgrader et en fait une critique ; c'est le garde-fou, il décide au final ; il ne regarde pas les données du lot, ses conclusions viennent des benchmarks ; s'il conteste, ses remarques retournent à l'upgrader, qui adapte.
**Fait le 2026-10-29 (D-089).** Le design de l'utilisateur, avec trois précisions de Claude acceptées : c'est le detectors-upgrader qui vérifie le lot ; le contrôle ne lit de la modification que « Ce qui a changé » et « Pourquoi » ; trois passages au plus, comme avant. Agents renommés (`git mv`) et réécrits ; skill `/boucle`, builder, améliorateur, spec de la boucle, `run.md`, `CLAUDE.md`, `vues-deplacements/CLAUDE.md`, schéma des pipelines. La question 1 tombe : l'analyste est la vérité, la critique relève ce qui compte.
**Étapes.**
- [x] Les réponses de l'utilisateur (2026-10-29).
- [x] `detectors-upgrader` et `detectors-control` (2026-10-29, D-089).
- [ ] Une séance de `/boucle` qui les essaie : le contrôle renvoie-t-il, à bon escient ?
**Fini quand.** Une séance de `/boucle` améliore le lot sans abîmer la base d'events.
---
## Partie VII — Idées gardées pour plus tard
@@ -1310,3 +1344,7 @@ Une ligne par séance : date, point(s) traités, ce qui a changé, ce qui reste.
- 2026-10-29 : point 51, D-087 : la carte apprend à chaque validation, montrée avec la fiche ; étape ajoutée à `/review-event` et `/new-event` ; rattrapage écrit (E-004, E-006, E-007, E-008, E-010, E-011, « Faux amis »), E-009 rejeté retiré de la carte ; à relire par l'utilisateur.
- 2026-10-29 : point 51, l'utilisateur : la base d'events est la base de connaissance de l'analyste, consultée quand il veut (D-088) ; rattrapage de la carte validé.
- 2026-10-29 : point 51, l'utilisateur : on ne mesure pas les progrès de l'analyste.
- 2026-10-29 : point 52 ajouté (idée de l'utilisateur : améliorer l'upgrader et le validateur) ; constat de Claude (validateur toujours d'accord, justes 78 % → 50 % sur E-001 à E-005), proposition et une question.
- 2026-10-29 : point 52, précisions de l'utilisateur : `detectors-upgrader`, qui ajoute, retire ou modifie ; il vise les événements significatifs manqués ou mal bornés, pas l'alignement parfait ; le validateur, contrepoids contre le sur-apprentissage.
- 2026-10-29 : point 52, l'utilisateur : `control-detectors` (le validateur), garde-fou sur la base seule, sans les données du lot, qui décide et renvoie ses remarques à l'upgrader.
- 2026-10-29 : point 52, D-089 : `detectors-upgrader` (ajoute, retire, modifie ; vise les événements manqués ou mal bornés) et `detectors-control` (garde-fou sur la base seule, sans le lot) ; à essayer sur une séance.