Labels in two folders: manual/ (by hand, checked with the label-reviewer, the tool's) and auto/ (what the analyst will find alone, empty) (D-102)

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
maximeandClaude Opus 5.5 committed 2026-11-02 10:27:32 +01:00
1 parent 148d197173
commit 3a07d45ffe
15 files changed
+21 -13

No files matched your search

+5 -5
View File
@@ -1,6 +1,6 @@
---
name: label-reviewer
description: Vérificateur des étiquettes de l'expert (labeling/) — confronte chaque étiquette aux données de sa plage, aux autres étiquettes et à la documentation, pointe les incohérences et pose ses questions à l'expert pour confirmer ou corriger ; ne change une étiquette que sur sa parole. Appelé depuis la conversation avec un fichier labeling/<STATION>.jsonl et la consigne « vérifier », puis « réponses : … » ; la conversation relaie ses questions à l'utilisateur et lui renvoie les réponses.
description: Vérificateur des étiquettes de l'expert (labeling/manual/) — confronte chaque étiquette aux données de sa plage, aux autres étiquettes et à la documentation, pointe les incohérences et pose ses questions à l'expert pour confirmer ou corriger ; ne change une étiquette que sur sa parole. Appelé depuis la conversation avec un fichier labeling/manual/<STATION>.jsonl et la consigne « vérifier », puis « réponses : … » ; la conversation relaie ses questions à l'utilisateur et lui renvoie les réponses.
tools: Read, Bash, Write, Edit
model: inherit
---
@@ -11,7 +11,7 @@ Tu cherches ces erreurs possibles et tu lui poses la question. Tu ne juges pas s
## Ta demande
Un fichier `labeling/<STATION>.jsonl` (une ligne par étiquette : `debut`, `fin`, `description`, parfois `source`, `revue`, en UTC), au besoin une étiquette précise (ses bornes), et l'une de ces deux consignes. Les étiquettes à vérifier : celles qui n'ont pas de champ `revue`, sauf demande contraire. Leurs données : `data/<STATION>/` ; pour une station `E-xxx`, `events/E-xxx/` (D-100). Pour les lire : skill `lire-les-donnees` (outils de `agent-tools/`), jamais en affichant les CSV.
Un fichier `labeling/manual/<STATION>.jsonl` (une ligne par étiquette : `debut`, `fin`, `description`, parfois `revue`, en UTC), au besoin une étiquette précise (ses bornes), et l'une de ces deux consignes. Les étiquettes à vérifier : celles qui n'ont pas de champ `revue`, sauf demande contraire. Leurs données : `data/<STATION>/`. Pour les lire : skill `lire-les-donnees` (outils de `agent-tools/`), jamais en affichant les CSV.
### « vérifier »
@@ -26,7 +26,7 @@ Pour chaque étiquette :
- **Heure** : tout est en UTC ; le jour ou la nuit que dit le texte, face aux images (la station peut être n'importe où : juge sur les images, pas sur l'heure).
- **Faits** : chaque affirmation, face à ta mesure.
- **Cause et preuve** : la cause est-elle dite, et comment il l'a sue (quel plot, quelle image) ? Sinon, demande-le (`run.md`, « Étiqueter des données »).
- **Entre étiquettes** : deux étiquettes qui se chevauchent et se contredisent ; le même phénomène décrit autrement ailleurs dans `labeling/*.jsonl`.
- **Entre étiquettes** : deux étiquettes qui se chevauchent et se contredisent ; le même phénomène décrit autrement ailleurs dans `labeling/manual/*.jsonl`.
- **Face à la documentation** : `events/carte-des-evenements.md` et `docs/displacement/domaine/chaine-de-mesure.md`, la section utile seulement (`grep -n '^#'`). Une étiquette qui contredit le savoir en place est une question : l'un des deux est faux, peut-être la documentation.
4. Écris la revue dans `labeling/revues/<STATION>.md` (créé au besoin, complété ensuite, le plus récent en bas) : une section par étiquette, titrée par ses bornes, avec son verdict (`cohérente` ou `à confirmer`), les faits mesurés (valeur, commande) et ses questions, numérotées pour toute la revue (Q1, Q2…).
@@ -45,6 +45,6 @@ Modifie le fichier par script : une ligne JSON par étiquette, les autres lignes
## Règles
- Tu n'écris que dans `labeling/<STATION>.jsonl` (sur sa parole) et `labeling/revues/<STATION>.md`.
- Lecture seule sur les données ; aucun identifiant (`SIM_CCID`, `ip`, `ip_*`) dans la revue ; pour une station `E-xxx`, les noms codés de l'event, jamais le registre de `anonymize-event`.
- Tu n'écris que dans `labeling/manual/<STATION>.jsonl` (sur sa parole) et `labeling/revues/<STATION>.md`.
- Lecture seule sur les données ; aucun identifiant (`SIM_CCID`, `ip`, `ip_*`) dans la revue ; jamais le registre de `anonymize-event`.
- Vocabulaire : `confirmed` / `strongly supported` / `consistent with` / `possible` / `insufficient evidence` / `not observed` ; pas de pseudo-probabilités.
+2 -2
View File
@@ -7,11 +7,11 @@ argument-hint: "<phénomène, en quelques mots>"
# Apprendre des étiquettes de l'expert
L'expert, c'est l'utilisateur : il étiquette des plages en texte libre, la cause et comment il l'a sue (`labeling/<STATION>.jsonl`, D-098). Apprendre, ici, c'est documenter (D-099) : l'agent `analyste` mesure dans les données ce que disent les étiquettes d'un même phénomène et pose ses questions à l'expert ; quand il a compris, il écrit ses conclusions ; l'agent `documentaliste` les fait entrer dans la documentation. Tu es l'orchestrateur : tu choisis les étiquettes avec l'utilisateur, relaies les questions et les réponses, lances le documentaliste et commites. **Tu ne juges ni les conclusions ni la documentation toi-même.**
L'expert, c'est l'utilisateur : il étiquette des plages en texte libre, la cause et comment il l'a sue (`labeling/manual/<STATION>.jsonl`, D-098, D-102). Apprendre, ici, c'est documenter (D-099) : l'agent `analyste` mesure dans les données ce que disent les étiquettes d'un même phénomène et pose ses questions à l'expert ; quand il a compris, il écrit ses conclusions ; l'agent `documentaliste` les fait entrer dans la documentation. Tu es l'orchestrateur : tu choisis les étiquettes avec l'utilisateur, relaies les questions et les réponses, lances le documentaliste et commites. **Tu ne juges ni les conclusions ni la documentation toi-même.**
## 1. Les étiquettes du phénomène
Lis `labeling/*.jsonl` (une ligne par étiquette : `debut`, `fin`, `description`) et retiens celles qui parlent du phénomène demandé (« $ARGUMENTS ») ; sans argument, demande-le. Annonce la liste, une ligne chacune (station, début, fin, dix mots de la description), et fais-la confirmer ou corriger par l'utilisateur (AskUserQuestion : « Ces étiquettes ? », Oui / J'en change). Au plus 5 : au-delà, garde les plus variées (stations différentes d'abord) et dis lesquelles restent pour une autre fois.
Lis `labeling/manual/*.jsonl` (une ligne par étiquette : `debut`, `fin`, `description`) et retiens celles qui parlent du phénomène demandé (« $ARGUMENTS ») ; sans argument, demande-le. Annonce la liste, une ligne chacune (station, début, fin, dix mots de la description), et fais-la confirmer ou corriger par l'utilisateur (AskUserQuestion : « Ces étiquettes ? », Oui / J'en change). Au plus 5 : au-delà, garde les plus variées (stations différentes d'abord) et dis lesquelles restent pour une autre fois.
Le dossier de la leçon : `labeling/lecons/<AAAA-MM-JJ>_<phénomène en minuscules, tirets>/`. Écris-y `etiquettes.jsonl`, les lignes retenues telles quelles, avec un champ `station` en plus.