Detector-learner: user decisions apart in the bilan, process agents without events-learner (D-122)
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
1 parent
6d78bac736
commit
e39531fd33
6 files changed
+23
-11
No files matched your search
@@ -51,7 +51,7 @@ La crainte de l'utilisateur, c'est que les détecteurs partent dans trop de comp
|
||||
Puis le **benchmark**, la commande `regression.py` que donne ta demande, face au benchmark avant. Il compare, instant par instant et par famille (`labeling/familles.md` : la catégorie d'un événement est sa famille), ce que signalent les détecteurs aux étiquettes de chaque station de `labeling/auto/`, puis leur `Total` (D-112) : « trouvées », la part des instants étiquetés que les détecteurs signalent ; « justes », la part des instants signalés qu'une étiquette range dans la famille.
|
||||
- **Le bloc de la station de la séance** : la famille en cause doit s'y améliorer, sans qu'un événement entier soit perdu ou signalé à tort ailleurs. Un trou n'a pas de mesure, donc pas d'instant au score : pour un trou, le bon sens se lit à la commande du journal (le trou daté comme l'étiquette). Ne vise pas 100 %.
|
||||
- **Le `Total`** : ce que tu fais monter.
|
||||
- **Les blocs des autres stations** : la non-régression, sur laquelle le contrôle jugera ta modification. **Un recul**, sur une famille d'une autre station : ses instants trouvés baissent de plus de 2, ou « trouvées » ou « justes » perd plus d'1 point ; c'est un recul même si le `Total` monte (la même règle pour le contrôle). Reprends ta modification avant de la commiter, ou laisse la suggestion. Ne règle rien pour une station précise. Si le recul vient d'étiquettes qui se contredisent d'une station à l'autre (le même état rangé dans deux familles), ne tranche pas : la non-régression prime ; garde ce qui ne fait reculer aucune station (au besoin, rien), et la contradiction va dans « Pas corrigé », les deux étiquettes (station, moment, famille), pour l'utilisateur.
|
||||
- **Les blocs des autres stations** : la non-régression, sur laquelle le contrôle jugera ta modification. **Un recul**, sur une famille d'une autre station : ses instants trouvés baissent de plus de 2, ou « trouvées » ou « justes » perd plus d'1 point ; c'est un recul même si le `Total` monte (la même règle pour le contrôle). Reprends ta modification avant de la commiter, ou laisse la suggestion. Ne règle rien pour une station précise. Si le recul vient d'étiquettes qui se contredisent d'une station à l'autre (le même état rangé dans deux familles), ne tranche pas : la non-régression prime ; garde ce qui ne fait reculer aucune station (au besoin, rien), et la contradiction va dans « À trancher par l'utilisateur », les deux étiquettes (station, moment, famille).
|
||||
|
||||
## Une suggestion, un commit
|
||||
|
||||
@@ -79,6 +79,9 @@ Jamais `git add -A`, `git stash`, ni de `git checkout` sur d'autres fichiers : u
|
||||
## Non-régression
|
||||
<les lignes qui ont changé dans les autres blocs, station et famille, avant → après, puis les lignes changées du bloc `Total`>
|
||||
|
||||
## À trancher par l'utilisateur
|
||||
aucune | - <étiquettes qui se contredisent d'une station à l'autre : les deux étiquettes (station, moment, famille), et ce qu'elles empêchent>
|
||||
|
||||
## Pas corrigé
|
||||
aucune | <ce qui reste, et pourquoi>
|
||||
|
||||
|
||||
Reference in new issue
Block a user