Detector-learner (D-116): the detectors learn from the labeler's labels alone, without events; critic, upgrader and control, the control guarded by the score on the other labeled stations (regression.py); NEBRASKA and NORDEND labels

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
maximeandClaude Opus 5.5 committed 2026-11-03 13:46:36 +01:00
1 parent 9724ea5c3b
commit 0537f4ddeb
10 files changed
+167 -14

No files matched your search

@@ -0,0 +1,48 @@
"""Non-régression de /detector-learner (D-116) : les détecteurs face aux étiquettes de l'étiqueteur des autres stations.
Pour chaque station de labeling/auto/ (sauf celle de la séance, --sauf) qui a son dossier dans data/, le score par
famille et par instant de score.py (D-112), sur la plage de ses étiquettes : du jour de la première à minuit après la
dernière. Puis le total, famille par famille. Il tient lieu du benchmark sur la base d'events : une famille qui recule
sur une station est un recul, même si le total monte.
Usage : python3 .claude/skills/detector-learner/regression.py [--sauf STATION]
"""
import glob
import json
import os
import sys
RACINE = os.path.join(os.path.dirname(os.path.abspath(__file__)), "..", "..", "..")
sys.path.insert(0, os.path.join(RACINE, ".claude", "skills", "events-learner"))
import score # noqa: E402
def plage(chemin):
"""labeling/auto/<STATION>.jsonl -> (début, fin) iso, en jours entiers UTC, fin exclue."""
with open(chemin, encoding="utf-8") as f:
etiq = [json.loads(l) for l in f if l.strip()]
du = min(e["debut"] for e in etiq)[:10]
fin = max(e["fin"] for e in etiq)
au = fin[:10] if fin[11:16] in ("", "00:00") else score.iso(score.instant(fin[:10]) + score.timedelta(days=1))[:10]
return score.iso(score.instant(du)), score.iso(score.instant(au))
if __name__ == "__main__":
if sys.argv[1:] and sys.argv[1:2] != ["--sauf"]:
sys.exit(__doc__)
sauf = sys.argv[2].upper() if len(sys.argv) > 2 else None
total = {}
for chemin in sorted(glob.glob(os.path.join(RACINE, "labeling", "auto", "*.jsonl"))):
station = os.path.basename(chemin)[:-len(".jsonl")]
dossier = os.path.join(RACINE, "data", station)
if station == sauf:
continue
if not os.path.isdir(dossier):
print(f"{station} : pas de data/{station}/, sautée\n")
continue
du, au = plage(chemin)
n, etiq = score.familles_lot(dossier, du, au)
score.afficher(f"{station} : {du} → {au}, {len(etiq)} étiquettes", n)
print()
for k, v in n.items():
total[k] = [a + b for a, b in zip(total.get(k, [0, 0, 0]), v)]
score.afficher("Total", total)