One detector per family, family keys equal to their names (D-119)
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
1 parent
0666d59e7d
commit
98be20a2bc
34 files changed
+551
-516
No files matched your search
+46
-35
@@ -1,10 +1,9 @@
|
||||
"""Les étiquettes face aux détecteurs, station et dates au choix (l'utilisateur, 2026-11-03) : la page de fin de séance de
|
||||
/events-learner (.claude/skills/events-learner/comparaison.py) sans séance ni benchmark. La page de detecteurs.py, une ligne
|
||||
"""Les étiquettes face aux détecteurs, station et dates au choix (l'utilisateur, 2026-11-03) : les seules barres, une ligne
|
||||
par famille des étiquettes (labeling/familles.md), dédoublée : en haut les étiquettes de la station qui touchent la plage
|
||||
(labeling/auto/, sinon labeling/manual/, comme la page Status), en bas les événements des détecteurs, rangés par la
|
||||
correspondance de familles.md ; sous la figure, le score par famille (score.familles_lot). Tout en haut, le data loader
|
||||
(data-loader/chargeur.py) : une autre station, d'autres dates, et « Analyse » refait la page. Son serveur local :
|
||||
http://127.0.0.1:8769.
|
||||
correspondance de familles.md (comme la page de fin de séance de /events-learner). Survol : bornes, capteurs, texte. Tout
|
||||
en haut, le data loader (data-loader/chargeur.py) : une autre station, d'autres dates, et « Analyse » refait la page. Son
|
||||
serveur local : http://127.0.0.1:8769.
|
||||
Usage : python3 detectors-view/compare.py [<dossier de station> [--du AAAA-MM-JJ] [--au AAAA-MM-JJ]]
|
||||
(sans dossier : le data loader seul ; --au exclu ; sans dates, toute la période du dossier ;
|
||||
page : out/compare_<STATION>_<du>_<au>.html, ouverte)
|
||||
@@ -13,52 +12,64 @@ import argparse
|
||||
import html
|
||||
import http.server
|
||||
import os
|
||||
import statistics
|
||||
import sys
|
||||
|
||||
import detecteurs # la page des détecteurs ; met .claude/skills/events-learner sur le chemin
|
||||
from detecteurs import HORS, ROOT, score, survol
|
||||
import detecteurs # la page des détecteurs : ses barres, ses couleurs ; met .claude/skills/events-learner sur le chemin
|
||||
from detecteurs import HORS, ROOT, go, score, survol
|
||||
|
||||
sys.path[:0] = [os.path.join(detecteurs.ICI, "data-loader"), os.path.join(ROOT, "labeling")]
|
||||
import chargeur # noqa: E402 (son formulaire, son serveur)
|
||||
import comparaison # noqa: E402 (la page de fin de séance de /events-learner : sa table du score)
|
||||
import labeling # noqa: E402 (les dossiers des étiquettes, leur lecture)
|
||||
|
||||
PORT = 8769 # ni 8765 (common.page), ni 8766 (Status), ni 8767 (Labeling), ni 8768 (View)
|
||||
LIGNE = 40 # px par famille
|
||||
|
||||
|
||||
def page(dossier, du=None, au=None):
|
||||
station = os.path.basename(os.path.normpath(dossier))
|
||||
if du and au:
|
||||
a, b = score.instant(du), score.instant(au)
|
||||
else: # ponytail: les mesures chargées ici pour les bornes, puis encore par detecteurs.page et familles_lot
|
||||
tous = sorted({m["t"] for ms in score.charger(dossier).values() for m in ms})
|
||||
if len(tous) < 2:
|
||||
raise SystemExit(f"Aucun export « advanced » dans {dossier}.")
|
||||
a = score.instant(du) if du else tous[0]
|
||||
b = score.instant(au) if au else tous[-1] + (tous[-1] - tous[-2])
|
||||
mesures = score.charger(dossier)
|
||||
tous = sorted({m["t"] for ms in mesures.values() for m in ms})
|
||||
if len(tous) < 2:
|
||||
raise SystemExit(f"Aucun export « advanced » dans {dossier}.")
|
||||
a = score.instant(du) if du else tous[0]
|
||||
b = score.instant(au) if au else tous[-1] + (tous[-1] - tous[-2])
|
||||
debut, fin = score.iso(a), score.iso(b)
|
||||
pas = statistics.median(y - x for x, y in zip(tous, tous[1:])) # une barre finit un pas après sa dernière mesure
|
||||
|
||||
source, ls = next(((d, ls) for d in labeling.DOSSIERS if (ls := labeling.lire(station, d))), ("auto", []))
|
||||
etiq = [e for e in ls if e["debut"] < fin and e["fin"] >= debut]
|
||||
total, _ = score.familles_lot(dossier, debut, fin, etiq)
|
||||
agent = [(e["debut"], e["fin"], c := HORS if e.get("categorie") == "aucune" else e.get("categorie", "sans famille"),
|
||||
survol(f"Étiquette : {c}", e["debut"], e["fin"], ["dans le texte"], e["description"])) for e in etiq]
|
||||
etiq = [(e["debut"], e["fin"], c := HORS if e.get("categorie") == "None" else e.get("categorie", "sans famille"),
|
||||
survol(f"Étiquette : {c}", e["debut"], e["fin"], ["dans le texte"], e["description"]))
|
||||
for e in ls if e["debut"] < fin and e["fin"] >= debut]
|
||||
lignes = score.familles()
|
||||
entete = f"""<h1>Étiquettes et détecteurs, {html.escape(station)}</h1>
|
||||
{chargeur.formulaire(station, du or "", au or "")}
|
||||
<p>Dessous les courbes, chaque ligne est une famille des étiquettes (<code>labeling/familles.md</code>) : la barre du haut,
|
||||
les {len(etiq)} étiquettes de <code>labeling/{source}/{html.escape(station)}.jsonl</code> qui touchent la plage{
|
||||
" (aucune)" if not etiq else ""}, celle du bas, les événements des détecteurs, rangés dans la famille de leur catégorie
|
||||
(survol : la catégorie du journal). Un saut bref, de la famille de sa cause, garde sa ligne. Un clic sur une barre joue
|
||||
son timelapse. Les deux barres de chaque ligne devraient coïncider.</p>"""
|
||||
annexe = f"""<style>td small{{color:#8a8984}} tr.niveau td{{color:#5f5e5a;font-style:italic}}</style>
|
||||
<h3>Score</h3>
|
||||
<p>On compte des instants : une heure de la plage où un capteur au moins a une mesure. <b>Trouvées</b> : des instants
|
||||
qu'une étiquette range dans la famille, la part que les détecteurs signalent aussi. <b>Confirmées</b> : des instants que
|
||||
signalent les détecteurs, la part qu'une étiquette range aussi dans la famille. « — » : rien à compter.</p>
|
||||
{comparaison.tableau(total, [*dict.fromkeys(lignes.values()), HORS], "Famille")}"""
|
||||
det = [(v["start"], v["end"], lignes.get(v["category"], v["category"]),
|
||||
survol(v["label"], v["start"], v["end"], v["sensors"], v["text"]))
|
||||
for v in score.evenements(mesures, debut, fin)]
|
||||
base = [*dict.fromkeys(lignes.values())]
|
||||
presentes = {s[2] for s in etiq + det}
|
||||
ordre = [*base, *sorted(presentes - set(base) - {HORS}), *[HORS] * (HORS in presentes)]
|
||||
|
||||
fig = go.Figure([detecteurs.barres("Détecteurs", detecteurs.SCRIPTS, det, pas, 2, "d"), # en mode group, le 1er en bas
|
||||
detecteurs.barres(f"Étiquettes ({source})", detecteurs.AGENT, etiq, pas, 1, "a"),
|
||||
go.Scatter(x=[a] * len(ordre), y=ordre, mode="markers", marker={"opacity": 0}, hoverinfo="skip",
|
||||
showlegend=False)]) # invisible : chaque famille a sa ligne, même vide
|
||||
fig.update_layout(barmode="group", bargap=0.3, bargroupgap=0.1, hovermode="closest", plot_bgcolor="white",
|
||||
height=LIGNE * len(ordre) + 120, margin={"l": 170, "r": 20, "t": 40, "b": 40},
|
||||
legend={"orientation": "h", "x": 0, "y": 1.02, "yanchor": "bottom"})
|
||||
fig.update_xaxes(type="date", range=[a, b], showgrid=True, gridcolor="#e6e6e2")
|
||||
fig.update_yaxes(categoryorder="array", categoryarray=ordre[::-1], showgrid=True, gridcolor="#eeeeea", fixedrange=True)
|
||||
|
||||
nom = f"{station}_{debut[:10]}_{fin[:10]}"
|
||||
return detecteurs.page(dossier, debut, fin, entete=entete, annexe=annexe, analyste=agent, lignes=lignes,
|
||||
chemin=os.path.join(ROOT, "out", f"compare_{nom}.html"))
|
||||
chemin = os.path.join(ROOT, "out", f"compare_{nom}.html")
|
||||
os.makedirs(os.path.dirname(chemin), exist_ok=True)
|
||||
with open(chemin, "w", encoding="utf-8") as f:
|
||||
f.write(f"""<!doctype html><html lang="fr"><head><meta charset="utf-8"><title>Compare {html.escape(nom)}</title>
|
||||
<style>body{{font-family:system-ui,sans-serif;margin:16px;background:#fff;color:#1a1a19}}</style></head><body>
|
||||
<h2>Étiquettes et détecteurs, {html.escape(station)}</h2>
|
||||
{chargeur.formulaire(station, du or "", au or "")}
|
||||
{fig.to_html(include_plotlyjs="cdn", full_html=False, config={"scrollZoom": False})}
|
||||
</body></html>""")
|
||||
return chemin
|
||||
|
||||
|
||||
class Serveur(chargeur.Chargeur):
|
||||
|
||||
Reference in new issue
Block a user