Status page: data loader (station, dates, Analyse)

A form at the top of the Status page: station dropdown (folders of data/), start and end dates
(end excluded, as --au), and an Analyse button that builds the page for that selection and opens it.
The code is in detectors-view/data-loader/chargeur.py: the form, and its local server (port 8766)
that serves out/ and data/ like the common one, plus /analyse, which runs status.py each time.

python3 detectors-view/status.py without arguments, or detectors-view/status.sh, opens the form
alone; with a station folder it builds the page as before, now opened through the loader server.
common.page.open_served takes another port and server script.

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
maximeandClaude Opus 5.5 committed 2026-10-29 13:07:13 +01:00
1 parent 3678997321
commit aa2578873d
5 files changed
+103 -14

No files matched your search

+2 -1
View File
@@ -54,6 +54,7 @@ python3 maquettes/support/home.py [début] [fin] # maquette support
python3 vues-deplacements/maquette/explore.py [dossier] # page Explore : View, Diagnosis, Displacements, Journal python3 vues-deplacements/maquette/explore.py [dossier] # page Explore : View, Diagnosis, Displacements, Journal
python3 detectors/categories.py <dossier> # événements du journal, une ligne chacun python3 detectors/categories.py <dossier> # événements du journal, une ligne chacun
python3 detectors-view/detecteurs.py data/<STATION> [--du D --au F] # page des détecteurs seuls python3 detectors-view/detecteurs.py data/<STATION> [--du D --au F] # page des détecteurs seuls
./detectors-view/status.sh # page Status par son data loader : station, dates, Analyse
python3 .claude/skills/events-learner/benchmark.py # détecteurs face à la base d'events python3 .claude/skills/events-learner/benchmark.py # détecteurs face à la base d'events
pdftotext -layout "docs/aimsight/<fichier>.pdf" - # lire un PDF AIMsight pdftotext -layout "docs/aimsight/<fichier>.pdf" - # lire un PDF AIMsight
python3 -m venv .venv && .venv/bin/pip install plotly matplotlib # recréer .venv python3 -m venv .venv && .venv/bin/pip install plotly matplotlib # recréer .venv
@@ -98,7 +99,7 @@ python3 -m venv .venv && .venv/bin/pip install plotly matplotlib # recréer .
- `vues-deplacements/` : le chantier des déplacements (D-052), avec sa propre carte, `vues-deplacements/CLAUDE.md` : `maquette/` (page Explore et `spec.md`, D-053 à D-056), `contexte/` (journal du matin, seuils, lissage, `events-learner`, aiguisage), `cas/` (NORDEND, parcours de l'utilisateur), `benchmark/historique.csv` (D-069). - `vues-deplacements/` : le chantier des déplacements (D-052), avec sa propre carte, `vues-deplacements/CLAUDE.md` : `maquette/` (page Explore et `spec.md`, D-053 à D-056), `contexte/` (journal du matin, seuils, lissage, `events-learner`, aiguisage), `cas/` (NORDEND, parcours de l'utilisateur), `benchmark/historique.csv` (D-069).
- `detectors/` : les détecteurs du journal (D-067, D-068, D-084), un détecteur élémentaire par fichier, contrat `detect(mesures)`, classés en événements par `categories.py` ; `archive/` : versions écartées. - `detectors/` : les détecteurs du journal (D-067, D-068, D-084), un détecteur élémentaire par fichier, contrat `detect(mesures)`, classés en événements par `categories.py` ; `archive/` : versions écartées.
- `detectors-view/` : le développement de la page des détecteurs (D-093), `detecteurs.py` : images, courbes, Status, catégories, Error rate ; `run-detectors.sh` : la page sur chaque station de `data/` ; `status.py` : la page Status, version pseudo finale de la page Explore du site : corr_x, corr_y, mouvement de la caméra, événements des détecteurs en plages colorées et en étiquettes cliquables au-dessus (sélection : ses capteurs, ses détails et son timelapse sous la figure, sans zoom) (D-094), occultés selon `hierarchie-des-status.md` (D-095, regroupement thermique suspendu) ; la page des détecteurs est reprise par la page de fin de séance de `/events-learner` (`comparaison.py`) et par `/review-event`. - `detectors-view/` : le développement de la page des détecteurs (D-093), `detecteurs.py` : images, courbes, Status, catégories, Error rate ; `run-detectors.sh` : la page sur chaque station de `data/` ; `status.py` : la page Status, version pseudo finale de la page Explore du site : corr_x, corr_y, mouvement de la caméra, événements des détecteurs en plages colorées et en étiquettes cliquables au-dessus (sélection : ses capteurs, ses détails et son timelapse sous la figure, sans zoom) (D-094), occultés selon `hierarchie-des-status.md` (D-095, regroupement thermique suspendu) ; en haut, le data loader `data-loader/chargeur.py` (station, dates, « Analyse » ; son serveur, port 8766) ; la page des détecteurs est reprise par la page de fin de séance de `/events-learner` (`comparaison.py`) et par `/review-event`.
- `events-learner/`, `aiguiser/` : les séances de `/events-learner` et `/aiguiser` (D-084), une par dossier `<séance>_<STATION>/` (`lot-NN/`, `bilan.md`) ; historique, à ne lire que sur demande. `aiguiser/voir.py` : ce que rendent les outils de lecture sur un lot. - `events-learner/`, `aiguiser/` : les séances de `/events-learner` et `/aiguiser` (D-084), une par dossier `<séance>_<STATION>/` (`lot-NN/`, `bilan.md`) ; historique, à ne lire que sur demande. `aiguiser/voir.py` : ce que rendent les outils de lecture sur un lot.
- `events/` : **la base d'events, connaissance métier qui grandit** (D-048, D-080) : `INDEX.md` (le registre, seule porte d'entrée ; mode d'emploi : skill `read-event`, D-085), un dossier `E-xxx/` par event (`event.md` lisible d'abord par un humain, figures, données codées, `etiquettes.json`), validé par l'utilisateur ou « (appris) » par `/events-learner` en attendant `/review-event` ; `carte-des-evenements.md` (familles, catégories du journal, faux amis ; elle apprend de chaque event validé, D-087) et `eventualites-et-categories.drawio`. Un event n'y entre que par `/new-event`, lancé par l'utilisateur, ou par l'event-builder de `/events-learner`. - `events/` : **la base d'events, connaissance métier qui grandit** (D-048, D-080) : `INDEX.md` (le registre, seule porte d'entrée ; mode d'emploi : skill `read-event`, D-085), un dossier `E-xxx/` par event (`event.md` lisible d'abord par un humain, figures, données codées, `etiquettes.json`), validé par l'utilisateur ou « (appris) » par `/events-learner` en attendant `/review-event` ; `carte-des-evenements.md` (familles, catégories du journal, faux amis ; elle apprend de chaque event validé, D-087) et `eventualites-et-categories.drawio`. Un event n'y entre que par `/new-event`, lancé par l'utilisateur, ou par l'event-builder de `/events-learner`.
- `agent-tools/` : les outils de lecture des agents (D-081) : `donnees.py` (lecture commune, aussi des détecteurs), `inventaire`, `resume`, `plages`, `jours`, `ensemble`, `graphique`, `vignettes`, `gif` ; mode d'emploi : skill `lire-les-donnees`, aiguisé par `/aiguiser`. - `agent-tools/` : les outils de lecture des agents (D-081) : `donnees.py` (lecture commune, aussi des détecteurs), `inventaire`, `resume`, `plages`, `jours`, `ensemble`, `graphique`, `vignettes`, `gif` ; mode d'emploi : skill `lire-les-donnees`, aiguisé par `/aiguiser`.
+76
View File
@@ -0,0 +1,76 @@
"""Le data loader de la page Status (detectors-view/status.py) : une station de data/ (menu déroulant), une date de début et
une date de fin (exclue, comme --au ; vides : toute la période), et le bouton « Analyse », qui fait la page Status de la
sélection et l'ouvre. Le formulaire est en haut de chaque page Status, et seul dans out/data-loader.html. Son serveur local
(http://127.0.0.1:8766, lancé en tâche de fond) sert out/ et data/ comme celui de common.page, plus /analyse : status.py lancé
à chaque fois, donc toujours à jour de son code, puis renvoi vers sa page.
Usage : python3 detectors-view/status.py, ou detectors-view/status.sh (ouvre le formulaire seul)
"""
import html
import http.server
import subprocess
import sys
from pathlib import Path
from urllib.parse import parse_qs, quote, urlsplit
sys.path.insert(0, str(Path(__file__).resolve().parents[2] / "src"))
from common.page import ROOT, _Pages, open_served # noqa: E402 (bascule seule sur .venv si plotly manque)
PORT = 8766 # pas celui de common.page (8765), qui sert les autres pages
STATUS = Path(__file__).resolve().parents[1] / "status.py"
def stations():
return sorted(d.name for d in (ROOT / "data").iterdir() if d.is_dir())
def formulaire(station="", du="", au=""):
"""Le formulaire, en anglais (D-023) ; il ne marche que servi par ce serveur (ouvrir)."""
options = "".join(f"<option{' selected' * (s == station)}>{html.escape(s)}</option>" for s in stations())
return f"""<form action="/analyse" style="display:flex;gap:16px;align-items:center;flex-wrap:wrap;margin-bottom:12px"
onsubmit="this.querySelector('button').textContent = 'Analysing…'">
<label>Station <select name="station">{options}</select></label>
<label>From <input type="date" name="du" value="{html.escape(du)}"></label>
<label>To (excluded) <input type="date" name="au" value="{html.escape(au)}"></label>
<button>Analyse</button></form>"""
def accueil():
"""Le formulaire seul, dans out/data-loader.html -> son chemin."""
chemin = ROOT / "out" / "data-loader.html"
chemin.parent.mkdir(exist_ok=True)
chemin.write_text(f"""<!doctype html><html lang="en"><head><meta charset="utf-8"><title>Status loader</title>
<style>body{{font-family:system-ui,sans-serif;margin:16px;background:#fff;color:#1a1a19}}</style></head><body>
<h2>Status</h2>{formulaire()}</body></html>""", encoding="utf-8")
return chemin
def ouvrir(chemin):
"""Ouvre la page par ce serveur, lancé en tâche de fond s'il ne répond pas."""
open_served(chemin, PORT, __file__)
class Chargeur(_Pages):
def do_GET(self):
url = urlsplit(self.path)
if url.path != "/analyse":
return super().do_GET()
q = {k: v[0] for k, v in parse_qs(url.query).items()}
station = q.get("station")
if station not in stations(): # le nom devient un chemin : une station de data/, rien d'autre
return self.send_error(400, "Unknown station")
args = [sys.executable, str(STATUS), str(ROOT / "data" / station), "--sans-ouvrir"]
args += [f"--{k}={q[k]}" for k in ("du", "au") if q.get(k)]
r = subprocess.run(args, capture_output=True, text=True)
if r.returncode:
return self.send_error(500, "status.py failed", r.stderr[-3000:])
page = Path(r.stdout.strip().splitlines()[-1]).relative_to(ROOT)
self.send_response(303)
self.send_header("Location", "/" + quote(page.as_posix()))
self.end_headers()
if __name__ == "__main__":
if sys.argv[1:] == ["serve"]:
http.server.ThreadingHTTPServer(("127.0.0.1", PORT), Chargeur).serve_forever()
else:
ouvrir(accueil())
+14 -7
View File
@@ -10,19 +10,25 @@ les courbes, ses plages soulignées ; un second clic rend tout ; un clic ailleur
selon les cibles tracées, sans toucher aux cibles. Des cibles cachées dans la légende (clic, ou double clic pour selon les cibles tracées, sans toucher aux cibles. Des cibles cachées dans la légende (clic, ou double clic pour
n'en garder qu'une) : seuls restent les status qui touchent une cible visible, ou tous les capteurs. En bas, le bouton n'en garder qu'une) : seuls restent les status qui touchent une cible visible, ou tous les capteurs. En bas, le bouton
« Load details » montre les détails du status choisi (ses capteurs, References et Targets) et, à droite, le timelapse de ses images (comme detecteurs.py : « Load details » montre les détails du status choisi (ses capteurs, References et Targets) et, à droite, le timelapse de ses images (comme detecteurs.py :
marge avant et après, bord rouge pendant, Focused ou Global image, ⤓ GIF) ; la page est servie par http://127.0.0.1. marge avant et après, bord rouge pendant, Focused ou Global image, ⤓ GIF) ; la page est servie par http://127.0.0.1. Tout
Usage : python3 detectors-view/status.py <dossier de station> [--du AAAA-MM-JJ] [--au AAAA-MM-JJ] en haut, le data loader (data-loader/chargeur.py) : une autre station, d'autres dates, et « Analyse » refait la page.
(--au exclu ; sans dates, toute la période du dossier ; page : out/status_<STATION>_<du>_<au>.html, ouverte) Usage : python3 detectors-view/status.py [<dossier de station> [--du AAAA-MM-JJ] [--au AAAA-MM-JJ]]
(sans dossier : le data loader seul, comme detectors-view/status.sh ; --au exclu ; sans dates, toute la période du
dossier ; page : out/status_<STATION>_<du>_<au>.html, ouverte)
""" """
import argparse import argparse
import html import html
import json import json
import os import os
import statistics import statistics
import sys
import textwrap import textwrap
import detecteurs # la page des détecteurs : chargement, couleurs, références (bascule seule sur .venv si plotly manque) import detecteurs # la page des détecteurs : chargement, couleurs, références (bascule seule sur .venv si plotly manque)
from detecteurs import ROOT, donnees, go, make_subplots, open_served, plotly_t from detecteurs import ROOT, donnees, go, make_subplots, plotly_t
sys.path.insert(0, os.path.join(os.path.dirname(os.path.abspath(__file__)), "data-loader"))
import chargeur # noqa: E402 (le data loader : son formulaire en haut de la page, son serveur pour l'ouvrir)
# Les plages du Status (l'utilisateur, 2026-10-29) : palette catégorielle de référence (skill dataviz), 8 teintes pour # Les plages du Status (l'utilisateur, 2026-10-29) : palette catégorielle de référence (skill dataviz), 8 teintes pour
# 10 status : les deux phases thermiques partagent l'orange, No data en gris. # 10 status : les deux phases thermiques partagent l'orange, No data en gris.
@@ -222,6 +228,7 @@ def page(dossier, du=None, au=None):
<style>body{{font-family:system-ui,sans-serif;margin:16px;background:#fff;color:#1a1a19}} p{{max-width:70em}} <style>body{{font-family:system-ui,sans-serif;margin:16px;background:#fff;color:#1a1a19}} p{{max-width:70em}}
{detecteurs.DETAILS_CSS}</style></head><body> {detecteurs.DETAILS_CSS}</style></head><body>
<h2>Status, {html.escape(station)}</h2> <h2>Status, {html.escape(station)}</h2>
{chargeur.formulaire(station, du or "", au or "")}
{detecteurs.LECTEUR_HTML if images else ""} {detecteurs.LECTEUR_HTML if images else ""}
{fig.to_html(include_plotlyjs="cdn", full_html=False, div_id="fig", post_script=script, config={"scrollZoom": False})} {fig.to_html(include_plotlyjs="cdn", full_html=False, div_id="fig", post_script=script, config={"scrollZoom": False})}
<section id="det"><h3>Details</h3><button id="charge" disabled>Load details</button> <section id="det"><h3>Details</h3><button id="charge" disabled>Load details</button>
@@ -233,12 +240,12 @@ def page(dossier, du=None, au=None):
if __name__ == "__main__": if __name__ == "__main__":
p = argparse.ArgumentParser(description=__doc__, formatter_class=argparse.RawDescriptionHelpFormatter) p = argparse.ArgumentParser(description=__doc__, formatter_class=argparse.RawDescriptionHelpFormatter)
p.add_argument("dossier") p.add_argument("dossier", nargs="?", help="sans dossier : le data loader seul")
p.add_argument("--du") p.add_argument("--du")
p.add_argument("--au") p.add_argument("--au")
p.add_argument("--sans-ouvrir", action="store_true", help="écrit la page sans l'ouvrir") p.add_argument("--sans-ouvrir", action="store_true", help="écrit la page sans l'ouvrir")
o = p.parse_args() o = p.parse_args()
chemin = page(o.dossier, o.du, o.au) chemin = page(o.dossier, o.du, o.au) if o.dossier else chargeur.accueil()
print(chemin) print(chemin)
if not o.sans_ouvrir: if not o.sans_ouvrir:
open_served(chemin) chargeur.ouvrir(chemin)
+4
View File
@@ -0,0 +1,4 @@
#!/usr/bin/env bash
# La page Status par son data loader : station, dates, « Analyse » (data-loader/chargeur.py).
cd "$(dirname "$0")/.."
python3 detectors-view/status.py "$@"
+7 -6
View File
@@ -70,22 +70,23 @@ PORT = 8765
SERVIS = ("out", "data") SERVIS = ("out", "data")
def open_served(path): def open_served(path, port=PORT, script=__file__):
"""Ouvre la page par le serveur local, lancé en tâche de fond s'il ne répond pas (il reste pour les pages suivantes).""" """Ouvre la page par le serveur local, lancé en tâche de fond s'il ne répond pas (il reste pour les pages suivantes).
Un autre serveur (port, script lancé avec « serve ») : le data loader de la page Status."""
def repond(): def repond():
try: try:
socket.create_connection(("127.0.0.1", PORT), timeout=0.5).close() socket.create_connection(("127.0.0.1", port), timeout=0.5).close()
return True return True
except OSError: except OSError:
return False return False
if not repond(): # ponytail: un autre programme sur PORT serait pris pour le serveur ; changer PORT si besoin if not repond(): # ponytail: un autre programme sur port serait pris pour le serveur ; changer de port si besoin
subprocess.Popen([sys.executable, __file__, "serve"], start_new_session=True, subprocess.Popen([sys.executable, script, "serve"], start_new_session=True,
stdout=subprocess.DEVNULL, stderr=subprocess.DEVNULL) stdout=subprocess.DEVNULL, stderr=subprocess.DEVNULL)
for _ in range(50): for _ in range(50):
if repond(): if repond():
break break
time.sleep(0.1) time.sleep(0.1)
url = f"http://127.0.0.1:{PORT}/" + quote(Path(path).resolve().relative_to(ROOT).as_posix()) url = f"http://127.0.0.1:{port}/" + quote(Path(path).resolve().relative_to(ROOT).as_posix())
if shutil.which("explorer.exe"): # WSL : navigateur Windows if shutil.which("explorer.exe"): # WSL : navigateur Windows
subprocess.run(["explorer.exe", url]) subprocess.run(["explorer.exe", url])
else: else: