Status page: data loader (station, dates, Analyse)

A form at the top of the Status page: station dropdown (folders of data/), start and end dates
(end excluded, as --au), and an Analyse button that builds the page for that selection and opens it.
The code is in detectors-view/data-loader/chargeur.py: the form, and its local server (port 8766)
that serves out/ and data/ like the common one, plus /analyse, which runs status.py each time.

python3 detectors-view/status.py without arguments, or detectors-view/status.sh, opens the form
alone; with a station folder it builds the page as before, now opened through the loader server.
common.page.open_served takes another port and server script.

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
maximeandClaude Opus 5.5 committed 2026-10-29 13:07:13 +01:00
1 parent 3678997321
commit aa2578873d
5 files changed
+103 -14

No files matched your search

+2 -1
View File
@@ -54,6 +54,7 @@ python3 maquettes/support/home.py [début] [fin] # maquette support
python3 vues-deplacements/maquette/explore.py [dossier] # page Explore : View, Diagnosis, Displacements, Journal
python3 detectors/categories.py <dossier> # événements du journal, une ligne chacun
python3 detectors-view/detecteurs.py data/<STATION> [--du D --au F] # page des détecteurs seuls
./detectors-view/status.sh # page Status par son data loader : station, dates, Analyse
python3 .claude/skills/events-learner/benchmark.py # détecteurs face à la base d'events
pdftotext -layout "docs/aimsight/<fichier>.pdf" - # lire un PDF AIMsight
python3 -m venv .venv && .venv/bin/pip install plotly matplotlib # recréer .venv
@@ -98,7 +99,7 @@ python3 -m venv .venv && .venv/bin/pip install plotly matplotlib # recréer .
- `vues-deplacements/` : le chantier des déplacements (D-052), avec sa propre carte, `vues-deplacements/CLAUDE.md` : `maquette/` (page Explore et `spec.md`, D-053 à D-056), `contexte/` (journal du matin, seuils, lissage, `events-learner`, aiguisage), `cas/` (NORDEND, parcours de l'utilisateur), `benchmark/historique.csv` (D-069).
- `detectors/` : les détecteurs du journal (D-067, D-068, D-084), un détecteur élémentaire par fichier, contrat `detect(mesures)`, classés en événements par `categories.py` ; `archive/` : versions écartées.
- `detectors-view/` : le développement de la page des détecteurs (D-093), `detecteurs.py` : images, courbes, Status, catégories, Error rate ; `run-detectors.sh` : la page sur chaque station de `data/` ; `status.py` : la page Status, version pseudo finale de la page Explore du site : corr_x, corr_y, mouvement de la caméra, événements des détecteurs en plages colorées et en étiquettes cliquables au-dessus (sélection : ses capteurs, ses détails et son timelapse sous la figure, sans zoom) (D-094), occultés selon `hierarchie-des-status.md` (D-095, regroupement thermique suspendu) ; la page des détecteurs est reprise par la page de fin de séance de `/events-learner` (`comparaison.py`) et par `/review-event`.
- `detectors-view/` : le développement de la page des détecteurs (D-093), `detecteurs.py` : images, courbes, Status, catégories, Error rate ; `run-detectors.sh` : la page sur chaque station de `data/` ; `status.py` : la page Status, version pseudo finale de la page Explore du site : corr_x, corr_y, mouvement de la caméra, événements des détecteurs en plages colorées et en étiquettes cliquables au-dessus (sélection : ses capteurs, ses détails et son timelapse sous la figure, sans zoom) (D-094), occultés selon `hierarchie-des-status.md` (D-095, regroupement thermique suspendu) ; en haut, le data loader `data-loader/chargeur.py` (station, dates, « Analyse » ; son serveur, port 8766) ; la page des détecteurs est reprise par la page de fin de séance de `/events-learner` (`comparaison.py`) et par `/review-event`.
- `events-learner/`, `aiguiser/` : les séances de `/events-learner` et `/aiguiser` (D-084), une par dossier `<séance>_<STATION>/` (`lot-NN/`, `bilan.md`) ; historique, à ne lire que sur demande. `aiguiser/voir.py` : ce que rendent les outils de lecture sur un lot.
- `events/` : **la base d'events, connaissance métier qui grandit** (D-048, D-080) : `INDEX.md` (le registre, seule porte d'entrée ; mode d'emploi : skill `read-event`, D-085), un dossier `E-xxx/` par event (`event.md` lisible d'abord par un humain, figures, données codées, `etiquettes.json`), validé par l'utilisateur ou « (appris) » par `/events-learner` en attendant `/review-event` ; `carte-des-evenements.md` (familles, catégories du journal, faux amis ; elle apprend de chaque event validé, D-087) et `eventualites-et-categories.drawio`. Un event n'y entre que par `/new-event`, lancé par l'utilisateur, ou par l'event-builder de `/events-learner`.
- `agent-tools/` : les outils de lecture des agents (D-081) : `donnees.py` (lecture commune, aussi des détecteurs), `inventaire`, `resume`, `plages`, `jours`, `ensemble`, `graphique`, `vignettes`, `gif` ; mode d'emploi : skill `lire-les-donnees`, aiguisé par `/aiguiser`.
+76
View File
@@ -0,0 +1,76 @@
"""Le data loader de la page Status (detectors-view/status.py) : une station de data/ (menu déroulant), une date de début et
une date de fin (exclue, comme --au ; vides : toute la période), et le bouton « Analyse », qui fait la page Status de la
sélection et l'ouvre. Le formulaire est en haut de chaque page Status, et seul dans out/data-loader.html. Son serveur local
(http://127.0.0.1:8766, lancé en tâche de fond) sert out/ et data/ comme celui de common.page, plus /analyse : status.py lancé
à chaque fois, donc toujours à jour de son code, puis renvoi vers sa page.
Usage : python3 detectors-view/status.py, ou detectors-view/status.sh (ouvre le formulaire seul)
"""
import html
import http.server
import subprocess
import sys
from pathlib import Path
from urllib.parse import parse_qs, quote, urlsplit
sys.path.insert(0, str(Path(__file__).resolve().parents[2] / "src"))
from common.page import ROOT, _Pages, open_served # noqa: E402 (bascule seule sur .venv si plotly manque)
PORT = 8766 # pas celui de common.page (8765), qui sert les autres pages
STATUS = Path(__file__).resolve().parents[1] / "status.py"
def stations():
return sorted(d.name for d in (ROOT / "data").iterdir() if d.is_dir())
def formulaire(station="", du="", au=""):
"""Le formulaire, en anglais (D-023) ; il ne marche que servi par ce serveur (ouvrir)."""
options = "".join(f"<option{' selected' * (s == station)}>{html.escape(s)}</option>" for s in stations())
return f"""<form action="/analyse" style="display:flex;gap:16px;align-items:center;flex-wrap:wrap;margin-bottom:12px"
onsubmit="this.querySelector('button').textContent = 'Analysing…'">
<label>Station <select name="station">{options}</select></label>
<label>From <input type="date" name="du" value="{html.escape(du)}"></label>
<label>To (excluded) <input type="date" name="au" value="{html.escape(au)}"></label>
<button>Analyse</button></form>"""
def accueil():
"""Le formulaire seul, dans out/data-loader.html -> son chemin."""
chemin = ROOT / "out" / "data-loader.html"
chemin.parent.mkdir(exist_ok=True)
chemin.write_text(f"""<!doctype html><html lang="en"><head><meta charset="utf-8"><title>Status loader</title>
<style>body{{font-family:system-ui,sans-serif;margin:16px;background:#fff;color:#1a1a19}}</style></head><body>
<h2>Status</h2>{formulaire()}</body></html>""", encoding="utf-8")
return chemin
def ouvrir(chemin):
"""Ouvre la page par ce serveur, lancé en tâche de fond s'il ne répond pas."""
open_served(chemin, PORT, __file__)
class Chargeur(_Pages):
def do_GET(self):
url = urlsplit(self.path)
if url.path != "/analyse":
return super().do_GET()
q = {k: v[0] for k, v in parse_qs(url.query).items()}
station = q.get("station")
if station not in stations(): # le nom devient un chemin : une station de data/, rien d'autre
return self.send_error(400, "Unknown station")
args = [sys.executable, str(STATUS), str(ROOT / "data" / station), "--sans-ouvrir"]
args += [f"--{k}={q[k]}" for k in ("du", "au") if q.get(k)]
r = subprocess.run(args, capture_output=True, text=True)
if r.returncode:
return self.send_error(500, "status.py failed", r.stderr[-3000:])
page = Path(r.stdout.strip().splitlines()[-1]).relative_to(ROOT)
self.send_response(303)
self.send_header("Location", "/" + quote(page.as_posix()))
self.end_headers()
if __name__ == "__main__":
if sys.argv[1:] == ["serve"]:
http.server.ThreadingHTTPServer(("127.0.0.1", PORT), Chargeur).serve_forever()
else:
ouvrir(accueil())
+14 -7
View File
@@ -10,19 +10,25 @@ les courbes, ses plages soulignées ; un second clic rend tout ; un clic ailleur
selon les cibles tracées, sans toucher aux cibles. Des cibles cachées dans la légende (clic, ou double clic pour
n'en garder qu'une) : seuls restent les status qui touchent une cible visible, ou tous les capteurs. En bas, le bouton
« Load details » montre les détails du status choisi (ses capteurs, References et Targets) et, à droite, le timelapse de ses images (comme detecteurs.py :
marge avant et après, bord rouge pendant, Focused ou Global image, ⤓ GIF) ; la page est servie par http://127.0.0.1.
Usage : python3 detectors-view/status.py <dossier de station> [--du AAAA-MM-JJ] [--au AAAA-MM-JJ]
(--au exclu ; sans dates, toute la période du dossier ; page : out/status_<STATION>_<du>_<au>.html, ouverte)
marge avant et après, bord rouge pendant, Focused ou Global image, ⤓ GIF) ; la page est servie par http://127.0.0.1. Tout
en haut, le data loader (data-loader/chargeur.py) : une autre station, d'autres dates, et « Analyse » refait la page.
Usage : python3 detectors-view/status.py [<dossier de station> [--du AAAA-MM-JJ] [--au AAAA-MM-JJ]]
(sans dossier : le data loader seul, comme detectors-view/status.sh ; --au exclu ; sans dates, toute la période du
dossier ; page : out/status_<STATION>_<du>_<au>.html, ouverte)
"""
import argparse
import html
import json
import os
import statistics
import sys
import textwrap
import detecteurs # la page des détecteurs : chargement, couleurs, références (bascule seule sur .venv si plotly manque)
from detecteurs import ROOT, donnees, go, make_subplots, open_served, plotly_t
from detecteurs import ROOT, donnees, go, make_subplots, plotly_t
sys.path.insert(0, os.path.join(os.path.dirname(os.path.abspath(__file__)), "data-loader"))
import chargeur # noqa: E402 (le data loader : son formulaire en haut de la page, son serveur pour l'ouvrir)
# Les plages du Status (l'utilisateur, 2026-10-29) : palette catégorielle de référence (skill dataviz), 8 teintes pour
# 10 status : les deux phases thermiques partagent l'orange, No data en gris.
@@ -222,6 +228,7 @@ def page(dossier, du=None, au=None):
<style>body{{font-family:system-ui,sans-serif;margin:16px;background:#fff;color:#1a1a19}} p{{max-width:70em}}
{detecteurs.DETAILS_CSS}</style></head><body>
<h2>Status, {html.escape(station)}</h2>
{chargeur.formulaire(station, du or "", au or "")}
{detecteurs.LECTEUR_HTML if images else ""}
{fig.to_html(include_plotlyjs="cdn", full_html=False, div_id="fig", post_script=script, config={"scrollZoom": False})}
<section id="det"><h3>Details</h3><button id="charge" disabled>Load details</button>
@@ -233,12 +240,12 @@ def page(dossier, du=None, au=None):
if __name__ == "__main__":
p = argparse.ArgumentParser(description=__doc__, formatter_class=argparse.RawDescriptionHelpFormatter)
p.add_argument("dossier")
p.add_argument("dossier", nargs="?", help="sans dossier : le data loader seul")
p.add_argument("--du")
p.add_argument("--au")
p.add_argument("--sans-ouvrir", action="store_true", help="écrit la page sans l'ouvrir")
o = p.parse_args()
chemin = page(o.dossier, o.du, o.au)
chemin = page(o.dossier, o.du, o.au) if o.dossier else chargeur.accueil()
print(chemin)
if not o.sans_ouvrir:
open_served(chemin)
chargeur.ouvrir(chemin)
+4
View File
@@ -0,0 +1,4 @@
#!/usr/bin/env bash
# La page Status par son data loader : station, dates, « Analyse » (data-loader/chargeur.py).
cd "$(dirname "$0")/.."
python3 detectors-view/status.py "$@"
+7 -6
View File
@@ -70,22 +70,23 @@ PORT = 8765
SERVIS = ("out", "data")
def open_served(path):
"""Ouvre la page par le serveur local, lancé en tâche de fond s'il ne répond pas (il reste pour les pages suivantes)."""
def open_served(path, port=PORT, script=__file__):
"""Ouvre la page par le serveur local, lancé en tâche de fond s'il ne répond pas (il reste pour les pages suivantes).
Un autre serveur (port, script lancé avec « serve ») : le data loader de la page Status."""
def repond():
try:
socket.create_connection(("127.0.0.1", PORT), timeout=0.5).close()
socket.create_connection(("127.0.0.1", port), timeout=0.5).close()
return True
except OSError:
return False
if not repond(): # ponytail: un autre programme sur PORT serait pris pour le serveur ; changer PORT si besoin
subprocess.Popen([sys.executable, __file__, "serve"], start_new_session=True,
if not repond(): # ponytail: un autre programme sur port serait pris pour le serveur ; changer de port si besoin
subprocess.Popen([sys.executable, script, "serve"], start_new_session=True,
stdout=subprocess.DEVNULL, stderr=subprocess.DEVNULL)
for _ in range(50):
if repond():
break
time.sleep(0.1)
url = f"http://127.0.0.1:{PORT}/" + quote(Path(path).resolve().relative_to(ROOT).as_posix())
url = f"http://127.0.0.1:{port}/" + quote(Path(path).resolve().relative_to(ROOT).as_posix())
if shutil.which("explorer.exe"): # WSL : navigateur Windows
subprocess.run(["explorer.exe", url])
else: