Status page: data loader (station, dates, Analyse)
A form at the top of the Status page: station dropdown (folders of data/), start and end dates (end excluded, as --au), and an Analyse button that builds the page for that selection and opens it. The code is in detectors-view/data-loader/chargeur.py: the form, and its local server (port 8766) that serves out/ and data/ like the common one, plus /analyse, which runs status.py each time. python3 detectors-view/status.py without arguments, or detectors-view/status.sh, opens the form alone; with a station folder it builds the page as before, now opened through the loader server. common.page.open_served takes another port and server script. Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
1 parent
3678997321
commit
aa2578873d
5 files changed
+103
-14
No files matched your search
@@ -54,6 +54,7 @@ python3 maquettes/support/home.py [début] [fin] # maquette support
|
||||
python3 vues-deplacements/maquette/explore.py [dossier] # page Explore : View, Diagnosis, Displacements, Journal
|
||||
python3 detectors/categories.py <dossier> # événements du journal, une ligne chacun
|
||||
python3 detectors-view/detecteurs.py data/<STATION> [--du D --au F] # page des détecteurs seuls
|
||||
./detectors-view/status.sh # page Status par son data loader : station, dates, Analyse
|
||||
python3 .claude/skills/events-learner/benchmark.py # détecteurs face à la base d'events
|
||||
pdftotext -layout "docs/aimsight/<fichier>.pdf" - # lire un PDF AIMsight
|
||||
python3 -m venv .venv && .venv/bin/pip install plotly matplotlib # recréer .venv
|
||||
@@ -98,7 +99,7 @@ python3 -m venv .venv && .venv/bin/pip install plotly matplotlib # recréer .
|
||||
|
||||
- `vues-deplacements/` : le chantier des déplacements (D-052), avec sa propre carte, `vues-deplacements/CLAUDE.md` : `maquette/` (page Explore et `spec.md`, D-053 à D-056), `contexte/` (journal du matin, seuils, lissage, `events-learner`, aiguisage), `cas/` (NORDEND, parcours de l'utilisateur), `benchmark/historique.csv` (D-069).
|
||||
- `detectors/` : les détecteurs du journal (D-067, D-068, D-084), un détecteur élémentaire par fichier, contrat `detect(mesures)`, classés en événements par `categories.py` ; `archive/` : versions écartées.
|
||||
- `detectors-view/` : le développement de la page des détecteurs (D-093), `detecteurs.py` : images, courbes, Status, catégories, Error rate ; `run-detectors.sh` : la page sur chaque station de `data/` ; `status.py` : la page Status, version pseudo finale de la page Explore du site : corr_x, corr_y, mouvement de la caméra, événements des détecteurs en plages colorées et en étiquettes cliquables au-dessus (sélection : ses capteurs, ses détails et son timelapse sous la figure, sans zoom) (D-094), occultés selon `hierarchie-des-status.md` (D-095, regroupement thermique suspendu) ; la page des détecteurs est reprise par la page de fin de séance de `/events-learner` (`comparaison.py`) et par `/review-event`.
|
||||
- `detectors-view/` : le développement de la page des détecteurs (D-093), `detecteurs.py` : images, courbes, Status, catégories, Error rate ; `run-detectors.sh` : la page sur chaque station de `data/` ; `status.py` : la page Status, version pseudo finale de la page Explore du site : corr_x, corr_y, mouvement de la caméra, événements des détecteurs en plages colorées et en étiquettes cliquables au-dessus (sélection : ses capteurs, ses détails et son timelapse sous la figure, sans zoom) (D-094), occultés selon `hierarchie-des-status.md` (D-095, regroupement thermique suspendu) ; en haut, le data loader `data-loader/chargeur.py` (station, dates, « Analyse » ; son serveur, port 8766) ; la page des détecteurs est reprise par la page de fin de séance de `/events-learner` (`comparaison.py`) et par `/review-event`.
|
||||
- `events-learner/`, `aiguiser/` : les séances de `/events-learner` et `/aiguiser` (D-084), une par dossier `<séance>_<STATION>/` (`lot-NN/`, `bilan.md`) ; historique, à ne lire que sur demande. `aiguiser/voir.py` : ce que rendent les outils de lecture sur un lot.
|
||||
- `events/` : **la base d'events, connaissance métier qui grandit** (D-048, D-080) : `INDEX.md` (le registre, seule porte d'entrée ; mode d'emploi : skill `read-event`, D-085), un dossier `E-xxx/` par event (`event.md` lisible d'abord par un humain, figures, données codées, `etiquettes.json`), validé par l'utilisateur ou « (appris) » par `/events-learner` en attendant `/review-event` ; `carte-des-evenements.md` (familles, catégories du journal, faux amis ; elle apprend de chaque event validé, D-087) et `eventualites-et-categories.drawio`. Un event n'y entre que par `/new-event`, lancé par l'utilisateur, ou par l'event-builder de `/events-learner`.
|
||||
- `agent-tools/` : les outils de lecture des agents (D-081) : `donnees.py` (lecture commune, aussi des détecteurs), `inventaire`, `resume`, `plages`, `jours`, `ensemble`, `graphique`, `vignettes`, `gif` ; mode d'emploi : skill `lire-les-donnees`, aiguisé par `/aiguiser`.
|
||||
|
||||
@@ -0,0 +1,76 @@
|
||||
"""Le data loader de la page Status (detectors-view/status.py) : une station de data/ (menu déroulant), une date de début et
|
||||
une date de fin (exclue, comme --au ; vides : toute la période), et le bouton « Analyse », qui fait la page Status de la
|
||||
sélection et l'ouvre. Le formulaire est en haut de chaque page Status, et seul dans out/data-loader.html. Son serveur local
|
||||
(http://127.0.0.1:8766, lancé en tâche de fond) sert out/ et data/ comme celui de common.page, plus /analyse : status.py lancé
|
||||
à chaque fois, donc toujours à jour de son code, puis renvoi vers sa page.
|
||||
Usage : python3 detectors-view/status.py, ou detectors-view/status.sh (ouvre le formulaire seul)
|
||||
"""
|
||||
import html
|
||||
import http.server
|
||||
import subprocess
|
||||
import sys
|
||||
from pathlib import Path
|
||||
from urllib.parse import parse_qs, quote, urlsplit
|
||||
|
||||
sys.path.insert(0, str(Path(__file__).resolve().parents[2] / "src"))
|
||||
from common.page import ROOT, _Pages, open_served # noqa: E402 (bascule seule sur .venv si plotly manque)
|
||||
|
||||
PORT = 8766 # pas celui de common.page (8765), qui sert les autres pages
|
||||
STATUS = Path(__file__).resolve().parents[1] / "status.py"
|
||||
|
||||
|
||||
def stations():
|
||||
return sorted(d.name for d in (ROOT / "data").iterdir() if d.is_dir())
|
||||
|
||||
|
||||
def formulaire(station="", du="", au=""):
|
||||
"""Le formulaire, en anglais (D-023) ; il ne marche que servi par ce serveur (ouvrir)."""
|
||||
options = "".join(f"<option{' selected' * (s == station)}>{html.escape(s)}</option>" for s in stations())
|
||||
return f"""<form action="/analyse" style="display:flex;gap:16px;align-items:center;flex-wrap:wrap;margin-bottom:12px"
|
||||
onsubmit="this.querySelector('button').textContent = 'Analysing…'">
|
||||
<label>Station <select name="station">{options}</select></label>
|
||||
<label>From <input type="date" name="du" value="{html.escape(du)}"></label>
|
||||
<label>To (excluded) <input type="date" name="au" value="{html.escape(au)}"></label>
|
||||
<button>Analyse</button></form>"""
|
||||
|
||||
|
||||
def accueil():
|
||||
"""Le formulaire seul, dans out/data-loader.html -> son chemin."""
|
||||
chemin = ROOT / "out" / "data-loader.html"
|
||||
chemin.parent.mkdir(exist_ok=True)
|
||||
chemin.write_text(f"""<!doctype html><html lang="en"><head><meta charset="utf-8"><title>Status loader</title>
|
||||
<style>body{{font-family:system-ui,sans-serif;margin:16px;background:#fff;color:#1a1a19}}</style></head><body>
|
||||
<h2>Status</h2>{formulaire()}</body></html>""", encoding="utf-8")
|
||||
return chemin
|
||||
|
||||
|
||||
def ouvrir(chemin):
|
||||
"""Ouvre la page par ce serveur, lancé en tâche de fond s'il ne répond pas."""
|
||||
open_served(chemin, PORT, __file__)
|
||||
|
||||
|
||||
class Chargeur(_Pages):
|
||||
def do_GET(self):
|
||||
url = urlsplit(self.path)
|
||||
if url.path != "/analyse":
|
||||
return super().do_GET()
|
||||
q = {k: v[0] for k, v in parse_qs(url.query).items()}
|
||||
station = q.get("station")
|
||||
if station not in stations(): # le nom devient un chemin : une station de data/, rien d'autre
|
||||
return self.send_error(400, "Unknown station")
|
||||
args = [sys.executable, str(STATUS), str(ROOT / "data" / station), "--sans-ouvrir"]
|
||||
args += [f"--{k}={q[k]}" for k in ("du", "au") if q.get(k)]
|
||||
r = subprocess.run(args, capture_output=True, text=True)
|
||||
if r.returncode:
|
||||
return self.send_error(500, "status.py failed", r.stderr[-3000:])
|
||||
page = Path(r.stdout.strip().splitlines()[-1]).relative_to(ROOT)
|
||||
self.send_response(303)
|
||||
self.send_header("Location", "/" + quote(page.as_posix()))
|
||||
self.end_headers()
|
||||
|
||||
|
||||
if __name__ == "__main__":
|
||||
if sys.argv[1:] == ["serve"]:
|
||||
http.server.ThreadingHTTPServer(("127.0.0.1", PORT), Chargeur).serve_forever()
|
||||
else:
|
||||
ouvrir(accueil())
|
||||
@@ -10,19 +10,25 @@ les courbes, ses plages soulignées ; un second clic rend tout ; un clic ailleur
|
||||
selon les cibles tracées, sans toucher aux cibles. Des cibles cachées dans la légende (clic, ou double clic pour
|
||||
n'en garder qu'une) : seuls restent les status qui touchent une cible visible, ou tous les capteurs. En bas, le bouton
|
||||
« Load details » montre les détails du status choisi (ses capteurs, References et Targets) et, à droite, le timelapse de ses images (comme detecteurs.py :
|
||||
marge avant et après, bord rouge pendant, Focused ou Global image, ⤓ GIF) ; la page est servie par http://127.0.0.1.
|
||||
Usage : python3 detectors-view/status.py <dossier de station> [--du AAAA-MM-JJ] [--au AAAA-MM-JJ]
|
||||
(--au exclu ; sans dates, toute la période du dossier ; page : out/status_<STATION>_<du>_<au>.html, ouverte)
|
||||
marge avant et après, bord rouge pendant, Focused ou Global image, ⤓ GIF) ; la page est servie par http://127.0.0.1. Tout
|
||||
en haut, le data loader (data-loader/chargeur.py) : une autre station, d'autres dates, et « Analyse » refait la page.
|
||||
Usage : python3 detectors-view/status.py [<dossier de station> [--du AAAA-MM-JJ] [--au AAAA-MM-JJ]]
|
||||
(sans dossier : le data loader seul, comme detectors-view/status.sh ; --au exclu ; sans dates, toute la période du
|
||||
dossier ; page : out/status_<STATION>_<du>_<au>.html, ouverte)
|
||||
"""
|
||||
import argparse
|
||||
import html
|
||||
import json
|
||||
import os
|
||||
import statistics
|
||||
import sys
|
||||
import textwrap
|
||||
|
||||
import detecteurs # la page des détecteurs : chargement, couleurs, références (bascule seule sur .venv si plotly manque)
|
||||
from detecteurs import ROOT, donnees, go, make_subplots, open_served, plotly_t
|
||||
from detecteurs import ROOT, donnees, go, make_subplots, plotly_t
|
||||
|
||||
sys.path.insert(0, os.path.join(os.path.dirname(os.path.abspath(__file__)), "data-loader"))
|
||||
import chargeur # noqa: E402 (le data loader : son formulaire en haut de la page, son serveur pour l'ouvrir)
|
||||
|
||||
# Les plages du Status (l'utilisateur, 2026-10-29) : palette catégorielle de référence (skill dataviz), 8 teintes pour
|
||||
# 10 status : les deux phases thermiques partagent l'orange, No data en gris.
|
||||
@@ -222,6 +228,7 @@ def page(dossier, du=None, au=None):
|
||||
<style>body{{font-family:system-ui,sans-serif;margin:16px;background:#fff;color:#1a1a19}} p{{max-width:70em}}
|
||||
{detecteurs.DETAILS_CSS}</style></head><body>
|
||||
<h2>Status, {html.escape(station)}</h2>
|
||||
{chargeur.formulaire(station, du or "", au or "")}
|
||||
{detecteurs.LECTEUR_HTML if images else ""}
|
||||
{fig.to_html(include_plotlyjs="cdn", full_html=False, div_id="fig", post_script=script, config={"scrollZoom": False})}
|
||||
<section id="det"><h3>Details</h3><button id="charge" disabled>Load details</button>
|
||||
@@ -233,12 +240,12 @@ def page(dossier, du=None, au=None):
|
||||
|
||||
if __name__ == "__main__":
|
||||
p = argparse.ArgumentParser(description=__doc__, formatter_class=argparse.RawDescriptionHelpFormatter)
|
||||
p.add_argument("dossier")
|
||||
p.add_argument("dossier", nargs="?", help="sans dossier : le data loader seul")
|
||||
p.add_argument("--du")
|
||||
p.add_argument("--au")
|
||||
p.add_argument("--sans-ouvrir", action="store_true", help="écrit la page sans l'ouvrir")
|
||||
o = p.parse_args()
|
||||
chemin = page(o.dossier, o.du, o.au)
|
||||
chemin = page(o.dossier, o.du, o.au) if o.dossier else chargeur.accueil()
|
||||
print(chemin)
|
||||
if not o.sans_ouvrir:
|
||||
open_served(chemin)
|
||||
chargeur.ouvrir(chemin)
|
||||
Executable
+4
@@ -0,0 +1,4 @@
|
||||
#!/usr/bin/env bash
|
||||
# La page Status par son data loader : station, dates, « Analyse » (data-loader/chargeur.py).
|
||||
cd "$(dirname "$0")/.."
|
||||
python3 detectors-view/status.py "$@"
|
||||
+7
-6
@@ -70,22 +70,23 @@ PORT = 8765
|
||||
SERVIS = ("out", "data")
|
||||
|
||||
|
||||
def open_served(path):
|
||||
"""Ouvre la page par le serveur local, lancé en tâche de fond s'il ne répond pas (il reste pour les pages suivantes)."""
|
||||
def open_served(path, port=PORT, script=__file__):
|
||||
"""Ouvre la page par le serveur local, lancé en tâche de fond s'il ne répond pas (il reste pour les pages suivantes).
|
||||
Un autre serveur (port, script lancé avec « serve ») : le data loader de la page Status."""
|
||||
def repond():
|
||||
try:
|
||||
socket.create_connection(("127.0.0.1", PORT), timeout=0.5).close()
|
||||
socket.create_connection(("127.0.0.1", port), timeout=0.5).close()
|
||||
return True
|
||||
except OSError:
|
||||
return False
|
||||
if not repond(): # ponytail: un autre programme sur PORT serait pris pour le serveur ; changer PORT si besoin
|
||||
subprocess.Popen([sys.executable, __file__, "serve"], start_new_session=True,
|
||||
if not repond(): # ponytail: un autre programme sur port serait pris pour le serveur ; changer de port si besoin
|
||||
subprocess.Popen([sys.executable, script, "serve"], start_new_session=True,
|
||||
stdout=subprocess.DEVNULL, stderr=subprocess.DEVNULL)
|
||||
for _ in range(50):
|
||||
if repond():
|
||||
break
|
||||
time.sleep(0.1)
|
||||
url = f"http://127.0.0.1:{PORT}/" + quote(Path(path).resolve().relative_to(ROOT).as_posix())
|
||||
url = f"http://127.0.0.1:{port}/" + quote(Path(path).resolve().relative_to(ROOT).as_posix())
|
||||
if shutil.which("explorer.exe"): # WSL : navigateur Windows
|
||||
subprocess.run(["explorer.exe", url])
|
||||
else:
|
||||
|
||||
Reference in new issue
Block a user