Status page: data loader (station, dates, Analyse)
A form at the top of the Status page: station dropdown (folders of data/), start and end dates (end excluded, as --au), and an Analyse button that builds the page for that selection and opens it. The code is in detectors-view/data-loader/chargeur.py: the form, and its local server (port 8766) that serves out/ and data/ like the common one, plus /analyse, which runs status.py each time. python3 detectors-view/status.py without arguments, or detectors-view/status.sh, opens the form alone; with a station folder it builds the page as before, now opened through the loader server. common.page.open_served takes another port and server script. Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
1 parent
3678997321
commit
aa2578873d
5 files changed
+103
-14
No files matched your search
@@ -54,6 +54,7 @@ python3 maquettes/support/home.py [début] [fin] # maquette support
|
|||||||
python3 vues-deplacements/maquette/explore.py [dossier] # page Explore : View, Diagnosis, Displacements, Journal
|
python3 vues-deplacements/maquette/explore.py [dossier] # page Explore : View, Diagnosis, Displacements, Journal
|
||||||
python3 detectors/categories.py <dossier> # événements du journal, une ligne chacun
|
python3 detectors/categories.py <dossier> # événements du journal, une ligne chacun
|
||||||
python3 detectors-view/detecteurs.py data/<STATION> [--du D --au F] # page des détecteurs seuls
|
python3 detectors-view/detecteurs.py data/<STATION> [--du D --au F] # page des détecteurs seuls
|
||||||
|
./detectors-view/status.sh # page Status par son data loader : station, dates, Analyse
|
||||||
python3 .claude/skills/events-learner/benchmark.py # détecteurs face à la base d'events
|
python3 .claude/skills/events-learner/benchmark.py # détecteurs face à la base d'events
|
||||||
pdftotext -layout "docs/aimsight/<fichier>.pdf" - # lire un PDF AIMsight
|
pdftotext -layout "docs/aimsight/<fichier>.pdf" - # lire un PDF AIMsight
|
||||||
python3 -m venv .venv && .venv/bin/pip install plotly matplotlib # recréer .venv
|
python3 -m venv .venv && .venv/bin/pip install plotly matplotlib # recréer .venv
|
||||||
@@ -98,7 +99,7 @@ python3 -m venv .venv && .venv/bin/pip install plotly matplotlib # recréer .
|
|||||||
|
|
||||||
- `vues-deplacements/` : le chantier des déplacements (D-052), avec sa propre carte, `vues-deplacements/CLAUDE.md` : `maquette/` (page Explore et `spec.md`, D-053 à D-056), `contexte/` (journal du matin, seuils, lissage, `events-learner`, aiguisage), `cas/` (NORDEND, parcours de l'utilisateur), `benchmark/historique.csv` (D-069).
|
- `vues-deplacements/` : le chantier des déplacements (D-052), avec sa propre carte, `vues-deplacements/CLAUDE.md` : `maquette/` (page Explore et `spec.md`, D-053 à D-056), `contexte/` (journal du matin, seuils, lissage, `events-learner`, aiguisage), `cas/` (NORDEND, parcours de l'utilisateur), `benchmark/historique.csv` (D-069).
|
||||||
- `detectors/` : les détecteurs du journal (D-067, D-068, D-084), un détecteur élémentaire par fichier, contrat `detect(mesures)`, classés en événements par `categories.py` ; `archive/` : versions écartées.
|
- `detectors/` : les détecteurs du journal (D-067, D-068, D-084), un détecteur élémentaire par fichier, contrat `detect(mesures)`, classés en événements par `categories.py` ; `archive/` : versions écartées.
|
||||||
- `detectors-view/` : le développement de la page des détecteurs (D-093), `detecteurs.py` : images, courbes, Status, catégories, Error rate ; `run-detectors.sh` : la page sur chaque station de `data/` ; `status.py` : la page Status, version pseudo finale de la page Explore du site : corr_x, corr_y, mouvement de la caméra, événements des détecteurs en plages colorées et en étiquettes cliquables au-dessus (sélection : ses capteurs, ses détails et son timelapse sous la figure, sans zoom) (D-094), occultés selon `hierarchie-des-status.md` (D-095, regroupement thermique suspendu) ; la page des détecteurs est reprise par la page de fin de séance de `/events-learner` (`comparaison.py`) et par `/review-event`.
|
- `detectors-view/` : le développement de la page des détecteurs (D-093), `detecteurs.py` : images, courbes, Status, catégories, Error rate ; `run-detectors.sh` : la page sur chaque station de `data/` ; `status.py` : la page Status, version pseudo finale de la page Explore du site : corr_x, corr_y, mouvement de la caméra, événements des détecteurs en plages colorées et en étiquettes cliquables au-dessus (sélection : ses capteurs, ses détails et son timelapse sous la figure, sans zoom) (D-094), occultés selon `hierarchie-des-status.md` (D-095, regroupement thermique suspendu) ; en haut, le data loader `data-loader/chargeur.py` (station, dates, « Analyse » ; son serveur, port 8766) ; la page des détecteurs est reprise par la page de fin de séance de `/events-learner` (`comparaison.py`) et par `/review-event`.
|
||||||
- `events-learner/`, `aiguiser/` : les séances de `/events-learner` et `/aiguiser` (D-084), une par dossier `<séance>_<STATION>/` (`lot-NN/`, `bilan.md`) ; historique, à ne lire que sur demande. `aiguiser/voir.py` : ce que rendent les outils de lecture sur un lot.
|
- `events-learner/`, `aiguiser/` : les séances de `/events-learner` et `/aiguiser` (D-084), une par dossier `<séance>_<STATION>/` (`lot-NN/`, `bilan.md`) ; historique, à ne lire que sur demande. `aiguiser/voir.py` : ce que rendent les outils de lecture sur un lot.
|
||||||
- `events/` : **la base d'events, connaissance métier qui grandit** (D-048, D-080) : `INDEX.md` (le registre, seule porte d'entrée ; mode d'emploi : skill `read-event`, D-085), un dossier `E-xxx/` par event (`event.md` lisible d'abord par un humain, figures, données codées, `etiquettes.json`), validé par l'utilisateur ou « (appris) » par `/events-learner` en attendant `/review-event` ; `carte-des-evenements.md` (familles, catégories du journal, faux amis ; elle apprend de chaque event validé, D-087) et `eventualites-et-categories.drawio`. Un event n'y entre que par `/new-event`, lancé par l'utilisateur, ou par l'event-builder de `/events-learner`.
|
- `events/` : **la base d'events, connaissance métier qui grandit** (D-048, D-080) : `INDEX.md` (le registre, seule porte d'entrée ; mode d'emploi : skill `read-event`, D-085), un dossier `E-xxx/` par event (`event.md` lisible d'abord par un humain, figures, données codées, `etiquettes.json`), validé par l'utilisateur ou « (appris) » par `/events-learner` en attendant `/review-event` ; `carte-des-evenements.md` (familles, catégories du journal, faux amis ; elle apprend de chaque event validé, D-087) et `eventualites-et-categories.drawio`. Un event n'y entre que par `/new-event`, lancé par l'utilisateur, ou par l'event-builder de `/events-learner`.
|
||||||
- `agent-tools/` : les outils de lecture des agents (D-081) : `donnees.py` (lecture commune, aussi des détecteurs), `inventaire`, `resume`, `plages`, `jours`, `ensemble`, `graphique`, `vignettes`, `gif` ; mode d'emploi : skill `lire-les-donnees`, aiguisé par `/aiguiser`.
|
- `agent-tools/` : les outils de lecture des agents (D-081) : `donnees.py` (lecture commune, aussi des détecteurs), `inventaire`, `resume`, `plages`, `jours`, `ensemble`, `graphique`, `vignettes`, `gif` ; mode d'emploi : skill `lire-les-donnees`, aiguisé par `/aiguiser`.
|
||||||
|
|||||||
@@ -0,0 +1,76 @@
|
|||||||
|
"""Le data loader de la page Status (detectors-view/status.py) : une station de data/ (menu déroulant), une date de début et
|
||||||
|
une date de fin (exclue, comme --au ; vides : toute la période), et le bouton « Analyse », qui fait la page Status de la
|
||||||
|
sélection et l'ouvre. Le formulaire est en haut de chaque page Status, et seul dans out/data-loader.html. Son serveur local
|
||||||
|
(http://127.0.0.1:8766, lancé en tâche de fond) sert out/ et data/ comme celui de common.page, plus /analyse : status.py lancé
|
||||||
|
à chaque fois, donc toujours à jour de son code, puis renvoi vers sa page.
|
||||||
|
Usage : python3 detectors-view/status.py, ou detectors-view/status.sh (ouvre le formulaire seul)
|
||||||
|
"""
|
||||||
|
import html
|
||||||
|
import http.server
|
||||||
|
import subprocess
|
||||||
|
import sys
|
||||||
|
from pathlib import Path
|
||||||
|
from urllib.parse import parse_qs, quote, urlsplit
|
||||||
|
|
||||||
|
sys.path.insert(0, str(Path(__file__).resolve().parents[2] / "src"))
|
||||||
|
from common.page import ROOT, _Pages, open_served # noqa: E402 (bascule seule sur .venv si plotly manque)
|
||||||
|
|
||||||
|
PORT = 8766 # pas celui de common.page (8765), qui sert les autres pages
|
||||||
|
STATUS = Path(__file__).resolve().parents[1] / "status.py"
|
||||||
|
|
||||||
|
|
||||||
|
def stations():
|
||||||
|
return sorted(d.name for d in (ROOT / "data").iterdir() if d.is_dir())
|
||||||
|
|
||||||
|
|
||||||
|
def formulaire(station="", du="", au=""):
|
||||||
|
"""Le formulaire, en anglais (D-023) ; il ne marche que servi par ce serveur (ouvrir)."""
|
||||||
|
options = "".join(f"<option{' selected' * (s == station)}>{html.escape(s)}</option>" for s in stations())
|
||||||
|
return f"""<form action="/analyse" style="display:flex;gap:16px;align-items:center;flex-wrap:wrap;margin-bottom:12px"
|
||||||
|
onsubmit="this.querySelector('button').textContent = 'Analysing…'">
|
||||||
|
<label>Station <select name="station">{options}</select></label>
|
||||||
|
<label>From <input type="date" name="du" value="{html.escape(du)}"></label>
|
||||||
|
<label>To (excluded) <input type="date" name="au" value="{html.escape(au)}"></label>
|
||||||
|
<button>Analyse</button></form>"""
|
||||||
|
|
||||||
|
|
||||||
|
def accueil():
|
||||||
|
"""Le formulaire seul, dans out/data-loader.html -> son chemin."""
|
||||||
|
chemin = ROOT / "out" / "data-loader.html"
|
||||||
|
chemin.parent.mkdir(exist_ok=True)
|
||||||
|
chemin.write_text(f"""<!doctype html><html lang="en"><head><meta charset="utf-8"><title>Status loader</title>
|
||||||
|
<style>body{{font-family:system-ui,sans-serif;margin:16px;background:#fff;color:#1a1a19}}</style></head><body>
|
||||||
|
<h2>Status</h2>{formulaire()}</body></html>""", encoding="utf-8")
|
||||||
|
return chemin
|
||||||
|
|
||||||
|
|
||||||
|
def ouvrir(chemin):
|
||||||
|
"""Ouvre la page par ce serveur, lancé en tâche de fond s'il ne répond pas."""
|
||||||
|
open_served(chemin, PORT, __file__)
|
||||||
|
|
||||||
|
|
||||||
|
class Chargeur(_Pages):
|
||||||
|
def do_GET(self):
|
||||||
|
url = urlsplit(self.path)
|
||||||
|
if url.path != "/analyse":
|
||||||
|
return super().do_GET()
|
||||||
|
q = {k: v[0] for k, v in parse_qs(url.query).items()}
|
||||||
|
station = q.get("station")
|
||||||
|
if station not in stations(): # le nom devient un chemin : une station de data/, rien d'autre
|
||||||
|
return self.send_error(400, "Unknown station")
|
||||||
|
args = [sys.executable, str(STATUS), str(ROOT / "data" / station), "--sans-ouvrir"]
|
||||||
|
args += [f"--{k}={q[k]}" for k in ("du", "au") if q.get(k)]
|
||||||
|
r = subprocess.run(args, capture_output=True, text=True)
|
||||||
|
if r.returncode:
|
||||||
|
return self.send_error(500, "status.py failed", r.stderr[-3000:])
|
||||||
|
page = Path(r.stdout.strip().splitlines()[-1]).relative_to(ROOT)
|
||||||
|
self.send_response(303)
|
||||||
|
self.send_header("Location", "/" + quote(page.as_posix()))
|
||||||
|
self.end_headers()
|
||||||
|
|
||||||
|
|
||||||
|
if __name__ == "__main__":
|
||||||
|
if sys.argv[1:] == ["serve"]:
|
||||||
|
http.server.ThreadingHTTPServer(("127.0.0.1", PORT), Chargeur).serve_forever()
|
||||||
|
else:
|
||||||
|
ouvrir(accueil())
|
||||||
@@ -10,19 +10,25 @@ les courbes, ses plages soulignées ; un second clic rend tout ; un clic ailleur
|
|||||||
selon les cibles tracées, sans toucher aux cibles. Des cibles cachées dans la légende (clic, ou double clic pour
|
selon les cibles tracées, sans toucher aux cibles. Des cibles cachées dans la légende (clic, ou double clic pour
|
||||||
n'en garder qu'une) : seuls restent les status qui touchent une cible visible, ou tous les capteurs. En bas, le bouton
|
n'en garder qu'une) : seuls restent les status qui touchent une cible visible, ou tous les capteurs. En bas, le bouton
|
||||||
« Load details » montre les détails du status choisi (ses capteurs, References et Targets) et, à droite, le timelapse de ses images (comme detecteurs.py :
|
« Load details » montre les détails du status choisi (ses capteurs, References et Targets) et, à droite, le timelapse de ses images (comme detecteurs.py :
|
||||||
marge avant et après, bord rouge pendant, Focused ou Global image, ⤓ GIF) ; la page est servie par http://127.0.0.1.
|
marge avant et après, bord rouge pendant, Focused ou Global image, ⤓ GIF) ; la page est servie par http://127.0.0.1. Tout
|
||||||
Usage : python3 detectors-view/status.py <dossier de station> [--du AAAA-MM-JJ] [--au AAAA-MM-JJ]
|
en haut, le data loader (data-loader/chargeur.py) : une autre station, d'autres dates, et « Analyse » refait la page.
|
||||||
(--au exclu ; sans dates, toute la période du dossier ; page : out/status_<STATION>_<du>_<au>.html, ouverte)
|
Usage : python3 detectors-view/status.py [<dossier de station> [--du AAAA-MM-JJ] [--au AAAA-MM-JJ]]
|
||||||
|
(sans dossier : le data loader seul, comme detectors-view/status.sh ; --au exclu ; sans dates, toute la période du
|
||||||
|
dossier ; page : out/status_<STATION>_<du>_<au>.html, ouverte)
|
||||||
"""
|
"""
|
||||||
import argparse
|
import argparse
|
||||||
import html
|
import html
|
||||||
import json
|
import json
|
||||||
import os
|
import os
|
||||||
import statistics
|
import statistics
|
||||||
|
import sys
|
||||||
import textwrap
|
import textwrap
|
||||||
|
|
||||||
import detecteurs # la page des détecteurs : chargement, couleurs, références (bascule seule sur .venv si plotly manque)
|
import detecteurs # la page des détecteurs : chargement, couleurs, références (bascule seule sur .venv si plotly manque)
|
||||||
from detecteurs import ROOT, donnees, go, make_subplots, open_served, plotly_t
|
from detecteurs import ROOT, donnees, go, make_subplots, plotly_t
|
||||||
|
|
||||||
|
sys.path.insert(0, os.path.join(os.path.dirname(os.path.abspath(__file__)), "data-loader"))
|
||||||
|
import chargeur # noqa: E402 (le data loader : son formulaire en haut de la page, son serveur pour l'ouvrir)
|
||||||
|
|
||||||
# Les plages du Status (l'utilisateur, 2026-10-29) : palette catégorielle de référence (skill dataviz), 8 teintes pour
|
# Les plages du Status (l'utilisateur, 2026-10-29) : palette catégorielle de référence (skill dataviz), 8 teintes pour
|
||||||
# 10 status : les deux phases thermiques partagent l'orange, No data en gris.
|
# 10 status : les deux phases thermiques partagent l'orange, No data en gris.
|
||||||
@@ -222,6 +228,7 @@ def page(dossier, du=None, au=None):
|
|||||||
<style>body{{font-family:system-ui,sans-serif;margin:16px;background:#fff;color:#1a1a19}} p{{max-width:70em}}
|
<style>body{{font-family:system-ui,sans-serif;margin:16px;background:#fff;color:#1a1a19}} p{{max-width:70em}}
|
||||||
{detecteurs.DETAILS_CSS}</style></head><body>
|
{detecteurs.DETAILS_CSS}</style></head><body>
|
||||||
<h2>Status, {html.escape(station)}</h2>
|
<h2>Status, {html.escape(station)}</h2>
|
||||||
|
{chargeur.formulaire(station, du or "", au or "")}
|
||||||
{detecteurs.LECTEUR_HTML if images else ""}
|
{detecteurs.LECTEUR_HTML if images else ""}
|
||||||
{fig.to_html(include_plotlyjs="cdn", full_html=False, div_id="fig", post_script=script, config={"scrollZoom": False})}
|
{fig.to_html(include_plotlyjs="cdn", full_html=False, div_id="fig", post_script=script, config={"scrollZoom": False})}
|
||||||
<section id="det"><h3>Details</h3><button id="charge" disabled>Load details</button>
|
<section id="det"><h3>Details</h3><button id="charge" disabled>Load details</button>
|
||||||
@@ -233,12 +240,12 @@ def page(dossier, du=None, au=None):
|
|||||||
|
|
||||||
if __name__ == "__main__":
|
if __name__ == "__main__":
|
||||||
p = argparse.ArgumentParser(description=__doc__, formatter_class=argparse.RawDescriptionHelpFormatter)
|
p = argparse.ArgumentParser(description=__doc__, formatter_class=argparse.RawDescriptionHelpFormatter)
|
||||||
p.add_argument("dossier")
|
p.add_argument("dossier", nargs="?", help="sans dossier : le data loader seul")
|
||||||
p.add_argument("--du")
|
p.add_argument("--du")
|
||||||
p.add_argument("--au")
|
p.add_argument("--au")
|
||||||
p.add_argument("--sans-ouvrir", action="store_true", help="écrit la page sans l'ouvrir")
|
p.add_argument("--sans-ouvrir", action="store_true", help="écrit la page sans l'ouvrir")
|
||||||
o = p.parse_args()
|
o = p.parse_args()
|
||||||
chemin = page(o.dossier, o.du, o.au)
|
chemin = page(o.dossier, o.du, o.au) if o.dossier else chargeur.accueil()
|
||||||
print(chemin)
|
print(chemin)
|
||||||
if not o.sans_ouvrir:
|
if not o.sans_ouvrir:
|
||||||
open_served(chemin)
|
chargeur.ouvrir(chemin)
|
||||||
Executable
+4
@@ -0,0 +1,4 @@
|
|||||||
|
#!/usr/bin/env bash
|
||||||
|
# La page Status par son data loader : station, dates, « Analyse » (data-loader/chargeur.py).
|
||||||
|
cd "$(dirname "$0")/.."
|
||||||
|
python3 detectors-view/status.py "$@"
|
||||||
+7
-6
@@ -70,22 +70,23 @@ PORT = 8765
|
|||||||
SERVIS = ("out", "data")
|
SERVIS = ("out", "data")
|
||||||
|
|
||||||
|
|
||||||
def open_served(path):
|
def open_served(path, port=PORT, script=__file__):
|
||||||
"""Ouvre la page par le serveur local, lancé en tâche de fond s'il ne répond pas (il reste pour les pages suivantes)."""
|
"""Ouvre la page par le serveur local, lancé en tâche de fond s'il ne répond pas (il reste pour les pages suivantes).
|
||||||
|
Un autre serveur (port, script lancé avec « serve ») : le data loader de la page Status."""
|
||||||
def repond():
|
def repond():
|
||||||
try:
|
try:
|
||||||
socket.create_connection(("127.0.0.1", PORT), timeout=0.5).close()
|
socket.create_connection(("127.0.0.1", port), timeout=0.5).close()
|
||||||
return True
|
return True
|
||||||
except OSError:
|
except OSError:
|
||||||
return False
|
return False
|
||||||
if not repond(): # ponytail: un autre programme sur PORT serait pris pour le serveur ; changer PORT si besoin
|
if not repond(): # ponytail: un autre programme sur port serait pris pour le serveur ; changer de port si besoin
|
||||||
subprocess.Popen([sys.executable, __file__, "serve"], start_new_session=True,
|
subprocess.Popen([sys.executable, script, "serve"], start_new_session=True,
|
||||||
stdout=subprocess.DEVNULL, stderr=subprocess.DEVNULL)
|
stdout=subprocess.DEVNULL, stderr=subprocess.DEVNULL)
|
||||||
for _ in range(50):
|
for _ in range(50):
|
||||||
if repond():
|
if repond():
|
||||||
break
|
break
|
||||||
time.sleep(0.1)
|
time.sleep(0.1)
|
||||||
url = f"http://127.0.0.1:{PORT}/" + quote(Path(path).resolve().relative_to(ROOT).as_posix())
|
url = f"http://127.0.0.1:{port}/" + quote(Path(path).resolve().relative_to(ROOT).as_posix())
|
||||||
if shutil.which("explorer.exe"): # WSL : navigateur Windows
|
if shutil.which("explorer.exe"): # WSL : navigateur Windows
|
||||||
subprocess.run(["explorer.exe", url])
|
subprocess.run(["explorer.exe", url])
|
||||||
else:
|
else:
|
||||||
|
|||||||
Reference in new issue
Block a user