diff --git a/app/README.md b/app/README.md index 4e56ae1..ee63163 100644 --- a/app/README.md +++ b/app/README.md @@ -3,7 +3,7 @@ L'outil interne du support et du diagnostic manuel (D-137, D-138) : deux pages dans la barre latérale (la page Images, retirée, D-143, vit dans Data). - **Support** : coller le mail du client, ou choisir sa conversation dans le menu « Depuis LibreDesk » (le fil, le plus récent en tête, sans les notes privées, et ses images de plus de 10 ko ; retouchable), et son contexte, choisir PDF ou Mail, Analyser ; les fils du support et de l'analyste (les agents de `API/`, `API/README.md`), puis le PDF par version, ou le mail (texte, bouton Copier, pièces jointes à télécharger ; `mail-vN.json` dans la séance). Dès que la séance a sa station, un bouton ouvre Data sur elle. -- **Data** (D-139) : le visualiseur de courbes, et l'étiquetage de `labeling/labeling.py` : un plot au départ (déplacements, caméra, qualité, métriques système), « Ajouter un plot » pour en voir plusieurs, alignés sur le temps, la croix pour en enlever un ; sous eux le choix des étiquettes, LLM (`labeling/auto/`, l'étiqueteur), Detectors (les événements des détecteurs du journal, `detectors/categories.py`, en lecture seule, D-140) ou Manual (`labeling/manual/`), et leur barre ; y glisser sélectionne une plage, puis famille, texte, Ajouter ; un clic met une étiquette en évidence sur les plots et la barre, cale les images sur son début, et l'ouvre : bornes, famille, texte, Enregistrer, Supprimer ; un clic ailleurs sur la barre la referme. Les zones des étiquettes sur les plots sont à peine visibles (opacité 0,05, 0,07 en sombre). Écrit dans `labeling//.jsonl`. À droite, les images de la caméra, comme `view/view.py` (glisseur, ◀ ▶ et flèches du clavier ; molette pour zoomer, glisser pour se déplacer, double clic pour l'image entière ; case Noms ; une plage sur la barre sous le glisseur dessine la flèche de déplacement de chaque capteur), sur la même station et la même plage (D-140) ; une flèche en haut à gauche de l'image l'agrandit et pousse les plots vers la gauche (les colonnes glissent, les plots se recalent à la fin du glissement), la flèche inverse la ramène. +- **Data** (D-139) : le visualiseur de courbes, et l'étiquetage de `labeling/labeling.py` : un plot au départ (déplacements, caméra, qualité, métriques système), « Ajouter un plot » pour en voir plusieurs, alignés sur le temps, la croix pour en enlever un ; sous eux le choix des étiquettes, LLM (`labeling/auto/`, l'étiqueteur), Detectors (les événements des détecteurs du journal, `detectors/categories.py`, en lecture seule, D-140) ou Manual (`labeling/manual/`), et leur barre ; y glisser sélectionne une plage, puis famille, texte, Ajouter ; un clic met une étiquette en évidence sur les plots et la barre, cale les images sur son début, et l'ouvre : bornes, famille, texte, Enregistrer, Supprimer ; un clic ailleurs sur la barre la referme. Les zones des étiquettes sur les plots sont à peine visibles (opacité 0,05, 0,07 en sombre). Écrit dans `labeling//.jsonl`. À droite, les images de la caméra, comme `view/view.py` (glisseur, ◀ ▶ et flèches du clavier ; molette pour zoomer, glisser pour se déplacer, double clic pour l'image entière ; case Noms ; une plage sur la barre sous le glisseur dessine la flèche de déplacement de chaque capteur), sur la même station et la même plage (D-140) ; une flèche en haut à gauche de l'image l'agrandit et pousse les plots vers la gauche (les colonnes glissent, les plots se recalent à la fin du glissement), la flèche inverse la ramène. Avec Detectors (la source par défaut) ou LLM, sous l'image, les paramètres du diagnostic : les familles montrées (filtre immédiat de la page) et, pour Detectors seulement, les cibles considérées, les autres écartées avant les détecteurs (« Relancer les détecteurs », paramètre `cibles` de `/api/detecteurs`). Sans dates dans l'adresse, la sélection prend les 5 derniers jours UTC, aujourd'hui compris. Data garde la station et la plage (UTC, Au exclue) dans l'adresse : `#/data?station=NIEDERHORN&du=2026-09-25&au=2026-10-08`. diff --git a/app/serveur/serveur.py b/app/serveur/serveur.py index 6d21e78..f2368bd 100644 --- a/app/serveur/serveur.py +++ b/app/serveur/serveur.py @@ -207,8 +207,8 @@ def courbes(station_: str = Query(alias="station"), du: str = "", au: str = ""): @app.get("/api/detecteurs") -def detecteurs(station_: str = Query(alias="station"), du: str = "", au: str = ""): - return station.detecteurs(station_, du, au) +def detecteurs(station_: str = Query(alias="station"), du: str = "", au: str = "", cibles: str = ""): + return station.detecteurs(station_, du, au, cibles) @app.get("/api/etiquettes") diff --git a/app/serveur/station.py b/app/serveur/station.py index 1188d22..4f7ff8d 100644 --- a/app/serveur/station.py +++ b/app/serveur/station.py @@ -182,13 +182,17 @@ HISTORIQUE = timedelta(days=3) # jours d'avant donnés aux détecteurs, comme c # ponytail: gardés jusqu'au redémarrage du serveur (une minute ou plus par plage) ; relancer après une séance de /detector-learner @functools.lru_cache(maxsize=32) -def detecteurs(station, du, au): +def detecteurs(station, du, au, cibles=""): """-> les événements des détecteurs sur la plage, au format des étiquettes (debut, fin, categorie, description) ; - plus sorte, capteurs, ignore (zone grisée du journal).""" + plus sorte, capteurs, ignore (zone grisée du journal). cibles : les capteurs gardés, séparés par des virgules (vide : + tous) ; les autres sont écartés avant les détecteurs, comme s'ils n'existaient pas.""" d = dossier(station) tout = donnees.charger(d) + if cibles: + garde = set(cibles.split(",")) + tout = {s: ms for s, ms in tout.items() if s in garde} if not tout: - raise Refus(f"aucun export « advanced » pour {station}") + raise Refus(f"aucun export « advanced » pour {station}" + " avec ces cibles" * bool(cibles)) a, b = plage(tout, du, au) mesures = {s: k for s, ms in tout.items() if (k := [m for m in ms if a - HISTORIQUE <= m["t"] < b])} evs = [v for v in evenements(mesures, b, str(d)) if v["end"] >= donnees.iso(a)] if mesures else [] diff --git a/app/web/src/App.jsx b/app/web/src/App.jsx index 936ceff..0b66161 100644 --- a/app/web/src/App.jsx +++ b/app/web/src/App.jsx @@ -9,12 +9,14 @@ import Support, { AGENTS, Etat, NOMS } from "./pages/Support.jsx"; const Data = lazy(() => import("./pages/Data.jsx")); // Plotly, chargé seulement ici const PAGES = [["support", "Support", IconMessages], ["data", "Data", IconChartLine]]; -// L'adresse : #/?station=…&du=…&au=… ; recharger garde la page et la sélection, Retour marche +// L'adresse : #/?station=…&du=…&au=… ; recharger garde la page et la sélection, Retour marche ; sans dates, les 5 derniers +// jours UTC, aujourd'hui compris (au exclu : demain) +const jour = n => new Date(Date.now() + n * 864e5).toISOString().slice(0, 10); function lireAdresse() { const [page, q = ""] = location.hash.replace(/^#\/?/, "").split("?"); const p = new URLSearchParams(q); return { page: PAGES.some(([n]) => n === page) ? page : "support", - selection: { station: p.get("station") || "", du: p.get("du") || "", au: p.get("au") || "" } }; + selection: { station: p.get("station") || "", du: p.get("du") || jour(-4), au: p.get("au") || jour(1) } }; } function adresse(page, s) { diff --git a/app/web/src/pages/Data.jsx b/app/web/src/pages/Data.jsx index 5d34437..81c6ec6 100644 --- a/app/web/src/pages/Data.jsx +++ b/app/web/src/pages/Data.jsx @@ -1,6 +1,6 @@ -import { useEffect, useRef, useState } from "react"; +import { useEffect, useMemo, useRef, useState } from "react"; import { - ActionIcon, Badge, Button, Card, Grid, Group, Loader, NativeSelect, SegmentedControl, Stack, Text, Textarea, TextInput, Title, Tooltip, + ActionIcon, Badge, Button, Card, Checkbox, Grid, Group, Loader, NativeSelect, SegmentedControl, SimpleGrid, Stack, Text, Textarea, TextInput, Title, Tooltip, useComputedColorScheme, } from "@mantine/core"; import { IconPlus, IconX } from "@tabler/icons-react"; @@ -15,7 +15,7 @@ const FAMILLES = { "Visibility": "#8ec5e8", "Obstruction": "#f0b072", "Thermal d "Target issue": "#e6d46a", "No data": "#c4c4be", "None": "#a8d5a2" }; const NOM_FAMILLE = f => (f === "None" ? "None (courbes intactes)" : f); const CHOIX_FAMILLE = [{ value: "", label: "(sans famille)" }, ...Object.keys(FAMILLES).map(f => ({ value: f, label: NOM_FAMILLE(f) }))]; -const SOURCES = [{ value: "auto", label: "LLM" }, { value: "detecteurs", label: "Detectors" }, { value: "manual", label: "Manual" }]; +const SOURCES = [{ value: "detecteurs", label: "Detectors" }, { value: "auto", label: "LLM" }, { value: "manual", label: "Manual" }]; const GRIS = "#b0b0aa", BLEU = "#2a78d6", VOIE = 26, HAUT = 330; // VOIE : px par rangée d'étiquettes ; HAUT : d'un plot const couleur = l => FAMILLES[l.categorie] || GRIS; const lisible = s => s.slice(0, 16).replace("T", " "); @@ -33,12 +33,17 @@ const OUTILS = { responsive: true, doubleClick: "reset", displaylogo: false, sho const date = v => Date.parse(String(v).replace(" ", "T").replace(/Z?$/, "Z")); // une date Plotly ou d'étiquette -> ms UTC const coupe = s => s.replace(/(.{1,80})(\s|$)/g, "$1
"); // la bulle : des lignes de 80 caractères au plus +const DETECTEES = Object.keys(FAMILLES).filter(f => f !== "None"); // les familles des détecteurs (categories.py) + export default function Data({ selection, choisir }) { const [donnees, setDonnees] = useState(null), [charge, setCharge] = useState(false), [large, setLarge] = useState(false); const gauche = useRef(), [instant, setInstant] = useState(null); // instant : où caler les images (le début de l'événement cliqué) + // Les paramètres du diagnostic, sous l'image (Detectors et LLM) : familles montrées (filtre de la page) ; cibles gardées ("" : + // toutes ; sinon les détecteurs retournent sans les autres) + const [source, setSource] = useState("detecteurs"), [familles, setFamilles] = useState(DETECTEES), [cibles, setCibles] = useState(""); const { station, du, au } = selection; useEffect(() => { - setDonnees(null); + setDonnees(null); setCibles(""); if (!station) return; setCharge(true); appel(`/api/courbes?${new URLSearchParams({ station, du, au })}`).then(d => { setDonnees(d); setCharge(false); }); @@ -57,25 +62,66 @@ export default function Data({ selection, choisir }) { {charge && } - {donnees && setInstant({ t })} />} + {donnees && setInstant({ t })} + source={source} setSource={setSource} familles={familles} cibles={cibles} />} -
setLarge(!large)} instant={instant} />
+
+ + setLarge(!large)} instant={instant} /> + {donnees && source !== "manual" && } + +
); } -function Courbes({ selection: { station, du, au }, d, caler }) { +// Les familles s'appliquent tout de suite (filtre de la page, Detectors et LLM) ; les cibles, au bouton : chaque jeu de cibles +// relance les détecteurs (les étiquettes LLM ne disent pas leurs capteurs : elles ne les filtrent pas) +function Parametres({ d, familles, setFamilles, cibles, setCibles, lecteur }) { + const capteurs = Object.keys(d.T).filter(k => k && !k.startsWith("system:")); + const refs = new Set(d.plots.flatMap(p => p.traces).filter(t => t.name.endsWith(" (ref.)")).map(t => t.t)); + const [coches, setCoches] = useState(cibles ? cibles.split(",") : capteurs); + const voulu = coches.length === capteurs.length ? "" : capteurs.filter(c => coches.includes(c)).join(","); + return ( + + + Paramètres du diagnostic + + + {DETECTEES.map(f => )} + + + + + {capteurs.map(c => )} + + + {!lecteur && Les étiquettes LLM ne disent pas leurs cibles : ce choix ne vaut que pour Detectors.} + + + + + + + ); +} + +function Courbes({ selection: { station, du, au }, d, caler, source, setSource, familles, cibles }) { const { A, B, T, plots: PLOTS } = d; const indice = (titre, sinon) => { const i = PLOTS.findIndex(p => p.titre === titre); return i < 0 ? sinon : i; }; const [Plotly, setPlotly] = useState(null), [pret, setPret] = useState(false); const [vues, setVues] = useState([{ id: 1, m: indice("Relative Corrected Horizontal Shift", 0) }]); // les plots affichés - const [source, setSource] = useState("auto"), [labels, setLabels] = useState([]), [choix, setChoix] = useState(null); + const [choix, setChoix] = useState(null); const [ajout, setAjout] = useState({ categorie: "", texte: "" }); const [ouverte, setOuverte] = useState(null), [edit, setEdit] = useState(null), [note, setNote] = useState(""); const [toutes, setToutes] = useState([]), [lecture, setLecture] = useState(true), sombre = useComputedColorScheme("light") === "dark"; + // toutes : le fichier (ou les détecteurs) ; labels : sur la plage, et hors Manual, dans les familles cochées + const labels = useMemo(() => toutes.filter(x => x.debut < B && x.fin > A && (source === "manual" || familles.includes(x.categorie))), + [toutes, familles, source]); const lecteur = source === "detecteurs"; // les événements des détecteurs se lisent, ils ne s'écrivent pas // figs : id -> div du plot ; dessines : id -> plot qu'il montre ; vue : la plage et la largeur où le texte des étiquettes a été tronqué const figs = useRef({}), dessines = useRef({}), prochain = useRef(2), barre = useRef(), tries = useRef([]), vue = useRef(""), courant = useRef({}); @@ -222,14 +268,14 @@ function Courbes({ selection: { station, du, au }, d, caler }) { useEffect(() => { let vivant = true; setLecture(true); - const url = source === "detecteurs" ? `/api/detecteurs?${new URLSearchParams({ station, du, au })}` + const url = source === "detecteurs" ? `/api/detecteurs?${new URLSearchParams({ station, du, au, cibles })}` : `/api/etiquettes?${new URLSearchParams({ station, dossier: source })}`; appel(url).then(l => { if (!vivant) return; // une autre source a été choisie entre-temps - setLecture(false); setToutes(l || []); setLabels(l ? l.filter(x => x.debut < B && x.fin > A) : []); + setLecture(false); setToutes(l || []); }); return () => { vivant = false; }; - }, [source]); + }, [source, cibles]); // Un plot de plus : le premier que la page ne montre pas encore, déplacement vertical d'abord function ajouterPlot() { @@ -260,7 +306,7 @@ function Courbes({ selection: { station, du, au }, d, caler }) { const l = await appel("/api/etiquettes", "POST", { station, dossier: source, debut: choix[0], fin: choix[1], categorie: ajout.categorie, description: ajout.texte.trim() }); if (!l) return; // rien n'est perdu : le texte et la plage restent dans la page - setLabels(ls => [...ls, l]); + setToutes(ls => [...ls, l]); setAjout({ categorie: "", texte: "" }); await Plotly.relayout(barre.current, { selections: [] }); setChoix(null); @@ -270,14 +316,14 @@ function Courbes({ selection: { station, du, au }, d, caler }) { const l = await appel("/api/etiquettes", "PUT", { station, dossier: source, avant: ouverte, debut: edit.debut + "Z", fin: edit.fin + "Z", categorie: edit.categorie, description: edit.texte.trim() }); if (!l) return; // rien n'est perdu : le texte et les bornes restent dans la fenêtre - setLabels(ls => ls.map(x => (x === ouverte ? l : x))); + setToutes(ls => ls.map(x => (x === ouverte ? l : x))); setOuverte(l); setNote("Enregistrée"); } async function supprimer() { if (!confirm("Supprimer cette étiquette ?")) return; if (await appel("/api/etiquettes", "DELETE", { station, dossier: source, avant: ouverte }) === null) return; - setLabels(ls => ls.filter(x => x !== ouverte)); + setToutes(ls => ls.filter(x => x !== ouverte)); setOuverte(null); setEdit(null); } @@ -313,7 +359,7 @@ function Courbes({ selection: { station, du, au }, d, caler }) {
{pret && !lecture && !labels.length && ( // sinon une barre vide ne dit pas pourquoi - {lecteur ? "Les détecteurs ne trouvent aucun événement sur cette plage." + {lecteur ? `Les détecteurs ne trouvent aucun événement sur cette plage${toutes.length ? " dans les familles cochées" : ""}.` : toutes.length ? `Aucune étiquette ${source} sur cette plage : celles de ${station} vont du ${bornes("debut", (a, b) => a < b)} au ${bornes("fin", (a, b) => a > b)} UTC.` : `${station} n'a aucune étiquette dans labeling/${source}/.`} )}