diff --git a/.vscode/tasks.json b/.vscode/tasks.json new file mode 100644 index 0000000..f755299 --- /dev/null +++ b/.vscode/tasks.json @@ -0,0 +1,28 @@ +{ + "version": "2.0.0", + "tasks": [ + { + "label": "pomper", + "detail": "Met à jour les stations suivies, images comprises (extraction/README.md)", + "type": "shell", + "command": "extraction/pomper.sh", + "problemMatcher": [] + }, + { + "label": "run app", + "detail": "Construit le front, puis lance le serveur sur http://127.0.0.1:8770", + "type": "shell", + "command": "(cd app/web && { [ -d node_modules ] || npm install; } && npm run build) && API/.venv/bin/python app/serveur/serveur.py", + "isBackground": true, + "problemMatcher": [] + }, + { + "label": "status", + "detail": "La page Status par son data loader : station, dates, « Analyse »", + "type": "shell", + "command": "python3 detectors-view/status.py", + "isBackground": true, + "problemMatcher": [] + } + ] +} diff --git a/CLAUDE.md b/CLAUDE.md index a810e5b..c05c970 100644 --- a/CLAUDE.md +++ b/CLAUDE.md @@ -56,10 +56,9 @@ python3 maquettes/support/home.py [début] [fin] # maquette support python3 vues-deplacements/maquette/explore.py [dossier] # page Explore : View, Diagnosis, Displacements, Journal python3 detectors/categories.py # événements du journal, une ligne chacun python3 detectors-view/detecteurs.py data/ [--du D --au F] # page des détecteurs seuls -./run_server.sh # la web app app/ : build du front, serveur sur :8770 -./run.sh # les quatre outils du poste : Status, View, Labeling, Compare +# tâches VS Code (.vscode/tasks.json) : « run app » (web app app/, :8770), « pomper » (extraction/pomper.sh), « status » python3 detectors-view/compare.py [data/ --du D --au F] # étiquettes face aux détecteurs, score par famille, data loader -./detectors-view/status.sh # page Status par son data loader : station, dates, Analyse +python3 detectors-view/status.py # page Status par son data loader (tâche VS Code « status ») python3 labeling/labeling.py [data/ --du D --au F] # l'expert étiquette : un plot, une plage, du texte, Add python3 view/view.py [data/ --du D --au F] # les images IRON : parcourir, zoomer python3 .claude/skills/detector-learner/regression.py # benchmark : détecteurs face à toutes les étiquettes de labeling/auto/ @@ -84,7 +83,7 @@ python3 -m venv .venv && .venv/bin/pip install plotly matplotlib # recréer . ### Racine -- `README.md` : point d'entrée pour un humain. `run.md` (125 l) : les commandes que lance l'utilisateur (pompage, étiquetage, métriques de qualité par `~/optical_emulator`, `/events-learner`, `/review-event`). `push.sh ""` : pull, commit de tout, push. `run.sh` : la page Status, View et Labeling, chacun par son data loader. +- `README.md` : point d'entrée pour un humain. `run.md` (125 l) : les commandes que lance l'utilisateur (pompage, étiquetage, métriques de qualité par `~/optical_emulator`, `/events-learner`, `/review-event`). `.vscode/tasks.json` : les tâches `pomper` et `run app`. ### `docs/` @@ -108,7 +107,7 @@ python3 -m venv .venv && .venv/bin/pip install plotly matplotlib # recréer . - `vues-deplacements/` : le chantier des déplacements (D-052), avec sa propre carte, `vues-deplacements/CLAUDE.md` : `maquette/` (page Explore et `spec.md`, D-053 à D-056), `contexte/` (journal du matin, seuils, lissage, `events-learner`, aiguisage, retiré), `cas/` (NORDEND, parcours de l'utilisateur), `benchmark/historique.csv` (D-069). - `detectors/` : les détecteurs du journal (D-067, D-068, D-084), un détecteur par famille (D-119) : `visibility.py`, `obstruction.py`, `target_issue.py`, `thermal_displacement.py`, `no_data.py`, `displacement.py`, contrat `detect(mesures)` (plus, s'il les déclare, la température, la pose de la caméra et les métriques de la station, D-124, D-134), classés en événements par `categories.py`, la famille pour catégorie ; `archive/` : versions écartées. -- `detectors-view/` : le développement de la page des détecteurs (D-093), `detecteurs.py` : images, courbes, Status, catégories, Error rate ; `run-detectors.sh` : la page sur chaque station de `data/` ; `status.py` : la page Status, version pseudo finale de la page Explore du site : corr_x, corr_y, mouvement de la caméra, étiquettes de `labeling/` (auto, sinon manual) en plages colorées et en étiquettes cliquables au-dessus (sélection : ses capteurs, ses détails et son timelapse sous la figure, sans zoom) (D-094) ; en haut, le data loader `data-loader/chargeur.py` (station, dates, « Analyse » ; son serveur, port 8766) ; la page des détecteurs est reprise par la page de fin de séance de `/events-learner` (`comparaison.py`), par `/review-event` et par `compare.py` : les étiquettes face aux détecteurs, ligne par famille, et le score, sous le data loader (port 8769). +- `detectors-view/` : le développement de la page des détecteurs (D-093), `detecteurs.py` : images, courbes, Status, catégories, Error rate ; `status.py` : la page Status, version pseudo finale de la page Explore du site : corr_x, corr_y, mouvement de la caméra, étiquettes de `labeling/` (auto, sinon manual) en plages colorées et en étiquettes cliquables au-dessus (sélection : ses capteurs, ses détails et son timelapse sous la figure, sans zoom) (D-094) ; en haut, le data loader `data-loader/chargeur.py` (station, dates, « Analyse » ; son serveur, port 8766) ; la page des détecteurs est reprise par la page de fin de séance de `/events-learner` (`comparaison.py`), par `/review-event` et par `compare.py` : les étiquettes face aux détecteurs, ligne par famille, et le score, sous le data loader (port 8769). - `labeling/` : **toute la connaissance métier du labeling** (D-130) : `regles-d-etiquetage.md` (comment poser une étiquette), `familles.md`, `carte-des-etiquettes.md`, `connaissances/` (chaîne de mesure, colonnes des déplacements, trous, images de la caméra, cycle thermique, métriques de qualité, cas annotés, incident de Barcelone) ; `controle.py` (les étiquettes automatiques face aux règles) ; `ids.py` (l'id stable de chacune, D-131) ; `auto/revue-croisee//` (`/cross-review-labels`). Et l'outil d'étiquetage de l'expert (D-098), `labeling.py` : un plot à la fois (déplacements, métriques système), une barre de temps pour sélectionner une plage, du texte libre et, au choix, une famille (D-109) ; Add écrit une ligne dans `manual/.jsonl`, versionné ; un clic sur une étiquette la lit, la modifie ou la retire ; `familles.md` : les familles des étiquettes, leurs frontières (D-109) ; `carte-des-etiquettes.md` : les étiquettes revues rangées par phénomène, pour l'analyste, refaite par `/labels-map` (D-104) ; `manual/` : les étiquettes faites à la main, revues avec l'utilisateur par `/review-labels`, dont celles des events validés (D-100) ; `auto/` : celles de l'`etiqueteur` (D-105 à D-107), relues seulement (D-130) ; dans `auto/etiqueteur/_/` ses étiquettes avant revue (`etiquettes.jsonl`), son analyse et ses scripts, versionnés, ses figures hors de git (D-126) ; `auto/revue/_/` : leur revue par l'analyste, `/review-auto-labels` (D-128) ; `lecons/` : les leçons de `/labels-learner` (D-099), une par phénomène. - `view/` : `view.py`, les images IRON d'une station sous le data loader de la page Status (glisseur, flèches ; molette pour zoomer, glisser pour se déplacer ; case Labels : le nom des cibles et des références). - `detector-learner/` : les séances de `/detector-learner` (D-116, D-132), une par dossier `_/` (avant D-132, `_/`), et `historique.csv`, le benchmark séance après séance ; ses scripts (`regression.py`, le benchmark ; `score.py`, `capteurs.py`, `comparaison.py`, la page d'une séance) dans `.claude/skills/detector-learner/`. diff --git a/app/README.md b/app/README.md index 0e359ea..1b4fa28 100644 --- a/app/README.md +++ b/app/README.md @@ -9,7 +9,7 @@ Data garde la station et la plage (UTC, Au exclue) dans l'adresse : `#/data?stat ## Lancer -En une commande, depuis la racine : `./run_server.sh` (construit le front, puis lance le serveur). Ou à la main : +En une commande : la tâche VS Code `run app` (`.vscode/tasks.json` : construit le front, puis lance le serveur). Ou à la main : Une fois, et après chaque changement de la page : construire le front (Node 22). diff --git a/detectors-view/data-loader/chargeur.py b/detectors-view/data-loader/chargeur.py index 28e3a91..9795f78 100644 --- a/detectors-view/data-loader/chargeur.py +++ b/detectors-view/data-loader/chargeur.py @@ -3,7 +3,7 @@ une date de fin (exclue, comme --au ; vides : toute la période), et le bouton sélection et l'ouvre. Le formulaire est en haut de chaque page Status, et seul dans out/data-loader.html. Son serveur local (http://127.0.0.1:8766, lancé en tâche de fond) sert out/ et data/ comme celui de common.page, plus /analyse : status.py lancé à chaque fois, donc toujours à jour de son code, puis renvoi vers sa page. -Usage : python3 detectors-view/status.py, ou detectors-view/status.sh (ouvre le formulaire seul) +Usage : python3 detectors-view/status.py (ouvre le formulaire seul) """ import html import http.server diff --git a/detectors-view/run-detectors.sh b/detectors-view/run-detectors.sh deleted file mode 100755 index 8dd41d7..0000000 --- a/detectors-view/run-detectors.sh +++ /dev/null @@ -1,12 +0,0 @@ -#!/usr/bin/env bash -# La page des détecteurs sur chaque station de data/, ouverte dans le navigateur (run.md) ; --au exclu. -# Les arguments passent à chaque commande : ./detectors-view/run-detectors.sh --sans-ouvrir écrit les pages dans out/. -cd "$(dirname "$0")/.." -python3 detectors-view/detecteurs.py data/NIEDERHORN --du 2026-09-25 --au 2026-10-08 "$@" -python3 detectors-view/detecteurs.py data/LENZSPITZE --du 2026-10-26 --au 2026-10-28 "$@" # nuit du cas support -python3 detectors-view/detecteurs.py data/CLARIDEN "$@" -python3 detectors-view/detecteurs.py data/FLORIDA "$@" -python3 detectors-view/detecteurs.py data/NADELHORN "$@" -python3 detectors-view/detecteurs.py data/JUNGFRAU --du 2026-10-11 --au 2026-10-25 "$@" -python3 detectors-view/detecteurs.py data/NORDEND --du 2026-10-11 --au 2026-10-25 "$@" # 4 mois en tout : page trop lourde -python3 detectors-view/detecteurs.py data/WILDSTRUBEL --du 2026-09-25 --au 2026-10-10 "$@" diff --git a/detectors-view/status.py b/detectors-view/status.py index 19b5efa..91a5a3c 100644 --- a/detectors-view/status.py +++ b/detectors-view/status.py @@ -13,7 +13,7 @@ selon les cibles tracées, sans toucher aux cibles. En bas, le bouton marge avant et après, bord rouge pendant, Focused ou Global image, ⤓ GIF) ; la page est servie par http://127.0.0.1. Tout en haut, le data loader (data-loader/chargeur.py) : une autre station, d'autres dates, et « Analyse » refait la page. Usage : python3 detectors-view/status.py [ [--du AAAA-MM-JJ] [--au AAAA-MM-JJ]] - (sans dossier : le data loader seul, comme detectors-view/status.sh ; --au exclu ; sans dates, toute la période du + (sans dossier : le data loader seul, comme la tâche VS Code « status » ; --au exclu ; sans dates, toute la période du dossier ; page : out/status___.html, ouverte) """ import argparse diff --git a/detectors-view/status.sh b/detectors-view/status.sh deleted file mode 100755 index 64c4aed..0000000 --- a/detectors-view/status.sh +++ /dev/null @@ -1,4 +0,0 @@ -#!/usr/bin/env bash -# La page Status par son data loader : station, dates, « Analyse » (data-loader/chargeur.py). -cd "$(dirname "$0")/.." -python3 detectors-view/status.py "$@" diff --git a/push.sh b/push.sh deleted file mode 100755 index ff63ec6..0000000 --- a/push.sh +++ /dev/null @@ -1,6 +0,0 @@ -#!/usr/bin/env bash -set -e -git pull --rebase --autostash -git add -A -git commit -m "$1" -git push diff --git a/run.md b/run.md index 2059fcf..7aea098 100644 --- a/run.md +++ b/run.md @@ -36,7 +36,7 @@ Choisir la station et les dates, puis Analyse. Glisser sur le plot zoome (double Les events validés ont aussi leurs étiquettes, dans le fichier de leur station, au même format que les autres (D-100). -Dans le texte, dire la cause et comment on l'a sue (quel plot, quel signe). Étiqueter aussi les cas trompeurs, qui ressemblent à un problème sans en être un : ils donnent les faux amis (point 69 du plan). Le fichier se commite comme le reste (`push.sh`). +Dans le texte, dire la cause et comment on l'a sue (quel plot, quel signe). Étiqueter aussi les cas trompeurs, qui ressemblent à un problème sans en être un : ils donnent les faux amis (point 69 du plan). Le fichier se commite comme le reste. # Revoir ses étiquettes (/review-labels) @@ -95,12 +95,6 @@ python3 detectors-view/detecteurs.py data/ --du --au - Page `out/detecteurs___.html`, ouverte seule : `corr_x` et `corr_y` de tous les capteurs, une ligne par catégorie (survol : capteurs et phrase), puis la liste des événements. - `--sans-ouvrir` : écrit la page sans l'ouvrir. -Toutes les stations de `data/` d'un coup, chacune sur sa plage (une page ouverte par station ; `--sans-ouvrir` passe aux commandes) : - -```bash -./detectors-view/run-detectors.sh -``` - # Améliorer les détecteurs sur les étiquettes (detector-learner) Les étiquettes de `labeling/auto/` déjà faites et relues, à la racine de Support-Agent, sur `master` ; ou demander à Claude de lancer la séance (D-132) : @@ -110,7 +104,7 @@ Les étiquettes de `labeling/auto/` déjà faites et relues, à la racine de Sup ``` - Une famille (`Displacement`, `Obstruction`, `Thermal displacement`, `Visibility`, `Target issue`, `No data`), sur toutes les stations à la fois (D-132). Ni analyste ni base d'events (D-116) : critique, modification et contrôle des détecteurs. Une seule mesure, le benchmark sur toutes les étiquettes de `labeling/auto/` (historique `detector-learner/historique.csv`) : la ligne de la famille est le score de la séance, toutes les lignes la non-régression, sur laquelle juge le contrôle. -- Pour voir une station après la séance : la page Compare (`./run.sh`, ou `detectors-view/compare.py`). +- Pour voir une station après la séance : la page Compare (`detectors-view/compare.py`). - `--ameliorer` (facultatif) : en fin de séance, l'améliorateur corrige le skill et ses agents d'après les difficultés relevées (D-071). - Commits directement sur `master` ; bilan dans `detector-learner/_/bilan.md` ; `git revert` de ce qu'on ne garde pas. diff --git a/run.sh b/run.sh deleted file mode 100755 index 69a8caa..0000000 --- a/run.sh +++ /dev/null @@ -1,9 +0,0 @@ -#!/usr/bin/env bash -# Les quatre outils du poste, chacun par son data loader (station, dates, « Analyse ») : la page Status, les images (View), -# l'étiquetage (Labeling) et les étiquettes face aux détecteurs (Compare). Leurs serveurs restent en tâche de fond -# (ports 8766, 8768, 8767, 8769). -cd "$(dirname "$0")" -./detectors-view/status.sh -python3 view/view.py -python3 labeling/labeling.py -python3 detectors-view/compare.py diff --git a/run_server.sh b/run_server.sh deleted file mode 100755 index ff1aadc..0000000 --- a/run_server.sh +++ /dev/null @@ -1,6 +0,0 @@ -#!/usr/bin/env bash -# La web app (app/) : construit le front, puis lance le serveur sur http://127.0.0.1:8770 (AIMSIGHT_PORT pour changer). -set -e -cd "$(dirname "$0")" -(cd app/web && { [ -d node_modules ] || npm install; } && npm run build) -exec API/.venv/bin/python app/serveur/serveur.py