Label families: five families for labels, documented in labeling/familles.md and read by the labeler (Visibility, Obstruction, Thermal displacement, Displacement, Faulty target; turbulence merged into Visibility) (D-109, D-110); the labeler keeps only its labels, its work folder goes to out/ (D-106); third trial on WILDSTRUBEL 01-06.09, 30 labels; the labeling tool shows one-measurement labels

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
maximeandClaude Opus 5.5 committed 2026-11-02 15:40:35 +01:00
1 parent 8266293ed3
commit 5adb711ce0
79 files changed
+116 -6181

No files matched your search

+13 -13
View File
@@ -1,8 +1,8 @@
"""L'outil d'étiquetage de l'expert (D-098, point 68 du plan du journal du matin) : se repérer dans le temps et écrire ce qu'on
voit, en langage naturel, avec au besoin une catégorie du journal (D-107) ; les données se consultent sur le monitoring. En haut, le data loader de la page
voit, en langage naturel, avec au besoin sa famille (labeling/familles.md, D-109) ; les données se consultent sur le monitoring. En haut, le data loader de la page
Status ; un menu déroulant, un plot à la fois, comme le menu Advanced d'Explore, plus les métriques système numériques de
metrics/ (« System: … », sans les identifiants) ; dessous, une barre de temps aux mêmes abscisses, qui suit le zoom : y glisser sélectionne une plage, puis du texte et Add. Add écrit aussitôt une ligne dans
labeling/manual/<STATION>.jsonl (D-102), ou dans labeling/auto/<STATION>.jsonl, celles de l'étiqueteur (D-105, D-106), au choix du menu Labels : {"debut": "2026-10-08T01:00Z", "fin": "2026-10-08T02:45Z", "categorie": "passage", "description": "…"}, en UTC, les noms
labeling/manual/<STATION>.jsonl (D-102), ou dans labeling/auto/<STATION>.jsonl, celles de l'étiqueteur (D-105, D-106), au choix du menu Labels : {"debut": "2026-10-08T01:00Z", "fin": "2026-10-08T02:45Z", "categorie": "obstruction", "description": "…"}, en UTC, les noms
de champs de l'analyste (etiquettes.json). Les zones étiquetées sont grisées sur tous les plots ; sur la barre, une barre
chacune, son texte au survol, celles qui se chevauchent l'une sous l'autre. Un clic sur l'une l'affiche dessous, et Save y
enregistre son nouveau texte, sa catégorie et ses bornes (deux champs de date, en UTC), Delete la retire. Au survol
@@ -31,7 +31,6 @@ import chargeur # noqa: E402 (son formulaire, son serveur ; bascule seule sur
import detecteurs # noqa: E402 (les couleurs et les références de la page Status)
from common.stations import load_csv, parse_name # noqa: E402
from detecteurs import ROOT, donnees # noqa: E402
from categories import CATEGORIES # noqa: E402 (mis sur le chemin par detecteurs)
from plotly.offline import get_plotlyjs_version # noqa: E402
PORT = 8767 # ni celui de common.page (8765), ni celui du data loader (8766)
@@ -45,10 +44,9 @@ CAMERA = "Camera movement"
# Pas de copie des identifiants (CLAUDE.md, « data/ ») : ces fichiers ne sont pas lus ; SIM_CCID a souvent l'air d'un nombre.
IDENTIFIANT = re.compile(r"SIM_CCID$|ip(_|$)")
FORMAT = "%Y-%m-%dT%H:%MZ"
# Les catégories du journal (D-074), ses deux thermiques réunies, le sens ne comptant pas (D-108), plus « aucune » : ce qui
# ne touche pas les courbes, comme l'analyste (analyser-lot)
CATEGORIES_LABELS = ({k: c["label"] for k, c in CATEGORIES.items() if not k.endswith("_thermique")}
| {"deplacement_thermique": "Thermal displacement", "aucune": "None (curves untouched)"})
# Les familles des étiquettes (labeling/familles.md, D-109, D-110), plus « aucune » pour l'expert : ce qui ne touche pas les courbes
CATEGORIES_LABELS = {"visibilite": "Visibility", "obstruction": "Obstruction", "deplacement_thermique": "Thermal displacement", "deplacement": "Displacement",
"cible_degradee": "Faulty target", "aucune": "None (curves untouched)"}
# Une figure Plotly n'a qu'un mode de glissement : le plot zoome, la barre, figure à part, sélectionne. Elle reprend à chaque
# changement du plot sa plage et ses marges, la légende pouvant les élargir : c'est ce qui garde les abscisses alignées.
@@ -66,13 +64,15 @@ const AIDE = plage.textContent;
// ouverte : celle affichée sous la barre
let labels = [], choix = null, tries = [], ouverte = null;
const lisible = s => s.slice(0, 16).replace('T', ' ');
// fin d'une étiquette à l'écran : une étiquette d'une seule mesure (debut = fin, l'étiqueteur) se voit sur un pas de 15 min
const finVue = l => l.fin > l.debut ? l.fin : new Date(Date.parse(l.fin) + 9e5).toISOString().slice(0, 16) + 'Z';
const cat = l => l.categorie ? `[${CATS[l.categorie] || l.categorie}] ` : '';
const marge = () => ({l: 60, r: 20, t: 10, b: 30});
function zones() {
const z = (a, b, couleur, o) => ({type: 'rect', xref: 'x', yref: 'paper', x0: lisible(a), x1: lisible(b), y0: 0, y1: 1,
fillcolor: couleur, opacity: o, line: {width: 0}, layer: 'below'});
return labels.map(l => z(l.debut, l.fin, GRIS, 0.2)).concat(choix ? [z(choix[0], choix[1], BLEU, 0.25)] : []);
return labels.map(l => z(l.debut, finVue(l), GRIS, 0.2)).concat(choix ? [z(choix[0], choix[1], BLEU, 0.25)] : []);
}
function aligne() {
@@ -97,12 +97,12 @@ function dessineBarre() {
tries = [...labels].sort((a, b) => a.debut < b.debut ? -1 : 1);
const voies = [], voie = tries.map(l => { // la première rangée libre, sinon une nouvelle, comme les status
const r = voies.findIndex(f => f <= l.debut), i = r < 0 ? voies.length : r;
voies[i] = l.fin;
voies[i] = finVue(l);
return i;
});
const n = Math.max(1, voies.length), f = fig._fullLayout;
return Plotly.react(barre, [{type: 'bar', orientation: 'h', y: voie, base: tries.map(l => lisible(l.debut)),
x: tries.map(l => Date.parse(l.fin) - Date.parse(l.debut)), width: 0.85, marker: {color: GRIS, line: {color: 'white', width: 2}}, // le liseré sépare deux étiquettes bout à bout
x: tries.map(l => Date.parse(finVue(l)) - Date.parse(l.debut)), width: 0.85, marker: {color: GRIS, line: {color: 'white', width: 2}}, // le liseré sépare deux étiquettes bout à bout
text: tries.map(l => cat(l) + l.description),
textposition: 'inside', insidetextanchor: 'start', textangle: 0, unselected: {marker: {opacity: 1}}, // sinon une sélection les pâlit
hoverinfo: 'text', hovertext: tries.map(l => `${lisible(l.debut)} → ${lisible(l.fin)} UTC<br>${cat(l)}${l.description.replace(/\\n/g, '<br>')}<br><i>click: read, edit</i>`)}],
@@ -128,7 +128,7 @@ function choisit(c) {
const modifiee = () => ouverte && (editTexte.value.trim() !== ouverte.description || editCategorie.value !== (ouverte.categorie || '') || editDebut.value + 'Z' !== ouverte.debut || editFin.value + 'Z' !== ouverte.fin);
function majEdition(message = '') {
save.disabled = !modifiee() || !editTexte.value.trim() || !(editDebut.value && editFin.value && editDebut.value < editFin.value);
save.disabled = !modifiee() || !editTexte.value.trim() || !(editDebut.value && editFin.value && editDebut.value <= editFin.value);
note.textContent = message;
}
@@ -329,7 +329,7 @@ def ajouter(corps):
station, debut, fin, description = corps["station"], corps["debut"], corps["fin"], corps["description"].strip()
if station not in chargeur.stations(): # le nom devient un chemin : une station de data/, rien d'autre
raise ValueError("unknown station")
if not description or datetime.strptime(debut, FORMAT) >= datetime.strptime(fin, FORMAT):
if not description or datetime.strptime(debut, FORMAT) > datetime.strptime(fin, FORMAT): # = : une seule mesure
raise ValueError("empty text or range")
c = categorie(corps)
label = {"debut": debut, "fin": fin} | ({"categorie": c} if c else {}) | {"description": description}
@@ -349,7 +349,7 @@ def modifier(corps):
debut, fin = corps.get("debut", avant["debut"]), corps.get("fin", avant["fin"])
if station not in chargeur.stations():
raise ValueError("unknown station")
if not description or datetime.strptime(debut, FORMAT) >= datetime.strptime(fin, FORMAT):
if not description or datetime.strptime(debut, FORMAT) > datetime.strptime(fin, FORMAT): # = : une seule mesure
raise ValueError("empty text or range")
c = categorie(corps) if "categorie" in corps else avant.get("categorie", "")
# debut, fin, categorie en tête, comme à l'Add ; les autres champs à leur place