Optimizer : un batch de 24 h, les détecteurs, leurs figures et le scanner
Les détecteurs (le dépôt detectors, en sous-module) passent sur un jour UTC de toutes les stations ; leurs étiquettes et une figure par station vont dans batches/<jour>/ ; le scanner (Sonnet) note les irrégularités dans rapport.md et les corrige dans verite/. Premier batch : 2026-11-12. L'amélioration par /detectors:wf-improve n'est pas encore branchée. Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
commit
bcd65c3b00
32 files changed
+820
No files matched your search
@@ -0,0 +1,83 @@
|
||||
---
|
||||
name: scanner
|
||||
description: Scanner d'Optimizer — sur un batch de 24 h, toutes les stations, regarde de loin les étiquettes des détecteurs face aux courbes (une figure par station), note chaque irrégularité (raté, trop, bornes, famille) dans le rapport du batch et la corrige dans la vérité (verite/<STATION>.jsonl). Appelé par batch.py avec le dossier du batch.
|
||||
tools: Read, Write, Edit, Bash
|
||||
model: sonnet
|
||||
---
|
||||
|
||||
Tu es le scanner d'Optimizer, un critique léger des détecteurs. Sur un jour UTC, pour chaque station, tu compares les étiquettes posées par les détecteurs à ce que montrent les courbes, **de loin** : une figure par station, rien de plus. Tu notes chaque irrégularité et tu la corriges dans la vérité du batch. Ta vérité sert ensuite à améliorer les détecteurs : une irrégularité inventée les fait travailler pour rien, une irrégularité ratée reste. **Une irrégularité sûre vaut mieux que dix douteuses** : dans le doute, tu la notes comme doute, sans corriger.
|
||||
|
||||
## Ce que tu as
|
||||
|
||||
- `<batch>/detecteurs.md` : par station, ses capteurs et les étiquettes des détecteurs (id court `D1`…, heures, famille : variété, capteurs ; « grisé » : non montré au client, mais détecté comme les autres).
|
||||
- `<batch>/figures/<STATION>.png`, sur les 24 h, de haut en bas :
|
||||
1. les étiquettes, une ligne par famille, avec leur id court ;
|
||||
2. et 3. `corr_x` et `corr_y` des cibles, chacune en écart à sa médiane du jour, en bruits propres ; entre les pointillés ±5, une courbe est calme ; écrêtées en haut et en bas ; le nom des cibles qui sortent le plus du calme ; les références ne sont pas tracées ;
|
||||
4. le nombre de capteurs rejetés (rouge) et manquants (gris) ; hachuré : aucune mesure d'aucun capteur ;
|
||||
5. la température du boîtier (rouge) et l'`error_value` rapportée à son seuil, médiane des capteurs (bleu ; 1 : le seuil).
|
||||
- `<batch>/verite/<STATION>.jsonl` : les étiquettes des détecteurs, une par ligne, `{"id", "debut", "fin", "categorie", "description"}`, que tu corriges.
|
||||
- `labeling/familles.md` : les familles et leurs frontières. **Lis-le en entier d'abord.**
|
||||
- `data/<STATION>/images/` : les images de la caméra, `AAAAMMJJTHHMMZ_<n>.jpg`, à peu près une par heure ; les trouver : `ls data/<STATION>/images/20261112T14*`. **Cinq images au plus pour tout le batch**, seulement quand la famille ne se décide pas autrement.
|
||||
|
||||
Tu ne lis jamais les CSV de `data/`, ni le code des détecteurs.
|
||||
|
||||
## Ce qu'est une anomalie
|
||||
|
||||
Ce qui rend `corr_x` ou `corr_y` non plates (un pic, un saut, une dérive, du bruit hors des pointillés) ou ce qui les fait manquer (un trou, des rejets). Des courbes calmes, mesures présentes et acceptées : rien à étiqueter. Une exception : **Thermal displacement s'étiquette toujours**, même sur des courbes calmes quand la caméra compense ; une telle étiquette n'est pas une irrégularité tant que la température varie.
|
||||
|
||||
## Les irrégularités
|
||||
|
||||
- **raté** : les courbes sortent du calme, ou manquent, et aucune étiquette ne couvre ce moment.
|
||||
- **trop** : une étiquette sur des courbes calmes, mesures présentes et acceptées (hors Thermal displacement) ; un `No data` alors que les mesures sont là ; deux étiquettes de la même famille sur les mêmes heures (l'une est de trop).
|
||||
- **bornes** : une étiquette qui commence ou finit à plus d'une heure de ce que montrent les courbes. Moins d'une heure : pas une irrégularité, la figure n'est pas assez fine.
|
||||
- **famille** : la forme dit une autre famille, selon `labeling/familles.md` (une ou quelques cibles qui s'écartent, le reste calme ; toute la scène, `error_value` qui monte, beaucoup de rejets ; une onde qui suit la température ; un saut qui dure ; aucune mesure d'aucun capteur).
|
||||
|
||||
Ne sont pas des irrégularités : un trou aux mêmes heures sur plusieurs stations (une cause commune, `No data` reste juste) ; un trou à la toute fin du jour (les données ne sont peut-être pas encore pompées).
|
||||
|
||||
## La vérité
|
||||
|
||||
Pour chaque irrégularité sûre, une correction dans `<batch>/verite/<STATION>.jsonl`, avec l'outil Edit (pas de script : Bash ne sert qu'à `ls`), et aucune autre ligne touchée :
|
||||
- **trop** : retire la ligne ;
|
||||
- **bornes** : change `debut` ou `fin` ;
|
||||
- **famille** : change `categorie` (une clé de `labeling/familles.md`) ;
|
||||
- **raté** : ajoute une ligne, `"id": "<STATION>-<jour>-S<n>"`, ses bornes de la dernière mesure calme avant l'anomalie à la première mesure calme après, `"AAAA-MM-JJTHH:MMZ"`, dans le jour ; sa description en français : ce que montre la figure, les cibles touchées, `(scanner)`.
|
||||
|
||||
Une ligne changée garde sa description et y ajoute ` Scanner : <la correction, en une phrase>.` Une ligne par étiquette, du JSON valide.
|
||||
|
||||
## Le rapport
|
||||
|
||||
`<batch>/rapport.md` :
|
||||
|
||||
```markdown
|
||||
# Scan du <jour>
|
||||
|
||||
**Verdict**: rien à corriger | irrégularités
|
||||
|
||||
## Irrégularités
|
||||
|
||||
| Station | Étiquette | Cas | Heures (UTC) | Ce que montre la figure | Correction |
|
||||
|---|---|---|---|---|---|
|
||||
|
||||
## Doutes, non corrigés
|
||||
|
||||
- <station, heures : ce que tu vois, ce qui t'a arrêté>
|
||||
|
||||
## Stations sans remarque
|
||||
|
||||
<les stations>
|
||||
|
||||
## Ce qui a manqué
|
||||
|
||||
<ce qui t'a gêné : la figure, le résumé, une consigne ; ou rien>
|
||||
```
|
||||
|
||||
`irrégularités` dès qu'une correction est faite. Une image de la caméra regardée : la citer dans la ligne de l'irrégularité.
|
||||
|
||||
## L'ordre
|
||||
|
||||
1. `labeling/familles.md`, puis `<batch>/detecteurs.md`.
|
||||
2. Station par station : sa figure, étiquette par étiquette, puis les moments que rien ne couvre.
|
||||
3. Au besoin, une image de la caméra.
|
||||
4. Les corrections, puis le rapport.
|
||||
|
||||
Ta réponse, en trois lignes : le verdict, le nombre d'irrégularités par cas, le chemin du rapport.
|
||||
@@ -0,0 +1,7 @@
|
||||
data
|
||||
labeling
|
||||
.venv/
|
||||
__pycache__/
|
||||
batches/*.tmp/
|
||||
batches/*/figures/
|
||||
batches/*/scan.jsonl
|
||||
@@ -0,0 +1,4 @@
|
||||
[submodule "detectors"]
|
||||
path = detectors
|
||||
url = gitea@exchange.sensima.ch:maxime.pasquier/detectors.git
|
||||
branch = main
|
||||
@@ -0,0 +1,17 @@
|
||||
# CLAUDE.md
|
||||
|
||||
Optimizer fait converger les détecteurs AIMsight (le dépôt `detectors`, en sous-module) en continu et à faible coût : un batch par jour UTC, toutes les stations ; les détecteurs posent leurs étiquettes, le `scanner` les regarde de loin face aux courbes et note les irrégularités. Il fait cela et rien d'autre. Conception : `docs/superpowers/specs/2026-11-13-optimizer-design.md` ; installer et lancer : `README.md`.
|
||||
|
||||
- **Le batch** : `python3 batch.py [--jour AAAA-MM-JJ] [--stations A,B] [--sans-scan]` → `batches/<jour>/` : `detecteurs/<STATION>.jsonl` (les étiquettes des détecteurs), `verite/<STATION>.jsonl` (les mêmes, corrigées par le scanner), `detecteurs.md` (le résumé pour le scanner), `rapport.md` (le sien), `figures/` et `scan.jsonl` (son flux) hors de git.
|
||||
- **L'agent** : `.claude/agents/scanner.md`, sur Sonnet, lancé par `batch.py` (`claude -p --agent scanner`).
|
||||
- **Les liens**, hors de git, en lecture seule : `data/` → `~/Support-Agent/data` (rempli par le pompage, qui n'est pas ici) ; `labeling/` → `~/Diagnostic-App/labeling` (`familles.md` ; `auto/`, la vérité de référence du benchmark).
|
||||
- **Les détecteurs** : leur contrat est dans `detectors/CLAUDE.md` ; Optimizer lit `categories.events`, `categories.CATEGORIES` et `scripts/data.py`. Diagnostic-App les a aussi en sous-module : son mode ciblé (une analyse approfondie) et ce mode large seront deux appelants du même `/detectors:wf-improve`.
|
||||
- **Pas encore branché** : l'amélioration (`/detectors:wf-improve` sur la vérité du batch), à rediscuter.
|
||||
- **Vérifier un changement** : `python3 batch.py --jour <jour> --sans-scan` sur un jour réel, puis regarder les figures.
|
||||
|
||||
Règles :
|
||||
- Toute heure est en UTC.
|
||||
- Lecture seule sur `data/` et `labeling/` ; ne jamais recopier les identifiants des métriques (`SIM_CCID`, `ip*`).
|
||||
- Pas de règle propre à une station, une cible ou une date.
|
||||
- Commits par chemin, jamais `git add -A`.
|
||||
- Langue : français ; le dépôt `detectors` reste en anglais.
|
||||
@@ -0,0 +1,39 @@
|
||||
# Optimizer
|
||||
|
||||
Faire converger les détecteurs AIMsight en continu, à faible coût. Chaque jour pompé devient un batch de 24 h :
|
||||
|
||||
1. les détecteurs (le dépôt `detectors`, en sous-module) passent sur toutes les stations ; leurs événements deviennent des étiquettes, et une figure par station les montre face aux courbes ;
|
||||
2. le `scanner`, un agent léger (Sonnet), regarde chaque figure, note chaque irrégularité (raté, trop, bornes, famille) dans un rapport et la corrige dans une copie des étiquettes, la vérité du batch.
|
||||
|
||||
La suite, l'amélioration des détecteurs par `/detectors:wf-improve` sur cette vérité, n'est pas encore branchée. Le mode ciblé de Diagnostic-App (une analyse approfondie, puis « Optimiser les détecteurs ») reste tel quel ; Optimizer en est la version large et légère. Conception : `docs/superpowers/specs/2026-11-13-optimizer-design.md`.
|
||||
|
||||
## Installer
|
||||
|
||||
```bash
|
||||
git submodule update --init && git -C detectors checkout -B main
|
||||
ln -s ~/Support-Agent/data data # les données pompées, hors de git
|
||||
ln -s ~/Diagnostic-App/labeling labeling # familles.md et la vérité de référence, hors de git
|
||||
python3 -m venv .venv && .venv/bin/pip install matplotlib
|
||||
```
|
||||
|
||||
`claude` (Claude Code, connecté) doit être sur le `PATH` pour le scan.
|
||||
|
||||
## Lancer
|
||||
|
||||
```bash
|
||||
python3 batch.py # hier (UTC), toutes les stations de data/
|
||||
python3 batch.py --jour 2026-11-12 # un autre jour
|
||||
python3 batch.py --sans-scan # les détecteurs et les figures seulement
|
||||
```
|
||||
|
||||
Une étape faite ne se refait pas : relancer après `--sans-scan` fait le scan seul ; supprimer `batches/<jour>/` pour tout refaire. `batch.py` passe seul sur `.venv` pour les figures.
|
||||
|
||||
## Ce qu'un batch laisse
|
||||
|
||||
`batches/<jour>/` :
|
||||
- `detecteurs/<STATION>.jsonl` : les étiquettes des détecteurs, coupées au jour (`id`, `debut`, `fin`, `categorie` = la famille, `description`) ;
|
||||
- `verite/<STATION>.jsonl` : les mêmes, corrigées par le scanner ;
|
||||
- `detecteurs.md` : le résumé que lit le scanner ;
|
||||
- `figures/<STATION>.png` : ce qu'il regarde (hors de git) ;
|
||||
- `rapport.md` : ses irrégularités, ses doutes, ce qui lui a manqué ;
|
||||
- `scan.jsonl` : son flux, avec son coût (hors de git).
|
||||
@@ -0,0 +1,294 @@
|
||||
"""Un batch d'Optimizer : un jour UTC (24 h), toutes les stations de data/.
|
||||
|
||||
1. Les détecteurs (detectors/, categories.events, avec 3 jours d'historique) sur le jour ; leurs événements deviennent
|
||||
des étiquettes coupées au jour, batches/<jour>/detecteurs/<STATION>.jsonl, copiées dans batches/<jour>/verite/ ; une
|
||||
figure par station, batches/<jour>/figures/<STATION>.png ; le résumé pour le scanner, batches/<jour>/detecteurs.md.
|
||||
2. Le scan : l'agent scanner (.claude/agents/scanner.md, par claude -p) note les irrégularités dans
|
||||
batches/<jour>/rapport.md et les corrige dans verite/ ; puis la vérité est contrôlée.
|
||||
|
||||
Usage : python3 batch.py [--jour AAAA-MM-JJ] [--stations A,B] [--sans-scan]
|
||||
Jour par défaut : hier (UTC). Une étape faite ne se refait pas (le dossier du batch existe, rapport.md existe) : relancer
|
||||
après --sans-scan fait le scan seul ; supprimer batches/<jour>/ pour tout refaire.
|
||||
Toute heure est en UTC.
|
||||
"""
|
||||
import argparse
|
||||
import json
|
||||
import os
|
||||
import shutil
|
||||
import statistics
|
||||
import subprocess
|
||||
import sys
|
||||
from datetime import datetime, timedelta, timezone
|
||||
from pathlib import Path
|
||||
|
||||
RACINE = Path(__file__).resolve().parent
|
||||
try:
|
||||
import matplotlib
|
||||
except ImportError: # les figures demandent matplotlib, dans .venv
|
||||
venv = RACINE / ".venv" / "bin" / "python"
|
||||
if not venv.exists():
|
||||
sys.exit("matplotlib manque : python3 -m venv .venv && .venv/bin/pip install matplotlib")
|
||||
os.execv(venv, [str(venv), *sys.argv])
|
||||
matplotlib.use("Agg")
|
||||
import matplotlib.pyplot as plt # noqa: E402
|
||||
|
||||
sys.path.insert(0, str(RACINE / "detectors" / "scripts"))
|
||||
import categories # noqa: E402
|
||||
from data import is_reference, iso, load, load_temperature, parse_time, rejected # noqa: E402
|
||||
|
||||
DONNEES, BATCHES = RACINE / "data", RACINE / "batches"
|
||||
HISTORIQUE = timedelta(days=3) # comme categories.py et wf-improve : sans historique, un saut réel passe pour un retour
|
||||
FAMILLES = list(categories.CATEGORIES)
|
||||
COULEURS = dict(zip(FAMILLES, ("tab:blue", "tab:orange", "tab:purple", "tab:red", "tab:gray", "tab:green")))
|
||||
CLES = {"id", "debut", "fin", "categorie", "description"}
|
||||
CALME = 5 # bruits propres : en deçà, une courbe est calme (comme le --k 5 des outils de lecture de Diagnostic-App)
|
||||
PAS = 0.25 # heures : le pas de la figure, 15 min, la cadence de la plupart des stations
|
||||
|
||||
|
||||
def capteurs(v):
|
||||
s = v["sensors"]
|
||||
return "tous les capteurs" if not s else ", ".join(s) if len(s) <= 6 else f"{len(s)} capteurs"
|
||||
|
||||
|
||||
def etiquettes(station, mesures, d):
|
||||
"""Les événements des détecteurs qui touchent le jour, en étiquettes coupées au jour."""
|
||||
b, h, jour = d + timedelta(days=1), d - HISTORIQUE, iso(d)[:10]
|
||||
morceau = {s: k for s, ms in mesures.items() if (k := [m for m in ms if h <= m["t"] < b])}
|
||||
evs = [v for v in categories.events(morceau, b, str(DONNEES / station)) if v["end"] > iso(d)]
|
||||
return [{"id": f"{station}-{jour}-D{i}", "debut": max(v["start"], iso(d)), "fin": min(v["end"], iso(b)),
|
||||
"categorie": v["category"],
|
||||
"description": f"Détecteurs : {v['episodes'][0]['label']}, {capteurs(v)}{', grisé' if v['ignore'] else ''}. "
|
||||
f"{v['text']}"} for i, v in enumerate(evs, 1)]
|
||||
|
||||
|
||||
def courte(e):
|
||||
"""Une ligne du résumé : id court, heures, famille, variété et capteurs."""
|
||||
quoi = e["description"].removeprefix("Détecteurs : ").split(". ")[0]
|
||||
return f"- {e['id'].rsplit('-', 1)[1]} {e['debut'][11:16]} → {e['fin'][11:16]} {e['categorie']} : {quoi}"
|
||||
|
||||
|
||||
def coupe(points, pas):
|
||||
"""[(heure, valeur)] -> la même liste, un NaN dans chaque trou plus long qu'un pas et demi (la courbe s'y interrompt)."""
|
||||
out = []
|
||||
for p in points:
|
||||
if out and p[0] - out[-1][0] > 1.5 * pas:
|
||||
out.append((out[-1][0] + pas, float("nan")))
|
||||
out.append(p)
|
||||
return out
|
||||
|
||||
|
||||
def cadence(ts):
|
||||
"""[datetime] -> l'écart médian entre deux, en heures, jamais moins que le pas de la figure (une station qui mesure
|
||||
par rafales, 3 mesures à 1 min toutes les 15 min, a une cadence de 15 min)."""
|
||||
e = [(y - x).total_seconds() / 3600 for x, y in zip(ts, ts[1:])]
|
||||
return max(statistics.median(e) if e else PAS, PAS)
|
||||
|
||||
|
||||
def figure(station, mesures, temperature, labels, d, chemin):
|
||||
"""La figure du jour, par pas de PAS : étiquettes par famille ; corr_x, corr_y des cibles (écart à leur médiane du
|
||||
jour, en bruits propres, écrêté ; dans chaque pas, l'écart le plus grand : un pic d'une mesure reste) ; rejets et
|
||||
manques ; température du boîtier et error_value / seuil. Les références n'y sont pas : certaines valent 0 par
|
||||
construction, en bruits leur courbe n'a pas de sens. Chaque capteur a sa cadence (une station peut en mêler deux).
|
||||
Rend (cibles, références, minutes entre deux instants de mesure, instants)."""
|
||||
b = d + timedelta(days=1)
|
||||
heure = lambda t: (t - d).total_seconds() / 3600 # noqa: E731
|
||||
case = lambda t: int(heure(t) / PAS) # noqa: E731
|
||||
centre = lambda k: (k + 0.5) * PAS # noqa: E731
|
||||
cases = range(round(24 / PAS))
|
||||
jour = {s: k for s, ms in mesures.items() if (k := [m for m in ms if d <= m["t"] < b])}
|
||||
actifs = [s for s, ms in mesures.items() if ms[-1]["t"] >= d - HISTORIQUE] # un capteur muet tout le jour manque
|
||||
ps = {s: cadence([m["t"] for m in mesures[s] if d - HISTORIQUE <= m["t"] < b]) for s in actifs}
|
||||
cibles = {s: ms for s, ms in jour.items() if not is_reference(mesures[s])}
|
||||
instants = sorted({m["t"] for ms in jour.values() for m in ms})
|
||||
natif = [(y - x).total_seconds() / 60 for x, y in zip(instants, instants[1:])]
|
||||
|
||||
fig, ax = plt.subplots(5, 1, figsize=(14, 10), sharex=True, gridspec_kw={"height_ratios": [1.4, 3, 3, 1, 1]})
|
||||
fig.suptitle(f"{station} — {iso(d)[:10]} (UTC) — {len(cibles)} cibles (les références ne sont pas tracées) — "
|
||||
f"tracé par pas de {round(PAS * 60)} min", fontsize=11)
|
||||
for e in labels: # 0 : les étiquettes, une ligne par famille, alignées sur les courbes
|
||||
y = FAMILLES.index(e["categorie"]) if e["categorie"] in FAMILLES else len(FAMILLES) - 1
|
||||
x0, x1 = heure(parse_time(e["debut"])), heure(parse_time(e["fin"]))
|
||||
ax[0].barh(y, max(x1 - x0, 0.15), left=x0, height=0.8, color=COULEURS.get(e["categorie"], "black"), alpha=0.6)
|
||||
ax[0].text(x0 + 0.05, y, e["id"].rsplit("-", 1)[1], va="center", fontsize=7)
|
||||
ax[0].set_yticks(range(len(FAMILLES)), FAMILLES, fontsize=8)
|
||||
ax[0].set_ylim(len(FAMILLES) - 0.5, -0.5)
|
||||
|
||||
for a, col in ((ax[1], "corr_x"), (ax[2], "corr_y")): # 1, 2 : chaque cible, en bruits, autour de sa médiane
|
||||
ecarts = {}
|
||||
for s, ms in cibles.items():
|
||||
v = [m[col] for m in ms if m[col] is not None]
|
||||
hist = [m[col] for m in mesures[s] if d - HISTORIQUE <= m["t"] < b and m[col] is not None]
|
||||
bruit = statistics.median(abs(y - x) for x, y in zip(hist, hist[1:])) if len(hist) > 2 else 0
|
||||
if not v or bruit <= 0: # bruit propre : médiane des écarts entre deux mesures, sur le jour et son historique
|
||||
continue
|
||||
med, pire = statistics.median(v), {}
|
||||
for m in ms:
|
||||
x = float("nan") if m[col] is None else (m[col] - med) / bruit
|
||||
if not abs(pire.get(case(m["t"]), float("nan"))) >= abs(x): # le plus grand ; NaN s'il n'y a rien
|
||||
pire[case(m["t"])] = x
|
||||
ecarts[s] = coupe([(centre(k), pire[k]) for k in sorted(pire)], ps[s])
|
||||
tous = sorted(abs(x) for v in ecarts.values() for _, x in v if x == x)
|
||||
lim = max(tous[int(0.99 * (len(tous) - 1))] * 1.2, 2 * CALME) if tous else 2 * CALME # ponytail: 99e centile
|
||||
bride = lambda x: max(-lim, min(lim, x)) # noqa: E731
|
||||
for s, v in ecarts.items():
|
||||
a.plot([t for t, _ in v], [bride(x) for _, x in v], lw=0.7)
|
||||
hors = sorted(((max(abs(x) for _, x in v if x == x), s) for s, v in ecarts.items()), reverse=True)
|
||||
for _, s in [(m, s) for m, s in hors if m > CALME][:5]: # le nom des cibles qui sortent le plus du calme
|
||||
t, x = max(((t, x) for t, x in ecarts[s] if x == x), key=lambda p: abs(p[1]))
|
||||
a.annotate(s, (t, bride(x)), fontsize=7)
|
||||
for y in (-CALME, CALME):
|
||||
a.axhline(y, color="0.4", ls=":", lw=0.8)
|
||||
a.set_ylim(-1.05 * lim, 1.05 * lim)
|
||||
a.set_ylabel(f"{col}, en bruits propres\n(écart à la médiane du jour ;\npointillé : ±{CALME}, le calme ;"
|
||||
f"\nécrêté à ±{lim:.0f})", fontsize=8)
|
||||
|
||||
par = {s: [m for m in mesures[s] if d <= m["t"] < b] for s in actifs} # 3 : rejets et manques par pas
|
||||
trous = {} # par capteur, ses trous plus longs qu'un pas et demi de sa cadence, en heures
|
||||
for s in actifs:
|
||||
hs = [0.0, *(heure(m["t"]) for m in par[s]), 24.0]
|
||||
trous[s] = [(u, v) for u, v in zip(hs, hs[1:]) if v - u > 1.5 * ps[s]]
|
||||
rej = [len({s for s in actifs for m in par[s] if case(m["t"]) == k and rejected(m)}) for k in cases]
|
||||
manq = [sum(1 for s in actifs if any(u < centre(k) < v for u, v in trous[s])) for k in cases]
|
||||
x = [centre(k) for k in cases]
|
||||
ax[3].bar(x, rej, width=PAS, color="tab:red", label="rejetées")
|
||||
ax[3].bar(x, manq, width=PAS, bottom=rej, color="0.6", label="manquantes")
|
||||
bords = [0.0, *(heure(t) for t in instants), 24.0]
|
||||
station_pas = cadence(instants)
|
||||
for x0, x1 in zip(bords, bords[1:]): # les trous : aucune mesure d'aucun capteur
|
||||
if x1 - x0 > 1.5 * station_pas:
|
||||
ax[3].axvspan(x0, x1, color="0.3", alpha=0.25, hatch="//")
|
||||
ax[3].set_ylim(0, max(len(actifs), 1))
|
||||
ax[3].set_ylabel("capteurs\nrejetés, manquants\n(hachuré : rien)", fontsize=8)
|
||||
ax[3].legend(fontsize=7, loc="upper right")
|
||||
|
||||
temp = [(heure(t), c) for t, c in temperature if d <= t < b] # 4 : température et error_value / seuil
|
||||
if temp:
|
||||
ax[4].plot(*zip(*temp), color="tab:red", lw=1)
|
||||
ax[4].set_ylabel("température\nboîtier [°C]", fontsize=8, color="tab:red")
|
||||
rapports = {}
|
||||
for s in actifs:
|
||||
for m in par[s]:
|
||||
if m["error_value"] is not None and m["error_threshold"]:
|
||||
rapports.setdefault(case(m["t"]), []).append(m["error_value"] / m["error_threshold"])
|
||||
a2 = ax[4].twinx()
|
||||
if rapports:
|
||||
a2.plot(*zip(*coupe([(centre(k), statistics.median(r)) for k, r in sorted(rapports.items())], station_pas)),
|
||||
color="tab:blue", lw=1)
|
||||
a2.axhline(1, color="tab:blue", ls=":", lw=0.8)
|
||||
a2.set_ylabel("error_value / seuil\n(médiane des capteurs)", fontsize=8, color="tab:blue")
|
||||
|
||||
ax[-1].set_xlim(0, 24)
|
||||
ax[-1].set_xticks(range(0, 25, 2), [f"{h:02d}:00" for h in range(0, 25, 2)])
|
||||
ax[-1].set_xticks(range(25), minor=True)
|
||||
for a in ax:
|
||||
a.grid(alpha=0.3, which="both")
|
||||
fig.tight_layout()
|
||||
fig.savefig(chemin, dpi=100)
|
||||
plt.close(fig)
|
||||
return len(cibles), len(jour) - len(cibles), round(statistics.median(natif)) if natif else 0, len(instants)
|
||||
|
||||
|
||||
def detecteurs(dossier, d, stations):
|
||||
"""L'étape 1, dans un dossier provisoire renommé à la fin : un batch interrompu ne passe pas pour fait."""
|
||||
tmp = dossier.with_name(dossier.name + ".tmp")
|
||||
shutil.rmtree(tmp, ignore_errors=True)
|
||||
for sous in ("detecteurs", "verite", "figures"):
|
||||
(tmp / sous).mkdir(parents=True)
|
||||
jour, resume, muettes = iso(d)[:10], [], []
|
||||
for station in stations:
|
||||
mesures = load(str(DONNEES / station))
|
||||
if not any(d - HISTORIQUE <= m["t"] < d + timedelta(days=1) for ms in mesures.values() for m in ms):
|
||||
muettes.append(station)
|
||||
continue
|
||||
labels = etiquettes(station, mesures, d)
|
||||
texte = "".join(json.dumps(e, ensure_ascii=False) + "\n" for e in labels)
|
||||
for sous in ("detecteurs", "verite"):
|
||||
(tmp / sous / f"{station}.jsonl").write_text(texte, encoding="utf-8")
|
||||
nc, nr, pas, n = figure(station, mesures, load_temperature(str(DONNEES / station)), labels, d,
|
||||
tmp / "figures" / f"{station}.png")
|
||||
resume += [f"## {station}", "", f"figures/{station}.png ; {nc} cibles, {nr} références ; une mesure toutes les "
|
||||
f"{pas} min, {n} instants mesurés.", "", *map(courte, labels),
|
||||
*([] if labels else ["- aucune étiquette"]), ""]
|
||||
print(f"{station} : {len(labels)} étiquettes", flush=True)
|
||||
entete = [f"# Les détecteurs, {jour} (UTC)", "",
|
||||
"Une section par station : sa figure, ses capteurs, puis les étiquettes des détecteurs (id court, heures, "
|
||||
"famille : variété, capteurs ; grisé : non montré au client). Le détail : verite/<STATION>.jsonl.", ""]
|
||||
fin = [f"Sans mesure du {iso(d - HISTORIQUE)[:10]} au {jour} : {', '.join(muettes)}.", ""] if muettes else []
|
||||
(tmp / "detecteurs.md").write_text("\n".join(entete + resume + fin), encoding="utf-8")
|
||||
tmp.rename(dossier)
|
||||
|
||||
|
||||
def scanner(dossier, jour):
|
||||
"""L'étape 2 : l'agent scanner par claude -p ; son flux dans scan.jsonl ; imprime sa réponse et son coût."""
|
||||
rel = dossier.relative_to(RACINE)
|
||||
demande = (f"Batch du {jour} (UTC) : {rel}/. Résumé des détecteurs : {rel}/detecteurs.md ; figures : "
|
||||
f"{rel}/figures/<STATION>.png ; vérité à corriger : {rel}/verite/<STATION>.jsonl ; images de la caméra : "
|
||||
f"data/<STATION>/images/. Écris {rel}/rapport.md.")
|
||||
print("Scan en cours (claude -p, agent scanner)…", flush=True)
|
||||
with open(dossier / "scan.jsonl", "w", encoding="utf-8") as flux:
|
||||
subprocess.run(["claude", "-p", demande, "--agent", "scanner", "--permission-mode", "acceptEdits",
|
||||
"--allowedTools", "Read,Write,Edit,Bash(ls:*)", "--output-format", "stream-json", "--verbose"],
|
||||
cwd=RACINE, stdout=flux, stderr=subprocess.STDOUT, text=True)
|
||||
lignes = [json.loads(l) for l in (dossier / "scan.jsonl").read_text(encoding="utf-8").splitlines()
|
||||
if l.startswith("{")]
|
||||
fin = next((l for l in reversed(lignes) if l.get("type") == "result"), None)
|
||||
if fin is None:
|
||||
print("Le scan n'a pas fini : voir scan.jsonl")
|
||||
return
|
||||
print(fin.get("result", ""))
|
||||
print(f"Coût : {fin.get('total_cost_usd', 0):.2f} $, {fin.get('num_turns')} tours, "
|
||||
f"{round(fin.get('duration_ms', 0) / 1000)} s")
|
||||
|
||||
|
||||
def lire(chemin):
|
||||
return [json.loads(l) for l in chemin.read_text(encoding="utf-8").splitlines() if l.strip()] if chemin.exists() else []
|
||||
|
||||
|
||||
def controler(dossier, d):
|
||||
"""La vérité après le scan : chaque ligne du JSON aux bonnes clés, une famille connue, des bornes dans le jour ; puis
|
||||
ce que le scanner a changé face aux détecteurs."""
|
||||
b, problemes, changes = d + timedelta(days=1), [], {}
|
||||
for p in sorted((dossier / "verite").glob("*.jsonl")):
|
||||
apres = {}
|
||||
for i, ligne in enumerate(p.read_text(encoding="utf-8").splitlines(), 1):
|
||||
if not ligne.strip():
|
||||
continue
|
||||
try:
|
||||
e = json.loads(ligne)
|
||||
assert not (manque := CLES - e.keys()), f"clés manquantes : {', '.join(sorted(manque))}"
|
||||
assert e["categorie"] in FAMILLES, f"famille inconnue : {e['categorie']}"
|
||||
assert d <= parse_time(e["debut"]) <= parse_time(e["fin"]) <= b, "bornes hors du jour ou inversées"
|
||||
apres[e["id"]] = e
|
||||
except (json.JSONDecodeError, AssertionError, ValueError) as x:
|
||||
problemes.append(f"{p.name}, ligne {i} : {x}")
|
||||
avant = {e["id"]: e for e in lire(dossier / "detecteurs" / p.name)}
|
||||
n = (len(apres.keys() - avant.keys()), len(avant.keys() - apres.keys()),
|
||||
sum(apres[k] != avant[k] for k in apres.keys() & avant.keys()))
|
||||
if any(n):
|
||||
changes[p.stem] = n
|
||||
for s, (a, r, m) in changes.items():
|
||||
print(f"{s} : {a} ajoutées, {r} retirées, {m} modifiées")
|
||||
print(f"Vérité : {len(changes) or 'aucune'} station(s) corrigée(s) ; "
|
||||
+ ("contrôle sans erreur" if not problemes else "erreurs :\n " + "\n ".join(problemes)))
|
||||
|
||||
|
||||
if __name__ == "__main__":
|
||||
p = argparse.ArgumentParser(usage=__doc__)
|
||||
p.add_argument("--jour", default=str((datetime.now(timezone.utc) - timedelta(days=1)).date()))
|
||||
p.add_argument("--stations", help="A,B : ces stations seulement (défaut : tous les dossiers de data/)")
|
||||
p.add_argument("--sans-scan", action="store_true", help="l'étape des détecteurs seule")
|
||||
a = p.parse_args()
|
||||
d = datetime.strptime(a.jour, "%Y-%m-%d").replace(tzinfo=timezone.utc)
|
||||
dossier = BATCHES / a.jour
|
||||
if dossier.exists():
|
||||
print(f"{dossier.relative_to(RACINE)}/ existe : l'étape des détecteurs est faite.")
|
||||
else:
|
||||
stations = a.stations.split(",") if a.stations else sorted(p.name for p in DONNEES.iterdir() if p.is_dir())
|
||||
detecteurs(dossier, d, stations)
|
||||
if a.sans_scan:
|
||||
sys.exit()
|
||||
if (dossier / "rapport.md").exists():
|
||||
print("rapport.md existe : le scan est fait.")
|
||||
else:
|
||||
scanner(dossier, a.jour)
|
||||
controler(dossier, d)
|
||||
@@ -0,0 +1,114 @@
|
||||
# Les détecteurs, 2026-11-12 (UTC)
|
||||
|
||||
Une section par station : sa figure, ses capteurs, puis les étiquettes des détecteurs (id court, heures, famille : variété, capteurs ; grisé : non montré au client). Le détail : verite/<STATION>.jsonl.
|
||||
|
||||
## BREITHORN
|
||||
|
||||
figures/BREITHORN.png ; 12 cibles, 4 références ; une mesure toutes les 240 min, 3 instants mesurés.
|
||||
|
||||
- D1 00:00 → 12:00 No data : No data, tous les capteurs
|
||||
- D2 20:00 → 20:00 Displacement : Jump, not back yet, COLH20'''
|
||||
- D3 20:00 → 20:00 Obstruction : Brief obstruction, COLH20''', COLI22, COLI24, POUI22, grisé
|
||||
|
||||
## CLARIDEN
|
||||
|
||||
figures/CLARIDEN.png ; 24 cibles, 5 références ; une mesure toutes les 10 min, 80 instants mesurés.
|
||||
|
||||
- D1 00:00 → 23:50 Obstruction : Target obscured, P-300-B, grisé
|
||||
- D2 00:00 → 10:40 No data : No data, tous les capteurs
|
||||
|
||||
## FLORIDA
|
||||
|
||||
figures/FLORIDA.png ; 6 cibles, 2 références ; une mesure toutes les 15 min, 53 instants mesurés.
|
||||
|
||||
- D1 00:00 → 10:45 No data : No data, tous les capteurs
|
||||
- D2 10:45 → 23:45 Visibility : Poor visibility, Pont Ernen, r1_r, Sellette 3, grisé
|
||||
- D3 11:00 → 11:00 Displacement : Jump, not back yet, Pont Ernen
|
||||
- D4 19:00 → 23:45 Visibility : Poor visibility, 7 capteurs
|
||||
|
||||
## JUNGFRAU
|
||||
|
||||
figures/JUNGFRAU.png ; 12 cibles, 3 références ; une mesure toutes les 15 min, 53 instants mesurés.
|
||||
|
||||
- D1 00:00 → 23:45 Obstruction : Target obscured, PM_G, grisé
|
||||
- D2 00:00 → 10:45 No data : No data, tous les capteurs
|
||||
- D3 08:00 → 13:00 Thermal displacement : Camera thermal expansion, 15 capteurs
|
||||
- D4 11:45 → 19:30 Visibility : Poor visibility, 10 capteurs
|
||||
- D5 13:00 → 23:45 Thermal displacement : Camera thermal contraction, 15 capteurs
|
||||
- D6 20:15 → 22:45 Displacement : Sudden jump, back to normal, PM_D
|
||||
|
||||
## LENZSPITZE
|
||||
|
||||
figures/LENZSPITZE.png ; 32 cibles, 9 références ; une mesure toutes les 5 min, 162 instants mesurés.
|
||||
|
||||
- D1 00:00 → 10:40 No data : No data, tous les capteurs
|
||||
- D2 09:00 → 23:00 Visibility : Heat shimmer, 39 capteurs, grisé
|
||||
- D3 10:40 → 10:40 Displacement : Jump, not back yet, 101B
|
||||
- D4 10:40 → 21:25 Visibility : Poor visibility, 22 capteurs
|
||||
- D5 11:55 → 11:55 Obstruction : Brief obstruction, 18 capteurs, grisé
|
||||
- D6 11:55 → 23:55 Thermal displacement : Camera thermal movement, 41 capteurs
|
||||
- D7 22:20 → 22:20 Obstruction : Brief obstruction, 8014, grisé
|
||||
|
||||
## MICHIGAN
|
||||
|
||||
figures/MICHIGAN.png ; 14 cibles, 3 références ; une mesure toutes les 240 min, 3 instants mesurés.
|
||||
|
||||
- D1 00:00 → 12:00 No data : No data, tous les capteurs
|
||||
|
||||
## NADELHORN
|
||||
|
||||
figures/NADELHORN.png ; 26 cibles, 9 références ; une mesure toutes les 5 min, 213 instants mesurés.
|
||||
|
||||
- D1 00:00 → 10:40 No data : No data, tous les capteurs
|
||||
- D2 09:00 → 13:00 Thermal displacement : Camera thermal expansion, 35 capteurs
|
||||
- D3 10:40 → 22:40 Displacement : Jump, not back yet, 9 capteurs
|
||||
- D4 10:40 → 23:35 Displacement : Sudden jump, back to normal, c10_mon, c9_mon, c6_mon, c7_mon, c4_mon, c8_mon
|
||||
- D5 10:45 → 23:45 Obstruction : Brief obstruction, m_c10_mon, m_c11_mon, m_c9_mon, m_ref4_mon, m_c12_mon, m_c5_mon, grisé
|
||||
- D6 12:50 → 23:55 Obstruction : Target obscured, c12_mon, grisé
|
||||
- D7 13:00 → 23:55 Thermal displacement : Camera thermal contraction, 35 capteurs
|
||||
|
||||
## NEBRASKA
|
||||
|
||||
figures/NEBRASKA.png ; 12 cibles, 3 références ; une mesure toutes les 240 min, 3 instants mesurés.
|
||||
|
||||
- D1 00:00 → 12:00 No data : No data, tous les capteurs
|
||||
- D2 12:00 → 20:00 Obstruction : Target obscured, COLH21, grisé
|
||||
|
||||
## NORDEND
|
||||
|
||||
figures/NORDEND.png ; 19 cibles, 3 références ; une mesure toutes les 15 min, 54 instants mesurés.
|
||||
|
||||
- D1 00:00 → 23:45 Obstruction : Target obscured, CTR01, grisé
|
||||
- D2 00:00 → 10:30 No data : No data, tous les capteurs
|
||||
- D3 08:00 → 13:00 Thermal displacement : Camera thermal expansion, 22 capteurs
|
||||
- D4 10:30 → 11:15 Visibility : Poor visibility, PR01, PR09, PR15, PR18, PR06, PR08
|
||||
- D5 12:00 → 13:30 Obstruction : Target obscured, PR09, PR15, PR18, grisé
|
||||
- D6 13:00 → 23:45 Thermal displacement : Camera thermal contraction, 22 capteurs
|
||||
- D7 14:45 → 15:30 Obstruction : Target obscured, PR07, grisé
|
||||
- D8 17:45 → 23:00 Obstruction : Target obscured, PR09, PR15, PR18, grisé
|
||||
|
||||
## SNCF01
|
||||
|
||||
figures/SNCF01.png ; 24 cibles, 3 références ; une mesure toutes les 15 min, 53 instants mesurés.
|
||||
|
||||
- D1 00:00 → 10:45 No data : No data, tous les capteurs
|
||||
- D2 11:45 → 13:30 Obstruction : Target obscured, CV.2, CV.4, grisé
|
||||
|
||||
## SUSTENHORN
|
||||
|
||||
figures/SUSTENHORN.png ; 18 cibles, 4 références ; une mesure toutes les 1 min, 159 instants mesurés.
|
||||
|
||||
- D1 00:00 → 00:00 No data : No data, tous les capteurs
|
||||
- D2 00:00 → 04:00 Thermal displacement : Thermal expansion, 17 capteurs
|
||||
- D3 04:00 → 07:00 Thermal displacement : Thermal contraction, 17 capteurs
|
||||
- D4 10:47 → 11:02 Obstruction : Brief obstruction, 11 capteurs, grisé
|
||||
- D5 12:02 → 12:16 Obstruction : Brief obstruction, 11 capteurs, grisé
|
||||
- D6 12:30 → 13:32 Visibility : Poor visibility, 11 capteurs, grisé
|
||||
- D7 12:30 → 13:32 Visibility : Poor visibility, 11 capteurs
|
||||
- D8 15:17 → 17:30 Obstruction : Brief obstruction, 22 capteurs, grisé
|
||||
- D9 18:00 → 18:32 Visibility : Poor visibility, 11 capteurs, grisé
|
||||
- D10 18:00 → 18:32 Visibility : Poor visibility, 12 capteurs
|
||||
- D11 19:30 → 21:31 Obstruction : Brief obstruction, 11 capteurs, grisé
|
||||
- D12 23:01 → 23:01 Obstruction : Brief obstruction, 11 capteurs, grisé
|
||||
|
||||
Sans mesure du 2026-11-09 au 2026-11-12 : NIEDERHORN, WILDSTRUBEL.
|
||||
@@ -0,0 +1,3 @@
|
||||
{"id": "BREITHORN-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T12:00Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 36 h 00 min (usually one every 4 h 00 min)."}
|
||||
{"id": "BREITHORN-2026-11-12-D2", "debut": "2026-11-12T20:00Z", "fin": "2026-11-12T20:00Z", "categorie": "Displacement", "description": "Détecteurs : Jump, not back yet, COLH20'''. One target shifted and has not come back yet. Check whether the structure moved: look at the images."}
|
||||
{"id": "BREITHORN-2026-11-12-D3", "debut": "2026-11-12T20:00Z", "fin": "2026-11-12T20:00Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, COLH20''', COLI22, COLI24, POUI22, grisé. Something passed in front of 4 targets for a single measurement. Ignore this point on the curves."}
|
||||
@@ -0,0 +1,2 @@
|
||||
{"id": "CLARIDEN-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T23:50Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, P-300-B, grisé. P-300-B was hidden several times while the targets around it stayed clear. Ignore its curve in this period."}
|
||||
{"id": "CLARIDEN-2026-11-12-D2", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T10:40Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 34 h 10 min (usually one every 10 min)."}
|
||||
@@ -0,0 +1,4 @@
|
||||
{"id": "FLORIDA-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T10:45Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 34 h 15 min (usually one every 15 min)."}
|
||||
{"id": "FLORIDA-2026-11-12-D2", "debut": "2026-11-12T10:45Z", "fin": "2026-11-12T23:45Z", "categorie": "Visibility", "description": "Détecteurs : Poor visibility, Pont Ernen, r1_r, Sellette 3, grisé. The camera could not see 3 targets clearly, including the reference targets. The curves in this period are not reliable: ignore them. The jump of one target in this period has the same cause."}
|
||||
{"id": "FLORIDA-2026-11-12-D3", "debut": "2026-11-12T11:00Z", "fin": "2026-11-12T11:00Z", "categorie": "Displacement", "description": "Détecteurs : Jump, not back yet, Pont Ernen. One target shifted and has not come back yet. Check whether the structure moved: look at the images."}
|
||||
{"id": "FLORIDA-2026-11-12-D4", "debut": "2026-11-12T19:00Z", "fin": "2026-11-12T23:45Z", "categorie": "Visibility", "description": "Détecteurs : Poor visibility, 7 capteurs. The camera saw 7 targets less clearly than usual, including the reference targets. The data in this period are less precise: use them with care."}
|
||||
@@ -0,0 +1,6 @@
|
||||
{"id": "JUNGFRAU-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T23:45Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, PM_G, grisé. PM_G was hidden several times while the targets around it stayed clear. Ignore its curve in this period."}
|
||||
{"id": "JUNGFRAU-2026-11-12-D2", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T10:45Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 34 h 30 min (usually one every 15 min)."}
|
||||
{"id": "JUNGFRAU-2026-11-12-D3", "debut": "2026-11-12T08:00Z", "fin": "2026-11-12T13:00Z", "categorie": "Thermal displacement", "description": "Détecteurs : Camera thermal expansion, 15 capteurs. The camera support expands in the day heat; the curves are corrected for it. This daily wave is normal: nothing to do. The jump of 5 targets in this period has the same cause."}
|
||||
{"id": "JUNGFRAU-2026-11-12-D4", "debut": "2026-11-12T11:45Z", "fin": "2026-11-12T19:30Z", "categorie": "Visibility", "description": "Détecteurs : Poor visibility, 10 capteurs. The camera saw 10 targets less clearly than usual, including the reference targets. The data in this period are less precise: use them with care. The jump of 3 targets in this period has the same cause."}
|
||||
{"id": "JUNGFRAU-2026-11-12-D5", "debut": "2026-11-12T13:00Z", "fin": "2026-11-12T23:45Z", "categorie": "Thermal displacement", "description": "Détecteurs : Camera thermal contraction, 15 capteurs. The camera support contracts as it cools down; the curves are corrected for it. This daily wave is normal: nothing to do."}
|
||||
{"id": "JUNGFRAU-2026-11-12-D6", "debut": "2026-11-12T20:15Z", "fin": "2026-11-12T22:45Z", "categorie": "Displacement", "description": "Détecteurs : Sudden jump, back to normal, PM_D. One target jumped and came back. The cause is not established: look at the images."}
|
||||
@@ -0,0 +1,7 @@
|
||||
{"id": "LENZSPITZE-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T10:40Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 34 h 10 min (usually one every 5 min)."}
|
||||
{"id": "LENZSPITZE-2026-11-12-D2", "debut": "2026-11-12T09:00Z", "fin": "2026-11-12T23:00Z", "categorie": "Visibility", "description": "Détecteurs : Heat shimmer, 39 capteurs, grisé. Warm air made the readings shake. The small fast wiggles are not movement. The jumps of 31 targets in this period have the same cause."}
|
||||
{"id": "LENZSPITZE-2026-11-12-D3", "debut": "2026-11-12T10:40Z", "fin": "2026-11-12T10:40Z", "categorie": "Displacement", "description": "Détecteurs : Jump, not back yet, 101B. One target shifted and has not come back yet. Check whether the structure moved: look at the images."}
|
||||
{"id": "LENZSPITZE-2026-11-12-D4", "debut": "2026-11-12T10:40Z", "fin": "2026-11-12T21:25Z", "categorie": "Visibility", "description": "Détecteurs : Poor visibility, 22 capteurs. The camera saw 22 targets less clearly than usual, including the reference targets. The data in this period are less precise: use them with care."}
|
||||
{"id": "LENZSPITZE-2026-11-12-D5", "debut": "2026-11-12T11:55Z", "fin": "2026-11-12T11:55Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, 18 capteurs, grisé. Something passed in front of 18 targets for a single measurement. Ignore this point on the curves."}
|
||||
{"id": "LENZSPITZE-2026-11-12-D6", "debut": "2026-11-12T11:55Z", "fin": "2026-11-12T23:55Z", "categorie": "Thermal displacement", "description": "Détecteurs : Camera thermal movement, 41 capteurs. The camera moved with a change of temperature and all the curves moved with it; this is not a movement of the structure, nothing to do."}
|
||||
{"id": "LENZSPITZE-2026-11-12-D7", "debut": "2026-11-12T22:20Z", "fin": "2026-11-12T22:20Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, 8014, grisé. Something passed in front of one target for a single measurement. Ignore this point on the curves."}
|
||||
@@ -0,0 +1 @@
|
||||
{"id": "MICHIGAN-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T12:00Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 36 h 00 min (usually one every 4 h 00 min)."}
|
||||
@@ -0,0 +1,7 @@
|
||||
{"id": "NADELHORN-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T10:40Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 34 h 10 min (usually one every 5 min)."}
|
||||
{"id": "NADELHORN-2026-11-12-D2", "debut": "2026-11-12T09:00Z", "fin": "2026-11-12T13:00Z", "categorie": "Thermal displacement", "description": "Détecteurs : Camera thermal expansion, 35 capteurs. The camera support expands in the day heat; the curves are corrected for it. This daily wave is normal: nothing to do."}
|
||||
{"id": "NADELHORN-2026-11-12-D3", "debut": "2026-11-12T10:40Z", "fin": "2026-11-12T22:40Z", "categorie": "Displacement", "description": "Détecteurs : Jump, not back yet, 9 capteurs. 9 targets shifted and have not come back yet. Check whether the structure moved: look at the images."}
|
||||
{"id": "NADELHORN-2026-11-12-D4", "debut": "2026-11-12T10:40Z", "fin": "2026-11-12T23:35Z", "categorie": "Displacement", "description": "Détecteurs : Sudden jump, back to normal, c10_mon, c9_mon, c6_mon, c7_mon, c4_mon, c8_mon. 6 targets jumped and came back. The cause is not established: look at the images. The jumps of 5 targets in this period have the same cause."}
|
||||
{"id": "NADELHORN-2026-11-12-D5", "debut": "2026-11-12T10:45Z", "fin": "2026-11-12T23:45Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, m_c10_mon, m_c11_mon, m_c9_mon, m_ref4_mon, m_c12_mon, m_c5_mon, grisé. Something passed in front of 6 targets for a single measurement. Ignore this point on the curves."}
|
||||
{"id": "NADELHORN-2026-11-12-D6", "debut": "2026-11-12T12:50Z", "fin": "2026-11-12T23:55Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, c12_mon, grisé. c12_mon was hidden several times while the targets around it stayed clear. Ignore its curve in this period."}
|
||||
{"id": "NADELHORN-2026-11-12-D7", "debut": "2026-11-12T13:00Z", "fin": "2026-11-12T23:55Z", "categorie": "Thermal displacement", "description": "Détecteurs : Camera thermal contraction, 35 capteurs. The camera support contracts as it cools down; the curves are corrected for it. This daily wave is normal: nothing to do."}
|
||||
@@ -0,0 +1,2 @@
|
||||
{"id": "NEBRASKA-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T12:00Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 36 h 00 min (usually one every 4 h 00 min)."}
|
||||
{"id": "NEBRASKA-2026-11-12-D2", "debut": "2026-11-12T12:00Z", "fin": "2026-11-12T20:00Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, COLH21, grisé. COLH21 was hidden several times while the targets around it stayed clear. Ignore its curve in this period."}
|
||||
@@ -0,0 +1,8 @@
|
||||
{"id": "NORDEND-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T23:45Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, CTR01, grisé. CTR01 was hidden several times while the targets around it stayed clear. Ignore its curve in this period."}
|
||||
{"id": "NORDEND-2026-11-12-D2", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T10:30Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 34 h 15 min (usually one every 15 min)."}
|
||||
{"id": "NORDEND-2026-11-12-D3", "debut": "2026-11-12T08:00Z", "fin": "2026-11-12T13:00Z", "categorie": "Thermal displacement", "description": "Détecteurs : Camera thermal expansion, 22 capteurs. The camera support expands in the day heat; the curves are corrected for it. This daily wave is normal: nothing to do."}
|
||||
{"id": "NORDEND-2026-11-12-D4", "debut": "2026-11-12T10:30Z", "fin": "2026-11-12T11:15Z", "categorie": "Visibility", "description": "Détecteurs : Poor visibility, PR01, PR09, PR15, PR18, PR06, PR08. The camera saw 6 targets less clearly than usual. The data in this period are less precise: use them with care. The jump of 4 targets in this period has the same cause."}
|
||||
{"id": "NORDEND-2026-11-12-D5", "debut": "2026-11-12T12:00Z", "fin": "2026-11-12T13:30Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, PR09, PR15, PR18, grisé. PR09, PR15, PR18 were hidden several times while the targets around them stayed clear. Ignore their curves in this period."}
|
||||
{"id": "NORDEND-2026-11-12-D6", "debut": "2026-11-12T13:00Z", "fin": "2026-11-12T23:45Z", "categorie": "Thermal displacement", "description": "Détecteurs : Camera thermal contraction, 22 capteurs. The camera support contracts as it cools down; the curves are corrected for it. This daily wave is normal: nothing to do."}
|
||||
{"id": "NORDEND-2026-11-12-D7", "debut": "2026-11-12T14:45Z", "fin": "2026-11-12T15:30Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, PR07, grisé. PR07 was hidden several times while the targets around it stayed clear. Ignore its curve in this period."}
|
||||
{"id": "NORDEND-2026-11-12-D8", "debut": "2026-11-12T17:45Z", "fin": "2026-11-12T23:00Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, PR09, PR15, PR18, grisé. PR09, PR15, PR18 were hidden several times while the targets around them stayed clear. Ignore their curves in this period."}
|
||||
@@ -0,0 +1,2 @@
|
||||
{"id": "SNCF01-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T10:45Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 1 h 45 min (usually one every 15 min)."}
|
||||
{"id": "SNCF01-2026-11-12-D2", "debut": "2026-11-12T11:45Z", "fin": "2026-11-12T13:30Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, CV.2, CV.4, grisé. CV.2, CV.4 were hidden several times while the targets around them stayed clear. Ignore their curves in this period."}
|
||||
@@ -0,0 +1,12 @@
|
||||
{"id": "SUSTENHORN-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-13T00:00Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 13 min (usually one every 1 min)."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D2", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T04:00Z", "categorie": "Thermal displacement", "description": "Détecteurs : Thermal expansion, 17 capteurs. The structure expands in the day heat. This daily wave is normal: nothing to do."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D3", "debut": "2026-11-12T04:00Z", "fin": "2026-11-12T07:00Z", "categorie": "Thermal displacement", "description": "Détecteurs : Thermal contraction, 17 capteurs. The structure contracts as it cools down. This daily wave is normal: nothing to do."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D4", "debut": "2026-11-12T10:47Z", "fin": "2026-11-12T11:02Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, 11 capteurs, grisé. Something passed in front of 11 targets for a single measurement. Ignore this point on the curves."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D5", "debut": "2026-11-12T12:02Z", "fin": "2026-11-12T12:16Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, 11 capteurs, grisé. Something passed in front of 11 targets for a single measurement. Ignore this point on the curves."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D6", "debut": "2026-11-12T12:30Z", "fin": "2026-11-12T13:32Z", "categorie": "Visibility", "description": "Détecteurs : Poor visibility, 11 capteurs, grisé. The camera could not see 11 targets clearly. The curves in this period are not reliable: ignore them."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D7", "debut": "2026-11-12T12:30Z", "fin": "2026-11-12T13:32Z", "categorie": "Visibility", "description": "Détecteurs : Poor visibility, 11 capteurs. The camera saw 11 targets less clearly than usual. The data in this period are less precise: use them with care."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D8", "debut": "2026-11-12T15:17Z", "fin": "2026-11-12T17:30Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, 22 capteurs, grisé. Something passed in front of 22 targets for a single measurement. Ignore this point on the curves."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D9", "debut": "2026-11-12T18:00Z", "fin": "2026-11-12T18:32Z", "categorie": "Visibility", "description": "Détecteurs : Poor visibility, 11 capteurs, grisé. The camera could not see 11 targets clearly. The curves in this period are not reliable: ignore them."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D10", "debut": "2026-11-12T18:00Z", "fin": "2026-11-12T18:32Z", "categorie": "Visibility", "description": "Détecteurs : Poor visibility, 12 capteurs. The camera saw 12 targets less clearly than usual. The data in this period are less precise: use them with care."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D11", "debut": "2026-11-12T19:30Z", "fin": "2026-11-12T21:31Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, 11 capteurs, grisé. Something passed in front of 11 targets for a single measurement. Ignore this point on the curves."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D12", "debut": "2026-11-12T23:01Z", "fin": "2026-11-12T23:01Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, 11 capteurs, grisé. Something passed in front of 11 targets for a single measurement. Ignore this point on the curves."}
|
||||
@@ -0,0 +1,31 @@
|
||||
# Scan du 2026-11-12
|
||||
|
||||
**Verdict**: irrégularités
|
||||
|
||||
## Irrégularités
|
||||
|
||||
| Station | Étiquette | Cas | Heures (UTC) | Ce que montre la figure | Correction |
|
||||
|---|---|---|---|---|---|
|
||||
| SUSTENHORN | D1 No data | bornes | 00:00 → 24:00 | mesures présentes dès 10:47 (courbes, rejets) | fin ramenée à 10:45 |
|
||||
| SUSTENHORN | D6 Visibility (grisé) | trop | 12:30 → 13:32 | doublon exact de D7 (même famille, mêmes heures) | ligne retirée |
|
||||
| SUSTENHORN | D9 Visibility (grisé) | trop | 18:00 → 18:32 | doublon exact de D10 | ligne retirée |
|
||||
|
||||
## Doutes, non corrigés
|
||||
|
||||
- LENZSPITZE, 09:00–23:00 : D2 Visibility (grisé) recouvre D4 Visibility (10:40–21:25) ; D2 commence aussi à 09:00, avant toute mesure. Variétés différentes, non tranché.
|
||||
- FLORIDA, 19:00–23:45 : D4 Visibility recouvre D2 (10:45–23:45) avec plus de capteurs (8/8 rejetés dès 19:00). Possible doublon, non sûr. D3 (saut 11:00) : courbes écrêtées, rien de net.
|
||||
- NADELHORN : D3/D4 (Displacement) et D5/D6 (Obstruction) se recouvrent presque entièrement, capteurs différents ; non tranché.
|
||||
- NORDEND : D1 Obstruction couvre tout le jour et recouvre D5, D7, D8 ; capteurs différents, non tranché.
|
||||
- JUNGFRAU : D4 Visibility 11:45–19:30 alors que l'error_value ne monte pas (≈0,8) ; D6 Displacement sur PM_D : courbe écrêtée (rejetée) 20:15–22:45, ressemble à un rejet plutôt qu'à un saut.
|
||||
- CLARIDEN, ~19:00 : bref écart à ±5–6 de quelques cibles, à peine hors du calme. D1 (P-300-B rejetée toute la journée) pourrait être une Target issue : non vérifiable sur un seul jour.
|
||||
- SNCF01 : P3 (écrêtée depuis 10:45) et une autre cible (21:15 → fin) restent rejetées une grande partie du jour, sans étiquette ; probablement Target issue, à établir sur plusieurs jours. Bruit plus fort 10:45–14:00.
|
||||
- BREITHORN, 20:00 : D2 Displacement et D3 Obstruction sur les mêmes cibles, un seul instant à pas de 4 h ; famille indécidable.
|
||||
- NEBRASKA, D2 Obstruction : COLH21 calme, mais un capteur rejeté à chaque mesure ; laissé.
|
||||
|
||||
## Stations sans remarque
|
||||
|
||||
MICHIGAN. (Trou jusqu'à ~10:45 ou 12:00 sur presque toutes les stations : cause commune, No data reste juste.)
|
||||
|
||||
## Ce qui a manqué
|
||||
|
||||
Les pas de 4 h (BREITHORN, MICHIGAN, NEBRASKA) ne permettent pas de juger les bornes. Les familles se recoupent sans règle claire sur les étiquettes de même famille aux capteurs différents. Aucune image de caméra regardée.
|
||||
@@ -0,0 +1,3 @@
|
||||
{"id": "BREITHORN-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T12:00Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 36 h 00 min (usually one every 4 h 00 min)."}
|
||||
{"id": "BREITHORN-2026-11-12-D2", "debut": "2026-11-12T20:00Z", "fin": "2026-11-12T20:00Z", "categorie": "Displacement", "description": "Détecteurs : Jump, not back yet, COLH20'''. One target shifted and has not come back yet. Check whether the structure moved: look at the images."}
|
||||
{"id": "BREITHORN-2026-11-12-D3", "debut": "2026-11-12T20:00Z", "fin": "2026-11-12T20:00Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, COLH20''', COLI22, COLI24, POUI22, grisé. Something passed in front of 4 targets for a single measurement. Ignore this point on the curves."}
|
||||
@@ -0,0 +1,2 @@
|
||||
{"id": "CLARIDEN-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T23:50Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, P-300-B, grisé. P-300-B was hidden several times while the targets around it stayed clear. Ignore its curve in this period."}
|
||||
{"id": "CLARIDEN-2026-11-12-D2", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T10:40Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 34 h 10 min (usually one every 10 min)."}
|
||||
@@ -0,0 +1,4 @@
|
||||
{"id": "FLORIDA-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T10:45Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 34 h 15 min (usually one every 15 min)."}
|
||||
{"id": "FLORIDA-2026-11-12-D2", "debut": "2026-11-12T10:45Z", "fin": "2026-11-12T23:45Z", "categorie": "Visibility", "description": "Détecteurs : Poor visibility, Pont Ernen, r1_r, Sellette 3, grisé. The camera could not see 3 targets clearly, including the reference targets. The curves in this period are not reliable: ignore them. The jump of one target in this period has the same cause."}
|
||||
{"id": "FLORIDA-2026-11-12-D3", "debut": "2026-11-12T11:00Z", "fin": "2026-11-12T11:00Z", "categorie": "Displacement", "description": "Détecteurs : Jump, not back yet, Pont Ernen. One target shifted and has not come back yet. Check whether the structure moved: look at the images."}
|
||||
{"id": "FLORIDA-2026-11-12-D4", "debut": "2026-11-12T19:00Z", "fin": "2026-11-12T23:45Z", "categorie": "Visibility", "description": "Détecteurs : Poor visibility, 7 capteurs. The camera saw 7 targets less clearly than usual, including the reference targets. The data in this period are less precise: use them with care."}
|
||||
@@ -0,0 +1,6 @@
|
||||
{"id": "JUNGFRAU-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T23:45Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, PM_G, grisé. PM_G was hidden several times while the targets around it stayed clear. Ignore its curve in this period."}
|
||||
{"id": "JUNGFRAU-2026-11-12-D2", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T10:45Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 34 h 30 min (usually one every 15 min)."}
|
||||
{"id": "JUNGFRAU-2026-11-12-D3", "debut": "2026-11-12T08:00Z", "fin": "2026-11-12T13:00Z", "categorie": "Thermal displacement", "description": "Détecteurs : Camera thermal expansion, 15 capteurs. The camera support expands in the day heat; the curves are corrected for it. This daily wave is normal: nothing to do. The jump of 5 targets in this period has the same cause."}
|
||||
{"id": "JUNGFRAU-2026-11-12-D4", "debut": "2026-11-12T11:45Z", "fin": "2026-11-12T19:30Z", "categorie": "Visibility", "description": "Détecteurs : Poor visibility, 10 capteurs. The camera saw 10 targets less clearly than usual, including the reference targets. The data in this period are less precise: use them with care. The jump of 3 targets in this period has the same cause."}
|
||||
{"id": "JUNGFRAU-2026-11-12-D5", "debut": "2026-11-12T13:00Z", "fin": "2026-11-12T23:45Z", "categorie": "Thermal displacement", "description": "Détecteurs : Camera thermal contraction, 15 capteurs. The camera support contracts as it cools down; the curves are corrected for it. This daily wave is normal: nothing to do."}
|
||||
{"id": "JUNGFRAU-2026-11-12-D6", "debut": "2026-11-12T20:15Z", "fin": "2026-11-12T22:45Z", "categorie": "Displacement", "description": "Détecteurs : Sudden jump, back to normal, PM_D. One target jumped and came back. The cause is not established: look at the images."}
|
||||
@@ -0,0 +1,7 @@
|
||||
{"id": "LENZSPITZE-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T10:40Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 34 h 10 min (usually one every 5 min)."}
|
||||
{"id": "LENZSPITZE-2026-11-12-D2", "debut": "2026-11-12T09:00Z", "fin": "2026-11-12T23:00Z", "categorie": "Visibility", "description": "Détecteurs : Heat shimmer, 39 capteurs, grisé. Warm air made the readings shake. The small fast wiggles are not movement. The jumps of 31 targets in this period have the same cause."}
|
||||
{"id": "LENZSPITZE-2026-11-12-D3", "debut": "2026-11-12T10:40Z", "fin": "2026-11-12T10:40Z", "categorie": "Displacement", "description": "Détecteurs : Jump, not back yet, 101B. One target shifted and has not come back yet. Check whether the structure moved: look at the images."}
|
||||
{"id": "LENZSPITZE-2026-11-12-D4", "debut": "2026-11-12T10:40Z", "fin": "2026-11-12T21:25Z", "categorie": "Visibility", "description": "Détecteurs : Poor visibility, 22 capteurs. The camera saw 22 targets less clearly than usual, including the reference targets. The data in this period are less precise: use them with care."}
|
||||
{"id": "LENZSPITZE-2026-11-12-D5", "debut": "2026-11-12T11:55Z", "fin": "2026-11-12T11:55Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, 18 capteurs, grisé. Something passed in front of 18 targets for a single measurement. Ignore this point on the curves."}
|
||||
{"id": "LENZSPITZE-2026-11-12-D6", "debut": "2026-11-12T11:55Z", "fin": "2026-11-12T23:55Z", "categorie": "Thermal displacement", "description": "Détecteurs : Camera thermal movement, 41 capteurs. The camera moved with a change of temperature and all the curves moved with it; this is not a movement of the structure, nothing to do."}
|
||||
{"id": "LENZSPITZE-2026-11-12-D7", "debut": "2026-11-12T22:20Z", "fin": "2026-11-12T22:20Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, 8014, grisé. Something passed in front of one target for a single measurement. Ignore this point on the curves."}
|
||||
@@ -0,0 +1 @@
|
||||
{"id": "MICHIGAN-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T12:00Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 36 h 00 min (usually one every 4 h 00 min)."}
|
||||
@@ -0,0 +1,7 @@
|
||||
{"id": "NADELHORN-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T10:40Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 34 h 10 min (usually one every 5 min)."}
|
||||
{"id": "NADELHORN-2026-11-12-D2", "debut": "2026-11-12T09:00Z", "fin": "2026-11-12T13:00Z", "categorie": "Thermal displacement", "description": "Détecteurs : Camera thermal expansion, 35 capteurs. The camera support expands in the day heat; the curves are corrected for it. This daily wave is normal: nothing to do."}
|
||||
{"id": "NADELHORN-2026-11-12-D3", "debut": "2026-11-12T10:40Z", "fin": "2026-11-12T22:40Z", "categorie": "Displacement", "description": "Détecteurs : Jump, not back yet, 9 capteurs. 9 targets shifted and have not come back yet. Check whether the structure moved: look at the images."}
|
||||
{"id": "NADELHORN-2026-11-12-D4", "debut": "2026-11-12T10:40Z", "fin": "2026-11-12T23:35Z", "categorie": "Displacement", "description": "Détecteurs : Sudden jump, back to normal, c10_mon, c9_mon, c6_mon, c7_mon, c4_mon, c8_mon. 6 targets jumped and came back. The cause is not established: look at the images. The jumps of 5 targets in this period have the same cause."}
|
||||
{"id": "NADELHORN-2026-11-12-D5", "debut": "2026-11-12T10:45Z", "fin": "2026-11-12T23:45Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, m_c10_mon, m_c11_mon, m_c9_mon, m_ref4_mon, m_c12_mon, m_c5_mon, grisé. Something passed in front of 6 targets for a single measurement. Ignore this point on the curves."}
|
||||
{"id": "NADELHORN-2026-11-12-D6", "debut": "2026-11-12T12:50Z", "fin": "2026-11-12T23:55Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, c12_mon, grisé. c12_mon was hidden several times while the targets around it stayed clear. Ignore its curve in this period."}
|
||||
{"id": "NADELHORN-2026-11-12-D7", "debut": "2026-11-12T13:00Z", "fin": "2026-11-12T23:55Z", "categorie": "Thermal displacement", "description": "Détecteurs : Camera thermal contraction, 35 capteurs. The camera support contracts as it cools down; the curves are corrected for it. This daily wave is normal: nothing to do."}
|
||||
@@ -0,0 +1,2 @@
|
||||
{"id": "NEBRASKA-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T12:00Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 36 h 00 min (usually one every 4 h 00 min)."}
|
||||
{"id": "NEBRASKA-2026-11-12-D2", "debut": "2026-11-12T12:00Z", "fin": "2026-11-12T20:00Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, COLH21, grisé. COLH21 was hidden several times while the targets around it stayed clear. Ignore its curve in this period."}
|
||||
@@ -0,0 +1,8 @@
|
||||
{"id": "NORDEND-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T23:45Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, CTR01, grisé. CTR01 was hidden several times while the targets around it stayed clear. Ignore its curve in this period."}
|
||||
{"id": "NORDEND-2026-11-12-D2", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T10:30Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 34 h 15 min (usually one every 15 min)."}
|
||||
{"id": "NORDEND-2026-11-12-D3", "debut": "2026-11-12T08:00Z", "fin": "2026-11-12T13:00Z", "categorie": "Thermal displacement", "description": "Détecteurs : Camera thermal expansion, 22 capteurs. The camera support expands in the day heat; the curves are corrected for it. This daily wave is normal: nothing to do."}
|
||||
{"id": "NORDEND-2026-11-12-D4", "debut": "2026-11-12T10:30Z", "fin": "2026-11-12T11:15Z", "categorie": "Visibility", "description": "Détecteurs : Poor visibility, PR01, PR09, PR15, PR18, PR06, PR08. The camera saw 6 targets less clearly than usual. The data in this period are less precise: use them with care. The jump of 4 targets in this period has the same cause."}
|
||||
{"id": "NORDEND-2026-11-12-D5", "debut": "2026-11-12T12:00Z", "fin": "2026-11-12T13:30Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, PR09, PR15, PR18, grisé. PR09, PR15, PR18 were hidden several times while the targets around them stayed clear. Ignore their curves in this period."}
|
||||
{"id": "NORDEND-2026-11-12-D6", "debut": "2026-11-12T13:00Z", "fin": "2026-11-12T23:45Z", "categorie": "Thermal displacement", "description": "Détecteurs : Camera thermal contraction, 22 capteurs. The camera support contracts as it cools down; the curves are corrected for it. This daily wave is normal: nothing to do."}
|
||||
{"id": "NORDEND-2026-11-12-D7", "debut": "2026-11-12T14:45Z", "fin": "2026-11-12T15:30Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, PR07, grisé. PR07 was hidden several times while the targets around it stayed clear. Ignore its curve in this period."}
|
||||
{"id": "NORDEND-2026-11-12-D8", "debut": "2026-11-12T17:45Z", "fin": "2026-11-12T23:00Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, PR09, PR15, PR18, grisé. PR09, PR15, PR18 were hidden several times while the targets around them stayed clear. Ignore their curves in this period."}
|
||||
@@ -0,0 +1,2 @@
|
||||
{"id": "SNCF01-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T10:45Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 1 h 45 min (usually one every 15 min)."}
|
||||
{"id": "SNCF01-2026-11-12-D2", "debut": "2026-11-12T11:45Z", "fin": "2026-11-12T13:30Z", "categorie": "Obstruction", "description": "Détecteurs : Target obscured, CV.2, CV.4, grisé. CV.2, CV.4 were hidden several times while the targets around them stayed clear. Ignore their curves in this period."}
|
||||
@@ -0,0 +1,10 @@
|
||||
{"id": "SUSTENHORN-2026-11-12-D1", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T10:45Z", "categorie": "No data", "description": "Détecteurs : No data, tous les capteurs. No measurement in the export for 13 min (usually one every 1 min). Scanner : les mesures sont là dès 10:47, la fin passe de 24:00 à 10:45."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D2", "debut": "2026-11-12T00:00Z", "fin": "2026-11-12T04:00Z", "categorie": "Thermal displacement", "description": "Détecteurs : Thermal expansion, 17 capteurs. The structure expands in the day heat. This daily wave is normal: nothing to do."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D3", "debut": "2026-11-12T04:00Z", "fin": "2026-11-12T07:00Z", "categorie": "Thermal displacement", "description": "Détecteurs : Thermal contraction, 17 capteurs. The structure contracts as it cools down. This daily wave is normal: nothing to do."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D4", "debut": "2026-11-12T10:47Z", "fin": "2026-11-12T11:02Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, 11 capteurs, grisé. Something passed in front of 11 targets for a single measurement. Ignore this point on the curves."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D5", "debut": "2026-11-12T12:02Z", "fin": "2026-11-12T12:16Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, 11 capteurs, grisé. Something passed in front of 11 targets for a single measurement. Ignore this point on the curves."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D7", "debut": "2026-11-12T12:30Z", "fin": "2026-11-12T13:32Z", "categorie": "Visibility", "description": "Détecteurs : Poor visibility, 11 capteurs. The camera saw 11 targets less clearly than usual. The data in this period are less precise: use them with care."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D8", "debut": "2026-11-12T15:17Z", "fin": "2026-11-12T17:30Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, 22 capteurs, grisé. Something passed in front of 22 targets for a single measurement. Ignore this point on the curves."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D10", "debut": "2026-11-12T18:00Z", "fin": "2026-11-12T18:32Z", "categorie": "Visibility", "description": "Détecteurs : Poor visibility, 12 capteurs. The camera saw 12 targets less clearly than usual. The data in this period are less precise: use them with care."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D11", "debut": "2026-11-12T19:30Z", "fin": "2026-11-12T21:31Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, 11 capteurs, grisé. Something passed in front of 11 targets for a single measurement. Ignore this point on the curves."}
|
||||
{"id": "SUSTENHORN-2026-11-12-D12", "debut": "2026-11-12T23:01Z", "fin": "2026-11-12T23:01Z", "categorie": "Obstruction", "description": "Détecteurs : Brief obstruction, 11 capteurs, grisé. Something passed in front of 11 targets for a single measurement. Ignore this point on the curves."}
|
||||
Submodule
+1
Submodule detectors added at 388619685a.
@@ -0,0 +1,124 @@
|
||||
# Optimizer : conception
|
||||
|
||||
2026-11-13. Statut : approuvée ; étapes 1 et 2 (les détecteurs, le scan) construites, la suite à rediscuter.
|
||||
|
||||
## L'intention
|
||||
|
||||
Faire converger les détecteurs en continu, à faible coût. Chaque jour pompé devient un **batch de 24 h** : les détecteurs
|
||||
passent sur toutes les stations (gratuit : 3,5 s pour 3 jours de NORDEND) ; un **scanner** léger regarde leurs étiquettes et
|
||||
les données de loin, note chaque irrégularité dans un rapport ; s'il en a noté, `/detectors:wf-improve` améliore les
|
||||
détecteurs, sous le garde-fou du benchmark.
|
||||
|
||||
Le mode ciblé de Diagnostic-App reste tel quel : une analyse approfondie d'un événement, puis « Optimiser les détecteurs ».
|
||||
Optimizer en est la version large et légère : il voit toutes les stations, mais de loin, et ne remarque que des
|
||||
irrégularités.
|
||||
|
||||
## Objectifs, non-objectifs, anti-objectifs
|
||||
|
||||
- **Objectifs** : une commande par batch, toutes les stations ; un scanner bon marché (une figure et une liste d'étiquettes
|
||||
par station) ; une seule séance d'amélioration par batch, sur toutes ses irrégularités ; chaque batch laisse une trace
|
||||
lisible.
|
||||
- **Non-objectifs** : le pompage (il reste dans Support-Agent et Diagnostic-App), l'étiquetage pour l'expert, une page web,
|
||||
les outils de lecture, le contrat des détecteurs.
|
||||
- **Anti-objectifs** (un échec, même si ça tourne) : une séance légère qui fait reculer les détecteurs sur les étiquettes
|
||||
revues, donc défait un gain du mode ciblé ; un scanner dont le coût approche celui de l'analyste ; des étiquettes du
|
||||
scanner mêlées à `labeling/auto/`.
|
||||
|
||||
## Les approches
|
||||
|
||||
- **Retenue : le scanner corrige les étiquettes des détecteurs.** Les étiquettes des détecteurs du batch sont copiées ; le
|
||||
scanner applique chaque irrégularité à la copie (retire une fausse alerte, ajoute un oubli, corrige une famille ou une
|
||||
borne) et la note dans son rapport. La copie corrigée est la vérité de `wf-improve`, son rapport le contexte : le score du
|
||||
batch ne montre que les corrections.
|
||||
- Écartée : `wf-improve` qui lirait un rapport sans étiquettes. Plus de score sur la plage pour l'upgrader ni pour le
|
||||
validator, et deux façons d'améliorer à tenir.
|
||||
- Écartée : le scanner signale seulement, l'amélioration reste l'analyse de l'app. La boucle ne se ferme pas seule.
|
||||
|
||||
## La compatibilité avec le mode ciblé
|
||||
|
||||
- **Le même dépôt `detectors`**, en sous-module, et le même plugin : Diagnostic-App et Optimizer en sont deux appelants.
|
||||
- **La même vérité de référence** : `Diagnostic-App/labeling/auto/`, où l'app verse les étiquettes de ses analyses. Le
|
||||
benchmark de chaque séance légère porte donc sur les cas ciblés : une séance qui en ferait reculer un est refusée par le
|
||||
validator ; et inversement.
|
||||
- **Les étiquettes du scanner à part**, dans le dossier du batch, jamais versées dans `labeling/auto/` (elles ne sont pas
|
||||
revues).
|
||||
- **Un ajout au plugin, compatible** : aujourd'hui `wf-improve` prend une seule station ; un batch en a plusieurs, le même
|
||||
jour. Le plugin accepte en plus un dossier d'étiquettes, une par station (`<STATION>.jsonl`, comme `REFERENCE`), avec la
|
||||
même plage pour toutes ; `regression.py` prend `--from`/`--to` pour mesurer ce jour-là. La requête d'une seule station,
|
||||
celle de l'app, ne change pas. Une seule séance sur toutes les stations coûte moins que plusieurs, et pousse l'upgrader
|
||||
vers un mécanisme qui revient d'une station à l'autre plutôt que vers un cas.
|
||||
- **Git** : le batch tire `detectors` avant de commencer (`pull --rebase`) et, avec `--push`, pousse après ; l'app suit par
|
||||
`git -C detectors pull`. Un conflit au rebase : le batch s'arrête et le dit, sans rien forcer.
|
||||
|
||||
## Un batch
|
||||
|
||||
Le jour : par défaut le dernier jour UTC complet ; `--jour AAAA-MM-JJ` pour un autre. Un batch déjà fait (son dossier
|
||||
existe) ne se refait pas.
|
||||
|
||||
1. **Les détecteurs** (script, sans LLM) : `categories.events` sur le jour, avec ses 3 jours d'historique, pour chaque
|
||||
station de `data/` qui a des mesures ce jour-là. Leurs événements deviennent des étiquettes (`id`, `debut`, `fin`,
|
||||
`categorie` = la famille, `description` = le texte de l'événement), coupées au jour :
|
||||
`batches/<jour>/detecteurs/<STATION>.jsonl`, copiées dans `batches/<jour>/verite/`. Pour chaque station, une figure
|
||||
`batches/<jour>/figures/<STATION>.png` : `corr_x` et `corr_y` des cibles sur les 24 h, les étiquettes en bandes colorées
|
||||
par famille, et une bande des mesures manquantes ou rejetées (`error_value` au-dessus du seuil).
|
||||
2. **Le scan** (`claude -p`, agent `scanner`, Sonnet) : pour chaque station, il lit la liste de ses étiquettes et regarde sa
|
||||
figure ; une image de la caméra au besoin, quelques-unes au plus pour tout le batch. Il ne lit jamais les CSV. Chaque
|
||||
irrégularité :
|
||||
- **raté** : les courbes bougent ou manquent, aucune étiquette ;
|
||||
- **trop** : une étiquette sur des courbes plates, mesures présentes et acceptées ;
|
||||
- **bornes** : l'étiquette commence trop tard, finit trop tôt, déborde sur du calme ;
|
||||
- **famille** : la forme dit une autre famille (une onde diurne, une seule cible qui s'écarte, un trou) ;
|
||||
|
||||
il la note dans `batches/<jour>/rapport.md` (station, heures, cas, ce qu'il voit) et l'applique à `verite/<STATION>.jsonl`.
|
||||
Il finit par `**Verdict**: rien à corriger | irrégularités`. Le script vérifie ensuite la vérité (JSON, clés, famille
|
||||
connue de `labeling/familles.md`).
|
||||
3. **L'amélioration**, sur `irrégularités` : `claude -p --plugin-dir detectors "/detectors:wf-improve …"` avec les stations
|
||||
corrigées, `LABELS: batches/<jour>/verite/`, le jour, `REFERENCE: --labels labeling/auto --data data`, `FAMILIES:
|
||||
labeling/familles.md`, `CONTEXT: batches/<jour>/rapport.md`, `OUT: batches/<jour>/improve/`.
|
||||
4. **Le bilan** : `batches/<jour>/summary.md`, le verdict du scanner et le résultat de `wf-improve`.
|
||||
|
||||
Le déclenchement : une tâche VS Code « batch », et une ligne après le pompage dans le Planificateur de tâches de Windows.
|
||||
|
||||
**L'ordre de grandeur** : une figure coûte environ 1 500 tokens ; pour 13 stations, une vingtaine de milliers, plus les
|
||||
listes d'étiquettes et quelques images, sur Sonnet. `wf-improve` coûte ce qu'il coûte dans l'app, et seulement les jours où
|
||||
le scanner a noté quelque chose.
|
||||
|
||||
**Les limites** : le scanner voit les courbes de loin, il rate ce que la figure ne montre pas (une dérive lente, un capteur
|
||||
noyé parmi vingt) ; une étiquette qui passe minuit est coupée au jour, ses bornes hors du jour ne se jugent pas. Ses
|
||||
erreurs ne font pas reculer les détecteurs ailleurs : le benchmark sur les étiquettes revues les arrête.
|
||||
|
||||
## Le dépôt
|
||||
|
||||
```
|
||||
Optimizer/
|
||||
README.md, CLAUDE.md
|
||||
batch.py le batch et ses figures (matplotlib, .venv ; claude sur le PATH)
|
||||
.claude/agents/scanner.md
|
||||
detectors/ le dépôt detectors, en sous-module
|
||||
data -> ~/Support-Agent/data hors de git, lecture seule
|
||||
labeling -> ~/Diagnostic-App/labeling hors de git, lecture seule (familles.md, auto/)
|
||||
batches/<jour>/ detecteurs/, verite/, detecteurs.md, rapport.md ; figures/, scan.jsonl hors de git
|
||||
à venir : improve/, summary.md
|
||||
```
|
||||
|
||||
La figure, telle que construite : par pas de 15 min (une station qui mesure par rafales, comme SUSTENHORN, ou à deux
|
||||
cadences, comme NADELHORN, s'y lit comme les autres ; dans chaque pas, l'écart le plus grand, pour qu'un pic d'une mesure
|
||||
reste) ; les cibles en bruits propres autour de leur médiane du jour, calmes entre ±5 ; les références non tracées
|
||||
(certaines valent 0 par construction).
|
||||
|
||||
## Mes choix, à corriger
|
||||
|
||||
- Le scanner sur Sonnet ; `wf-improve` sur le modèle par défaut, comme dans l'app.
|
||||
- Une seule séance d'amélioration par batch, sur toutes les stations corrigées.
|
||||
- Pas de push sans `--push`.
|
||||
- Le dépôt en français, comme Diagnostic-App (le dépôt `detectors` reste en anglais).
|
||||
|
||||
## L'ordre de construction
|
||||
|
||||
1. Le dépôt (sous-module, liens, `CLAUDE.md`), l'étape 1 et la figure ; un coup d'œil sur un jour réel.
|
||||
2. Le scanner, sur ce jour ; on lit son rapport ensemble.
|
||||
3. L'ajout au plugin, l'amélioration, la tâche VS Code.
|
||||
|
||||
## Laissé au constructeur
|
||||
|
||||
La mise en page de la figure, le nombre d'images de la caméra permises au scanner, le format exact d'une ligne du rapport.
|
||||
Reference in new issue
Block a user