Files
Support-Agent/labeling/auto/etiqueteur/NORDEND_2026-10-01/outils/episodes_rejets.py
T
maximeandClaude Opus 5.5 6fbd7510b7 Etiqueteur: October labels for 8 stations; its folder moves to labeling/auto/etiqueteur/, analyses and scripts versioned (D-126)
Labels for CLARIDEN, FLORIDA, JUNGFRAU (gaps 06-20.10, 26.10-01.11), LENZSPITZE,
NIEDERHORN, NORDEND, SNCF01, WILDSTRUBEL. Figures and tool outputs stay out of git.

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
2026-11-03 16:33:41 +01:00

39 lines
1.7 KiB
Python

"""Épisodes de rejet d'un groupe de capteurs : suites d'instants où au moins N du groupe sont rejetés,
fusionnées à moins de FUSION minutes ; pour chacun, les rejets de chaque capteur et l'instant d'avant / d'après.
Lancer depuis la racine : python3 .../episodes_rejets.py GROUPE N FUSION [DEBUT FIN]"""
import csv, glob, sys
from collections import defaultdict
from datetime import datetime, timedelta
D = "data/NORDEND"
G = sys.argv[1].split(","); N = int(sys.argv[2]); FU = timedelta(minutes=int(sys.argv[3]))
d0 = sys.argv[4] if len(sys.argv) > 4 else "2026-10-01T00:00"; d1 = sys.argv[5] if len(sys.argv) > 5 else "2026-11-01T00:00"
rej = defaultdict(set); tous = set()
for f in sorted(glob.glob(f"{D}/displacement/NORDEND_advanced_202610*.csv")) + glob.glob(f"{D}/displacement/NORDEND_advanced_20261101.csv"):
for r in csv.DictReader(open(f)):
t = r["time_utc"][:16].replace(" ", "T")
if not (d0 <= t <= d1):
continue
tous.add(t)
if float(r["error_value"]) > float(r["error_threshold"]):
rej[t].add(r["sensor_name"])
T = sorted(tous)
P = lambda s: datetime.fromisoformat(s)
eps = []
for t in T:
if len(rej[t] & set(G)) >= N:
if eps and P(t) - P(eps[-1][-1]) <= FU:
eps[-1].append(t)
else:
eps.append([t])
for e in eps:
i0, i1 = T.index(e[0]), T.index(e[-1])
av = T[i0 - 1] if i0 else "-"; ap = T[i1 + 1] if i1 + 1 < len(T) else "-"
zone = T[i0:i1 + 1]
cnt = defaultdict(int)
for t in zone:
for s in rej[t]:
cnt[s] += 1
print(f"{e[0]} → {e[-1]} ({len(zone)} pas ; avant {av[5:]} après {ap[5:]}) : " +
", ".join(f"{s} {n}" for s, n in sorted(cnt.items(), key=lambda a: -a[1])))