52 lines
2.2 KiB
Python
52 lines
2.2 KiB
Python
# Outils communs de l'audit : charge une station (chargeur des détecteurs), écarts en bruits, événements des détecteurs.
|
|||
|
|
# Le jour : la variable JOUR (AAAA-MM-JJ, UTC), par défaut 2026-11-05 (l'essai d'où viennent ces scripts).
|
||
|
|
import os
|
||
|
|
import statistics
|
||
|
|
import sys
|
||
|
|
from datetime import datetime, timedelta, timezone
|
||
|
|
from pathlib import Path
|
||
|
|
|
||
|
|
RACINE = Path(__file__).resolve().parents[1] # le dépôt Optimizer : data/, detectors/, batches/
|
||
|
|
sys.path.insert(0, str(RACINE / "detectors" / "scripts"))
|
||
|
|
from data import load, load_temperature, is_reference, rejected, iso # noqa: E402,F401
|
||
|
|
|
||
|
|
D = datetime.strptime(os.environ.get("JOUR", "2026-11-05"), "%Y-%m-%d").replace(tzinfo=timezone.utc)
|
||
|
|
B = D + timedelta(days=1)
|
||
|
|
H = D - timedelta(days=3)
|
||
|
|
|
||
|
|
|
||
|
|
def station(nom):
|
||
|
|
"""-> (mesures, refs) : {capteur: [mesure]} et l'ensemble des références."""
|
||
|
|
m = load(str(RACINE / "data" / nom))
|
||
|
|
return m, {s for s, ms in m.items() if is_reference(ms)}
|
||
|
|
|
||
|
|
|
||
|
|
def bruit(ms, col, pas_min=None):
|
||
|
|
"""Bruit propre : médiane des écarts entre deux mesures sur l'historique et le jour (comme batch.py) ;
|
||
|
|
pas_min (minutes) : ne garder que les paires espacées d'au moins pas_min (contre les rafales)."""
|
||
|
|
h = [(m["t"], m[col]) for m in ms if H <= m["t"] < B and m[col] is not None]
|
||
|
|
e = [abs(b - a) for (ta, a), (tb, b) in zip(h, h[1:])
|
||
|
|
if pas_min is None or (tb - ta).total_seconds() >= pas_min * 60]
|
||
|
|
return statistics.median(e) if len(e) > 1 else 0
|
||
|
|
|
||
|
|
|
||
|
|
def ecarts(ms, col, pas_min=None):
|
||
|
|
"""{t: écart à la médiane du jour en bruits} pour le jour ; None si rejetée."""
|
||
|
|
v = [m[col] for m in ms if D <= m["t"] < B and m[col] is not None]
|
||
|
|
b = bruit(ms, col, pas_min)
|
||
|
|
if not v or b <= 0:
|
||
|
|
return {}
|
||
|
|
med = statistics.median(v)
|
||
|
|
return {m["t"]: None if m[col] is None else (m[col] - med) / b for m in ms if D <= m["t"] < B}
|
||
|
|
|
||
|
|
|
||
|
|
def hhmm(t):
|
||
|
|
return t.strftime("%H:%M")
|
||
|
|
|
||
|
|
|
||
|
|
def evenements(nom):
|
||
|
|
"""Les événements des détecteurs comme batch.py les obtient (3 jours d'historique)."""
|
||
|
|
import categories
|
||
|
|
m = load(str(RACINE / "data" / nom))
|
||
|
|
morceau = {s: k for s, ms in m.items() if (k := [x for x in ms if H <= x["t"] < B])}
|
||
|
|
return [v for v in categories.events(morceau, B, str(RACINE / "data" / nom)) if v["end"] > iso(D)]
|