Detector-learner Obstruction: modification 1, S1

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
maximeandClaude Opus 5.5 committed 2026-11-05 11:27:14 +01:00
1 parent 2a0f8cd3dd
commit 7516c6da08
5 files changed
+164 -25

No files matched your search

+5 -2
View File
@@ -12,7 +12,9 @@ thermal_displacement.py, no_data.py, displacement.py. La catégorie d'un événe
(la courbe d'une cible à problème est à ignorer, familles.md) ;
- un décalage qui dure, ou trop récent pour savoir (DECALAGES), n'est jamais absorbé ;
- une turbulence qui chevauche un décalage n'est pas gardée : un vrai mouvement agite aussi les courbes ;
- deux événements de même sorte à moins de MERGE n'en font qu'un.
- deux événements de même sorte à moins de MERGE n'en font qu'un ; deux Target obscured, seulement s'ils partagent un
capteur (/detector-learner Obstruction, modification 1, S1 : des cibles différentes enchaînées en un événement de
plusieurs jours).
Chaque événement reçoit sa phrase, en anglais (le site) : ce qui s'est passé et quoi en faire, comme le dit la colonne
« Pour le client » de familles.md ; la cause n'est dite que si la sorte l'établit, sinon les images la montrent.
Pas de fonction detect : le chargeur ne prend pas ce fichier pour un détecteur.
@@ -176,7 +178,8 @@ def classer(episodes, references=frozenset()):
groupes[id(host[id(e)])].append(e)
merged = []
for g in groupes.values():
prev = next((m for m in reversed(merged) if sorte(m[0]) == sorte(g[0])), None)
prev = next((m for m in reversed(merged) if sorte(m[0]) == sorte(g[0]) and (g[0]["label"] != "Target obscured"
or set(g[0]["sensors"]) & {s for e in m for s in e["sensors"]})), None)
end = max((e["end"] for e in prev if sorte(e) == sorte(g[0])), default=None) if prev else None
if end and datetime.fromisoformat(g[0]["start"]) - datetime.fromisoformat(end) < MERGE:
prev += g
+16 -2
View File
@@ -3,6 +3,10 @@ cibles, un instant ou longtemps. Il reprend deux calculs partagés avec d'autres
- l'error_value de visibility.py : Brief obstruction (un passage, un instant) et Target obscured (une cible rejetée à
répétition quand les autres restent vues, ou une gêne qui ne touche que quelques cibles, sans référence) ;
- les rejets jour après jour de target_issue.py : une cible rejetée moins d'une semaine, Target obscured.
Un capteur déjà dans un épisode Target issue (Degraded target, Target stuck) qui le chevauche n'est pas rendu en Target
obscured : sa courbe est déjà à ignorer, la famille est Target issue (frontière « Target issue ou épisode d'une autre
famille » de labeling/familles.md ; /detector-learner Obstruction, modification 1, S1 : cibles à problème de FLORIDA,
NORDEND, SNCF01, NIEDERHORN, JUNGFRAU, CLARIDEN découpées en Target obscured).
Usage : python3 detectors/obstruction.py <dossier de station> (affiche les épisodes)
"""
import os
@@ -16,8 +20,18 @@ from donnees import charger # noqa: E402
def detect(mesures):
return sorted((e for e in visibility.episodes(mesures) + target_issue.episodes(mesures) if e["kind"] == "Obstruction"),
key=lambda e: e["start"])
ti = target_issue.episodes(mesures)
issues = [e for e in ti if e["kind"] == "Target issue"]
out = []
for e in visibility.episodes(mesures) + ti:
if e["kind"] != "Obstruction":
continue
if e["label"] == "Target obscured": # sans les capteurs déjà en Target issue à ce moment
pris = {s for h in issues if h["start"] <= e["end"] and h["end"] >= e["start"] for s in h["sensors"]}
if not (e := {**e, "sensors": [s for s in e["sensors"] if s not in pris]})["sensors"]:
continue
out.append(e)
return sorted(out, key=lambda e: e["start"])
if __name__ == "__main__":
+40 -20
View File
@@ -20,6 +20,11 @@ Méthode (seuils provisoires, Claude, 2026-10-27) :
plus courte, une cible cachée par moments, « Target obscured » (famille Obstruction), un épisode par suite de
mesures rejetées (les heures où elle est vue n'en sont pas). BREITHORN : véhicules garés
devant COLI24 et POUI22, 2 à 5 jours ; NEBRASKA et MICHIGAN : une référence perdue, 25 jours ; JUNGFRAU : PM_G, 63.
Pour la cible à problème, la suite est reliée : au plus PONT jours non dégradés de suite ne la coupent pas, et elle
demande alors SEMAINE jours de son premier à son dernier jour dégradé, à PART de rejets sur tous ses jours (« des rejets
propres à la cible presque chaque jour de la plage ») ; les Target obscured qu'elle couvre n'existent plus
(/detector-learner Obstruction, modification 1, S1 : FLORIDA Sellette 6 et Massif 2, SNCF01 F4.3 et F4.4, NORDEND
CTR01, NIEDERHORN e01, découpées en Target obscured par un jour sous PART ; BREITHORN, véhicules garés, inchangé).
Sur les jeux de data/ (2026-10-27) : FLORIDA Massif 2 21 → 25.10, Sellette 6 16 → 17.10 et 19 → 20.10 ; NIEDERHORN e03 à
e12 toute la période (jamais vues) ; NORDEND CTR01 plusieurs suites en juin-juillet (déjà « souvent rejetée ») ; rien
sur LENZSPITZE ; CLARIDEN PR-283 du 12 au 16.09. La cause (salissure, végétation, réglage) ne se lit que sur les images.
@@ -42,6 +47,7 @@ CALME = 0.25 # part des autres capteurs rejetés au plus, pour un instant calme
PART = 0.5 # la moitié des instants calmes rejetés : « la plupart du temps »
MIN_HEURES = 3 # heures d'instants calmes, à la cadence de la station : en dessous, le jour ne compte pas
MIN_JOURS = 2 # un jour seul est trop souvent un accident (NORDEND : jours isolés sur 16 capteurs)
PONT = 2 # provisoire : jours non dégradés de suite qui ne coupent pas une suite de jours dégradés (4)
SEMAINE = 7 # provisoire : jours dégradés de suite pour une cible à problème ; en dessous, une cible cachée par moments
COLLE = 0.05 # provisoire : bruit d'une cible collée face aux autres (E-011 : 0,006 ; NORDEND, E-001 : 0,7 au plus bas)
@@ -75,33 +81,47 @@ def episodes(mesures):
c[1] += 1
out = []
for s, js in sorted(jours.items()):
suites, cur = [], []
for j in sorted(js):
rej, calmes = js[j][:2]
if calmes < min_instants:
cache = [] # suites reliées d'au moins SEMAINE jours, à part de rejets PART : une cible à problème
for su in _suites(js, min_instants, PONT):
part = sum(c[0] for c in su) / sum(c[1] for c in su)
if len(su) < SEMAINE or part < PART:
continue
if rej / calmes >= PART:
cur.append(js[j])
elif cur:
suites.append(cur)
cur = []
suites += [cur] if cur else []
for su in suites:
if len(su) < MIN_JOURS:
n = sum(c[0] / c[1] >= PART for c in su)
r = _rejets([m for m in mesures[s] if su[0][2] <= m["t"] <= su[-1][3]])
cache.append((su[0][2], su[-1][3]))
out.append({"start": iso(r[0][0]), "end": iso(r[-1][1]), "kind": "Target issue", "label": "Degraded target",
"text": f"{s} was rejected in {round(100 * part)} % of the measurements when the other targets were "
f"seen, on {n} of {len(su)} days.", "ignore": True, "sensors": [s]})
for su in _suites(js, min_instants, 0): # par moments : un épisode par suite de mesures rejetées
if len(su) < MIN_JOURS or any(a <= su[0][2] <= b for a, b in cache):
continue
part = round(100 * sum(c[0] for c in su) / sum(c[1] for c in su))
text = f"{s} was rejected in {part} % of the measurements when the other targets were seen, {len(su)} days in a row."
r = _rejets([m for m in mesures[s] if su[0][2] <= m["t"] <= su[-1][3]])
if len(su) >= SEMAINE: # de la première à la dernière mesure rejetée
bornes, label = [(r[0][0], r[-1][1])], "Degraded target"
else: # par moments : un épisode par suite de mesures rejetées
bornes, label = r, "Target obscured"
out += [{"start": iso(a), "end": iso(b), "kind": "Target issue" if label == "Degraded target" else "Obstruction",
"label": label, "text": text, "ignore": True,
"sensors": [s]} for a, b in bornes]
out += [{"start": iso(a), "end": iso(b), "kind": "Obstruction", "label": "Target obscured", "text": text,
"ignore": True, "sensors": [s]}
for a, b in _rejets([m for m in mesures[s] if su[0][2] <= m["t"] <= su[-1][3]])]
return sorted(out + colles(mesures, min_instants), key=lambda e: e["start"])
def _suites(js, min_instants, pont):
"""{jour: [rejetés, calmes, première, dernière]} -> suites de jours dégradés ; au plus pont jours non dégradés de suite
entre deux jours dégradés ne coupent pas la suite (ils en sont) ; un jour qui ne compte pas ne la coupe pas."""
suites, cur, creux = [], [], []
for j in sorted(js):
rej, calmes = js[j][:2]
if calmes < min_instants:
continue
if rej / calmes >= PART:
cur += creux + [js[j]]
creux = []
elif cur:
creux.append(js[j])
if len(creux) > pont:
suites.append(cur)
cur, creux = [], []
return suites + ([cur] if cur else [])
def _rejets(ms):
"""Mesures d'un capteur -> [(début, fin)] de ses suites de mesures rejetées."""
out, cur = [], []