Auto labels reviewed per station and cross-reviewed; all labeling knowledge in labeling/ (D-130)
- Every station's auto labels reviewed by an analyst (/review-auto-labels), then a cross-review per family across all stations (new skill /cross-review-labels), a finishing pass, and descriptions rewritten in words (no numeric values). - The three never-labeled ranges (WILDSTRUBEL 07/09-01/10, NORDEND 16/08-01/10) labeled and reviewed: 991 auto labels on 11 stations, labeling/controle.py at 0 errors. - Labeling knowledge gathered in labeling/: regles-d-etiquetage.md (new), familles.md (settled boundaries), connaissances/ (notes moved from docs/, links updated), the label map rebuilt from reviewed labels, events and cases; events tied to their stations (PS_DES_COUDRES is JUNGFRAU). The labeler and reviewers read only labeling/. - labels-map reads auto labels and events; decision D-130; living plan points 73-75. Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
1 parent
8e1cfc52c9
commit
35b5ed4d74
298 files changed
+30413
-960
No files matched your search
@@ -0,0 +1,122 @@
|
||||
"""Écrit analyse.md du lot NORDEND 16/08-09/09 à partir de etiquettes.jsonl et des notes ci-dessous (une note par étiquette, clé = début).
|
||||
Lancer depuis la racine : python3 labeling/auto/etiqueteur/NORDEND_2026-08-16/outils/ecrire_analyse.py"""
|
||||
import json
|
||||
|
||||
FIN = r"""
|
||||
## 2. Ce que j'ai laissé sans étiquette
|
||||
|
||||
- **Le mouvement thermique de la caméra** est étiqueté chaque jour (D-117), même compensé : les 17/08, 18/08, 30/08, 31/08 et 03/09, les `corr` bougent à peine, la pose bouge.
|
||||
- **Les nuits froides** (22-23/08, 23-24/08, 05-06/09) : au creux de la température du boîtier (26 à 27 °C), `sigma0` monte et PR10 (corr_y +7 bruits), PR09, PR07 s'écartent un peu ; laissées dans l'étiquette thermique du jour, dont la description le dit (variante « nuits froides » de la carte).
|
||||
- **Petits écarts d'un capteur, d'une mesure, sous 10 bruits** hors épisode : PR01 corr_y +8 (23/08 14:45-15:45), CTR02, CTR03 corr_x +7, −6 juste avant le trou du 22/08 16:30, PR05 corr_x −12 (31/08 11:45, une mesure, le plus discutable), PR07 corr_x −8 (04/09 21:30), PR04 (dans son étiquette). Les pas de PR18 corr_x −6 à −11 au matin sont la vague thermique.
|
||||
- **Le fil de toile sur CTR04 le 03/09 de 18:00 à 22:45** (image de 19:00) : aucun effet sur `corr_x`, `corr_y`, ni sur l'error_value (cas « sans aucun signal » de la carte) : non étiqueté, puisqu'il ne touche pas les courbes ; il ne l'est qu'à partir de 22:45, quand il gêne des cibles.
|
||||
- **Les montées communes d'error_value sans rejet ni effet sur corr** (nuits bruitées des 31/08-01/09, 08/09, instants à 20 capteurs du panneau `NORDEND_commun_…`) : faux ami E-007.
|
||||
- **Les rejets de PR04** hors de ses épisodes : dans l'étiquette Target issue.
|
||||
|
||||
## 3. La documentation
|
||||
|
||||
- **Servi** : « La caméra bouge par effet thermique » et le contexte NORDEND ; « Une toile d'araignée devant l'objectif » (les trois cas : sans signal le 03/09 au soir, quelques cibles, références tour à tour) ; « Un passage cache les cibles » pour l'araignée elle-même ; « Une référence écartée : la base change » (inlier −1 des deux autres, reprojection, cibles qui sautent ensemble, positions brutes sans marche) ; le faux ami « une toile n'est pas l'araignée » ; les étiquettes revues du lot d'avant pour la convention du cycle thermique (du saut du matin au suivant) et pour CTR01 au soleil.
|
||||
- **Manqué** : aucune fiche pour une cible terne qui se dégrade (PR04 : Target issue, sans phénomène de la carte), ni pour une cible faible qui décroche dès que la lumière baisse (PR07, CTR01). Rien sur la famille d'un fil de toile posé sur une seule référence ou quelques cibles : j'ai suivi la frontière de `familles.md` (un fil : Obstruction ; la toile qui voile : Visibility), mais la carte range la toile sous « La vue est gênée » sans dire la famille de chaque cas. Rien sur les taches étirées en hauteur le temps d'une mesure (28/08 12:45, 04/09 11:15 et 13:45).
|
||||
- **Contredit ou à préciser** : la carte dit le pan et le tilt de NORDEND dériver dès la tombée de la nuit et revenir d'un coup au matin (septembre) ; ici, comme en août, le saut est au lever du soleil et le retour lent. Aux références écartées, la reprojection des deux restantes tombe bien à zéro, comme le dit la carte, mais leur `inlier` passe à −1 et `sigma0` est vide : l'inventaire compte alors « 0 retenue » alors que la compensation tourne sur deux références.
|
||||
|
||||
## Difficultés
|
||||
|
||||
- Les consignes de `lire-les-donnees` (Bash limité aux outils, sans boucle) et de l'étiqueteur (scripts permis dans `outils/`) diffèrent : j'ai suivi la seconde (`table.py`, `matins.py`, `jour_capteur.py`, `rejets.py`, `episodes.py`, `touche.py`, `ecrire_etiquettes.py`, `ecrire_analyse.py`) et utilisé une fois une boucle `for` dans le shell.
|
||||
- Bornes d'un épisode collé à un trou de mesures (19/08 20:15, 20/08 03:45, 28/08 07:45) : la « mesure juste avant » est de l'autre côté du trou ; j'ai pris le quart d'heure voisin pour les deux nuits de toile du 19-20/08 et la reprise (12:00) pour la nuit du 27-28/08, et le quart d'heure avant la reprise pour le cycle thermique des 20/08 et 28/08.
|
||||
- Lot de 24 jours : 84 étiquettes ; les analyses des étiquettes répétées (cycle thermique, trous) sont générées sur un même modèle.
|
||||
|
||||
## Sources lues
|
||||
|
||||
- `.claude/skills/lire-les-donnees/SKILL.md`
|
||||
- `labeling/carte-des-etiquettes.md`, `labeling/familles.md` (en entier)
|
||||
- `labeling/connaissances/colonnes-des-deplacements.md`, `docs/domaine/pieges-des-donnees.md`, `labeling/connaissances/chaine-de-mesure.md`
|
||||
- `events/carte-des-evenements.md`
|
||||
- Désignés par l'orchestrateur : `labeling/auto/NORDEND.jsonl` (étiquettes revues, août surtout) et `labeling/auto/etiqueteur/NORDEND_2026-08-10/analyse.md`, `outils/capteur.py`
|
||||
- `data/NORDEND/` : exports `displacement/` et `camera/` du 14/08 au 09/09, métriques `sensor_thermal_deg_c`, `BusVoltage`, `BusCurrent`, `Power`, `last_sync` ; images entières 18/08 18:00 et 23:30
|
||||
- Sorties dans le dossier du lot : `inventaire.txt`, `ensemble.txt` et `NORDEND_commun_…`, `NORDEND_residus-corr_x_…`, `NORDEND_residus-corr_y_…` ; `jours.txt`, `jours_droite.txt`, `NORDEND_parheure-corr_x_…` ; `metriques.txt` et `NORDEND_metriques_…`, `metriques_max.txt` ; `plages_gl.txt`, `plages_gl1.txt`, `plages_min6.txt` ; `matins.txt` ; `r24/` (`--rigide`, table lue, PNG non regardé) ; vignettes (zone 900,300,2000,1500) des 17/08 04:30-09:30, 18/08 16:00-21:00, 18/08 07:45-20/08 16:30, 19/08 03:00-20/08 02:00, 21/08 16:45-20:30, 22/08 03:00-27/08 23:00, 26/08 08:00-30/08 00:45, 03/09 16:45-04/09 16:45 ; zone CTR03 18/08 22:15-19/08 01:15 ; zone 1900,1100,700,600 des 20/08 16:15-16:45 et 04/09 16:00-18:00 ; vignettes PR04/PR05/PR03, PR07/PR05/PR13, CTR04/PR08, CTR01/PR01, PR07/PR14/PR16, PR17/PR18 (`--fixe`)
|
||||
"""
|
||||
|
||||
D = "labeling/auto/etiqueteur/NORDEND_2026-08-16/"
|
||||
L = [json.loads(l) for l in open(D + "etiquettes.jsonl")]
|
||||
|
||||
# matins.txt : indice PR16/PR18 (corr_x, bruits, écart à la nuit) et Tmax du boîtier par jour
|
||||
M = {}
|
||||
for l in open(D + "matins.txt"):
|
||||
p = l.split()
|
||||
M[p[0]] = (p[p.index("min") + 1], p[-1])
|
||||
|
||||
TH_FAM = ("Thermal displacement : la pose suit la température du boîtier (r = −0,95 pour le pan, +0,97 pour l'échelle, +0,74 pour le tilt sur le lot, "
|
||||
"pas horaire, `metriques.txt`), l'ouvrage est une façade rocheuse ; s'étiquette toujours (D-117), même les jours où les `corr` bougent peu.")
|
||||
TH_IMG = {"2026-08-17": "07:00, 09:30 : ciel couvert, taches faibles", "2026-08-18": "07:45 : soleil sur une partie de la paroi ; 09:45 couvert",
|
||||
"2026-08-22": "07:30 : ciel nuageux, scène nette", "2026-08-28": "12:45 : plein soleil, engins dans la carrière",
|
||||
"2026-08-24": "aucune (cycle lu sur `ensemble.py --rigide 2026-08-24T04:00Z`, `r24/`)"}
|
||||
|
||||
N = { # notes des autres étiquettes : (phénomène, famille, mesuré, images, confiance)
|
||||
"2026-08-16T09:15Z": ("aucun (cible terne sous un ciel couvert)", "Visibility : manque de lumière, pas un objet ; pas Target issue, CTR01 est vue la nuit.",
|
||||
"CTR01 rejetée à 09:30 seulement (`inventaire.txt`) ; PR18 corr_x −7 bruits au même pas (cycle thermique).", "vignette CTR01/PR01 09:30 : scène sombre, tache de CTR01 à peine visible.", "moyenne : la cause est une lecture de la vignette."),
|
||||
"2026-08-16T13:00Z": ("aucun (CTR01 noyée au soleil, comme en août)", "Visibility (lumière).", "CTR01 rejetée 13:15, 14:00-14:15, 14:45, 16:30-16:45 ; CTR04 corr_y −6 bruits à 14:15.", "vignette 14:00 : roche autour de CTR01 en plein soleil.", "forte : même signature que les après-midi du lot d'avant."),
|
||||
"2026-08-17T02:30Z": ("La visibilité baisse sur toute la scène (proche)", "Visibility : gêne diffuse, aucun objet.", "PR07 rejetée 02:45, 04:45-06:00, 08:30-08:45 ; PR09 05:00-07:45, 08:30-08:45 ; CTR01 05:00-10:15 ; PR01 05:30 ; corr_x PR05 −9, PR06 −13, PR08 −12, PR16 +7/−10 bruits (glissant 3 h) à 05:45-06:45.", "zone 04:30 (bruitée), 05:30, 07:00, 09:30 (couvert, taches faibles).", "moyenne : la fin de nuit et le matin forment un seul épisode par choix."),
|
||||
"2026-08-17T05:15Z": ("aucun (cible à problème ; la carte n'a pas de fiche)", "Target issue : gênée tout le temps, quel que soit le temps ; pas Obstruction.", "error_value de nuit de PR04 0,046 (10/08) → 0,18 (18/08), jusqu'à 0,49 (21-23/08) ; rejets 2 % à 92 % par jour, 502 dans le lot ; corr_x médian 0,016 → 0,10, corr_y 0,08 → 0,22 puis 0,13 (`outils/jour_capteur.py`) ; PR03, PR05 stables.", "vignettes PR04/PR05/PR03 14/08, 22/08, 26/08, 07/09 à 12:00 et 23/08, 27/08, 07/09 à 00:00 : tache de PR04 bien plus faible.", "forte sur la cible ; moyenne sur le début (premier rejet), la dégradation commence avant le lot."),
|
||||
"2026-08-17T13:30Z": ("aucun (CTR01 au soleil)", "Visibility (lumière).", "CTR01 rejetée 13:45, 14:15, 14:45-15:15.", "aucune ce jour (même heure que le 16/08).", "forte."),
|
||||
"2026-08-18T06:15Z": ("La visibilité baisse sur toute la scène (proche)", "Visibility.", "CTR01 rejetée 07:30-12:00, PR07 06:45-09:45 par moments, PR09, PR14 08:00-08:15, PR15 08:00-08:15, PR16 08:00 ; PR16 corr_y +19, +18, −16 bruits, PR15, PR14, PR13, PR08 6 à 13 bruits (glissant).", "zone 07:45, 09:45.", "moyenne : cause lue comme la lumière, non vue nettement."),
|
||||
"2026-08-18T15:15Z": ("aucun", "Visibility : rejets de plusieurs cibles, sans objet vu.", "PR07, PR09 15:45-16:15, PR11 15:45, CTR01 15:30 ; PR13 corr_x −11, PR16 −14 bruits.", "zone 16:00 : rien de net.", "faible : cause inconnue."),
|
||||
"2026-08-18T17:30Z": ("Une toile d'araignée devant l'objectif", "Visibility : la toile voile l'image.", "CTR01 rejetée 17:45-03:45 presque sans arrêt, PR01 17:45-20:15 et 01:45-02:00, PR09, PR02 18:15, PR03 22:45-00:30 ; PR01 corr_y +9, CTR01 +7 bruits.", "zone 16:00 (nette), 17:45, 19:00, 21:00, 23:30, 19/08 03:00 (bandes), 10:00 (nette).", "forte."),
|
||||
"2026-08-18T17:45Z": ("Un passage cache les cibles (l'araignée elle-même)", "Obstruction : un objet (le corps de l'araignée) devant l'objectif ; la référence gênée prend la famille de sa cause.", "CTR02 rejetée (0,62) à 18:00, inlier −1 pour CTR03 et CTR04 (0 retenue) ; corr_y de 13 capteurs +7 à +21 bruits à 18:00 seulement.", "image entière 18:00 : grosse tache blanche floue au centre.", "forte."),
|
||||
"2026-08-18T22:15Z": ("Une référence écartée : la base change", "Obstruction : un fil de la toile posé sur la référence (frontière « un fil qui cache une cible ») ; pas Visibility, le reste de l'image est lisible.", "CTR03 rejetée 22:30-01:00 (0,42 à 0,77) ; corr_y CTR02 −21, PR17 −13, PR18 −13, PR10 −10 bruits, CTR04 corr_x +20 bruits, constants ; positions brutes sans marche (`outils/table.py --brut`) ; rebond à 01:15 (CTR02 +11, PR01 +10).", "zone CTR03 22:15, 22:30, 01:00, 01:15.", "forte."),
|
||||
"2026-08-19T06:45Z": ("aucun (cible terne)", "Visibility.", "CTR01 rejetée 07:00-07:15, 09:00, 10:30, 12:00 ; corr_y −7 bruits à 07:45.", "vignettes 07:00, 10:30.", "moyenne."),
|
||||
"2026-08-19T20:00Z": ("Une toile d'araignée devant l'objectif", "Visibility.", "CTR01 rejetée 20:15-03:45 (29 mesures, error_value 0,985 de nuit), PR07 23:00-23:30 ; PR07 corr_x −15 à 20:15, PR08 corr_x −11 bruits 00:00-03:15 (`plages_min6.txt`). Bornes au quart d'heure du trou qui précède et de celui qui suit.", "zone 19/08 22:00, 20/08 02:00.", "moyenne : la toile est vue, sa part dans les rejets de CTR01 est déduite."),
|
||||
"2026-08-20T14:15Z": ("aucun (CTR01 au soleil)", "Visibility.", "CTR01 rejetée à 14:30.", "vignette 14:30 : roche au soleil.", "forte."),
|
||||
"2026-08-20T16:15Z": ("aucun (soleil sur la paroi)", "Visibility (lumière), vue.", "PR07 rejetée 16:30 ; corr_x PR14 +15, PR15 +15, PR16 +12, PR05 +8 bruits à 16:30, PR05 corr_y +8 à 16:45, PR08 corr_x +7 à 17:00.", "zone PR07/PR14/PR15/PR16 16:15, 16:30, 16:45.", "moyenne."),
|
||||
"2026-08-21T12:15Z": ("aucun (cible terne)", "Visibility.", "CTR01 rejetée 12:30, 13:15.", "vignette 12:30 : scène sombre.", "moyenne."),
|
||||
"2026-08-21T15:45Z": ("Une toile d'araignée devant l'objectif", "Visibility : la toile voile une grande part de l'image.", "PR07 rejetée dès 16:00, CTR01 17:45-07:15 (55), jusqu'à 12 cibles rejetées à 19:15 ; corr_x PR14 +22/−18, PR16 +18, PR08 −16 à −17 bruits ; PR08 corr_x décalé 19:30-06:30 (−28 bruits au plus).", "zone 16:45, 18:15, 19:15, 20:30, 22/08 03:00, 07:30.", "forte."),
|
||||
"2026-08-24T11:00Z": ("aucun (fil devant une cible)", "Obstruction : un fil devant une seule cible, ses voisines intactes.", "PR07 rejetée 11:15-03:15 (59) puis 06:00-12:15 (14) ; error_value de PR07 0,46 de nuit (0,05 d'habitude).", "vignettes PR07/PR05/PR13 23/08 14:00, 24/08 10:00, 14:00, 22:00, 25/08 09:00, 14:00.", "moyenne : le fil n'est vu que la nuit."),
|
||||
"2026-08-26T07:00Z": ("Une toile d'araignée devant l'objectif (de jour)", "Visibility.", "CTR01 rejetée 07:45-09:45, PR07 07:15-08:45, PR16 07:45-08:15, PR09 08:00-08:30 ; corr_x PR16 +20, PR06 +13, PR13 +12, PR08 +12 bruits.", "zone 08:00 : bande floue claire en bas.", "moyenne."),
|
||||
"2026-08-27T19:30Z": ("Une toile d'araignée devant l'objectif", "Visibility.", "PR07 rejetée 19:45 puis 21:00-07:45 (38), CTR01 21:15-07:45 (40) ; PR08 corr_x −19 à 21:45 puis décalé jusqu'à 01:30 (−25 bruits), PR05, PR06 −14, −15, PR03 −10. Fin à la reprise des mesures (12:00).", "zone 21:15, 23:00.", "forte."),
|
||||
"2026-08-27T21:00Z": ("Un passage cache les cibles (l'araignée)", "Obstruction.", "12 cibles rejetées à 21:15, 9 à 21:30 ; références retenues (error_value ≤ 0,12) ; PR13 corr_y +14, PR18 −13 bruits.", "zone 21:15 : grosse tache blanche en bas à droite.", "forte."),
|
||||
"2026-08-28T12:30Z": ("Une référence écartée : la base change ; La visibilité baisse sur toute la scène (une mesure)", "Visibility, comme l'expert pour NORDEND 04.09 10:59 (visibilité, une mesure, une référence juste au-dessus du seuil).", "CTR04 rejetée, 0 référence retenue ; PR06, PR08, PR15, PR16, PR18, CTR01 rejetées ; corr_x PR07 −60, PR14 −62, PR05 −56 bruits ; scale 1,0002 au lieu de 0,9994.", "vignettes CTR04/PR08 12:30, 12:45, 13:00 ; zone 12:45.", "moyenne : la cause de l'étirement n'est pas établie."),
|
||||
"2026-08-28T14:15Z": ("aucun (CTR01 au soleil)", "Visibility.", "CTR01 rejetée 14:30.", "vignette 14:30.", "forte."),
|
||||
"2026-08-28T15:15Z": ("La visibilité baisse sur toute la scène (proche)", "Visibility.", "error_value CTR02 0,19, CTR03 0,23, CTR04 0,33 à 15:30 (0,04-0,06 d'habitude) ; 4 puis 7 cibles rejetées 16:00-16:15 ; PR07 corr_x +11, −13 ; PR15 +11, −11 jusqu'à 17:15.", "zone 16:15.", "faible : la toile n'est que devinée."),
|
||||
"2026-08-29T16:00Z": ("aucun", "Visibility : cible faible, mal vue.", "PR07 rejetée 16:30-16:45 ; corr_x PR07 −9 (16:15), +7 (18:00), +10 (18:45) bruits.", "vignette PR07 16:30.", "faible."),
|
||||
"2026-08-29T22:15Z": ("aucun", "Visibility.", "PR07 rejetée 22:30 ; PR16 corr_x +10, corr_y −10, PR15 corr_y +10 bruits.", "vignette 22:30 (bruitée).", "moyenne."),
|
||||
"2026-08-30T00:15Z": ("aucun", "Visibility.", "PR07, PR11 00:30-00:45, PR14 00:30, PR09, PR12 00:45 rejetées ; PR14 corr_x +20, PR15 +14 bruits.", "zone 00:45 (bruitée, disques flous).", "moyenne."),
|
||||
"2026-08-30T23:45Z": ("Une toile d'araignée (un fil)", "Visibility : voile clair sur la zone ; aurait pu être Obstruction.", "PR07 rejetée 00:00 ; PR15 −11/−9, PR16 −10, PR14 +10 bruits.", "vignette 00:00.", "moyenne."),
|
||||
"2026-08-31T12:30Z": ("aucun", "Visibility.", "PR07 rejetée 12:45-13:15 ; PR14 corr_x −20, corr_y −16 bruits, PR16 corr_y +13.", "vignette 13:00.", "faible."),
|
||||
"2026-08-31T14:30Z": ("aucun (CTR01 au soleil)", "Visibility.", "CTR01 rejetée 14:45 et 16:00.", "vignette 14:45.", "forte."),
|
||||
"2026-09-01T14:45Z": ("aucun (CTR01 au soleil)", "Visibility.", "CTR01 rejetée 15:00-15:15.", "aucune.", "moyenne."),
|
||||
"2026-09-03T13:15Z": ("aucun", "Visibility (une mesure, rejet).", "PR07 rejetée 13:30 ; PR15 corr_x +10, PR16 corr_y +10, PR12 +9 bruits ; CTR04 error_value 0,084.", "vignette 13:30.", "faible."),
|
||||
"2026-09-03T16:30Z": ("aucun", "Visibility : l'error_value de PR07 monte (0,05 → 0,24) avec le saut.", "corr_x PR14 +10, PR07 +8, PR18 +5 bruits à 16:45 seulement.", "zone 16:45.", "faible."),
|
||||
"2026-09-03T22:45Z": ("Une toile d'araignée devant l'objectif (sans signal, puis quelques cibles)", "Obstruction : un fil sur quelques cibles.", "PR07 rejetée 23:00-23:30 ; PR15 corr_x −12 à −17, PR16 +19 puis corr_y −17, PR14 +12 bruits, retour à 00:30 ; CTR04 error_value 0,15 à 23:00. De 18:00 à 22:45, rien sur corr (table `outils/table.py`), d'où rien d'étiqueté pour le fil sur CTR04.", "zone 19:00, 23:00.", "moyenne."),
|
||||
"2026-09-04T11:00Z": ("La visibilité baisse sur toute la scène ; Une référence écartée", "Visibility.", "CTR04 rejetée 11:15 (0,46), 0 retenue ; 9 cibles rejetées ; corr_x PR03 −39, PR12 −38, PR11 −32 bruits ; pan −0,061°, rotation −0,037° ce pas seulement.", "vignettes CTR04/PR08 11:00, 11:15.", "forte."),
|
||||
"2026-09-04T13:30Z": ("Une référence écartée", "Visibility.", "CTR04 rejetée 13:45, 0 retenue ; PR06, PR08, PR15, PR16 rejetées ; 17 capteurs sautent (PR14 −52, PR13 −46 bruits).", "vignettes 13:45, 14:00.", "forte."),
|
||||
"2026-09-04T16:15Z": ("Une toile d'araignée devant l'objectif (quelques cibles, une référence perturbée)", "Obstruction : un fil sur PR07.", "PR07 rejetée 16:30-18:00 (7), CTR01 17:00-19:00 (7) ; CTR04 error_value 0,16 à 16:45 ; 17 capteurs hors niveau à 16:30 (PR08 −25, PR06 −19 bruits) ; PR16 corr_y +24 à 17:15.", "zone PR07/PR08/CTR04/PR16 16:00, 16:30, 17:15, 18:00 ; zone 16:45.", "moyenne : la toile n'est vue qu'au crépuscule."),
|
||||
"2026-09-05T12:00Z": ("aucun (un saut qui dure, sans cause)", "Displacement : saut durable sans cause établie (D-074).", "PR17 corr_y +23 bruits de 12:15 jusqu'à la fin du lot (+0,13 environ, jusqu'à +0,18 la nuit du 05 au 06/09) ; error_value 0,05 → 0,06-0,07 ; y brut +0,2 px ; PR18, PR12 stables.", "vignettes PR17/PR18 --fixe 04/09 03:00, 05/09 12:00, 12:15, 06/09 03:00, 12:00, 08/09 03:00 : rien.", "moyenne."),
|
||||
"2026-09-05T14:15Z": ("aucun (CTR01 au soleil)", "Visibility.", "CTR01 rejetée 14:30-15:15, 16:00-16:15.", "vignette 15:00.", "forte."),
|
||||
"2026-09-08T01:45Z": ("aucun", "Visibility.", "PR07 rejetée 02:00-02:15.", "vignette 02:00 (bruitée).", "moyenne."),
|
||||
"2026-09-08T06:15Z": ("aucun", "Displacement : écart sans cause établie (pourrait être Visibility).", "PR07 corr_x −8 à −11 bruits de 06:30 à 07:45 (`plages_min6.txt`), sans rejet.", "vignette 07:00.", "faible."),
|
||||
"2026-09-08T17:00Z": ("aucun", "Visibility.", "PR07 rejetée 17:15.", "vignette 17:15.", "moyenne."),
|
||||
}
|
||||
|
||||
out = [f"# Étiquettes automatiques : NORDEND, 2026-08-16T00:00Z → 2026-09-09T00:00Z (UTC)", "",
|
||||
"## 1. Mes étiquettes", ""]
|
||||
for x in L:
|
||||
d = x["debut"]
|
||||
out.append(f"### {d} → {x['fin']}")
|
||||
if x["categorie"] == "Thermal displacement":
|
||||
j = d[8:10] + "/" + d[5:7]
|
||||
mi, tm = M.get(j, ("?", "?"))
|
||||
out += ["- **Phénomène de la carte** : La caméra bouge par effet thermique",
|
||||
f"- **Famille** : {TH_FAM}",
|
||||
f"- **Mesuré** : début = mesure avant le premier dépassement du tilt (+5 bruits du niveau de la nuit, `jours.txt` --bornes ; `matins.txt` pour 30/08 et 05/09, où le premier dépassement de jours.py tombe la nuit) ; "
|
||||
f"creux de corr_x médian de PR16, PR18 : {mi} bruits ; température max du boîtier {tm} °C (sensor_thermal) ; aucune référence perdue par le cycle.",
|
||||
f"- **Images** : {TH_IMG.get(d[:10], 'aucune pour ce jour')}",
|
||||
"- **Confiance** : forte sur la famille ; moyenne sur les bornes (saut du matin pris sur la pose, comme les étiquettes revues du lot d'avant)", ""]
|
||||
elif x["categorie"] == "No data":
|
||||
out += ["- **Phénomène de la carte** : aucun", "- **Famille** : No data : aucune mesure pour aucun capteur.",
|
||||
"- **Mesuré** : pas absents pour tous les capteurs (`inventaire.txt`) ; images et métriques comparées (`metriques.py --metriques-seules`), tension 13,7 à 14,3 V sur le lot.",
|
||||
"- **Images** : présence ou absence de l'image à l'instant (`inventaire.txt`)", "- **Confiance** : forte sur le trou ; cause non établie", ""]
|
||||
else:
|
||||
p, f, m, i, c = N[d]
|
||||
out += [f"- **Phénomène de la carte** : {p}", f"- **Famille** : {f}", f"- **Mesuré** : {m}", f"- **Images** : {i}", f"- **Confiance** : {c}", ""]
|
||||
|
||||
out += FIN.splitlines()
|
||||
open(D + "analyse.md", "w").write("\n".join(out) + "\n")
|
||||
print("écrit", D + "analyse.md")
|
||||
@@ -0,0 +1,250 @@
|
||||
"""Écrit les étiquettes du lot NORDEND 16/08-09/09 dans labeling/auto/etiqueteur/NORDEND_2026-08-16/etiquettes.jsonl (remplace le fichier).
|
||||
Lancer depuis la racine : python3 labeling/auto/etiqueteur/NORDEND_2026-08-16/outils/ecrire_etiquettes.py"""
|
||||
import json
|
||||
|
||||
SORTIE = "labeling/auto/etiqueteur/NORDEND_2026-08-16/etiquettes.jsonl"
|
||||
E = []
|
||||
|
||||
|
||||
def e(d, f, c, t):
|
||||
E.append({"debut": d + "Z", "fin": f + "Z", "categorie": c, "description": t})
|
||||
|
||||
|
||||
# --- Cycle thermique de la caméra, un par jour, du saut du matin au saut suivant ---
|
||||
TH = ("Déplacement thermique de la caméra, mal compensé. {matin} La pose de la caméra (tilt, pan, échelle) part avec la température du boîtier "
|
||||
"et toute la scène bouge ensemble dans l'image, références comprises (mouvement d'ensemble vérifié cible par cible) ; la compensation "
|
||||
"n'efface pas tout : corr_x de PR14 à PR18 se creuse, surtout PR18 et PR16, puis revient dans l'après-midi ou le soir, le pan finissant "
|
||||
"de revenir dans la nuit jusqu'au saut du matin suivant. {jour}Les rejets et les sauts de la journée sont étiquetés à part. "
|
||||
"Cause déduite : la pose suit la température du boîtier, et la façade rocheuse ne peut pas bouger avec la température. "
|
||||
"Rien à faire, ce n'est pas un mouvement de l'ouvrage.")
|
||||
SOLEIL = "Au lever du soleil, la caméra chauffe d'un coup (température du boîtier en forte hausse) et sa pose saute."
|
||||
JOURS = [
|
||||
("2026-08-16T06:30", "2026-08-17T07:30", SOLEIL, "Journée chaude ; le creux de corr_x vient en milieu de matinée. "),
|
||||
("2026-08-17T07:30", "2026-08-18T12:00", "Le matin est couvert (images de 07:00 et 09:30) : la pose ne part que lentement, la température du boîtier monte peu.",
|
||||
"Journée faible : les courbes corrigées s'écartent à peine. "),
|
||||
("2026-08-18T12:00", "2026-08-19T07:30", "Matinée sans soleil franc : la pose ne part qu'en fin de matinée, quand le boîtier se réchauffe un peu.",
|
||||
"Journée la plus fraîche du début du lot, cycle faible ; la nuit est troublée par une toile (étiquetée à part). "),
|
||||
("2026-08-19T07:30", "2026-08-20T06:00", SOLEIL, "Les mesures manquent l'après-midi (trou étiqueté à part) : le retour n'est vu qu'en partie. "),
|
||||
("2026-08-20T06:00", "2026-08-21T06:00", "Le saut du matin tombe pendant un trou des mesures ; à la reprise, la pose est déjà partie.",
|
||||
"Cycle moyen. "),
|
||||
("2026-08-21T06:00", "2026-08-22T06:00", SOLEIL, "Cycle net, retour en fin d'après-midi ; le soir est troublé par une toile (étiquetée à part). "),
|
||||
("2026-08-22T06:00", "2026-08-23T06:00", SOLEIL,
|
||||
"Cycle net. La nuit suivante est froide : au creux de la température du boîtier, l'erreur du recalage monte et quelques cibles (PR10 surtout) "
|
||||
"s'écartent un peu en corr_y, puis reviennent au réchauffement. "),
|
||||
("2026-08-23T06:00", "2026-08-24T05:45", SOLEIL,
|
||||
"Cycle net. Nuit suivante froide, comme la précédente : l'erreur du recalage monte et PR10 s'écarte un peu en corr_y au creux de la température du boîtier. "),
|
||||
("2026-08-24T05:45", "2026-08-25T05:30", SOLEIL, "Journée la plus forte du lot sur les courbes corrigées ; la référence CTR04 s'écarte elle aussi un peu du mouvement d'ensemble au plus fort du matin. "),
|
||||
("2026-08-25T05:30", "2026-08-26T06:15", SOLEIL, "Cycle net. "),
|
||||
("2026-08-26T06:15", "2026-08-27T06:45", SOLEIL, "Journée chaude, cycle net. "),
|
||||
("2026-08-27T06:45", "2026-08-28T11:45", SOLEIL, "Journée chaude, cycle net ; le soir et la nuit sont troublés par une toile (étiquetée à part). "),
|
||||
("2026-08-28T11:45", "2026-08-29T06:00", "Le saut du matin tombe pendant un trou des mesures ; à la reprise, en fin de matinée, la pose est déjà partie.",
|
||||
"Le creux des courbes corrigées est passé pendant le trou : on ne voit que la fin du cycle. "),
|
||||
("2026-08-29T06:00", "2026-08-30T07:30", SOLEIL, "Cycle net, creux en début de matinée. "),
|
||||
("2026-08-30T07:30", "2026-08-31T07:15", "La pose part plus tard et plus doucement que les jours de plein soleil.", "Cycle faible. "),
|
||||
("2026-08-31T07:15", "2026-09-01T07:15", "La pose part plus tard et plus doucement que les jours de plein soleil.", "Cycle faible, journée la plus fraîche du lot. "),
|
||||
("2026-09-01T07:15", "2026-09-02T06:00", SOLEIL, "Cycle net. "),
|
||||
("2026-09-02T06:00", "2026-09-03T06:30", SOLEIL, "Cycle net, creux en début de matinée. "),
|
||||
("2026-09-03T06:30", "2026-09-04T06:30", SOLEIL, "Cycle faible sur les courbes corrigées ; la nuit est troublée par une toile (étiquetée à part). "),
|
||||
("2026-09-04T06:30", "2026-09-05T07:00", SOLEIL, "Cycle moyen, mêlé aux sauts et à la toile de la journée (étiquetés à part). "),
|
||||
("2026-09-05T07:00", "2026-09-06T06:15", SOLEIL,
|
||||
"Cycle moyen. La nuit suivante est froide : au creux de la température du boîtier, l'erreur du recalage monte et PR07, PR09, PR10 s'écartent un peu en corr_y, "
|
||||
"puis reviennent au réchauffement. "),
|
||||
("2026-09-06T06:15", "2026-09-07T06:15", SOLEIL, "Journée chaude, l'une des plus fortes du lot ; au saut du matin, beaucoup de cibles bougent un peu en corr_y le temps d'une mesure. "),
|
||||
("2026-09-07T06:15", "2026-09-08T06:45", SOLEIL, "Journée la plus chaude du lot, cycle fort. "),
|
||||
("2026-09-08T06:45", "2026-09-09T00:00", SOLEIL, "Cycle moyen ; en début de soirée, quand la pose repart, plusieurs cibles bougent un peu le temps d'une mesure. Le cycle continue après la fin du lot. "),
|
||||
]
|
||||
for d, f, m, j in JOURS:
|
||||
e(d, f, "Thermal displacement", TH.format(matin=m, jour=j))
|
||||
|
||||
# --- CTR01 au soleil l'après-midi ---
|
||||
CS = ("CTR01 (référence locale, traitée comme une cible) est rejetée {quand} l'après-midi : ses courbes corr_x et corr_y manquent. "
|
||||
"{vu} Les autres cibles restent mesurées. L'ouvrage ne bouge pas : rien à faire, la courbe de CTR01 manque les après-midi de soleil.")
|
||||
VU_CS = "Vu sur la vignette de {h} : la roche autour de la cible est en plein soleil, aussi claire que la tache, qui s'y noie."
|
||||
MEME_CS = "Même heure et même signature que les autres après-midi, où les vignettes montrent la roche au soleil autour de la cible."
|
||||
e("2026-08-16T13:00", "2026-08-16T17:00", "Visibility", CS.format(quand="par moments", vu=VU_CS.format(h="14:00")))
|
||||
e("2026-08-17T13:30", "2026-08-17T15:30", "Visibility", CS.format(quand="par moments", vu=MEME_CS))
|
||||
e("2026-08-20T14:15", "2026-08-20T14:45", "Visibility", CS.format(quand="le temps d'une mesure", vu=VU_CS.format(h="14:30")))
|
||||
e("2026-08-28T14:15", "2026-08-28T14:45", "Visibility", CS.format(quand="le temps d'une mesure", vu=VU_CS.format(h="14:30")))
|
||||
e("2026-08-31T14:30", "2026-08-31T16:15", "Visibility", CS.format(quand="deux fois", vu=VU_CS.format(h="14:45")))
|
||||
e("2026-09-01T14:45", "2026-09-01T15:30", "Visibility", CS.format(quand="deux mesures de suite", vu=MEME_CS))
|
||||
e("2026-09-05T14:15", "2026-09-05T16:30", "Visibility", CS.format(quand="par moments", vu=VU_CS.format(h="15:00")))
|
||||
|
||||
# --- CTR01 sous un ciel sombre ---
|
||||
CD = ("CTR01 (référence locale, traitée comme une cible) est rejetée {quand} : sa courbe manque. Sur la vignette de {h}, la scène est sombre "
|
||||
"(ciel couvert) et la tache de CTR01, déjà faible, se voit à peine, sans obstacle ; les autres cibles restent mesurées. "
|
||||
"Cause probable : le manque de lumière sur cette cible terne. Points à ignorer, rien à faire.")
|
||||
e("2026-08-16T09:15", "2026-08-16T09:45", "Visibility", CD.format(quand="le temps d'une mesure en matinée", h="09:30"))
|
||||
e("2026-08-19T06:45", "2026-08-19T12:15", "Visibility", CD.format(quand="par moments toute la matinée", h="07:00 et de 10:30"))
|
||||
e("2026-08-21T12:15", "2026-08-21T13:30", "Visibility", CD.format(quand="deux fois en début d'après-midi", h="12:30"))
|
||||
|
||||
# --- Matins de mauvaise visibilité ---
|
||||
e("2026-08-17T02:30", "2026-08-17T10:30", "Visibility",
|
||||
"Fin de nuit et matinée couverte : PR07 est rejetée par moments dès la fin de nuit, puis à l'aube CTR01 et PR09 sont rejetées presque toute la matinée, "
|
||||
"PR07 et PR01 par moments ; leurs courbes manquent. À l'aube, plusieurs cibles (PR05, PR06, PR08, PR16) font de petits sauts sur corr_x. "
|
||||
"Sur les images, la fin de nuit est sombre et très bruitée (04:30), puis le ciel reste couvert et les taches sont faibles (07:00, 09:30), sans obstacle. "
|
||||
"Cause : la lumière manque sur les cibles les plus faibles. L'ouvrage ne bouge pas : ne pas croire les courbes de ces cibles sur la plage, rien à faire.")
|
||||
e("2026-08-18T06:15", "2026-08-18T12:15", "Visibility",
|
||||
"Matinée de mauvaise visibilité : CTR01 est rejetée toute la matinée, PR07 et PR09 par moments, PR14, PR15, PR16 une ou deux mesures ; "
|
||||
"les courbes corrigées de PR16 surtout, et de PR15, PR14, PR13, PR08, sautent de mesure en mesure. Sur les images de 07:45 et 09:45, "
|
||||
"la lumière est inégale (soleil sur une partie de la paroi, le reste à l'ombre) et les taches sont faibles, sans obstacle visible. "
|
||||
"Cause probable : la lumière du matin ; non établie plus précisément. L'ouvrage ne bouge pas : ne pas croire les courbes sur la plage.")
|
||||
e("2026-08-18T15:15", "2026-08-18T16:45", "Visibility",
|
||||
"En milieu d'après-midi, PR07, PR09 et PR11 sont rejetées une ou deux mesures, CTR01 une fois, et PR13, PR14, PR16 sautent sur corr_x ou corr_y ; "
|
||||
"rien de net sur l'image de 16:00 (paroi à l'ombre, taches faibles). Cause non établie, une gêne passagère de la vue. "
|
||||
"L'ouvrage ne bouge pas : points à ignorer.")
|
||||
e("2026-08-26T07:00", "2026-08-26T10:30", "Visibility",
|
||||
"Matinée de mauvaise visibilité : CTR01 rejetée presque toute la matinée, PR07, PR09 et PR16 par moments ; corr_x de PR05, PR06, PR08, PR11, PR13, PR14, "
|
||||
"PR16 saute de quelques mesures, puis revient. Sur l'image de 08:00, une bande floue et claire (fil de toile d'araignée près de l'objectif) "
|
||||
"traverse le bas de la scène au soleil. Cause : la toile et la lumière du matin. L'ouvrage ne bouge pas : ne pas croire les courbes sur la plage.")
|
||||
|
||||
# --- Toiles d'araignée de nuit ---
|
||||
e("2026-08-18T17:30", "2026-08-19T04:00", "Visibility",
|
||||
"Une araignée tisse sa toile devant l'objectif en début de soirée : sur les images, la toile se voit en larges bandes floues éclairées par l'infrarouge "
|
||||
"(19:00, 21:00, 23:30, 03:00), absente le lendemain de jour (10:00). Toute la nuit, CTR01 est rejetée, PR01, PR09, PR02 et PR03 par moments : "
|
||||
"leurs courbes manquent, et PR01 et CTR01 sautent un peu sur corr_y entre les rejets. Le passage de l'araignée et la référence CTR03 cachée "
|
||||
"sont étiquetés à part. L'ouvrage ne bouge pas : ne pas croire les courbes sur la plage, rien à faire.")
|
||||
e("2026-08-18T17:45", "2026-08-18T18:15", "Obstruction",
|
||||
"L'araignée elle-même passe devant l'objectif à 18:00 : son corps éclairé fait une grosse tache blanche et floue au milieu de l'image (image de 18:00). "
|
||||
"La référence CTR02 est rejetée le temps de cette mesure et la compensation tourne sans elle : toutes les cibles sautent ensemble sur corr_y, "
|
||||
"ainsi que les références restantes CTR03 et CTR04, puis tout revient à la mesure suivante. Point à ignorer, ce n'est pas un mouvement.")
|
||||
e("2026-08-18T22:15", "2026-08-19T01:45", "Obstruction",
|
||||
"Une bande de la toile d'araignée se pose sur la référence CTR03 (images de 22:30 et de 01:00, où la bande éclairée la couvre ; à 01:15 elle s'en est écartée). "
|
||||
"CTR03 est rejetée pendant plus de deux heures et la compensation tourne sans elle : la base change, toutes les cibles et les références CTR02 et CTR04 "
|
||||
"se décalent d'un coup, surtout sur corr_y, et restent sur ce palier tant que CTR03 manque ; les positions brutes n'ont pas de marche. "
|
||||
"Au retour de CTR03, les courbes reviennent, avec un petit rebond à la première mesure. Les sauts ne sont pas un mouvement : ne pas croire les courbes sur la plage.")
|
||||
e("2026-08-19T20:00", "2026-08-20T04:00", "Visibility",
|
||||
"Nuit de toile d'araignée : sur les images de 22:00 et de 02:00, très bruitées, une bande floue éclairée traverse le haut du groupe de cibles et des disques flous "
|
||||
"sont en bas à gauche. CTR01 est rejetée toute la nuit, PR07 une demi-heure ; corr_x de PR07 saute en début de nuit et celui de PR08 s'écarte en seconde partie de nuit. "
|
||||
"La plage est coupée par des trous de mesures (étiquetés à part). L'ouvrage ne bouge pas : ne pas croire ces courbes sur la plage.")
|
||||
e("2026-08-21T15:45", "2026-08-22T07:30", "Visibility",
|
||||
"Une toile d'araignée s'installe devant l'objectif en fin d'après-midi : des bandes floues se voient déjà de jour (image de 16:45), puis la nuit en larges bandes "
|
||||
"éclairées qui couvrent une grande part de la scène (18:15, 19:15, 20:30, 03:00) ; l'image redevient nette le matin (07:30). PR07 est rejetée dès 16:00, CTR01 toute la nuit ; "
|
||||
"au crépuscule, jusqu'à une douzaine de cibles sont rejetées en même temps et les courbes corrigées des autres sautent dans les deux sens ; PR08 reste décalée sur corr_x "
|
||||
"jusqu'au matin. L'ouvrage ne bouge pas : ne pas croire les courbes sur la plage, rien à faire.")
|
||||
e("2026-08-27T19:30", "2026-08-28T12:00", "Visibility",
|
||||
"Nuit de toile d'araignée : des bandes floues éclairées par l'infrarouge traversent le bas de la scène (images de 21:15 et de 23:00). CTR01 et PR07 sont rejetées "
|
||||
"presque toute la nuit, jusqu'au matin ; corr_x de PR08, PR05, PR06 et PR03 se creuse quelques heures après le passage de l'araignée. "
|
||||
"Les mesures s'arrêtent le matin (trou étiqueté à part), d'où la fin de la plage. Le passage de l'araignée est étiqueté à part. "
|
||||
"L'ouvrage ne bouge pas : ne pas croire ces courbes sur la plage.")
|
||||
e("2026-08-27T21:00", "2026-08-27T21:45", "Obstruction",
|
||||
"L'araignée passe devant l'objectif : sur l'image de 21:15, son corps éclairé fait une grosse tache blanche en bas à droite, la scène s'assombrit et les taches "
|
||||
"s'éteignent. Presque toutes les cibles sont rejetées deux mesures de suite, les autres sautent ; les références tiennent. Tout revient ensuite, sauf ce que la toile "
|
||||
"garde gêné (étiqueté à part). Points à ignorer, ce n'est pas un mouvement.")
|
||||
e("2026-08-30T23:45", "2026-08-31T00:30", "Visibility",
|
||||
"La nuit, PR07 est rejetée le temps d'une mesure et PR14, PR15, PR16 sautent sur corr_x ou corr_y ; sur la vignette de 00:00, un voile clair et flou "
|
||||
"(fil de toile éclairé) couvre PR07 et PR14. Points à ignorer, rien à faire.")
|
||||
e("2026-09-03T22:45", "2026-09-04T00:30", "Obstruction",
|
||||
"Un fil de toile d'araignée, éclairé par l'infrarouge, passe en bande claire sur la droite de la scène (image de 23:00), sur PR07 et près de PR14, PR15, PR16. "
|
||||
"PR07 est rejetée une demi-heure, et PR14, PR15, PR16 s'écartent sur corr_x ou corr_y pendant plus d'une heure, puis reviennent. "
|
||||
"Plus tôt dans la soirée, le même fil couvrait la référence CTR04 sans aucun effet sur les courbes (image de 19:00). "
|
||||
"L'ouvrage ne bouge pas : ignorer ces courbes sur la plage.")
|
||||
e("2026-09-04T16:15", "2026-09-04T19:15", "Obstruction",
|
||||
"En fin d'après-midi, la tache de PR07 disparaît (vignettes de 16:30 et 17:15) et PR07 est rejetée presque jusqu'au soir ; au crépuscule, une bande floue "
|
||||
"(fil de toile d'araignée) la traverse (18:00). CTR01 est rejetée par moments, l'error_value de la référence CTR04 monte sans la faire écarter, "
|
||||
"et une bonne partie des cibles bougent un peu sur corr_x et corr_y, PR08, PR15 et PR16 surtout, puis reviennent. "
|
||||
"L'ouvrage ne bouge pas : ignorer ces courbes sur la plage.")
|
||||
e("2026-08-24T11:00", "2026-08-25T12:30", "Obstruction",
|
||||
"PR07 seule est rejetée presque sans interruption de la fin de matinée au lendemain midi : sa courbe manque. La nuit, une bande claire et floue "
|
||||
"(fil de toile d'araignée éclairé) couvre sa tache (vignette de 22:00) ; de jour, sa tache reste faible et le fil ne se voit pas (14:00, 09:00). "
|
||||
"Ses voisines restent mesurées. Cause probable : le fil devant la cible. Ignorer la courbe de PR07 sur la plage.")
|
||||
|
||||
# --- Références écartées : la base change ---
|
||||
REF = ("La référence CTR04 est rejetée le temps d'une mesure et la compensation tourne sans elle : la base change, presque toutes les cibles sautent ensemble "
|
||||
"sur corr_x et corr_y, et les références restantes aussi, puis tout revient à la mesure suivante. Plusieurs cibles de la même zone sont rejetées avec elle. "
|
||||
"Sur les vignettes, les taches de CTR04 et de PR08 sont étirées en hauteur à cet instant, nettes avant et après : l'image est un peu moins nette, {cause}. "
|
||||
"Le saut n'est pas un mouvement : point à ignorer.")
|
||||
e("2026-08-28T12:30", "2026-08-28T13:00", "Visibility", REF.format(cause="peut-être un flou de bougé (des engins travaillent dans la carrière, image de 12:45), cause non établie"))
|
||||
e("2026-09-04T11:00", "2026-09-04T11:30", "Visibility", REF.format(cause="cause non établie"))
|
||||
e("2026-09-04T13:30", "2026-09-04T14:00", "Visibility", REF.format(cause="cause non établie ; même signature qu'à 11:15"))
|
||||
|
||||
# --- Petits épisodes de jour ---
|
||||
e("2026-08-20T16:15", "2026-08-20T17:15", "Visibility",
|
||||
"Le soleil arrive sur la paroi en fin d'après-midi (vignettes de 16:15, 16:30, 16:45) : PR07 disparaît et est rejetée le temps d'une mesure, "
|
||||
"corr_x de PR14, PR15 et PR16 saute le temps de cette mesure, PR05 et PR08 un peu à la suivante, puis tout revient. Points à ignorer, rien à faire.")
|
||||
e("2026-08-28T15:15", "2026-08-28T17:30", "Visibility",
|
||||
"Après-midi de visibilité réduite : l'error_value des trois références monte ensemble sans les faire écarter, puis PR07, PR09, PR11, PR12, PR14, PR15, PR16 "
|
||||
"sont rejetées une ou deux mesures, et PR07, PR13, PR15, PR16, PR08 sautent sur corr_x ou corr_y jusqu'en fin d'après-midi. Sur l'image de 16:15, une bande floue "
|
||||
"(fil de toile) se devine dans le bas de la scène. Cause probable : la toile, de jour ; non établie. L'ouvrage ne bouge pas : points à ignorer.")
|
||||
e("2026-08-29T16:00", "2026-08-29T19:00", "Visibility",
|
||||
"En fin d'après-midi, PR07 est rejetée deux mesures et sa courbe corr_x saute à plusieurs reprises jusqu'au soir, PR16 et PR15 un peu ; la tache de PR07 est très "
|
||||
"faible sur la vignette de 16:30, sans obstacle. Cible faible, mal vue à cette heure ; points à ignorer.")
|
||||
e("2026-08-29T22:15", "2026-08-29T23:00", "Visibility",
|
||||
"La nuit, PR07 est rejetée le temps d'une mesure et PR15, PR16 sautent sur corr_x et corr_y ; l'image de 22:30 est très bruitée et la tache de PR07 s'y perd. "
|
||||
"Points à ignorer, rien à faire.")
|
||||
e("2026-08-30T00:15", "2026-08-30T01:15", "Visibility",
|
||||
"La nuit, PR07, PR09, PR11, PR12 et PR14 sont rejetées une ou deux mesures, et PR14, PR15, PR12, PR16 sautent sur corr_x ou corr_y ; l'image de 00:45 est très "
|
||||
"bruitée, avec des disques flous dans les coins, les taches faibles. Points à ignorer, rien à faire.")
|
||||
e("2026-08-31T12:30", "2026-08-31T13:30", "Visibility",
|
||||
"À la mi-journée, PR07 est rejetée trois mesures de suite et plusieurs cibles (PR14 surtout, PR16, PR05, PR12) sautent sur corr_x ou corr_y ; la tache de PR07 "
|
||||
"est presque invisible sur la vignette de 13:00, sans obstacle. Gêne de la vue de cause non établie ; points à ignorer.")
|
||||
e("2026-09-03T13:15", "2026-09-03T13:45", "Visibility",
|
||||
"PR07 est rejetée le temps d'une mesure et PR15, PR16, PR12, PR01 sautent ensemble sur corr_x ou corr_y, puis reviennent ; la tache de PR07 est très faible "
|
||||
"sur la vignette de 13:30. Cause non établie ; point à ignorer.")
|
||||
e("2026-09-03T16:30", "2026-09-03T17:00", "Visibility",
|
||||
"L'error_value de PR07 monte d'un coup le temps d'une mesure, sans rejet, et corr_x de PR07, PR14 et PR18 saute, puis revient ; rien de net sur l'image de 16:45 "
|
||||
"(ciel couvert). Cause non établie ; point à ignorer.")
|
||||
e("2026-09-08T01:45", "2026-09-08T02:30", "Visibility",
|
||||
"La nuit, PR07 est rejetée deux mesures : sa courbe manque ; l'image de 02:00 est très bruitée et sa tache faible s'y perd. Points à ignorer.")
|
||||
e("2026-09-08T06:15", "2026-09-08T08:00", "Displacement",
|
||||
"À l'aube, corr_x de PR07 seule s'écarte un peu de son niveau pendant près de deux heures, puis revient ; les autres cibles ne la suivent pas. "
|
||||
"Sa tache est faible sur la vignette de 07:00, sans obstacle visible. Cause non établie : à surveiller, probablement sans gravité.")
|
||||
e("2026-09-08T17:00", "2026-09-08T17:30", "Visibility",
|
||||
"PR07 est rejetée le temps d'une mesure en fin d'après-midi, sa tache restant faible (vignette de 17:15). Point à ignorer.")
|
||||
|
||||
# --- PR17 : un saut qui dure ---
|
||||
e("2026-09-05T12:00", "2026-09-09T00:00", "Displacement",
|
||||
"PR17 saute d'un coup sur corr_y à la mi-journée et reste décalée jusqu'à la fin du lot, encore un peu plus haut la première nuit ; corr_x et les autres cibles "
|
||||
"ne bougent pas, sa position brute ne bouge presque pas et son error_value monte à peine. Rien de visible sur les vignettes avant et après le saut (12:00, 12:15), "
|
||||
"ni les jours suivants. Cause non établie : à vérifier sur les images et à surveiller.")
|
||||
|
||||
# --- PR04 : cible à problème ---
|
||||
e("2026-08-17T05:15", "2026-09-09T00:00", "Target issue",
|
||||
"PR04 : sa tache est bien plus faible que celle de ses voisines PR03 et PR05, de jour comme de nuit (vignettes des 14, 22, 26/08 et 07/09), et son error_value, "
|
||||
"déjà plusieurs fois celle des voisines, monte encore au fil des semaines. Elle est rejetée par moments presque chaque jour, et presque sans interruption "
|
||||
"du 21 au 25/08 et du 06 au 08/09 ; entre les rejets, ses courbes corr_x et corr_y dérivent et changent de niveau, sans que les voisines suivent. "
|
||||
"Ce n'est pas un mouvement : cible terne, à vérifier sur place (salissure, orientation) ; ignorer sa courbe.")
|
||||
|
||||
# --- Trous de mesures ---
|
||||
NUIT = ("Une mesure manque pour tous les capteurs, la nuit : toutes les courbes ont un trou. {img}La tension est normale autour. Cause non établie ; "
|
||||
"le même trou revient vers la même heure presque chaque nuit du lot. Les courbes reprennent à la mesure suivante : rien à faire.")
|
||||
for d, f, img in [
|
||||
("2026-08-19T01:15", "2026-08-19T01:45", "L'image manque aussi. "),
|
||||
("2026-08-20T00:30", "2026-08-20T01:00", "L'image manque aussi. "),
|
||||
("2026-08-25T01:15", "2026-08-25T01:45", "L'image de cet instant existe. "),
|
||||
("2026-08-27T01:15", "2026-08-27T01:45", "L'image manque aussi. "),
|
||||
("2026-08-28T01:30", "2026-08-28T02:00", "L'image manque aussi. "),
|
||||
("2026-09-01T00:45", "2026-09-01T01:15", "L'image manque aussi. "),
|
||||
("2026-09-07T01:00", "2026-09-07T01:30", "L'image de cet instant existe. "),
|
||||
("2026-09-08T00:45", "2026-09-08T01:15", "L'image de cet instant existe. "),
|
||||
]:
|
||||
e(d, f, "No data", NUIT.format(img=img))
|
||||
NUIT2 = ("Deux mesures de suite manquent pour tous les capteurs, la nuit : toutes les courbes ont un trou, les images manquent aussi. La tension est normale autour. "
|
||||
"Cause non établie ; un trou revient vers la même heure presque chaque nuit du lot. Les courbes reprennent ensuite : rien à faire.")
|
||||
for d, f in [("2026-08-21T00:30", "2026-08-21T01:15"), ("2026-09-03T01:15", "2026-09-03T02:00"), ("2026-09-04T01:00", "2026-09-04T01:45"),
|
||||
("2026-09-05T01:30", "2026-09-05T02:15"), ("2026-09-06T01:15", "2026-09-06T02:00")]:
|
||||
e(d, f, "No data", NUIT2)
|
||||
e("2026-08-19T14:15", "2026-08-19T20:15", "No data",
|
||||
"Aucune mesure ni image pendant six heures l'après-midi, et les métriques système manquent aussi : toutes les courbes manquent. La tension est normale avant "
|
||||
"et après. D'après la documentation des données, un trou a lieu le même jour vers la même heure sur plusieurs autres stations : cause commune probable, "
|
||||
"hors de la station, non établie. Les courbes reprennent sans décalage : rien à faire.")
|
||||
e("2026-08-19T20:30", "2026-08-19T21:00", "No data",
|
||||
"Une mesure manque pour tous les capteurs juste après la reprise du grand trou de l'après-midi ; l'image manque aussi. Tension normale. Cause non établie ; rien à faire.")
|
||||
e("2026-08-20T03:45", "2026-08-20T06:15", "No data",
|
||||
"Aucune mesure ni image pendant plus de deux heures en fin de nuit, et les métriques système manquent aussi : toutes les courbes manquent. La tension est normale "
|
||||
"avant et après. Cause non établie. Les courbes reprennent sans décalage propre (la pose est partie avec le lever du soleil, étiqueté à part) : rien à faire.")
|
||||
e("2026-08-20T08:00", "2026-08-20T09:00", "No data",
|
||||
"Trois mesures de suite manquent pour tous les capteurs en matinée, les images aussi ; les métriques système, elles, sont là et la tension est normale. "
|
||||
"Cause non établie. Les courbes reprennent ensuite : rien à faire.")
|
||||
e("2026-08-22T16:30", "2026-08-22T17:00", "No data",
|
||||
"Une mesure manque pour tous les capteurs en fin d'après-midi, et les métriques système manquent quelques heures autour. D'après la documentation des données, "
|
||||
"un trou a lieu le même jour vers la même heure sur d'autres stations : cause commune probable, hors de la station, non établie. Les courbes reprennent : rien à faire.")
|
||||
e("2026-08-28T07:45", "2026-08-28T12:00", "No data",
|
||||
"Aucune mesure ni image pendant plus de quatre heures en matinée : toutes les courbes manquent. Les métriques système continuent et la tension est normale : "
|
||||
"la station est alimentée. Des engins travaillent dans la carrière à la reprise (image de 12:45), sans lien établi. Cause non établie ; "
|
||||
"les courbes reprennent sans décalage : rien à faire.")
|
||||
|
||||
E.sort(key=lambda x: (x["debut"], x["fin"]))
|
||||
with open(SORTIE, "w") as f:
|
||||
for x in E:
|
||||
f.write(json.dumps(x, ensure_ascii=False) + "\n")
|
||||
print(len(E), "étiquettes écrites dans", SORTIE)
|
||||
@@ -0,0 +1,21 @@
|
||||
"""Épisodes de rejets (capteurs hors --sauf) : suites d'instants avec au moins un rejet, coupées par un écart de plus de GAP minutes.
|
||||
Par épisode : premier et dernier instant rejeté, nombre d'instants, capteurs et leur nombre de rejets. NORDEND 16/08-09/09.
|
||||
Usage : python3 labeling/auto/etiqueteur/NORDEND_2026-08-16/outils/episodes.py [SAUF=PR04] [GAP=60]"""
|
||||
import csv, glob, sys
|
||||
from collections import defaultdict, Counter
|
||||
from datetime import datetime, timedelta
|
||||
sauf = set(sys.argv[1].split(",")) if len(sys.argv) > 1 else {"PR04"}
|
||||
gap = timedelta(minutes=int(sys.argv[2]) if len(sys.argv) > 2 else 60)
|
||||
R = defaultdict(list)
|
||||
for p in sorted(glob.glob("data/NORDEND/displacement/NORDEND_advanced_*.csv")):
|
||||
if "20260816" <= p[-12:-4] <= "20260908":
|
||||
for r in csv.DictReader(open(p)):
|
||||
if float(r["error_value"]) > float(r["error_threshold"]) and r["sensor_name"] not in sauf:
|
||||
R[datetime.fromisoformat(r["time_utc"][:16])].append(r["sensor_name"])
|
||||
ts = sorted(R)
|
||||
ep = [[ts[0]]]
|
||||
for a, b in zip(ts, ts[1:]):
|
||||
(ep[-1].append(b) if b - a <= gap else ep.append([b]))
|
||||
for e in ep:
|
||||
c = Counter(s for t in e for s in R[t])
|
||||
print(f"{e[0]:%d/%m %H:%M} → {e[-1]:%d/%m %H:%M} {len(e):3d} inst " + " ".join(f"{k}:{v}" for k, v in c.most_common()))
|
||||
@@ -0,0 +1,33 @@
|
||||
"""Par jour (UTC) et par capteur : médiane d'error_value de nuit (20-03) et de jour (08-17), part de mesures rejetées, heures des rejets (comptées par heure),
|
||||
médianes de corr_x, corr_y des mesures acceptées. NORDEND, 10/08-09/09.
|
||||
Usage : python3 labeling/auto/etiqueteur/NORDEND_2026-08-16/outils/jour_capteur.py PR04[,PR07]
|
||||
"""
|
||||
import csv, glob, statistics as st, sys
|
||||
from collections import defaultdict
|
||||
from datetime import datetime
|
||||
|
||||
caps = sys.argv[1].split(",")
|
||||
d = {c: defaultdict(list) for c in caps}
|
||||
for p in sorted(glob.glob("data/NORDEND/displacement/NORDEND_advanced_*.csv")):
|
||||
if "20260810" <= p[-12:-4] <= "20260909":
|
||||
for r in csv.DictReader(open(p)):
|
||||
if r["sensor_name"] in d:
|
||||
t = datetime.fromisoformat(r["time_utc"])
|
||||
e = float(r["error_value"])
|
||||
d[r["sensor_name"]][t.date()].append((t.hour, e, e > float(r["error_threshold"]),
|
||||
float(r["corr_x"]) if r["corr_x"] else None, float(r["corr_y"]) if r["corr_y"] else None))
|
||||
for c in caps:
|
||||
print(f"== {c}")
|
||||
for j in sorted(d[c]):
|
||||
L = d[c][j]
|
||||
nuit = [e for h, e, *_ in L if h >= 20 or h < 3]
|
||||
jour = [e for h, e, *_ in L if 8 <= h < 17]
|
||||
rej = [h for h, e, r, *_ in L if r]
|
||||
hs = defaultdict(int)
|
||||
for h in rej:
|
||||
hs[h] += 1
|
||||
cx = [x for *_, x, y in L if x is not None]
|
||||
cy = [y for *_, x, y in L if y is not None]
|
||||
m = lambda v: f"{st.median(v):.3f}" if v else " - "
|
||||
print(f"{j:%d/%m} n={len(L):3d} ev nuit {m(nuit)} jour {m(jour)} rej {len(rej):3d} ({100 * len(rej) / len(L):3.0f}%) "
|
||||
f"cx {m(cx)} cy {m(cy)} h: {' '.join(f'{h}:{n}' for h, n in sorted(hs.items()))}")
|
||||
@@ -0,0 +1,71 @@
|
||||
"""Départ du cycle thermique chaque matin, NORDEND, lot 16/08-09/09.
|
||||
Indice : médiane, sur PR14..PR18, de corr_x moins le niveau de la nuit (20-03 h) qui précède, en bruits (le cycle y creuse corr_x).
|
||||
Par jour : premier instant après 04:00 où l'indice passe sous -3 bruits et y reste deux mesures sur les trois suivantes (et la mesure d'avant),
|
||||
premier instant où le tilt de la caméra dépasse son niveau de nuit de 5 bruits (et la mesure d'avant), minimum de l'indice et son heure,
|
||||
dernier instant de la journée (avant 03:00 le lendemain) où l'indice est sous -3, et la température max du boîtier (sensor_thermal) du jour.
|
||||
Usage : python3 labeling/auto/etiqueteur/NORDEND_2026-08-16/outils/matins.py [PR16,PR18]
|
||||
"""
|
||||
import csv, glob, statistics as st
|
||||
from datetime import datetime, timedelta, timezone
|
||||
|
||||
import sys
|
||||
CAPS = sys.argv[1].split(",") if len(sys.argv) > 1 else ["PR14", "PR15", "PR16", "PR17", "PR18"]
|
||||
D0, D1 = datetime(2026, 8, 15, tzinfo=timezone.utc), datetime(2026, 9, 9, tzinfo=timezone.utc)
|
||||
|
||||
|
||||
def q(t):
|
||||
t = datetime.fromisoformat(t).replace(second=0, microsecond=0)
|
||||
return t - timedelta(minutes=t.minute % 15)
|
||||
|
||||
|
||||
cx = {c: {} for c in CAPS}
|
||||
for p in sorted(glob.glob("data/NORDEND/displacement/NORDEND_advanced_*.csv")):
|
||||
if "20260814" <= p[-12:-4] <= "20260909":
|
||||
for r in csv.DictReader(open(p)):
|
||||
if r["sensor_name"] in cx and r["corr_x"] and float(r["error_value"]) <= float(r["error_threshold"]):
|
||||
cx[r["sensor_name"]][q(r["time_utc"])] = float(r["corr_x"])
|
||||
tilt = {}
|
||||
for p in sorted(glob.glob("data/NORDEND/camera/NORDEND_camera_*.csv")):
|
||||
if "20260814" <= p[-12:-4] <= "20260909":
|
||||
for r in csv.DictReader(open(p)):
|
||||
tilt[q(r["time_utc"])] = float(r["median_tilt"])
|
||||
temp = {}
|
||||
for p in glob.glob("data/NORDEND/metrics/NORDEND_sensor_thermal_deg_c_2026_0[89]_*.csv"):
|
||||
for r in csv.DictReader(open(p)):
|
||||
try:
|
||||
temp[datetime.fromisoformat(r["time_utc"])] = float(r["metric"])
|
||||
except (ValueError, IndexError):
|
||||
pass
|
||||
|
||||
|
||||
def bruit(d):
|
||||
ts = sorted(d)
|
||||
return st.median(abs(d[b] - d[a]) for a, b in zip(ts, ts[1:]) if b - a == timedelta(minutes=15))
|
||||
|
||||
|
||||
B = {c: bruit(cx[c]) for c in CAPS}
|
||||
BT = bruit(tilt)
|
||||
ts_all = sorted(set().union(*[set(cx[c]) for c in CAPS]) | set(tilt))
|
||||
day = D0 + timedelta(days=1)
|
||||
while day < D1:
|
||||
n0, n1 = day - timedelta(hours=4), day + timedelta(hours=3)
|
||||
niv = {c: st.median(v for t, v in cx[c].items() if n0 <= t < n1) for c in CAPS}
|
||||
nt = st.median(v for t, v in tilt.items() if n0 <= t < n1)
|
||||
w = [t for t in ts_all if day + timedelta(hours=4) <= t < day + timedelta(hours=27)]
|
||||
idx = {}
|
||||
for t in w:
|
||||
v = [(cx[c][t] - niv[c]) / B[c] for c in CAPS if t in cx[c]]
|
||||
if len(v) >= min(3, len(CAPS)):
|
||||
idx[t] = st.median(v)
|
||||
wi = [t for t in w if t in idx]
|
||||
dep = next((t for i, t in enumerate(wi) if idx[t] <= -3 and sum(idx[u] <= -3 for u in wi[i + 1:i + 4]) >= 2), None)
|
||||
av = lambda t, L: L[L.index(t) - 1] if t and L.index(t) > 0 else None
|
||||
wt = [t for t in w if t in tilt]
|
||||
td = next((t for t in wt if (tilt[t] - nt) / BT >= 5), None)
|
||||
mn = min(wi, key=lambda t: idx[t]) if wi else None
|
||||
last = max((t for t in wi if idx[t] <= -3), default=None)
|
||||
tm = max((v for t, v in temp.items() if day <= t < day + timedelta(days=1)), default=float("nan"))
|
||||
f = lambda t: f"{t:%d/%m %H:%M}" if t else " - "
|
||||
print(f"{day:%d/%m} départ corr {f(dep)} (avant {f(av(dep, wi))}) tilt {f(td)} (avant {f(av(td, wt))}) "
|
||||
f"min {idx[mn] if mn else 0:+6.1f} à {f(mn)} dernier<-3 {f(last)} Tmax {tm:.1f}")
|
||||
day += timedelta(days=1)
|
||||
@@ -0,0 +1,15 @@
|
||||
"""Instants du lot où des capteurs sont rejetés (hors ceux de --sauf), avec leurs noms ; NORDEND 16/08-09/09.
|
||||
Usage : python3 labeling/auto/etiqueteur/NORDEND_2026-08-16/outils/rejets.py [SAUF=PR04] [MIN=1]"""
|
||||
import csv, glob, sys
|
||||
from collections import defaultdict
|
||||
sauf = set(sys.argv[1].split(",")) if len(sys.argv) > 1 else {"PR04"}
|
||||
mn = int(sys.argv[2]) if len(sys.argv) > 2 else 1
|
||||
R = defaultdict(list)
|
||||
for p in sorted(glob.glob("data/NORDEND/displacement/NORDEND_advanced_*.csv")):
|
||||
if "20260816" <= p[-12:-4] <= "20260909":
|
||||
for r in csv.DictReader(open(p)):
|
||||
if float(r["error_value"]) > float(r["error_threshold"]) and r["sensor_name"] not in sauf:
|
||||
R[r["time_utc"][:16]].append(r["sensor_name"])
|
||||
for t in sorted(R):
|
||||
if len(R[t]) >= mn:
|
||||
print(t, len(R[t]), ",".join(sorted(R[t])))
|
||||
@@ -0,0 +1,79 @@
|
||||
"""Table au pas natif de plusieurs capteurs, NORDEND, lot 16/08-09/09 (marges 14/08-10/09).
|
||||
Par capteur : corr_x et corr_y en bruits, écart à la médiane de la nuit (20-03 h) qui précède ; R = rejetée ; e = error_value (si --err).
|
||||
Puis la pose : pan, tilt (écart à la nuit, en bruits de la pose), temps sans mesure.
|
||||
Usage (depuis la racine) :
|
||||
python3 labeling/auto/etiqueteur/NORDEND_2026-08-16/outils/table.py PR18,PR16 2026-08-17T04:00 2026-08-17T09:00 [--err] [--brut]
|
||||
--brut : x, y bruts au lieu de corr (écart à la nuit, en px)
|
||||
"""
|
||||
import csv, glob, statistics as st, sys
|
||||
from datetime import datetime, timedelta, timezone
|
||||
|
||||
caps = sys.argv[1].split(",")
|
||||
deb, fin = (datetime.fromisoformat(a).replace(tzinfo=timezone.utc) for a in sys.argv[2:4])
|
||||
ERR, BRUT = "--err" in sys.argv, "--brut" in sys.argv
|
||||
J0, J1 = (deb - timedelta(days=2)).strftime("%Y%m%d"), (fin + timedelta(days=1)).strftime("%Y%m%d")
|
||||
|
||||
|
||||
def q(t):
|
||||
t = datetime.fromisoformat(t).replace(second=0, microsecond=0)
|
||||
return t - timedelta(minutes=t.minute % 15)
|
||||
|
||||
|
||||
rows = {c: {} for c in caps}
|
||||
for p in sorted(glob.glob("data/NORDEND/displacement/NORDEND_advanced_*.csv")):
|
||||
if J0 <= p[-12:-4] <= J1:
|
||||
for r in csv.DictReader(open(p)):
|
||||
if r["sensor_name"] in rows:
|
||||
rej = float(r["error_value"]) > float(r["error_threshold"])
|
||||
g = lambda k: None if rej or not r[k] else float(r[k])
|
||||
a, b = ("x", "y") if BRUT else ("corr_x", "corr_y")
|
||||
rows[r["sensor_name"]][q(r["time_utc"])] = (float(r["error_value"]), g(a) if not BRUT else float(r[a]),
|
||||
g(b) if not BRUT else float(r[b]), rej)
|
||||
cam = {}
|
||||
for p in sorted(glob.glob("data/NORDEND/camera/NORDEND_camera_*.csv")):
|
||||
if J0 <= p[-12:-4] <= J1:
|
||||
for r in csv.DictReader(open(p)):
|
||||
cam[q(r["time_utc"])] = (float(r["median_pan"]), float(r["median_tilt"]))
|
||||
|
||||
|
||||
def bruit(d, k):
|
||||
ts = sorted(d)
|
||||
v = [abs(d[b][k] - d[a][k]) for a, b in zip(ts, ts[1:]) if d[a][k] is not None and d[b][k] is not None and b - a == timedelta(minutes=15)]
|
||||
return st.median(v) or 1e-9
|
||||
|
||||
|
||||
def niveau(d, k, t):
|
||||
d0 = t.replace(hour=0, minute=0) - (timedelta(days=1) if t.hour < 20 else timedelta(0))
|
||||
v = [d[u][k] for u in d if d0 + timedelta(hours=20) <= u < d0 + timedelta(hours=27) and d[u][k] is not None]
|
||||
return st.median(v) if v else None
|
||||
|
||||
|
||||
B = {c: {k: bruit(rows[c], k) for k in (1, 2)} for c in caps}
|
||||
BC = {k: bruit(cam, k) for k in (0, 1)}
|
||||
hdr = "instant " + "".join(f"{c:>20}" for c in caps) + " pan tilt"
|
||||
print(hdr)
|
||||
t, n = deb, 0
|
||||
while t <= fin:
|
||||
if not any(t in rows[c] for c in caps):
|
||||
print(f"{t:%m-%d %H:%M} (pas de mesure)")
|
||||
else:
|
||||
s = f"{t:%m-%d %H:%M} "
|
||||
for c in caps:
|
||||
r = rows[c].get(t)
|
||||
if r is None:
|
||||
s += f"{'-':>20}"
|
||||
continue
|
||||
f = []
|
||||
for k in (1, 2):
|
||||
nv = niveau(rows[c], k, t)
|
||||
f.append(" ." if r[k] is None or nv is None else f"{(r[k] - nv) / B[c][k]:+5.0f}")
|
||||
e = f"{r[0]:.2f}" if ERR else ""
|
||||
s += f"{f[0]:>6}{f[1]:>6}{'R' if r[3] else ' '}{e:>5} "
|
||||
if t in cam:
|
||||
nv = [niveau(cam, k, t) for k in (0, 1)]
|
||||
s += "".join(f"{(cam[t][k] - nv[k]) / BC[k]:+7.0f}" for k in (0, 1))
|
||||
print(s)
|
||||
n += 1
|
||||
if n % 24 == 0:
|
||||
print(hdr)
|
||||
t += timedelta(minutes=15)
|
||||
@@ -0,0 +1,28 @@
|
||||
"""Instants touchés sur une fenêtre : capteurs rejetés (hors PR04) et capteurs hors niveau (plages_gl1.txt : > 6 bruits du niveau glissant ±3 h, hors PR04).
|
||||
Usage : python3 labeling/auto/etiqueteur/NORDEND_2026-08-16/outils/touche.py 2026-08-17T02:00 2026-08-17T11:00"""
|
||||
import csv, glob, re, sys
|
||||
from collections import defaultdict
|
||||
from datetime import datetime, timedelta
|
||||
D = "labeling/auto/etiqueteur/NORDEND_2026-08-16/"
|
||||
a, b = (datetime.fromisoformat(x) for x in sys.argv[1:3])
|
||||
rej, off, pres = defaultdict(list), defaultdict(list), set()
|
||||
for p in sorted(glob.glob("data/NORDEND/displacement/NORDEND_advanced_*.csv")):
|
||||
if (a - timedelta(days=1)).strftime("%Y%m%d") <= p[-12:-4] <= b.strftime("%Y%m%d"):
|
||||
for r in csv.DictReader(open(p)):
|
||||
t = datetime.fromisoformat(r["time_utc"][:16])
|
||||
pres.add(t)
|
||||
if float(r["error_value"]) > float(r["error_threshold"]) and r["sensor_name"] != "PR04":
|
||||
rej[t].append(r["sensor_name"])
|
||||
for l in open(D + "plages_gl1.txt"):
|
||||
m = re.match(r"(\d{4}-\d\d-\d\dT\d\d:\d\d)Z\s+\d+\s+(.*?)\|", l)
|
||||
if m:
|
||||
s = [x for x in m.group(2).split() if not x.startswith("PR04")]
|
||||
if s:
|
||||
off[datetime.fromisoformat(m.group(1))] = s
|
||||
t = a
|
||||
while t <= b:
|
||||
if t not in pres:
|
||||
print(f"{t:%d/%m %H:%M} (pas de mesure)")
|
||||
elif rej[t] or off[t]:
|
||||
print(f"{t:%d/%m %H:%M} rej {','.join(sorted(rej[t])) or '-':40s} hors {' '.join(off[t])}")
|
||||
t += timedelta(minutes=15)
|
||||
Reference in new issue
Block a user