diff --git a/support/2026-11-12_LENZSPITZE_metrique-qualite/analyse.md b/support/2026-11-12_LENZSPITZE_metrique-qualite/analyse.md index 75eef02..e99d85c 100644 --- a/support/2026-11-12_LENZSPITZE_metrique-qualite/analyse.md +++ b/support/2026-11-12_LENZSPITZE_metrique-qualite/analyse.md @@ -1,46 +1,48 @@ # Analyse : métrique de qualité des points, LENZSPITZE +## Le dossier + +| Dossier / fichier | Contenu | +|---|---| +| `input/` | ce qui est reçu : `demande.md` (mail de David, statut), `capture.png` (sa section 4.4) | +| `output/` | **ce qui est envoyé, et rien d'autre** : `reponse.md` (le mail), `fig1` et `fig2` (les pièces jointes) | +| `analyse.md` | cette synthèse, pour Marc | +| `analyste/` | le travail de l'analyste : `analyse-metriques.md` (le détail, chaque fait avec sa commande, une légende par figure), `figures.py` (régénère les figures), `fig3` (annexe proposée, non jointe), `outils/` (chiffres), `travail/` (vignettes de vérification) | +| `ecarte/` | la première heatmap `error_value`, écartée (voir plus bas) | + +Régénérer les figures, depuis la racine du dépôt : `.venv/bin/python support/2026-11-12_LENZSPITZE_metrique-qualite/analyste/figures.py`. + ## La question -David veut un graphique de « la métrique de qualité des points » pour son rapport aux CFF, et savoir si on pourra l'exporter vers Geovis. +David finalise un rapport pour les CFF. Sa section 4.4, « Métrique de la qualité des points » (`input/capture.png`), dit que les métriques de qualité de chaque point permettent d'identifier l'origine d'une dégradation de mesure (occlusion, phénomène météorologique, salissure du prisme), que les images archivées les complètent, et finit par « Mettre graphique ». Il demande ce graphique, et si ces métriques pourront aller sur Geovis. -## Quelle métrique +Il parle donc des métriques d'image, qui disent **pourquoi** une mesure se dégrade, et pas seulement d'`error_value`, qui dit **qu'**elle se dégrade. -Retenue : `error_value`, rapportée au seuil de chaque point (`error_threshold`, 0,7 pour tous sauf 1008 à 0,5). C'est la seule métrique de qualité par point que la caméra livre déjà au client (dans l'export horaire, `_error` = moyenne horaire des `error_value`, `labeling/connaissances/colonnes-des-deplacements.md`) et celle qui décide si une mesure est jugée fiable. Les six métriques d'image (`peak` … `snr`, `labeling/connaissances/metriques-de-qualite.md`) sont remplies sur LENZSPITZE mais ne sont pas livrées au client : écartées, à proposer seulement si David parle d'autre chose. +## Ce que montrent les données -## Faits +Période : 2026-10-16 02:10 → 2026-11-05 10:10 UTC, 41 points, une mesure toutes les 5 min (`inventaire.py`). Détail et commandes : `analyste/analyse-metriques.md`, §1. -Commande : `.venv/bin/python support/2026-11-12_LENZSPITZE_metrique-qualite/figure.py` (figure et tableau ci-dessous). +- **Le flux est la métrique d'image utile au client** : la lumière renvoyée par la cible, rapportée à son niveau habituel. Elle dit la cause là où `error_value` ne dit que la dégradation. Déconseillées : `dominance` (faussée en permanence sur 8011 à 8013, trop proches dans l'image), `peak` (saturé sur 7 points), `sharpness` et `fwhm` (illisibles hors spécialistes). +- **Le niveau habituel d'`error_value` ne classe pas les points** : il suit la forme de la tache (Spearman −0,74 avec `sharpness`), pas la distance (−0,20). D'où 1023, en apparence le pire point en permanence (~0,58 du seuil). +- **Au-dessus du seuil, `error_value` plafonne** vers 1,4 fois le seuil : elle ne dit plus l'ampleur, le flux si. +- **Les dépassements du seuil** se concentrent sur quatre nuits (17, 22-23, 26 et 27.10) et sur les points lointains ; presque plus aucun depuis le 28.10. -- Données : 41 points (29 cibles, 12 références), 5 945 instants toutes les 5 min, du 2026-10-16 02:10 au 2026-11-05 10:10 UTC (`inventaire.py`). Rien après le 05.11 10:10 dans `data/`. -- Médiane horaire du rapport `error_value / seuil` : la plupart des cibles restent sous 0,3 ; 1023 autour de 0,58 (plus haut de toutes, jamais au-dessus du seuil) ; 1022 0,32 ; 1008 0,27 (seuil plus bas). -- Heures au-dessus du seuil (sur 489) : cibles 101B 22, 202H 19, 102H 17, 201B 16, 1002 14, 1008 13, 7013H 10, les autres 0 à 5 ; références 8012 35, 8013 27, 8014 22, 8011 20, 8010 17. -- Ces heures se groupent en quelques nuits, les mêmes points à la fois : 17.10, 23.10, 26.10 et 27.10 (nuits du 26 au 27.10 déjà expliquées au client, perte de visibilité nocturne, cas du 2026-10-28). Depuis le 28.10, presque aucune heure au-dessus du seuil. +## Figures retenues + +- `output/fig1_visibilite_nuit-26-10_LENZSPITZE.png` (jointe) : nuit du 25 au 26.10. Le flux des points lointains tombe jusqu'à 0,1 %, d'autant plus tôt et plus fort que le point est loin ; leur erreur passe le seuil ; le point proche reste normal ; l'image de 03:00 montre les points lointains disparus. Perte de visibilité, `strongly supported` ; sa nature (brouillard, brume, pluie) `insufficient evidence`. +- `output/fig2_occultation_92H_30-10_LENZSPITZE.png` (jointe) : 30.10. Image de 14:01, charge d'un engin de levage contre 92H ; son flux tombe à 4 % à 13:55, sans effet sur les autres points ; son erreur reste sous le seuil (0,22 pour 0,7). Le flux voit l'obstacle que l'erreur ne signale pas. Limites : images horaires, aucune à 13:55 ; 92H est une référence, pas une cible de voie (aucun cas de cible de voie avec image trouvé). +- `analyste/fig3_vue-ensemble_hors-seuil_LENZSPITZE.png` (annexe, non jointe, proposée dans le mail) : part des mesures au-dessus du seuil par point et par jour, points classés par distance. + +**Écartée**, `ecarte/metrique-qualite_LENZSPITZE.png` (heatmap `error_value` / seuil, médiane horaire) : elle n'illustre pas le texte de David (que, pas pourquoi), est trop dense imprimée, fait passer 1023 pour le pire point, et rangeait 1024, 8003 et 8010 (`ref`, références locales traitées comme cibles) parmi les références. ## Ce qui reste non établi -- Si David pense bien à `error_value` : `insufficient evidence`, la question ne le précise pas. -- Le format exact de l'export FTP d'Inogy (horaire avec `_error` ou non) : non vérifié. -- Geovis : dépend de l'intégration MQTT (Marc, Amberg), hors de ce que les données disent. - -## Figures - -- `metrique-qualite_LENZSPITZE.png` : une ligne par point, une colonne par heure, bleu clair à foncé jusqu'au seuil, rouge au-dessus, gris sans mesure. +- Le texte de David cite « salissure du prisme » et « phénomène météorologique » : aucun cas prouvé sur la période. +- « Visibles sur la plateforme, avec alarme » : le flux n'est aujourd'hui ni livré ni sous alarme (d'après l'analyste) ; qu'`error_value` déclenche une alarme, non vérifié. **À vérifier par Marc avant l'envoi** : la deuxième remarque du mail sur le texte de David s'appuie là-dessus. +- 92H masqué reste dans la compensation, avec une erreur sous le seuil : à dire ou non au client. ## Hors question (pour Marc) -- 1023 a un `error_value` nettement plus haut que les autres cibles et très stable depuis le 26.10 (~0,58 du seuil) ; il n'a pas de motif dans `lentzpitze_patterns.json`. -- Données pompées jusqu'au 05.11 10:10 seulement : à repomper si David veut la période jusqu'à aujourd'hui. - -## Choix final (2026-11-12) - -La capture de la section 4.4 du rapport de David (`capture.png`) montre qu'il parle des métriques d'image, qui disent l'origine d'une dégradation. La heatmap `metrique-qualite_LENZSPITZE.png` est donc abandonnée : elle n'illustre pas ce texte, est trop dense imprimée, et fait passer 1023 pour le pire point (le niveau d'`error_value` suit la forme de la tache, pas la qualité). Elle classait aussi 1024, 8003 et 8010 (`ref`, des références locales traitées comme cibles) parmi les références. - -Retenues, d'après l'analyste (`analyste/analyse-metriques.md`, figures par `analyste/figures.py`) : -- `analyste/fig1_visibilite_nuit-26-10_LENZSPITZE.png` : perte de visibilité, nuit du 25 au 26.10 ; -- `analyste/fig2_occultation_92H_30-10_LENZSPITZE.png` : 92H masqué par un engin de levage, 30.10 ; -- `analyste/fig3_vue-ensemble_hors-seuil_LENZSPITZE.png` : proposée en annexe, non jointe. - -À vérifier par Marc avant l'envoi : que l'erreur de mesure déclenche ou non une alarme, et que le flux n'est livré nulle part au client (la deuxième remarque du mail sur son texte s'appuie là-dessus). - -Hors question (pour Marc), ajouts de l'analyste : 13 instants isolés où le même groupe de points perd sa cible le temps d'une mesure, alors que les images de la même minute les montrent visibles (ex. 03.11 19:30) ; l'étiquette « No data » du 23.10 au 26.10 dans `labeling/auto/LENZSPITZE.jsonl` est fausse (données des 24 et 25.10 présentes), non modifiée. +- 13 instants isolés (ex. 03.11 19:30) où le même groupe de points (cibles paires de 1002 à 1022, 1024, 7013B/H, 8002, 8003, 8004, 8010, 8019, 92H) perd sa cible le temps d'une mesure, alors que les images de la même minute les montrent visibles : passage ou panne d'acquisition, non établi. +- Le flux des cibles glisse de 0,92 à 0,77 du 02 au 05.11 : à suivre après un repompage. +- L'étiquette « No data » du 23.10 23:55 au 26.10 00:00 dans `labeling/auto/LENZSPITZE.jsonl` est fausse (données des 24 et 25.10 présentes) ; non modifiée. diff --git a/support/2026-11-12_LENZSPITZE_metrique-qualite/analyste/analyse-metriques.md b/support/2026-11-12_LENZSPITZE_metrique-qualite/analyste/analyse-metriques.md index c698777..469fe68 100644 --- a/support/2026-11-12_LENZSPITZE_metrique-qualite/analyste/analyse-metriques.md +++ b/support/2026-11-12_LENZSPITZE_metrique-qualite/analyste/analyse-metriques.md @@ -1,6 +1,7 @@ # Métriques de qualité des points : LENZSPITZE (Crissier), 2026-10-16T00:00Z → 2026-11-05T11:00Z (UTC) -Demande : illustrer la section 4.4 du rapport Inogy aux CFF, « Métrique de la qualité des points » (`capture.png`, `demande.md`). Selon ce texte, les métriques de chaque point identifient l'origine d'une dégradation, et les images archivées la confirment. Le graphique doit donc montrer **pourquoi** une mesure se dégrade, pas seulement **qu'elle** se dégrade. +Demande : illustrer la section 4.4 du rapport Inogy aux CFF, « Métrique de la qualité des points » (`input/capture.png`, `input/demande.md`). Selon ce texte, les métriques de chaque point identifient l'origine d'une dégradation, et les images archivées la confirment. Le graphique doit donc montrer **pourquoi** une mesure se dégrade, pas seulement **qu'elle** se dégrade. +Les figures 1 et 2 sont dans `output/` (pièces jointes du mail), la figure 3 ici ; `figures.py` les y écrit. Abréviations des commandes (toutes lancées depuis la racine du dépôt) : - `INV` = `python3 agent-tools/inventaire.py data/LENZSPITZE/ --debut 2026-10-16T00:00Z --fin 2026-11-05T11:00Z` @@ -69,7 +70,7 @@ Script : `.venv/bin/python support/2026-11-12_LENZSPITZE_metrique-qualite/analys - **Légende proposée.** « Figure Z : part des mesures au-dessus du seuil d'alarme, par point et par jour, du 16.10 au 05.11.2026 (points classés par distance à la caméra). » - **Limite.** Le pas journalier efface les événements d'une mesure (`92H` le 30.10). Les cases claires « moins de 2 % » viennent en partie des 13 instants de cause non établie (§ 1.3). Une fausse lecture est possible : la figure ne dit pas la cause, seulement où et quand. -### 3.4 Avis sur la figure existante (`metrique-qualite_LENZSPITZE.png`) +### 3.4 Avis sur la figure existante (`ecarte/metrique-qualite_LENZSPITZE.png`) **Je ne la garde pas pour la section 4.4**, et je la remplace en annexe par la figure 3. Raisons : - elle n'illustre pas le texte du client : elle montre `error_value` seule, donc **que** la mesure se dégrade, jamais **pourquoi** ; - elle est trop dense pour une page imprimée : 41 lignes × 489 heures, six bleus voisins difficiles à distinguer ; @@ -104,4 +105,4 @@ Si elle reste, il faut au minimum trier par distance, passer au pas journalier e - La mission a été recadrée en cours de route (section 4.4 du client). ## Sources lues -`.claude/skills/analyser-lot/SKILL.md` ; `.claude/skills/lire-les-donnees/SKILL.md` ; `labeling/connaissances/metriques-de-qualite.md` ; `labeling/connaissances/colonnes-des-deplacements.md` (section LENZSPITZE et suivantes) ; `labeling/auto/LENZSPITZE.jsonl` (cité par la demande) ; `support/2026-11-12_LENZSPITZE_metrique-qualite/` (`demande.md`, `analyse.md`, `reponse.md`, `figure.py`, `metrique-qualite_LENZSPITZE.png`, `capture.png`) ; `data/LENZSPITZE/` (exports advanced, `lentzpitze_patterns.json`, images). Non lus faute de temps : `labeling/carte-des-etiquettes.md`, `labeling/familles.md`, `chaine-de-mesure.md`, `pieges-des-donnees.md`, `events/`. +`.claude/skills/analyser-lot/SKILL.md` ; `.claude/skills/lire-les-donnees/SKILL.md` ; `labeling/connaissances/metriques-de-qualite.md` ; `labeling/connaissances/colonnes-des-deplacements.md` (section LENZSPITZE et suivantes) ; `labeling/auto/LENZSPITZE.jsonl` (cité par la demande) ; `support/2026-11-12_LENZSPITZE_metrique-qualite/` (`demande.md`, `analyse.md`, `reponse.md`, `figure.py`, `ecarte/metrique-qualite_LENZSPITZE.png`, `capture.png`) ; `data/LENZSPITZE/` (exports advanced, `lentzpitze_patterns.json`, images). Non lus faute de temps : `labeling/carte-des-etiquettes.md`, `labeling/familles.md`, `chaine-de-mesure.md`, `pieges-des-donnees.md`, `events/`. diff --git a/support/2026-11-12_LENZSPITZE_metrique-qualite/analyste/figures.py b/support/2026-11-12_LENZSPITZE_metrique-qualite/analyste/figures.py index 0079432..845793a 100644 --- a/support/2026-11-12_LENZSPITZE_metrique-qualite/analyste/figures.py +++ b/support/2026-11-12_LENZSPITZE_metrique-qualite/analyste/figures.py @@ -92,7 +92,7 @@ def fig1(serie): panneaux(axe, axf, serie, pts, t("2026-10-25T20:00"), t("2026-10-26T11:00"), [t("2026-10-26T03:00")]) fig.suptitle("LENZSPITZE (Crissier) : perte de visibilité dans la nuit du 26.10.2026", fontsize=14, x=0.02, ha="left") fig.subplots_adjust(left=0.08, right=0.86, top=0.93, bottom=0.07) - fig.savefig(ICI / "fig1_visibilite_nuit-26-10_LENZSPITZE.png") + fig.savefig(ICI.parent / "output" / "fig1_visibilite_nuit-26-10_LENZSPITZE.png") def fig2(serie): @@ -110,7 +110,7 @@ def fig2(serie): panneaux(axe, axf, serie, pts, t("2026-10-30T12:30"), t("2026-10-30T15:30"), [t("2026-10-30T14:01")]) fig.suptitle("LENZSPITZE (Crissier) : point 92H masqué par un obstacle temporaire, 30.10.2026", fontsize=14, x=0.02, ha="left") fig.subplots_adjust(left=0.08, right=0.86, top=0.93, bottom=0.07) - fig.savefig(ICI / "fig2_occultation_92H_30-10_LENZSPITZE.png") + fig.savefig(ICI.parent / "output" / "fig2_occultation_92H_30-10_LENZSPITZE.png") def fig3(serie): diff --git a/support/2026-11-12_LENZSPITZE_metrique-qualite/figure.py b/support/2026-11-12_LENZSPITZE_metrique-qualite/ecarte/figure.py similarity index 98% rename from support/2026-11-12_LENZSPITZE_metrique-qualite/figure.py rename to support/2026-11-12_LENZSPITZE_metrique-qualite/ecarte/figure.py index 684a1db..f0fb32b 100644 --- a/support/2026-11-12_LENZSPITZE_metrique-qualite/figure.py +++ b/support/2026-11-12_LENZSPITZE_metrique-qualite/ecarte/figure.py @@ -1,5 +1,5 @@ """Métrique de qualité des points (error_value / error_threshold), médiane horaire, une ligne par point. -Usage : .venv/bin/python support/2026-11-12_LENZSPITZE_metrique-qualite/figure.py""" +Usage : .venv/bin/python support/2026-11-12_LENZSPITZE_metrique-qualite/ecarte/figure.py (écartée, voir analyse.md)""" import csv, glob, statistics from collections import defaultdict from datetime import datetime, timedelta diff --git a/support/2026-11-12_LENZSPITZE_metrique-qualite/metrique-qualite_LENZSPITZE.png b/support/2026-11-12_LENZSPITZE_metrique-qualite/ecarte/metrique-qualite_LENZSPITZE.png similarity index 100% rename from support/2026-11-12_LENZSPITZE_metrique-qualite/metrique-qualite_LENZSPITZE.png rename to support/2026-11-12_LENZSPITZE_metrique-qualite/ecarte/metrique-qualite_LENZSPITZE.png diff --git a/support/2026-11-12_LENZSPITZE_metrique-qualite/capture.png b/support/2026-11-12_LENZSPITZE_metrique-qualite/input/capture.png similarity index 100% rename from support/2026-11-12_LENZSPITZE_metrique-qualite/capture.png rename to support/2026-11-12_LENZSPITZE_metrique-qualite/input/capture.png diff --git a/support/2026-11-12_LENZSPITZE_metrique-qualite/demande.md b/support/2026-11-12_LENZSPITZE_metrique-qualite/input/demande.md similarity index 100% rename from support/2026-11-12_LENZSPITZE_metrique-qualite/demande.md rename to support/2026-11-12_LENZSPITZE_metrique-qualite/input/demande.md diff --git a/support/2026-11-12_LENZSPITZE_metrique-qualite/analyste/fig1_visibilite_nuit-26-10_LENZSPITZE.png b/support/2026-11-12_LENZSPITZE_metrique-qualite/output/fig1_visibilite_nuit-26-10_LENZSPITZE.png similarity index 100% rename from support/2026-11-12_LENZSPITZE_metrique-qualite/analyste/fig1_visibilite_nuit-26-10_LENZSPITZE.png rename to support/2026-11-12_LENZSPITZE_metrique-qualite/output/fig1_visibilite_nuit-26-10_LENZSPITZE.png diff --git a/support/2026-11-12_LENZSPITZE_metrique-qualite/analyste/fig2_occultation_92H_30-10_LENZSPITZE.png b/support/2026-11-12_LENZSPITZE_metrique-qualite/output/fig2_occultation_92H_30-10_LENZSPITZE.png similarity index 100% rename from support/2026-11-12_LENZSPITZE_metrique-qualite/analyste/fig2_occultation_92H_30-10_LENZSPITZE.png rename to support/2026-11-12_LENZSPITZE_metrique-qualite/output/fig2_occultation_92H_30-10_LENZSPITZE.png diff --git a/support/2026-11-12_LENZSPITZE_metrique-qualite/reponse.md b/support/2026-11-12_LENZSPITZE_metrique-qualite/output/reponse.md similarity index 100% rename from support/2026-11-12_LENZSPITZE_metrique-qualite/reponse.md rename to support/2026-11-12_LENZSPITZE_metrique-qualite/output/reponse.md