.
This commit is contained in:
1 parent
4084cada20
commit
9b90fcac0c
4 files changed
+80
-22
No files matched your search
+28
-18
@@ -6,8 +6,9 @@ AIMsight, dans le format que Support-Agent lit déjà. LECTURE SEULE. Essayé le
|
||||
(set -a && . ./.env && set +a && python3 /workspaces/Support-Agent/extraction/pomper.py --images)
|
||||
(set -a && . ./.env && set +a && python3 /workspaces/Support-Agent/extraction/pomper.py --du 2026-08-01 --au 2026-08-08 --images WEISSHORN)
|
||||
|
||||
Sans station : celles de `stations.txt`. Sans `--du` : chaque station repart de son dernier jour de déplacements pompé,
|
||||
repompé (il était peut-être incomplet), ou des 30 derniers jours si elle n'en a pas ; sans `--au` : jusqu'à maintenant.
|
||||
Sans station : celles de `stations.txt`. Sans `--du` : chaque station comble ses jours de déplacements manquants avant
|
||||
le dernier pompé, puis repart de ce dernier jour, repompé (il était peut-être incomplet), ou des 30 derniers jours si
|
||||
elle n'en a pas ; sans `--au` : jusqu'à maintenant.
|
||||
|
||||
Sortie (défaut : le `data/` de Support-Agent, à côté de ce dossier ; le container monte `~` sur `/workspaces`) :
|
||||
<STATION>/metrics/<STATION>_<métrique>_<AAAA_MM_JJ>_00_00 to <AAAA_MM_JJ>_23_00.csv métriques système, par jour
|
||||
@@ -78,10 +79,19 @@ def acquisition_unit(system):
|
||||
return pick[0] if pick else None
|
||||
|
||||
|
||||
def dernier_jour(dossier):
|
||||
"""Jour du dernier fichier de déplacements pompé dans le dossier de la station, ou None."""
|
||||
jours = [p.stem.rsplit("_", 1)[1] for p in (dossier / "displacement").glob("*_advanced_*.csv")]
|
||||
return datetime.strptime(max(jours), "%Y%m%d").date() if jours else None
|
||||
def plages_suivi(dossier, fin, demain):
|
||||
"""Sans --du : (début, fin, remplacer) à pomper, d'après les jours de déplacements déjà pompés. Les jours manquants
|
||||
entre le premier et le dernier (plages pompées à part, jour en échec) sont comblés sans toucher aux autres ; le
|
||||
dernier jour est repompé (pompé en cours de journée, il était incomplet) jusqu'à maintenant ; une station sans
|
||||
déplacements pompés reçoit les 30 derniers jours."""
|
||||
jours = {datetime.strptime(p.stem.rsplit("_", 1)[1], "%Y%m%d").date()
|
||||
for p in (dossier / "displacement").glob(f"{dossier.name}_advanced_*.csv")}
|
||||
if not jours:
|
||||
return [(demain - timedelta(days=JOURS_NOUVELLE + 1), fin, True)]
|
||||
premier, dernier = min(jours), max(jours)
|
||||
trous = [premier + timedelta(days=k) for k in range((dernier - premier).days)
|
||||
if premier + timedelta(days=k) not in jours]
|
||||
return ([(trous[0], dernier, False)] if trous else []) + [(dernier, fin, True)]
|
||||
|
||||
|
||||
def pomper_metriques(session, system, station, debut, fin, out, remplacer):
|
||||
@@ -243,19 +253,19 @@ def main():
|
||||
if system is None:
|
||||
print(f"{station} : système inconnu")
|
||||
continue
|
||||
# sans --du : du dernier jour pompé, remplacé (pompé en cours de journée, il est incomplet), jusqu'à
|
||||
# maintenant ; les jours plus anciens manquants restent à la commande avec --du
|
||||
debut = du or dernier_jour(a.out / station) or demain - timedelta(days=JOURS_NOUVELLE + 1)
|
||||
print(f"{station} : du {debut} au {fin - timedelta(days=1)} inclus")
|
||||
pomper_metriques(session, system, station, debut, fin, a.out, du is None)
|
||||
plages = [(du, fin, False)] if du else plages_suivi(a.out / station, fin, demain)
|
||||
unit = acquisition_unit(system)
|
||||
if unit is None:
|
||||
print(f"{station} : pas d'unité d'acquisition reconnue, ni déplacements, ni caméra, ni images")
|
||||
continue
|
||||
pomper_deplacements(unit, db, station, debut, fin, a.out, du is None)
|
||||
for flag, dossier in ((a.images, "images"), (a.diff, "images_diff")):
|
||||
if flag:
|
||||
pomper_images(unit, db, session, station, debut, fin, dossier, a.every, a.out)
|
||||
for debut, fin_plage, remplacer in plages:
|
||||
print(f"{station} : du {debut} au {fin_plage - timedelta(days=1)} inclus"
|
||||
+ ("" if remplacer else ", jours manquants seulement"))
|
||||
pomper_metriques(session, system, station, debut, fin_plage, a.out, remplacer)
|
||||
if unit is None:
|
||||
print(f"{station} : pas d'unité d'acquisition reconnue, ni déplacements, ni caméra, ni images")
|
||||
continue
|
||||
pomper_deplacements(unit, db, station, debut, fin_plage, a.out, remplacer)
|
||||
for flag, dossier in ((a.images, "images"), (a.diff, "images_diff")):
|
||||
if flag:
|
||||
pomper_images(unit, db, session, station, debut, fin_plage, dossier, a.every, a.out)
|
||||
finally:
|
||||
engine.dispose()
|
||||
|
||||
|
||||
Reference in new issue
Block a user