"""Applique les modifications.jsonl des relecteurs (//) aux étiquettes de labeling/auto/. Les ids sont les ids stables des étiquettes (D-131) ; une ajoutée en reçoit un. Une étiquette touchée par deux relecteurs n'est pas appliquée : listée, à trancher (--choix id=famille).""" import json, glob, os, sys, collections ici = os.path.dirname(os.path.dirname(os.path.abspath(__file__))) date = __import__('datetime').date.today().isoformat() choix = dict(a.split('=', 1) for a in sys.argv[1:] if '=' in a) verrou = f'{ici}/applique.md' # une revue ne s'applique qu'une fois : ses « ajouter » se doubleraient if os.path.exists(verrou): sys.exit(f'déjà appliquée ({open(verrou).read().strip()}) : rien fait') mods = [] for p in sorted(glob.glob(f'{ici}/*/modifications.jsonl')): rel = os.path.basename(os.path.dirname(p)) mods += [dict(json.loads(l), relecteur=rel) for l in open(p) if l.strip()] par_id = collections.defaultdict(list) for m in mods: if 'id' in m: par_id[m['id']].append(m) conflits = {i: l for i, l in par_id.items() if len({json.dumps(m.get('etiquette'), sort_keys=True) + m['action'] for m in l}) > 1} for i, l in conflits.items(): if i in choix: par_id[i] = [m for m in l if m['relecteur'] == choix[i]] else: print('CONFLIT', i, [(m['relecteur'], m['action']) for m in l]) compte = collections.Counter() for p in sorted(glob.glob('labeling/auto/*.jsonl')): st = os.path.basename(p)[:-6] out = [] for n, l in enumerate(open(p), 1): if not l.strip(): continue e = json.loads(l); i = e.get('id', f'{st}#{n}') # l'id stable (D-131), sinon le numéro de ligne if i in conflits and i not in choix: out.append(e); continue m = par_id.get(i, [None])[0] if m is None: out.append(e) elif m['action'] == 'modifier': out.append({'id': e['id']} | dict(m['etiquette'], revue=date) if 'id' in e else dict(m['etiquette'], revue=date)); compte['modifiées'] += 1 # l'étiquette modifiée garde son id, en tête (D-131) elif m['action'] == 'retirer': compte['retirées'] += 1 for m in mods: if m['action'] == 'ajouter' and m['station'] == st: out.append(dict(m['etiquette'], revue=date)); compte['ajoutées'] += 1 out.sort(key=lambda e: (e['debut'], e['fin'])) sys.path.insert(0, 'labeling'); import ids; ids.attribuer(st, out, [m['id'] for m in mods if m['action'] == 'retirer' and m.get('id', '').startswith(st + '-')]) # un id aux ajoutées (D-131) open(p, 'w').writelines(json.dumps(e, ensure_ascii=False) + '\n' for e in out) print(dict(compte), len(conflits), 'conflits') open(verrou, 'w').write(f'appliquée le {__import__("datetime").date.today()} : {dict(compte)}\n')