tobias/gwoe-antragspruefer
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases 1 Wiki Activity

Wahlprogramm Auto-Download: halbautomatische Beschaffung mit SHA-Gate #138

New Issue
Closed
opened 2026-04-20 01:47:37 +02:00 by tobias · 0 comments
tobias commented 2026-04-20 01:47:37 +02:00
Owner
Copy Link

Kontext

Folge-Issue zu #128 (Erkennung). Erkennung ist live, Auto-Download war bewusst ausgeklammert wegen früherer PDF-Tausch-Erfahrungen (CDU BE 2023 → 2026-Entwurf, stiller Ersatz unter altem Slug).

Ziel

Halbautomatisches Beschaffungs-Tool: erkannte fehlende Wahlprogramme (#128) + kuratierte Kandidaten-URL + manuelle Freigabe + SHA-Fingerprint-Check. Keine Vollautomatik.

Workflow

  1. check_missing_programmes() listet Lücken
  2. Pro Lücke: Kandidaten-URL aus wahlprogramm-links.yaml (manuell gepflegt) oder heuristische Suche (abgeordnetenwatch-Pattern {partei}-{bl}-{jahr}.pdf)
  3. Admin-UI oder CLI zeigt Kandidaten mit Metadaten (Dateigröße, erste Seite Preview)
  4. Maintainer bestätigt
  5. Download, SHA-256 gegen erwarteten Fingerprint (falls gepflegt) oder gegen den Fingerprint beim ersten Indexing
  6. Ablage in app/static/referenzen/, Eintrag in WAHLPROGRAMME, automatisches Re-Indexing des Embeddings

Arbeitsschritte

  • wahlprogramm-links.yaml Schema definieren (BL, Partei, Jahr, URL, erwarteter SHA, Anmerkungen)
  • CLI python -m app.wahlprogramm_fetch --check listet Lücken + Kandidaten
  • CLI python -m app.wahlprogramm_fetch --fetch BL PARTEI lädt einen Eintrag (mit interaktiver Freigabe)
  • SHA-256-Lock-File pro bestehendem PDF, prüft bei jedem --fetch gegen Pferdetausch
  • Re-Indexing nur nach erfolgreicher SHA-Prüfung
  • Optional: Admin-UI-Seite als Alternative zur CLI

Nicht-Ziele

  • Kein Cron-Trigger
  • Keine automatische Indexing-Kette ohne manuelle Freigabe
  • Kein Massen-Download

Bezug

  • #128 (closed) Erkennung
  • MEMORY project_sn_xml_export als Beispiel für ähnliche manuelle Re-Upload-Flows
## Kontext Folge-Issue zu #128 (Erkennung). Erkennung ist live, Auto-Download war bewusst ausgeklammert wegen früherer PDF-Tausch-Erfahrungen (CDU BE 2023 → 2026-Entwurf, stiller Ersatz unter altem Slug). ## Ziel Halbautomatisches Beschaffungs-Tool: erkannte fehlende Wahlprogramme (#128) + kuratierte Kandidaten-URL + manuelle Freigabe + SHA-Fingerprint-Check. Keine Vollautomatik. ## Workflow 1. `check_missing_programmes()` listet Lücken 2. Pro Lücke: Kandidaten-URL aus `wahlprogramm-links.yaml` (manuell gepflegt) oder heuristische Suche (abgeordnetenwatch-Pattern `{partei}-{bl}-{jahr}.pdf`) 3. Admin-UI oder CLI zeigt Kandidaten mit Metadaten (Dateigröße, erste Seite Preview) 4. Maintainer bestätigt 5. Download, SHA-256 gegen erwarteten Fingerprint (falls gepflegt) oder gegen den Fingerprint beim ersten Indexing 6. Ablage in `app/static/referenzen/`, Eintrag in `WAHLPROGRAMME`, automatisches Re-Indexing des Embeddings ## Arbeitsschritte - [ ] `wahlprogramm-links.yaml` Schema definieren (BL, Partei, Jahr, URL, erwarteter SHA, Anmerkungen) - [ ] CLI `python -m app.wahlprogramm_fetch --check` listet Lücken + Kandidaten - [ ] CLI `python -m app.wahlprogramm_fetch --fetch BL PARTEI` lädt einen Eintrag (mit interaktiver Freigabe) - [ ] SHA-256-Lock-File pro bestehendem PDF, prüft bei jedem `--fetch` gegen Pferdetausch - [ ] Re-Indexing nur nach erfolgreicher SHA-Prüfung - [ ] Optional: Admin-UI-Seite als Alternative zur CLI ## Nicht-Ziele - Kein Cron-Trigger - Keine automatische Indexing-Kette ohne manuelle Freigabe - Kein Massen-Download ## Bezug - #128 (closed) Erkennung - MEMORY `project_sn_xml_export` als Beispiel für ähnliche manuelle Re-Upload-Flows
tobias added this to the post-1.0 milestone 2026-04-25 20:59:57 +02:00
Sign in to join this conversation.
No Branch/Tag Specified
Branches Tags
Labels
Clear labels   
feedback

   
phase-0

Voraussetzung — sofort, blockiert späteres

  
phase-1

Schnelle Adapter-Wiederverwendung — Tag 1

  
phase-2

StarWeb-Familie + Eigenständige in Tag 2-3

  
phase-3

Eigenständige Reverse-Engineerings — Wochen-Brocken

  
roadmap

Übergreifendes Tracking-Issue

  
scraper

Adapter-Implementierung für ein Bundesland

  
todo

TODO aus CLAUDE.md

  
ui-aktivierung

Bundesland im Frontend aktiv schalten + Wahlprogramme indexieren

  
ui-frontend

Frontend / Templates

No Label
feedback
phase-0
phase-1
phase-2
phase-3
roadmap
scraper
todo
ui-aktivierung
ui-frontend
Milestone
Clear milestone
No items
No Milestone
post-1.0
Projects
Clear projects
No project
Assignees
Clear assignees
No Assignees
1 Participants
Notifications
Due Date
The due date is invalid or out of range. Please use the format 'yyyy-mm-dd'.

No due date set.

Dependencies

No dependencies set.

Reference: tobias/gwoe-antragspruefer#138
No description provided.
Delete Branch "%!s()"

Deleting a branch is permanent. Although the deleted branch may continue to exist for a short time before it actually gets removed, it CANNOT be undone in most cases. Continue?