tobias/gwoe-antragspruefer
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases 1 Wiki Activity

Queue: Parallelisierung (konfigurierbar) + Live-Visualisierung #99

New Issue
Closed
opened 2026-04-10 23:11:38 +02:00 by tobias · 1 comment
tobias commented 2026-04-10 23:11:38 +02:00
Owner
Copy Link

Parallelisierung

Aktuell: 1 Worker, 10s Pause. DashScope Paid Tier erlaubt 3-5 parallele Requests.

Umsetzung

  • Konfigurierbarer Concurrency-Level: ENV-Variable QUEUE_CONCURRENCY (default 1, empfohlen 3)
  • asyncio.Semaphore statt einzelner Worker-Loop
  • Backoff bleibt: bei 429 vom LLM-Provider automatisch runterschalten

Visualisierung

Aktuell: /api/queue/status als JSON. Kein UI.

Umsetzung

  • Live-Queue-Anzeige im Prüfen-Tab oder als eigener Bereich
  • Fortschrittsbalken: X von Y Jobs fertig
  • Pro Job: Drucksache, Status (queued/processing/completed/failed), Dauer
  • Auto-Refresh alle 5s via polling oder SSE
  • Fertige Jobs verlinken zum Assessment

Acceptance Criteria

  • QUEUE_CONCURRENCY ENV-Variable, default 1
  • Queue verarbeitet N Jobs parallel (Semaphore)
  • UI zeigt Queue-Status mit Fortschrittsbalken
  • Pro Job: Drucksache + Status + Dauer
  • Fertige Jobs klickbar zum Assessment
## Parallelisierung Aktuell: 1 Worker, 10s Pause. DashScope Paid Tier erlaubt 3-5 parallele Requests. ### Umsetzung - Konfigurierbarer Concurrency-Level: ENV-Variable QUEUE_CONCURRENCY (default 1, empfohlen 3) - asyncio.Semaphore statt einzelner Worker-Loop - Backoff bleibt: bei 429 vom LLM-Provider automatisch runterschalten ## Visualisierung Aktuell: /api/queue/status als JSON. Kein UI. ### Umsetzung - Live-Queue-Anzeige im Prüfen-Tab oder als eigener Bereich - Fortschrittsbalken: X von Y Jobs fertig - Pro Job: Drucksache, Status (queued/processing/completed/failed), Dauer - Auto-Refresh alle 5s via polling oder SSE - Fertige Jobs verlinken zum Assessment ## Acceptance Criteria - [ ] QUEUE_CONCURRENCY ENV-Variable, default 1 - [ ] Queue verarbeitet N Jobs parallel (Semaphore) - [ ] UI zeigt Queue-Status mit Fortschrittsbalken - [ ] Pro Job: Drucksache + Status + Dauer - [ ] Fertige Jobs klickbar zum Assessment
tobias commented 2026-04-10 23:16:05 +02:00
Author
Owner
Copy Link

Resolved in d249497. 3 Worker parallel, Job-Tabelle mit Fortschrittsbalken, Admin-only fuer Batch/Index/Delete.

Resolved in d249497. 3 Worker parallel, Job-Tabelle mit Fortschrittsbalken, Admin-only fuer Batch/Index/Delete.
Sign in to join this conversation.
No Branch/Tag Specified
Branches Tags
Labels
Clear labels   
feedback

   
phase-0

Voraussetzung — sofort, blockiert späteres

  
phase-1

Schnelle Adapter-Wiederverwendung — Tag 1

  
phase-2

StarWeb-Familie + Eigenständige in Tag 2-3

  
phase-3

Eigenständige Reverse-Engineerings — Wochen-Brocken

  
roadmap

Übergreifendes Tracking-Issue

  
scraper

Adapter-Implementierung für ein Bundesland

  
todo

TODO aus CLAUDE.md

  
ui-aktivierung

Bundesland im Frontend aktiv schalten + Wahlprogramme indexieren

  
ui-frontend

Frontend / Templates

No Label
feedback
phase-0
phase-1
phase-2
phase-3
roadmap
scraper
todo
ui-aktivierung
ui-frontend
Milestone
Clear milestone
No items
No Milestone
Projects
Clear projects
No project
Assignees
Clear assignees
No Assignees
1 Participants
Notifications
Due Date
The due date is invalid or out of range. Please use the format 'yyyy-mm-dd'.

No due date set.

Dependencies

No dependencies set.

Reference: tobias/gwoe-antragspruefer#99
No description provided.
Delete Branch "%!s()"

Deleting a branch is permanent. Although the deleted branch may continue to exist for a short time before it actually gets removed, it CANNOT be undone in most cases. Continue?