E2E Sub-A: Live Adapter Tests (Reachability + Type-Filter) #51

New Issue

tobias · 2026-04-09T09:02:10+02:00

tobias commented

2026-04-09 09:02:10 +02:00

Sub-Issue von #50.

Zweck

Sub-Issue A des E2E-Test-Umbrellas. Live-Tests pro aktivem Bundesland-Adapter, gegen die echten Landtag-Backends. Marker @pytest.mark.integration.

Datei

webapp/tests/integration/test_adapters_live.py

Was getestet wird

Pro Adapter aus aktive_bundeslaender(), parametrisiert via pytest.mark.parametrize("code", [...], ids=lambda c: c):

Reachability — await adapter.search("", limit=5) läuft erfolgreich durch (kein HTTP-500, kein Timeout, kein Login-Wall)
Result-Anzahl — len(results) > 0 (0 Treffer ist Indikator für Schema-Drift, siehe HE)
Drucksache-ID-Format — alle Drucksache.drucksache matchen ^\d+/\d+($neu$)?$
Type-Filter-Wirksamkeit — kein Result hat einen typ, der eindeutig kein Antrag ist (Plenarprotokoll, Kleine Anfrage, Sitzung, Ausschussvorlage, Beschlussempfehlung). Substring-Match auf "Antrag" weil TH-Format Antrag gemäß § 79 GO korrekt ist
Datum-Plausibilität — wenn gesetzt, dann ≥ wahlperiode_start und ≤ heute
Fraktionen-Plausibilität — falls gesetzt, müssen sie in BUNDESLAENDER[bl].landtagsfraktionen ∪ {"Landesregierung", "BSW", "FREIE WÄHLER", "SSW"} liegen
PDF-Link erreichbar — HEAD-Probe gegen den ersten Result-Link, erwarte 200 oder 301/302 (markiert als @pytest.mark.slow)

Sonderfälle

NI als pytest.param("NI", marks=pytest.mark.xfail(reason="nilas/portal ist Login-protected, deferred"))
HE ist aktuell nicht im aktiven Set, kommt rein wenn #24 (Card-Parser) durch ist

Bug-Klassen

Deckt 2 (Hit-Format-Drift), 6 (TH composite type), 7 (HE Card-Layout), 8 (NI Login), 13 (Datum leer), 16 (Pagination), 18 (PDF-Link kaputt).

Akzeptanzkriterien

pytest -m integration tests/integration/test_adapters_live.py -v zeigt einen separaten Eintrag pro aktivem BL
Alle aktiven BL grün außer NI (xfail)
Bei einer absichtlich falschen Konfiguration (z.B. db_id falsch) schlägt der Test mit klarer Fehlermeldung fehl
Tests laufen < 60s total (jeder Adapter-search() ≤ 5s ausser SH und BW mit Polling)

Sub-Issue von #50. ## Zweck Sub-Issue A des E2E-Test-Umbrellas. Live-Tests pro aktivem Bundesland-Adapter, gegen die echten Landtag-Backends. Marker `@pytest.mark.integration`. ## Datei `webapp/tests/integration/test_adapters_live.py` ## Was getestet wird Pro Adapter aus `aktive_bundeslaender()`, parametrisiert via `pytest.mark.parametrize("code", [...], ids=lambda c: c)`: 1. **Reachability** — `await adapter.search("", limit=5)` läuft erfolgreich durch (kein HTTP-500, kein Timeout, kein Login-Wall) 2. **Result-Anzahl** — `len(results) > 0` (0 Treffer ist Indikator für Schema-Drift, siehe HE) 3. **Drucksache-ID-Format** — alle `Drucksache.drucksache` matchen `^\d+/\d+($neu$)?$` 4. **Type-Filter-Wirksamkeit** — kein Result hat einen `typ`, der eindeutig kein Antrag ist (Plenarprotokoll, Kleine Anfrage, Sitzung, Ausschussvorlage, Beschlussempfehlung). Substring-Match auf "Antrag" weil TH-Format `Antrag gemäß § 79 GO` korrekt ist 5. **Datum-Plausibilität** — wenn gesetzt, dann `≥ wahlperiode_start` und `≤ heute` 6. **Fraktionen-Plausibilität** — falls gesetzt, müssen sie in `BUNDESLAENDER[bl].landtagsfraktionen ∪ {"Landesregierung", "BSW", "FREIE WÄHLER", "SSW"}` liegen 7. **PDF-Link erreichbar** — HEAD-Probe gegen den ersten Result-Link, erwarte 200 oder 301/302 (markiert als `@pytest.mark.slow`) ## Sonderfälle - **NI** als `pytest.param("NI", marks=pytest.mark.xfail(reason="nilas/portal ist Login-protected, deferred"))` - **HE** ist aktuell nicht im aktiven Set, kommt rein wenn #24 (Card-Parser) durch ist ## Bug-Klassen Deckt 2 (Hit-Format-Drift), 6 (TH composite type), 7 (HE Card-Layout), 8 (NI Login), 13 (Datum leer), 16 (Pagination), 18 (PDF-Link kaputt). ## Akzeptanzkriterien - [ ] `pytest -m integration tests/integration/test_adapters_live.py -v` zeigt einen separaten Eintrag pro aktivem BL - [ ] Alle aktiven BL grün außer NI (xfail) - [ ] Bei einer absichtlich falschen Konfiguration (z.B. `db_id` falsch) schlägt der Test mit klarer Fehlermeldung fehl - [ ] Tests laufen `< 60s` total (jeder Adapter-search() ≤ 5s ausser SH und BW mit Polling)

tobias referenced this issue from a commit

2026-04-09 10:00:22 +02:00

Add E2E functional acceptance test suite (#50, #51, #52, #53, #54)

tobias referenced this issue

2026-04-09 10:16:33 +02:00

Parteinamen-Mapper: zentrale app/parteien.py mit kontext-sensitiver normalize_partei() #55

tobias referenced this issue

2026-04-09 10:16:33 +02:00

Bundespolitik überprüfbar machen — Bundestags-Adapter + Grundsatzprogramm-Lookup #56

tobias referenced this issue

2026-04-09 10:16:34 +02:00

Regelmäßige Security Audits — initiale Befunde + wiederkehrender Prozess #57

tobias referenced this issue

2026-04-09 11:31:34 +02:00

E2E Functional Acceptance Tests für aktive Bundesländer (Umbrella) #50

tobias commented

2026-04-09 11:31:34 +02:00

Sub-A erledigt — tests/integration/test_adapters_live.py mit Reachability/Type-Filter/Datum/Fraktion-Plausibilitäts-Checks pro aktivem BL. Commit 73a7f76.

Sub-A erledigt — tests/integration/test_adapters_live.py mit Reachability/Type-Filter/Datum/Fraktion-Plausibilitäts-Checks pro aktivem BL. Commit 73a7f76.

tobias closed this issue

2026-04-09 11:31:34 +02:00

tobias referenced this issue

2026-04-09 11:50:15 +02:00

Adapter-Bugs aus erstem Sub-A/B-Live-Run: TH leerer Link, BB/RP Type-Filter, BB Datum, BE get_document #61

tobias referenced this issue

2026-04-09 12:29:27 +02:00

Autonomous Roadmap 2026-04-09 — Reihenfolge + Abhängigkeiten #59

Sign in to join this conversation.