Benjamin Admin
|
e1dadc8027
|
feat: Browser-Matrix Stufe 1.a + 2 weitere GT-Findings + Plausibility-LLM-Härtung
Stage 1.a Browser-Matrix (Task #15) — Multi-Engine Scaffolding:
- consent-tester/Dockerfile: firefox + webkit + Xvfb deps
- playwright install chromium firefox webkit
- services/browser_profiles.py: Registry mit DEFAULT_PROFILES
(Chromium-Headed/Firefox-Headed/WebKit-Headed/Mobile-Safari) +
EXTRA_PROFILES (Chrome-Channel, Edge, Brave)
- services/multi_browser_scanner.py: run_matrix() orchestriert N
parallele Scans + worst-of-Aggregation + 3 Sub-Scores
(Pre-Consent 50%, Reject-Respekt 30%, Banner-Design 20%) +
Hard-Fail-Cap auf <60% bei Pre-Consent/Reject-Verstoß
- routes_matrix.py: POST /scan-matrix Endpoint (eigenes Modul,
damit main.py unter 500 LOC bleibt)
KNOWN: Stage 1.a-Shim ruft alle Profile auf demselben Chromium,
echte Engine-Diversität in Stage 1.b (consent_scanner.py Param)
Coverage-Gap 3 (Task #17): 2/3 verbleibende GT-Lücken geschlossen:
- B9 impressum_multi_entity_check (IMPRESSUM-001): erkennt
USt-IdNr/HR/GF-Fehlen pro Entity bei multi-entity Impressen
(Elli: USt-IdNr nur bei Elli Mobility, fehlt bei VW Group Charging)
- B10 transfer_mechanism_check (TRANSFER-001): pro Non-EU-Vendor
in cmp_vendors prüft DSE auf DPF/SCCs/BCRs/Einwilligung im
±400-char-Window. Findet Vendors ohne benannten Mechanismus.
- TH-RETENTION-002 (AI-Datenkategorie-Differenzierung) bleibt
semantisch-tief, vorgesehen für Specialist-Agents Task #18.
Plausibility-LLM Empty-Response-Härtung (Task #16):
- BATCH_SIZE 8 → 4, EXCERPT 4000 → 1500 chars, TIMEOUT 60 → 45s
- Single-retry mit halbierter Batch wenn LLM empty content
zurückgibt — qwen3:30b-a3b rejektiert manchmal ≥6-Item-Prompts
unter format='json'. Falls auch Half-Batch empty: log + skip.
- Pipeline läuft jetzt nicht mehr 10min in Timeouts.
GT-Coverage Sprung: 10/13 → 11/13 (85%). 4/4 HIGH ✓, 5/6 MEDIUM ✓,
2/3 LOW ✓.
Co-Authored-By: Claude Opus 4.7 (1M context) <noreply@anthropic.com>
|
2026-06-06 21:42:27 +02:00 |
|
Benjamin Admin
|
d0e3621192
|
feat(audit): V2 mail render + 5 new findings (B4/B5/B6/B7/B8) + LLM-Plausibility-Phase
Mail Render V2 (compliance/services/mail_render_v2/) — 11-Modul-Subpackage
das einen einheitlichen Audit-Mail-Output erzeugt mit:
- Header + KPI-Kacheln (Score / Findings / Docs / Vendors)
- TOC + Sprung-Links
- 3-Bucket-Trennung: Kritische Befunde / Manuelle Prüfung / Interne Reminder
- Cookie-Inventar (Name·Vendor·Kategorie·Speicherdauer·Löschfrist·Sitzland·Quelle·Status)
- Sofortmaßnahmen-Aggregator ("Sitzland ergänzen für 11 Cookies")
- 24 Legacy-Wrappers — alle alten build_*_html in V2-Sections
- Scope-Filter: FIN/GOV/MED/INS/EDU/LEG aus Berichten wenn nicht relevant
- Hint/Action-Dedup: keine doppelten Sätze pro Card mehr
Aktiviert via env MAIL_RENDER_V2=true (Default: legacy renderer).
5 neue deterministische Findings als Phase D-2b/B4/B5/B6/B7/B8:
B4 vendor_consistency_check — Cross-Doc-Provider-Widerspruch
(Elli: DSE nennt Vertex AI für Chatbot, /de/cookies nennt Iadvize → HIGH).
6 Service-Types: chatbot/analytics/tag_manager/pixel/cdn/cmp.
B5 ai_act_transparency_check — AI Act Art. 50 Transparenzpflicht
(Elli: Vertex AI vorhanden ohne Pre-Chat-Disclosure → HIGH).
Plus B5-Erweiterung: Rechtsgrundlage Art-6-Abs-1-lit-f bei AI → MED
(Einwilligung empfehlen).
B6 cross_doc_dpo_check — DPO in DSE genannt, nicht im Impressum (LOW).
B7 doc_staleness_check — Datum-Extraktion aus DSE/AGB/Nutzungsbedingungen.
Cap: AGB/NB 3y, DSE 2y. Älter → MEDIUM (Elli NB Stand 2018 → HIGH).
B8 cmp_fingerprint_check — Banner detected, aber CMP-Provider generic
(kein Usercentrics/OneTrust/Cookiebot/etc → MED).
B3-Erweiterung detect_intra_doc_contradictions — Widersprüchliche
Speicherdauer im SELBEN Doc (Elli: Logfile 7d vs 30d → HIGH).
LLM-Plausibility-Phase (Phase D-2b, finding_plausibility_check.py):
- Läuft AFTER MC pipeline, BEFORE D3 render
- Prompt mit Beispiel-IDs + 3-Phase-Mapping: exact-ID / position-fallback /
fuzzy-tail-match
- Stempelt llm_title / llm_severity / llm_recommendation / llm_drop auf
jeden FAIL CheckItem
- V2-Render zeigt "🤖 LLM-Plausibility:" Box pro Finding wenn gestempelt
- KNOWN ISSUE: qwen3:30b-a3b liefert oft empty content auf format='json' +
8000-char-excerpt prompts. Pipeline läuft mit stamped=0 weiter. Task #16.
Coverage gegen Elli Ground Truth (zeroclaw/docs/ground-truth/elli_eco_2026-06-06.json,
13 expected findings via WebFetch-Agent-Crawl):
- 4/4 HIGH-Findings ✓ (COOKIE-CONSENT-UX-001 + WIDERRUFSBELEHRUNG-001 +
VENDOR-CONSISTENCY-001 + AI-ACT-TRANSPARENCY-001)
- 4/6 MEDIUM ✓
- 2/3 LOW ✓
- Total: 10/13 = 77% (Sprung von 4/13 = 31%)
Restliche 3 Gaps als Task #17: IMPRESSUM-001 (multi-entity USt-IdNr),
TRANSFER-001 (Vendor-Mechanismus DPF/SCC), TH-RETENTION-002 (AI-Retention
pro Datenkategorie).
V2-Mail-Preview in Mailpit: 'v2all@local.test' Subject '[V2 ALL] ELLI'.
Backend healthy, B1+B3+B4+B5+B6+B7+B8 alle live im Orchestrator.
Co-Authored-By: Claude Opus 4.7 (1M context) <noreply@anthropic.com>
|
2026-06-06 21:19:49 +02:00 |
|