{"methodik":{"grundgesamtheit":"di_goldset — ausschliesslich menschlich entschiedene Werte aus der Review-Queue (P2); waechst mit jedem Entscheid","lauf":"frische Extraktion je Tender (nur Gold-Felder), kein Cache","treffer":"Konsenswert == Goldwert nach Normalisierung (Whitespace/Case; Zahlen numerisch); REVIEW/NOT_FOUND zaehlt nie als Treffer","ehrlichkeit":"Quote immer mit n; kleine n sind kleine n. Historische Einzelabnahmen (z. B. Wiegeschein-Audit 33/33+6/6, docs/37 und RL docs/42) sind dokumentierte Abnahmen, keine TUEV-Laeufe.","selektions_bias":"Die Basis entsteht aus Review-Entscheiden und enthaelt damit anfangs ueberwiegend die SCHWEREN Faelle. Ausgleich: jede Extraktion reiht zusaetzlich AUTO-Stichproben zur Verifikation ein (stichprobe_auto, Standard 1) — bestaetigte AUTO-Werte machen die Messbasis repraesentativ.","recall":"Anteil der Gold-Felder, deren RICHTIGER Wert gefunden wurde — auch wenn die Kette ihn ehrlich zur menschlichen Pruefung reichte (HITL). Trennt 'findet es nicht' von 'findet es, traut sich aber nicht'. Laeufe vor Etappe B tragen null (damals nicht gemessen).","auto_quote":"Anteil der Gold-Felder mit Triage AUTO — der Automatisierungsgrad, unabhaengig von der Richtigkeit. quote (Praezision der AUTO-Strasse) + recall + auto_quote zusammen ergeben das ehrliche Bild."},"laeufe":[{"created_at":"2026-07-16T11:42:14.380662+00:00","pack":"vob_hva_formalia","kette":"produktiv","n_felder":4,"treffer":2,"quote":0.5,"n_gefunden":2,"recall":0.5,"n_auto":3,"auto_quote":0.75,"dauer_s":19.8,"hinweis":"Etappe B: erster Lauf mit Recall+AUTO-Quote (docs/135)"},{"created_at":"2026-07-08T20:08:30.80509+00:00","pack":"vob_hva_formalia","kette":"produktiv","n_felder":4,"treffer":2,"quote":0.5,"n_gefunden":null,"recall":null,"n_auto":null,"auto_quote":null,"dauer_s":14.5,"hinweis":"Lauf 3 - produktive Kette + mistral_ocr als dritte Zone-Stimme (US-R1, docs/57)"},{"created_at":"2026-07-08T19:51:58.964149+00:00","pack":"vob_hva_formalia","kette":"kandidat:mistral-ocr-4","n_felder":4,"treffer":4,"quote":1.0,"n_gefunden":null,"recall":null,"n_auto":null,"auto_quote":null,"dauer_s":6.9,"hinweis":"MACHBARKEIT (US-R1, docs/57): contains-Check der Goldwerte im OCR-Output, KEINE Ketten-Extraktion - nicht mit produktiv-Laeufen vergleichbar. 9 Seiten in 6,9s via API, Blocks mit Pixel-Bbox+Confidence je Seite."},{"created_at":"2026-07-08T19:44:52.681409+00:00","pack":"vob_hva_formalia","kette":"produktiv","n_felder":4,"treffer":2,"quote":0.5,"n_gefunden":null,"recall":null,"n_auto":null,"auto_quote":null,"dauer_s":13.7,"hinweis":"Lauf 2 - nach AUTO-Stichproben (Bias-Ausgleich)"},{"created_at":"2026-07-08T19:41:16.358705+00:00","pack":"vob_hva_formalia","kette":"produktiv","n_felder":2,"treffer":0,"quote":0.0,"n_gefunden":null,"recall":null,"n_auto":null,"auto_quote":null,"dauer_s":12.3,"hinweis":"Erstlauf P3 nach Deploy"}],"abdeckung":[{"produkt":"document-intelligence","status":"belegt","packs":["vob_hva_formalia"],"grund":"Goldset-gestuetzte TUEV-Laeufe vorhanden (Zahlen siehe laeufe; kleine n sind kleine n)"},{"produkt":"rechnungspruefung","status":"offen","packs":[],"grund":"wartet auf Gold-Labels (menschlich verifizierte Referenzwerte) — ohne Ground Truth keine seriöse Quote; Aufbau laeuft (Trainingsfaelle-Onboarding)"},{"produkt":"energiebelege","status":"offen","packs":[],"grund":"wartet auf Gold-Labels (menschlich verifizierte Referenzwerte) — ohne Ground Truth keine seriöse Quote; Aufbau laeuft (Trainingsfaelle-Onboarding)"},{"produkt":"baustellensicherheit","status":"offen","packs":[],"grund":"wartet auf Gold-Labels (menschlich verifizierte Referenzwerte) — ohne Ground Truth keine seriöse Quote; Aufbau laeuft (Trainingsfaelle-Onboarding)"},{"produkt":"reconic","status":"offen","packs":[],"grund":"wartet auf Gold-Labels (menschlich verifizierte Referenzwerte) — ohne Ground Truth keine seriöse Quote; Aufbau laeuft (Trainingsfaelle-Onboarding)"},{"produkt":"tga","status":"offen","packs":[],"grund":"wartet auf Gold-Labels (menschlich verifizierte Referenzwerte) — ohne Ground Truth keine seriöse Quote; Aufbau laeuft (Trainingsfaelle-Onboarding)"},{"produkt":"regelwerke","status":"offen","packs":[],"grund":"wartet auf Gold-Labels (menschlich verifizierte Referenzwerte) — ohne Ground Truth keine seriöse Quote; Aufbau laeuft (Trainingsfaelle-Onboarding)"}]}