Die Validierungs‑ & Testdatendokumentation ist eine ausgearbeitete, auditfähige Vorlage zur Umsetzung der Daten‑Governance‑ und Dokumentationspflichten gemäß Art. 10 und Art. 11 EU-AI-Act.
Sie beschreibt die Herkunft, Sampling‑Strategie, Struktur, Qualität, Repräsentativität, Risiken, Schutzmaßnahmen und Governance der Validierungs‑ und Testdaten eines Hochrisiko‑KI‑Systems – inklusive Bias‑Analyse, Robustheitsmetriken, Sicherheitsanalysen und Datenakte.
Zentrale Inhalte aus dem Dokument:
„Die Validierungs‑ & Testdatendokumentation beschreibt die Herkunft, Struktur, Qualität, Repräsentativität, Risiken, Schutzmaßnahmen und Governance der Validierungs‑ und Testdaten.“
„Sie ist ein Pflichtbestandteil der technischen Dokumentation gemäß Art. 11 EU‑KI‑VO.“
Highlights & Inhalte
- Validierungs‑ & Testdaten‑Dokumentation nach Art. 10 & 11 EU-AI-Act
- Herkunft & Quellen: interne Bankdaten, externe Auskunfteien, öffentliche Daten
- Sampling‑Strategie: Random & Stratified Sampling nach Altersgruppen, Regionen, Beschäftigungsstatus, Kredithistorie
- Datenklassifizierung inkl. Schutzbedarf & Beispielwerte
- Datenqualität: Fehlende Werte, Outlier‑Rate, Konsistenz, Aktualität
- Repräsentativität & Demografie für Validierungs‑ und Testdaten
- Bias‑Analyse der Validierungs‑ & Testdaten
- Bereinigung & Transformation (Imputation, Normalisierung, Encoding, Feature‑Ableitungen)
- Data Lineage (Raw → Clean → FeatureSet → ValSet/TestSet)
- Validierungs‑ & Testmetriken: Accuracy, AUC, F1, Calibration, Robustheit
- Sicherheitsanalysen: Adversarial Tests, Poisoning, Model Extraction
- Beispielhafte vollständige Validierungs‑ & Testdatenakte
- Pflichtbestandteil der technischen Dokumentation für Zertifizierung
Ideal für
- Unternehmen mit Hochrisiko‑KI‑Systemen
- KI‑Entwicklung & Data‑Science
- Compliance‑, Audit‑ und Governance‑Teams
- Vorbereitung auf Konformitätsbewertung nach Art. 43–45 EU-AI-Act
- Organisationen, die vollständige Validierungs‑ & Testdaten‑Nachweise für Behörden benötigen