Der Accuracy, Robustness & Cybersecurity Testplan (KI_D0099) ist eine ausgearbeitete, auditfähige Testdokumentation zur Erfüllung der Anforderungen aus Art. 15 EU-AI-Act.
Er definiert die Testverfahren, Testmetriken, Testumgebungen, Testdaten und Nachweisprozesse, die erforderlich sind, um Hochrisiko‑KI‑Systeme sicher, robust, widerstandsfähig und auditierbar zu betreiben.
Zentrale Inhalte aus dem Dokument:
„Dieser Testplan stellt sicher, dass Hochrisiko-KI-Systeme jederzeit genau, robust, widerstandsfähig gegen Angriffe, sicher, vorhersagbar, kontrollierbar und auditierbar sind.“
„Er definiert die Testverfahren, Testmetriken, Testumgebungen und Nachweisprozesse gemäß Art. 15 EU-KI-VO.“
Highlights & Inhalte
- Testarchitektur (Daten‑Tests, Modell‑Tests, System‑Tests, Cybersecurity‑Tests, Oversight‑Tests)
- Accuracy‑Metriken: Precision, Recall, F1‑Score, ROC‑AUC, Calibration (ECE/MCE)
- Robustness‑Tests: Noise, Outlier, Missing Values, Distribution Shift
- Cybersecurity‑Tests: Adversarial Evasion, Poisoning, Model Extraction, Model Inversion, Datenleck‑Simulation
- Oversight‑Tests: Reaktionszeiten, Override‑Qualität, Eskalationspfade
- Testumgebungen (Dev, Val, Test, ProdSim, Prod)
- Umfangreiche Testdatensätze inkl. adversarial & synthetic stress data
- Testfrequenzen vor und nach Inverkehrbringen (monatlich, quartalsweise, halbjährlich, jährlich)
- Dokumentation & Nachweisführung für Audits und Behörden
Ideal für
- Unternehmen mit Hochrisiko‑KI‑Systemen
- KI‑Entwicklung, Data‑Science, Security‑Teams
- Compliance‑ und Audit‑Abteilungen
- Vorbereitung auf EU-AI-Act Konformitätsbewertung (Art. 43)
- Organisationen, die technische Sicherheit und Robustheit nachweisbar belegen müssen
Lieferumfang
- 1× Accuracy, Robustness & Cybersecurity Testplan (PDF)
- Strukturierte Testverfahren, Metriken, Testdaten, Cybersecurity‑Checks, Oversight‑Tests
- Sofort einsetzbar für Audits, Behördenanforderungen und technische Dokumentation