Modul · Beweisen Sie, was die KI getan hat
The AI Evidence & Documentation Check
Wenn eine Aufsichtsbehörde, ein Gericht oder ein Kunde Sie bittet, eine KI-getriebene Entscheidung zu rechtfertigen, sind Erinnerung und gute Absichten keine Beweise. Entweder Sie haben die Aufzeichnung damals angelegt oder nicht, und keine nachträgliche Rekonstruktion schließt diese Lücke vollständig. Dieses Modul prüft die fünf Dinge, die eine KI-Entscheidung verteidigungsfähig machen: Entscheidungsprotokolle, versionierte Prompts und Konfigurationen, datierte Freigaben, Reproduzierbarkeit und eine Aufbewahrungsrichtlinie, die die Beweise lange genug erhält, um im Ernstfall zu zählen.
So sehen die fünf Stufen aus
Jede Dimension von The AI Evidence & Documentation Check wird von 1 bis 5 bewertet. Das bedeuten die Stufen, Dimension für Dimension. Der benotete Report diagnostiziert, wo Ihre eigenen Antworten landen und was daraus folgt.
Entscheidungen werden protokolliert
- 1Nichts protokolliert
- 2Nur das Ergebnis
- 3Teilprotokolle
- 4Eingaben und Ausgabe protokolliert
- 5Vollständige Entscheidungsakte
Am unteren Ende: Eine KI-Entscheidung ohne Protokoll ist eine, die Sie weder erklären noch verteidigen können und aus der Sie nichts lernen. Beginnen Sie jetzt, für Ihre risikoreicheren Entscheidungen die Eingaben, die Empfehlung und die getroffene Handlung zu erfassen. So sieht gut aus: Eine vollständige Entscheidungsakte macht aus 'vertrauen Sie uns' Beweismaterial. Halten Sie sie manipulationssicher und an die Entscheidung gekoppelt, damit eine Aufzeichnung nicht still nachträglich bearbeitet werden kann.
Prompts und Konfigurationen versioniert
- 1Nicht erfasst
- 2Nur aktueller Stand
- 3Einige Versionsnotizen
- 4Informell versioniert
- 5Vollständig versionsverwaltet
Am unteren Ende: Nicht erfasste Prompts und Einstellungen bedeuten: Jede vergangene Ausgabe wird unerklärbar, sobald sich die Konfiguration ändert. Stellen Sie Prompts und Schlüsselparameter unter Versionskontrolle, damit jede Ausgabe an einen bekannten Zustand gebunden ist. So sieht gut aus: Versionsverwaltete Prompts und Konfigurationen binden jede Ausgabe an genau den Aufbau, der sie erzeugt hat. Verknüpfen Sie die Version mit dem Entscheidungsprotokoll, damit sich beide Aufzeichnungen gegenseitig stützen.
Freigaben sind datiert
- 1Keine Freigaben erfasst
- 2Informelle Freigabe
- 3E-Mails irgendwo
- 4Erfasste Freigaben
- 5Datierte Freigaben mit Grundlage
Am unteren Ende: Mit undatierten, nicht erfassten Freigaben können Sie nicht zeigen, dass irgendein KI-Deployment je bewusst autorisiert wurde. Starten Sie ein einfaches Freigaberegister: was freigegeben wurde, von wem, an welchem Datum. So sieht gut aus: Datierte Freigaben samt der Evidenz, auf der sie ruhten, zeigen einen Governance-Prozess, der tatsächlich funktioniert hat. Halten Sie das Register aktuell, damit kein neues Deployment ohne seinen Eintrag live gehen kann.
Frühere Ausgaben reproduzierbar
- 1Unmöglich
- 2Ungefähr, aus dem Gedächtnis
- 3In einigen Fällen
- 4Die meisten jüngeren Ausgaben
- 5Auf Abruf reproduzierbar
Am unteren Ende: Wenn Sie eine frühere Ausgabe nicht reproduzieren können, können Sie nicht beweisen, dass sie damals vertretbar war. Beginnen Sie, Modellversion, Prompt und Eingaben zusammen aufzubewahren, damit Schlüsselentscheidungen neu ausgeführt werden können. So sieht gut aus: Reproduzierbarkeit auf Abruf ist der stärkste Beweis, den Sie für die Vertretbarkeit einer Entscheidung anbieten können. Testen Sie sie periodisch an einem alten Fall; eine still veränderte Pipeline kann Ihre Reproduzierbarkeit gebrochen haben, ohne es zu melden.
Beweise lange genug aufbewahrt
- 1Kein Aufbewahrungsplan
- 2Ad hoc gelöscht
- 3Aufbewahrt, ohne Richtlinie
- 4Richtlinie existiert
- 5Richtlinie am Risiko ausgerichtet
Am unteren Ende: Ohne Aufbewahrungsplan können Ihre Beweise genau dann weg sein, wenn eine Anfechtung eintrifft. Legen Sie fest, wie lange jeder Typ von KI-Aufzeichnung überleben muss, abgeleitet davon, wie lange die zugrunde liegende Entscheidung angreifbar ist. So sieht gut aus: Am Risikofenster ausgerichtete Aufbewahrung bedeutet: Die Beweise sind da, wenn angefochten wird, und weg, wenn sie nur noch Haftung sind. Prüfen Sie die Fristen, wenn sich Regulierung und Verträge ändern; das richtige Fenster verschiebt sich unter Ihnen.