Direkte Antwort
Genehmigungsmüdigkeit entsteht, wenn viele wiederholte oder geringwertige Entscheidungen menschliche Aufmerksamkeit verbrauchen. Automationsbias entsteht, wenn eine Person einer KI-Empfehlung unangemessen hohes Gewicht gibt. Bloßes Abnicken liegt vor, wenn eine Empfehlung unter dem Anschein einer Prüfung fast automatisch angenommen wird. Zur Erkennung müssen Arbeitslast, Prüfzeit, Reihen identischer Entscheidungen, Quote erkannter KI-Fehler, begründete Änderungen und Ablehnungen, spätere Korrekturen und Ergebnisqualität gemeinsam betrachtet werden.
Einfach erklärt
Warnt Ihr Telefon jede Minute vor etwas Unwichtigem, drücken Sie irgendwann „OK“, ohne zu lesen. Dann übersehen Sie womöglich die entscheidende Warnung. Ebenso verliert menschliche Genehmigung durch unnötige Wiederholung ihre Funktion als echte Sicherheitsbarriere.
Warum ist das wichtig?
Eine erschöpfte Person oder jemand, der KI zu schnell vertraut, kann eine falsche Empfehlung genehmigen. Behandelt die Organisation eine hohe Genehmigungsquote als Compliance-Beleg, erkennt sie womöglich nicht, dass die Kontrolle wirkungslos ist.
Nicht verwechseln
- Eine hohe Genehmigungsquote belegt für sich allein keinen Automationsbias; die KI-Empfehlungen können tatsächlich richtig sein.
- Eine schnelle Entscheidung belegt für sich allein keine oberflächliche Prüfung; einfache Fälle benötigen wenig Zeit.
- Die Zahl der Übersteuerungen ist keine Qualitätskennzahl; entscheidend ist der begründete und richtige Eingriff.
- Genehmigungsmüdigkeit betrifft Arbeitslast; Automationsbias betrifft das zu hohe Gewicht einer KI-Empfehlung.
- Bloßes Abnicken bedeutet, dass ein menschlicher Name vorhanden ist, aber keine wesentliche Prüfung stattfand.
Was ist zu tun?
- Verringern Sie wiederholte, risikoarme Genehmigungen und reservieren Sie menschliche Aufmerksamkeit für wesentliche, folgenreiche Entscheidungen.
- Setzen Sie Kapazitätsgrenzen und Rotation nach Arbeitslast, Schichtdauer, Entscheidungskomplexität und Unterbrechungen ein.
- Stellen Sie KI-Empfehlung, Belege, Unsicherheit und Gegenposition getrennt und ausgewogen dar.
- Lassen Sie die Person bei einer Fallstichprobe zunächst unabhängig urteilen, bevor sie die KI-Empfehlung sieht.
- Messen Sie Prüfzeit, Fehlererkennung, Änderungen, Ablehnungen, spätere Korrekturen und Ergebnisqualität gemeinsam.
- Untersuchen Sie ungewöhnliche Muster bei Übereinstimmung, Geschwindigkeit und Fehlern nach Personengruppe und Entscheidungstyp.
- Pausieren Sie bei sinkender Qualität den Ablauf, beheben Sie die Ursache und erneuern Sie die Schulung mit Belegen.
Wie wird geprüft?
- Übersteigen Menge und Komplexität der Entscheidungen die tatsächliche Prüfkapazität der Person?
- Zeigen Genehmigungen ungewöhnliche Reihen mit gleicher Dauer und gleichem Ausgang?
- Können Prüfende eingebaute oder bekannte KI-Fehler erkennen?
- Sind Änderungen und Ablehnungen begründet statt zufällig?
- Werden KI-Empfehlung, Belege und Alternativen neutral dargestellt?
- Wurde die hohe Genehmigungsquote mit Ergebnisqualität und späteren Korrekturen verglichen?
- Wurden Arbeitslast und Oberflächengestaltung tatsächlich geändert, als Müdigkeits- oder Biassignale erschienen?
Grenze
Kein einheitlicher Schwellenwert für Geschwindigkeit, Genehmigung oder Übersteuerung passt zu jeder Aufgabe. Verhaltenssignale belegen allein keine Absicht; sie sind zusammen mit Ergebnis, Risiko, Aufgabenschwierigkeit und beobachteten Fehlerdaten zu deuten.
Merksatz
Kontrolle bedeutet nicht, dass der Mensch „Ja“ sagt, sondern dass er im richtigen Moment das richtige „Nein“ sagen kann.
Quellen dieses Eintrags
- S26NIST SP 800-53 Rev. 5, *Security and Privacy Controls*Standard
- S38NIST AI 600-1, *Artificial Intelligence Risk Management Framework: Generative Artificial Intelligence Profile*Freiwilliger, standardorientierter institutioneller Leitfaden
- S44NIST, *AI Risk Management Framework Playbook* und AI RMF CoreFreiwilliger Umsetzungsleitfaden
- S45Europäische Union, Verordnung (EU) 2024/1689 — *Gesetz über künstliche Intelligenz*Rechtsvorschrift
- S50NIST AI 100-1, *Artificial Intelligence Risk Management Framework (AI RMF 1.0)*Freiwilliges, standardorientiertes institutionelles Rahmenwerk

