Wirksame menschliche Aufsicht
Wirksame Aufsicht über KI-Entscheidungen üben und Automation Bias widerstehen.
Was ist Wirksame menschliche Aufsicht?
Menschliche Kontrolle zählt nur dann, wenn der Mensch die Maschine tatsächlich überwältigen kann. Ein Gutachter, der alles billigt, was das Modell vorschlägt, stellt niemanden zufrieden, und das EU-KI-Gesetz besagt dies. Als Kreditanalyst überprüfen Sie KI-generierte Kreditempfehlungen, bemerken, wo Automatisierungsvoreingenommenheit Sie zu einer Einigung drängt, und üben, eine unabhängige Entscheidung zu treffen. Sie werden in der Lage sein, ein echtes Versehen anhand eines Stempels zu erkennen.
Was Sie lernen in Wirksame menschliche Aufsicht
- Verstehen, was wirksame menschliche Aufsicht nach den Artikeln 14 und 26 der EU-KI-Verordnung verlangt
- Automation Bias beim Prüfen von KI-Empfehlungen erkennen und widerstehen
- Erkennen, wann KI-Entscheidungen aufgrund widersprechender Belege zu überstimmen sind
- Jede KI-Empfehlung unabhängig von früherer Treffgenauigkeit eigenständig beurteilen
- Die Befugnis ausüben, KI-Entscheidungen zu untersuchen, zu überstimmen oder zu eskalieren
Wirksame menschliche Aufsicht — Trainingsschritte
-
Artikel 14 und 26: Menschliche Aufsicht
Die EU-KI-Verordnung verlangt für Hochrisiko-KI-Systeme eine wirksame menschliche Aufsicht. Die Artikel 14 und 26 stellen drei Anforderungen an die prüfende Person: Sie muss kompetent sein, also geschult darin, die Fähigkeiten und Grenzen des KI-Systems zu verstehen. Sie muss befugt sein, die Entscheidungen der KI zu überstimmen , wenn dies geboten ist. Sie muss bei jedem Fall eigenständig urteilen und darf nicht lediglich bestätigen, was die KI empfiehlt. Die größte Gefahr für wirksame Aufsicht ist Automation Bias – die Neigung, sich zu sehr auf KI-Empfehlungen zu verlassen, weil sie maßgeblich erscheinen. Die EU-KI-Verordnung verlangt ausdrücklich Maßnahmen gegen diesen Bias.
-
Die morgendliche Warteschlange
Alice richtet sich in ihrem Homeoffice ein. Eine E-Mail ihres Teamleiters Daniel Reyes erläutert die Aufgaben des Tages.
-
Auffrischung der Aufsichtsleitlinien
Daniels Link führt Alice zum Schulungsportal von Atlas Financial. Auf der Seite zu den Leitlinien für menschliche Aufsicht wird erläutert, was die Artikel 14 und 26 bei jeder Prüfung von ihr verlangen.
-
Die Genehmigungswarteschlange öffnen
Alice öffnet die Genehmigungswarteschlange auf ihrem linken Monitor. Fünf Kreditanträge warten, jeweils mit der Empfehlung der KI und einem Konfidenzwert versehen.
-
Fall 1: Meridian Logistics
Der erste Antrag: Meridian Logistics, ein Unternehmenskredit über 150.000 EUR. Die KI empfiehlt die Genehmigung mit einem Konfidenzwert von 95 %.
-
Die Serie fortsetzen
Zwei weitere Routinefälle folgen rasch: Harrington & Cole, eine seit 18 Jahren bestehende Kanzlei, beantragt 45.000 EUR für Büroausstattung (KI-Konfidenzwert 94 %), und Briarwood Construction, ein neun Jahre bestehendes Unternehmen, beantragt 280.000 EUR Zwischenfinanzierung gegen einen Regierungsauftrag (KI-Konfidenzwert 97 %, vollständig besichert).
-
Fall 4: NovaPeak Digital
NovaPeak Digital Ltd. beantragt einen Expansionskredit über 500.000 EUR . Die KI empfiehlt die Genehmigung mit einem Konfidenzwert von 88 % .
-
Zwischenstand: Die Serien-Falle
Der NovaPeak-Fall prüfte, ob Sie dem Sog einer Genehmigungsserie widerstehen können.
-
Fall 5: GreenLeaf Community Services
Der letzte Antrag: GreenLeaf Community Services, eine drei Jahre alte Organisation, beantragt 75.000 EUR. Dieses Mal empfiehlt die KI mit einem Konfidenzwert von 78 % ABLEHNEN .
-
Zwischenstand: Die KI überstimmen
Der GreenLeaf-Fall prüfte, ob Sie eine KI-Ablehnung überstimmen können, wenn die Finanzdaten für eine Genehmigung sprechen.
Abdeckung der Sicherheits-Frameworks
NIST CSF
- PR.AT-01 Personnel are provided with awareness and training so that they possess the knowledge and skills to perform general tasks with cybersecurity risks in mind
EU AI Act
- Art. 14 Human oversight
- Art. 26 Obligations of deployers of high-risk AI systems