Von hilfreicher KI zu kontrolliertem Handeln: Warum Unternehmensagenten eine durchgesetzte Grenze brauchen

Ein Praxistest für KI, die Daten liest, Dienste aufruft und für ein Unternehmen handelt: Berechtigungen am Handlungspunkt prüfen, nicht nur in der Anweisung.
Original editorial illustration

Introduction: Wer entscheidet, was ein KI-Agent tun darf?

Ein KI-Assistent kann eine hilfreiche Antwort geben, ohne außerhalb eines Gesprächs etwas zu verändern. Für einen mit Geschäftssystemen verbundenen Agenten gilt ein anderer Maßstab. Er kann eine Kundenakte lesen, einen Dienst aufrufen oder eine Zahlung vorschlagen. Entscheidend ist nicht mehr nur, ob seine Antwort richtig klingt. Entscheidend ist, ob jede Handlung für diese Person, an diesem Datensatz und zu diesem Zeitpunkt erlaubt ist. Aktuelle Forschung zu quelloffenen Richtlinien-Engines verdeutlicht diesen Unterschied. Die Lehre reicht über ein einzelnes Projekt hinaus: Anweisungen lenken ein System, doch Zugriffskontrollen müssen begrenzen, was es tatsächlich tun kann.

1. Eine Anweisung ist keine Zugriffskontrolle

Die Anweisung, keine vertraulichen Informationen zu versenden, ist hilfreich. Sie entfernt keine weitreichenden Zugangsdaten und deaktiviert keine unnötige Exportfunktion. Empfehlungen gegen übermäßige Handlungsbefugnisse raten dazu, verfügbare Funktionen einzuschränken, Berechtigungen in nachgelagerten Systemen zu reduzieren und die Autorisierung dort durchzusetzen, wo Anfragen ausgeführt werden. Eine Aufgabe zum Lesen von Dokumenten sollte nicht allein deshalb Löschrechte erhalten, weil derselbe Konnektor sie anbietet. Beginnen Sie mit der kleinsten sinnvollen Auswahl an Handlungen und prüfen Sie jede Anfrage gegen den vorgesehenen Umfang.

[4] [5]

2. Identität und Berechtigung sind verschiedene Fragen

Eine verifizierte Identität beantwortet, wer eine Anfrage stellt. Sie begründet für sich genommen nicht das Recht, diese Anfrage zu stellen. Eine Zero-Trust-Architektur behandelt Authentifizierung und Autorisierung als getrennte Funktionen. Bei einem Unternehmensagenten sollte die Entscheidung die anfragende Person, die Softwareidentität, die konkrete Ressource und die vorgeschlagene Handlung verknüpfen. Ein gemeinsames Administratorkonto erschwert diese Trennung. Bevorzugen Sie begrenzte Zugriffe, die den maßgeblichen Benutzerkontext erhalten, statt jedem Arbeitsablauf dieselben umfassenden Befugnisse zu geben.

[4] [6]

3. Prüfen Sie dort, wo die Handlung stattfindet

Ein Richtliniendienst kann einen Werkzeugaufruf zulassen, ablehnen oder eine Freigabe verlangen, bevor er sein Ziel erreicht. Seine Position ist jedoch wichtig. Ein Gateway schützt den Verkehr, der durch es geleitet wird; eine alternative Umgehungsroute wird dadurch nicht automatisch kontrolliert. Host-Isolierung und Netzwerkkontrollen erfassen unterschiedliche Wege. Erfassen Sie lokale Dateien, Unterprozesse, Netzwerkdienste und delegierte Aufrufe, bevor Sie eine vollständige Abdeckung behaupten. Testen Sie eine verbotene Handlung über jeden verfügbaren Weg, nicht nur im üblichen Vorführablauf.

[1] [5]

4. Ein Prüfprotokoll ist ein Beleg, kein automatischer Beweis

Neuere Arbeiten zu Richtlinien-Engines beschreiben Entscheidungsprotokolle mit optionalen Signaturen und Hash-Verkettung, um spätere Änderungen erkennbar zu machen. Solche Funktionen können eine Untersuchung stärken. Sie beweisen nicht, dass die Richtlinie richtig war, alle Wege abgedeckt waren oder eine erlaubte Handlung eine gute Geschäftsentscheidung war. Erfassen Sie Identität, Ressource, angefragte Handlung, Entscheidung und Freigabereferenz. Vermeiden Sie unnötige sensible Inhalte in den Protokollen und prüfen Sie, ob ein Prüfer einen echten Vorfall rekonstruieren kann.

[1] [2]

5. Führen Sie einen kleinen, bewusst schwierigen Piloten durch

Wählen Sie einen Arbeitsablauf mit klarer Verantwortung und messbarem Ergebnis. Geben Sie ihm nur die benötigten Datensätze und Handlungen. Testen Sie eine abgelaufene Freigabe, einen unbeteiligten Kundendatensatz, eine Anweisung in einem Dokument und die Bitte, ein anderes Ziel zu verwenden. Legen Sie fest, was abgelehnt werden muss und was auf einen Menschen warten soll. Prüfen Sie das Verhalten bei Ausfall des Richtliniendienstes. Ein erfolgreicher Pilot sollte kontrollierte Ablehnung ebenso deutlich zeigen wie erfolgreiche Ausführung.

[1] [2] [5]

Conclusion: Messen Sie Befugnisse vor Autonomie

Quelloffene Arbeit in einem frühen Stadium ist eine nützliche technische Referenz, keine Produktionsgarantie. Vor einer Ausweitung des Zugriffs sollten Führungskräfte Nachweise für durchgesetzte Grenzen, Umgehungstests und brauchbare Vorfallsprotokolle verlangen. Ziel ist nicht, jede Handlung zu verlangsamen. Erlaubte Arbeit soll verlässlich und verbotene Arbeit schwer durchführbar werden. Besseres Schlussfolgern hilft dem Agenten, eine Handlung auszuwählen. Durchgesetzte Befugnisse bestimmen, ob das Unternehmen sie erlauben sollte.

References

  1. Policy enforcement research, 9 November 2026
  2. Policy engine implementation and release status
  3. Cloud-native project maturity record
  4. Zero Trust Architecture, SP 800-207
  5. Excessive agency: causes and prevention
  6. Workload identity and verifiable identity documents

Powered By K7