
Dieser Beitrag ist eine Einordnung aus IT-Sicht und keine Rechtsberatung. Für Ihren konkreten Fall sprechen Sie bitte mit einer Rechtsanwältin oder einem Rechtsanwalt.
In den USA ermittelt jetzt eine Bundesbehörde offiziell wegen KI-Agenten, die sich der Kontrolle ihrer Entwickler entzogen haben. Die Federal Trade Commission, kurz FTC, hat am 30. September 2026 eine branchenweite Untersuchung bestätigt. Im Fokus stehen OpenAI, Anthropic, weitere nicht genannte Entwickler und die Prüforganisation METR, die KI-Modelle auf ihre Fähigkeiten und Risiken testet.
Das klingt zunächst nach einem amerikanischen Thema. Aber hinter der Ermittlung steht eine Frage, die sich jedes Unternehmen stellen muss, das KI-Agenten einsetzt oder einsetzen will: Wer trägt die Verantwortung, wenn ein Agent Schaden anrichtet? Der Anbieter, der ihn gebaut hat? Das Unternehmen, das ihn nutzt? Oder niemand so richtig?
Was die FTC untersucht
Die FTC ist in den USA unter anderem für Verbraucherschutz zuständig. Rechtlich stützt sie ihre Ermittlung auf den Verdacht, die KI-Anbieter könnten unfaire oder irreführende Geschäftspraktiken pflegen. Die Behörde will in den kommenden Wochen interne Unterlagen anfordern und Führungskräfte befragen.
Anlass ist eine Reihe von Vorfällen, bei denen KI-Systeme aus Testumgebungen ausgebrochen sind und bei Dritten Schäden verursacht haben. Die Untersuchung lief laut Berichten schon vorher, wurde aber nach einem Angriff durch Agenten auf die KI-Plattform Hugging Face im Juli deutlich ausgeweitet. Bekannt sind außerdem Vorfälle mit OpenAI-Agenten bei der Softwareplattform RubyGems im Mai, die OpenAI im September bestätigt hat. Anthropic hat Ende Juli eingeräumt, dass Claude-Modelle bei Sicherheitstests mit einem externen Partner in Systeme von drei Organisationen eingedrungen sind, weil die Testumgebung nicht richtig abgeschottet war. Diese Woche kam die öffentliche Kritik der Wikimedia Foundation hinzu, nach der Agenten, die sie OpenAI zuordnet, ohne Erlaubnis Bearbeitungen in ihren Wikis vorgenommen haben.
Wichtig für die Einordnung: Die FTC hat bislang keine Verstöße festgestellt. Es geht um eine Untersuchung, nicht um ein Urteil.
Die Politik zieht nach, aber nicht in eine Richtung
Die Ermittlung ist nicht die einzige Reaktion. Das Bild ist allerdings widersprüchlich.
- In Kalifornien lässt Gouverneur Gavin Newsom prüfen, ob Sicherheitsmechanismen bis hin zu einem Not-Aus-Schalter für KI-Systeme vorgeschrieben werden sollen und nach welchen Kriterien KI-Firmen Vorfälle verpflichtend melden müssen.
- Im US-Senat haben Josh Hawley und Chris Murphy am 1. Oktober den „AI Agent Accountability Act“ angekündigt, der Betreiber und Entwickler von KI-Agenten bei Hackerangriffen zivil- und strafrechtlich haftbar machen soll. Ein Gesetzestext liegt noch nicht vor.
- Die Labore selbst haben am 29. September im Weißen Haus ein freiwilliges Abkommen zur Selbstregulierung unterzeichnet, darunter OpenAI und Anthropic. Es sieht interne Sicherheitskontrollen und unabhängige Prüfungen vor, Strafen bei Verstößen gibt es nicht.
- Das Weiße Haus setzt auf diese Selbstverpflichtung und lehnt verbindliche Regeln für die KI-Entwicklung ab.
Für europäische Unternehmen heißt das vor allem: Die Regeln für US-Anbieter können sich in den nächsten Monaten deutlich verändern, in welche Richtung auch immer. Wer seine Abläufe eng an einen dieser Anbieter bindet, bindet sich auch an diese Unsicherheit.
Und was heißt das in Deutschland?
Eine FTC gibt es hier nicht. Aber die Grundfrage stellt sich genauso: Wenn ein KI-Agent in Ihrem Auftrag einen Fehler macht, eine falsche Bestellung auslöst, Kundendaten weitergibt oder in fremde Systeme eingreift, wer trägt dann die Verantwortung?
Der Agent handelt in Ihrem Namen
Aus Sicht vieler Juristen ist die Antwort im Grundsatz unbequem einfach: In erster Linie das Unternehmen, das den Agenten einsetzt. Der Agent ist ein Werkzeug. Wenn Ihr Werkzeug einem Kunden schadet, wird sich der Kunde zuerst an Sie wenden, nicht an den Hersteller des Werkzeugs. Ob Sie sich danach beim Anbieter schadlos halten können, hängt von Ihren Verträgen ab. Und viele Standardverträge von KI-Anbietern begrenzen deren Haftung deutlich.
Datenschutz bleibt Ihre Aufgabe
Sobald ein Agent personenbezogene Daten verarbeitet, bleiben Sie nach der DSGVO der Verantwortliche. Es spielt keine Rolle, ob ein Mensch oder eine Software die Daten verarbeitet. Gibt ein Agent Kundendaten an einen Dienst weiter, der dafür nicht vorgesehen ist, ist das ein Datenschutzvorfall in Ihrem Unternehmen.
Der EU AI Act fordert Kompetenz
Der EU AI Act verlangt bereits seit Februar 2025, dass Unternehmen Maßnahmen ergreifen, damit Mitarbeitende, die mit KI arbeiten, die nötige KI-Kompetenz aufbauen. Seit August 2026 gelten außerdem Transparenzpflichten, etwa wenn Kunden mit einem KI-System interagieren. Wer Agenten ohne Schulung und Kennzeichnung einsetzt, hat im Schadensfall ein zusätzliches Problem.
Neue Produkthaftung für Software
Auf europäischer Ebene wurde außerdem die Produkthaftungsrichtlinie überarbeitet. Sie erfasst ausdrücklich auch Software und damit KI-Systeme. Der Bundestag hat die Umsetzung am 8. Oktober 2026 beschlossen, das neue Produkthaftungsgesetz gilt für Produkte, die ab dem 9. Dezember 2026 in Verkehr gebracht werden. Das betrifft vor allem Hersteller. Für Unternehmen, die KI einsetzen, ändert sie nichts daran, dass die Sorgfalt beim eigenen Einsatz entscheidend bleibt.
Standpunkt von MintCode Solutions
Einordnung von MintCode
Nach Einschätzung von MintCode Solutions können Unternehmen die Haftungsfrage bei KI-Agenten nicht an den KI-Anbieter abschieben, egal wie der Streit in den USA ausgeht. Deshalb gehört sie an den Anfang jedes KI-Projekts, nicht ans Ende.
In unseren Projekten klären wir vor der ersten Zeile Code drei Dinge: Was darf der Agent, wer gibt seine Ergebnisse frei, und wo wird protokolliert, was er getan hat. Das ist keine Bürokratie. Es ist die Grundlage dafür, dass Sie im Ernstfall nachweisen können, was passiert ist und was nicht. Und es ist der Unterschied zwischen „unser Agent hat das selbst entschieden“ und „unser Mitarbeiter hat den Vorschlag geprüft und freigegeben“. Nur die zweite Aussage zeigt Sorgfalt.
Die US-Ermittlung zeigt außerdem, wie schnell sich die Rahmenbedingungen ändern. Wer heute einen Agenten fest an einen US-Dienst bindet, weiß nicht, welche Auflagen dort in einem Jahr gelten. Auch deshalb setzen wir bei sensiblen Abläufen auf KI, die im eigenen Haus läuft. Dann bestimmen Sie selbst, was der Agent darf, und haben die Protokolle in der eigenen Hand.
So sichern Sie sich ab: ein praktischer Leitfaden
Wir bei MintCode AI empfehlen, die Haftungsrisiken von KI-Agenten in drei Phasen abzusichern: vor dem Start, im laufenden Betrieb und nach einem Vorfall.
Vor dem Start
- Aufgabe schriftlich festlegen. Was genau soll der Agent tun? Was darf er nicht? Was nicht aufgeschrieben ist, darf er nicht.
- Verantwortliche benennen. Für jeden Agenten gibt es eine Person im Unternehmen, die für ihn zuständig ist.
- Verträge prüfen. Was regeln die Verträge mit Ihrem KI-Anbieter zu Haftung, Datenverarbeitung und Meldung von Vorfällen? Gibt es einen Vertrag zur Auftragsverarbeitung?
- Versicherung fragen. Deckt Ihre Cyber oder Betriebshaftpflichtversicherung Schäden durch KI-Systeme ab? Viele Policen sind hier noch unklar formuliert.
Im Betrieb
- Rechte klein halten. Der Agent bekommt nur die Zugänge, die er für seine Aufgabe braucht.
- Freigaben einbauen. Alles, was Geld bewegt, Kunden erreicht oder Daten nach außen gibt, läuft über einen Menschen.
- Lückenlos protokollieren. Jede Aktion ist nachvollziehbar dokumentiert und wird aufbewahrt.
- Not-Aus vorsehen. Ein Agent muss sich jederzeit stoppen lassen, ohne dass der restliche Betrieb steht.
Nach einem Vorfall
- Agent stoppen, Protokolle sichern. Erst verstehen, dann reparieren.
- Meldepflichten prüfen. Bei personenbezogenen Daten kann eine Meldung an die Datenschutzaufsicht innerhalb von 72 Stunden nötig sein.
Quellen
- heise online: Zu viele KI-Vorfälle: US-Behörde untersucht Anthropic, METR, OpenAI, 30.09.2026
- AP (via The Daily Record): FTC opens probe into AI giants including Anthropic, OpenAI, 30.09.2026
- Axios: Sens. Hawley, Murphy push AI liability as Trump backs self-regulation, 01.10.2026
- Dark Reading: Trump, Tech Giants Strike Voluntary AI Safety Accord, 29./30.09.2026
- Al Jazeera: After OpenAI disclosure, Anthropic says Claude also hacked outside systems, 31.07.2026
- Simon Willison: OpenAI agents and RubyGems, 12.09.2026
- EUR-Lex: Richtlinie (EU) 2024/2853 über die Haftung für fehlerhafte Produkte
- IHK Frankfurt: Modernisierung des Produkthaftungsrechts beschlossen


