Zum Hauptinhalt springen
Connic
Zurück zum BlogBranchen-Insights

Durchsetzung des EU AI Act: Wer ermittelt und welche Nachweise zählen

Das AI Office, nationale Behörden und der EDSB teilen sich je nach System und Anbieter die Durchsetzung des EU AI Act. Teams sollten klar abgegrenzte Governance- und Laufzeitnachweise vorhalten.

13. April 2026(zuletzt aktualisiert: 25. August 2026)14 Min. LesezeitAutor: Connic Research Team

Seit dem 2. August 2026 ist das AI Office für Anbieter von KI-Modellen mit allgemeinem Verwendungszweck (GPAI) und bestimmte KI-Systeme zuständig, nationale zuständige Behörden für andere KI-Systeme und der EDSB für KI-Systeme von EU-Institutionen. Teams sollten abgegrenzte Bewertungen, Kontrollen, Vorfälle, Offenlegungen und Laufzeitnachweise für die jeweils zuständige Behörde bereithalten. Der offizielle Zeitplan nennt den Beginn der Durchsetzung des EU AI Act.

Update vom 25. August: Die Kommission ordnet die Durchsetzung des EU AI Act
Durchsetzungsrahmen der Kommission, zuletzt aktualisiert am 24. August 2026. Es trennt die Zuständigkeiten des AI Office, der nationalen zuständigen Behörden und des Europäischen Datenschutzbeauftragten und erläutert die Ermittlungs- und Sanktionsbefugnisse des AI Office. Die Seite ist ein informativer, unverbindlicher Überblick und kündigt keinen Beginn von Durchsetzungsverfahren an.

Wer ermittelt nach dem EU AI Act in welchem Fall?

Die Kommission erläutert die Zuordnung der Zuständigkeiten. Die Zuständigkeit hängt von KI-Modell, System, Anbieter und Bereitstellungszusammenhang ab. Das Regelwerk unterscheidet drei Behördenkategorien:

AI Office

Setzt Regeln für GPAI-Modell-Provider durch; für KI-Systeme, die vom Provider des zugrunde liegenden GPAI-Modells oder einem Provider derselben Unternehmensgruppe entwickelt wurden; sowie für KI-Systeme, die in nach dem DSA benannte Very Large Online Platforms (VLOPs) oder Very Large Online Search Engines (VLOSEs) integriert sind.

Nationale zuständige Behörden

Behörden der Mitgliedstaaten setzen die Regeln für andere KI-Systeme durch. Die Seite der Kommission nennt nicht jede nationale Behörde und beschreibt nicht deren jeweilige Befugnisse.

EDSB

Der Europäische Datenschutzbeauftragte setzt die Regeln für KI-Systeme durch, die von EU-Institutionen genutzt werden. Das Überblick enthält keine vergleichbare Übersicht der EDSB-Befugnisse.

Für jedes System sollten Zweckbestimmung, KI-Modell-Anbieter, die Rolle als Anbieter oder Betreiber, die Integration in einen benannten VLOP oder VLOSE und die Nutzung durch eine EU-Institution erfasst werden. Diese Fakten helfen bei der Zuordnung einer Anfrage mehr als das allgemeine Label „KI-Agent“.

Was das AI Office und die Kommission tun können

Die detaillierten Befugnisse im Überblick der Kommission gelten ausdrücklich für das AI Office und die Kommission. Die Seite erklärt nicht, dass nationale zuständige Behörden oder der EDSB dieselben Instrumente besitzen.

Auf GPAI-Modelle zugreifen und sie evaluieren
Das AI Office oder von ihm beauftragte unabhängige Experten können GPAI-Modell-Provider verpflichten, KI-Modell-Zugang für Evaluationen zu gewähren. Es kann außerdem Korrekturmaßnahmen verlangen, bis hin zur Einschränkung der öffentlichen Verfügbarkeit eines KI-Modells, wenn nötig.
Befragen und inspizieren
Bei KI-Systemen kann das AI Office Personen befragen, die relevante Informationen besitzen könnten und einem Gespräch zustimmen, sowie Räumlichkeiten von Providern inspizieren.
Informationen anfordern
Für GPAI-Modelle und KI-Systeme kann das AI Office einfache Auskunftsersuchen senden oder die Kommission per Beschluss eine formelle Anfrage stellen. Falsche oder irreführende Antworten auf einfache Ersuchen können Bußgelder nach sich ziehen; auch formelle Anfragen können sanktioniert werden, wenn der Provider nicht oder unvollständig antwortet.
Sanktionen per Kommissionsbeschluss verhängen
Stellt das AI Office einen vorsätzlichen oder fahrlässigen Verstoß fest, kann die Kommission eine Sanktion verhängen. Art, Schwere und Dauer des Verstoßes bestimmen die Höhe; die genannten Maximalbeträge sind Obergrenzen, keine automatisch verhängten Geldbußen.

Drei Beschwerde- und Meldekanäle

AI Act Complaint Tool
Natürliche und juristische Personen können Beschwerden über mutmaßliche Verstöße im Zusammenhang mit KI-Systemen in der ausschließlichen Zuständigkeit des AI Office einreichen. Beschwerdeformular zum EU AI Act.
AI Act Whistleblower Tool
Personen mit beruflicher Verbindung zu relevanten KI-System- oder GPAI-Modell-Providern können einen sicheren Hinweis abgeben, auf Wunsch anonym. Hinweisgeberportal zum EU AI Act.
Kanal für nachgelagerte GPAI-Anbieter
Ein nachgelagerter Anbieter, dessen KI-System das GPAI-Modell eines anderen Providers integriert, kann mutmaßliche Verstöße gegen Artikel 53–55 melden. Beschwerdekanal für nachgelagerte Anbieter.
Die Kommission erklärt, ihr Überblick sei informativ und unverbindlich und ersetze oder berühre den EU AI Act nicht. Die Existenz dieser Tools belegt nicht, dass Beschwerden, Ermittlungen oder Durchsetzungsverfahren begonnen haben.

Artikel 2 des EU AI Act beschreibt den räumlichen Anwendungsbereich. Der EU AI Act erfasst Anbieter, die KI-Systeme unabhängig vom Standort auf den EU-Markt bringen oder in Betrieb nehmen, in der EU ansässige Betreiber sowie Anbieter oder Betreiber aus Drittländern, wenn das Ergebnis des Systems in der Union verwendet wird.

Das Anwendungsdatum ist nur ein Teil der Vorbereitung. Teams müssen auch wissen, welche Behörde Fragen stellen könnte und ob sie einen genauen, abgegrenzten Nachweis über Bewertungen, Kontrollen, Vorfälle, Offenlegungen und den Systembetrieb erstellen können.

Bei der Auswahl einer KI-Agenten-Plattform sollten Governance-Aufzeichnungen und Nachweisprozesse zu den Kriterien gehören. Für Teams, die noch eine Auswahlliste erstellen, dient der Vergleich der besten KI-Agenten-Plattformen für EU-Unternehmen 2026 als Orientierung.

Weiterführende Quellen: Beginn der Durchsetzung des EU AI Act.

Was der EU AI Act verlangt

Der EU AI Act nutzt ein risikobasiertes Regelwerk. Eine praktische Prüfung unterscheidet verbotene Praktiken, Hochrisikosysteme, Anwendungen mit spezifischen Transparenzpflichten und Anwendungen mit weniger systemspezifischen Pflichten.

Verbotene Praktiken
Artikel 5 verbietet bestimmte schädliche Manipulations- und Social-Scoring-Praktiken, Emotionserkennung am Arbeitsplatz und in Bildungseinrichtungen mit Ausnahmen sowie biometrische Echtzeit-Fernidentifizierung in öffentlich zugänglichen Räumen für die Strafverfolgung mit engen Ausnahmen. Die meisten Verbote aus Artikel 5 gelten seit Februar 2025.
Hochrisikosysteme
Bestimmte Anwendungen nach Artikel 6 und Anhang III können als Hochrisikosysteme gelten, darunter manche Systeme in kritischer Infrastruktur, Bildung, Beschäftigung, wesentlichen Diensten, Migration und Strafverfolgung. Nicht jedes System in diesen Bereichen fällt darunter. Anforderungen und Termine hängen vom Klassifizierungsweg und der Rolle des Betreibers ab.
Bestimmte Transparenzpflichten
Artikel 50 erfasst bestimmte interaktive und generative KI-Anwendungen. Personen müssen im Allgemeinen informiert werden, wenn sie mit KI interagieren, sofern dies nicht offensichtlich ist. Für synthetische Inhalte und Deepfakes gelten separate Kennzeichnungs- oder Offenlegungsregeln. Anwendbar seit dem 2. August 2026.
Anwendungen mit weniger systemspezifischen Pflichten
Für Anwendungen außerhalb von Artikel 5, Hochrisikoklassifizierung und Artikel 50 ergänzt der EU AI Act im Allgemeinen weniger systemspezifische Pflichten. Querschnittspflichten wie KI-Kompetenz und anderes anwendbares Recht können weiterhin gelten; Provider können freiwillige Verhaltenskodizes anwenden.

Die Klassifizierung folgt Artikel 6 und der Zweckbestimmung des Systems, nicht dem Wort „Agent“. Ein kundenorientierter Assistent kann eine Offenlegung nach Artikel 50 auslösen, während ein Agent für einen bestimmten Zweck nach Anhang III als Hochrisikosystem gelten kann. Die Rolle der betreibenden Organisation bestimmt die anwendbaren Pflichten. Unsere Plattform kann betriebliche Kontrollen und abgegrenzte Laufzeitnachweise organisieren.

Plane die Kontrollen für den EU AI Act

Wir ordnen den Anwendungsfall und die relevanten Pflichten den Connic-Traces, Freigaberegeln, Audit-Logs sowie der menschlichen Aufsicht und Betreiberdokumentation zu.

Compliance-Anforderungen besprechen

Zeitplan für Anwendung und Durchsetzung des EU AI Act

Der EU AI Act wird phasenweise eingeführt. Manche Bestimmungen gelten bereits und sind durchsetzbar; andere stehen noch bevor:

Februar 2025
Verbote für KI-Praktiken mit inakzeptablem Risiko und KI-Kompetenzpflichten wurden anwendbar.
August 2025
Governance-Regeln und Pflichten für KI-Modelle mit allgemeinem Verwendungszweck wurden anwendbar.
Juli 2026
Der AI Omnibus trat am 27. Juli in Kraft und änderte den Anwendungszeitplan. Die Pflichten für Hochrisikosysteme wurden auf die folgenden Termine verschoben.
August 2026
Einige Befugnisse des AI Office und nationaler zuständiger Behörden wurden anwendbar. Verbotene Praktiken, Transparenzanforderungen aus Artikel 50 und GPAI-Regeln wurden durchsetzbar.
Dezember 2026
Neue Verbote zu nicht einvernehmlichem intimem Material und Darstellungen sexuellen Kindesmissbrauchs gelten. Auch die Übergangsfrist aus Artikel 50(2) für Systeme, die vor dem 2. August 2026 in Verkehr gebracht wurden, endet.
Dezember 2027
Nach Artikel 6(2) und Anhang III klassifizierte Hochrisikosysteme müssen die Anforderungen erfüllen.
August 2028
Nach Artikel 6(1) und Anhang I klassifizierte Hochrisikosysteme müssen die Anforderungen erfüllen.

Bestimmte Transparenzpflichten sind jetzt durchsetzbar. Der vom Service Desk veröffentlichte Zeitplan zur Durchsetzung sollte vor der Bereitstellung eines Agenten geprüft werden. Pflichten für Betreiber von Hochrisikosystemen wurden durch den AI Omnibus auf Dezember 2027 und August 2028 verschoben. Der Aufbau der Protokollierungs- und Aufsichtsinfrastruktur für diese Pflichten benötigt dennoch Zeit.

Was der AI Omnibus geändert hat

Die Zusammenfassung der Kommission zum AI Omnibus erläutert die Änderungen. Die Verordnung (EU) 2026/1744 änderte den Zeitplan des EU AI Act und mehrere inhaltliche Bestimmungen, darunter Teile des Regelwerks für Hochrisikosysteme.

Geändert: Zeitplan für Hochrisikosysteme
Die Anwendungsdaten der Pflichten für Hochrisikosysteme wurden auf den 2. Dezember 2027 für nach Artikel 6(2) und Anhang III klassifizierte Systeme und auf den 2. August 2028 für nach Artikel 6(1) und Anhang I klassifizierte Systeme verschoben. Die Änderung betrifft auch Teile der zugrunde liegenden Bestimmungen für Hochrisikosysteme; Teams sollten ihre Pflichtenübersichten erneut prüfen.
Geändert: KI-Kompetenz und Registrierung
Artikel 4 verlangt nun von Anbietern und Betreibern Maßnahmen zur Förderung von KI-Kompetenz, statt für jede Person ein ausreichendes Niveau zu garantieren. Die bei der Registrierung erforderlichen Angaben nach Anhang VIII wurden vereinfacht.
Unverändert: Artikel 50
Die Transparenzpflichten aus Artikel 50 gelten ab dem 2. August 2026. Anbieter von KI-Systemen, die vor diesem Datum in Verkehr gebracht wurden, haben bis zum 2. Dezember 2026 Zeit, die Kennzeichnungs- und Erkennungspflicht aus Artikel 50(2) zu erfüllen.
Geändert: verbotene Praktiken
Neue Verbote zu nicht einvernehmlichem intimem Material und Darstellungen sexuellen Kindesmissbrauchs gelten ab dem 2. Dezember 2026. Bestehende Teams sollten Artikel 5 prüfen, statt sich auf die ursprüngliche Liste von 2024 zu verlassen.

Der Omnibus schuf keinen allgemeinen Aufschub. Für Agenten, die mit Menschen sprechen oder Inhalte generieren, gelten die einschlägigen Pflichten aus Artikel 50 bereits. Unsere Erklärung der Leitlinien zu Artikel 50 erläutert die fünf Auslöser von Offenlegungspflichten im Detail.

So lassen sich Pflichten des EU AI Act KI-Agenten zuordnen

Der EU AI Act gilt für KI-Agenten, die unter seine Definition und seinen Anwendungsbereich fallen. Eine Organisation, die einen Agenten in eigener Verantwortung einsetzt, kann Betreiber sein. Eine Organisation, die einen Agenten entwickelt oder entwickeln lässt und unter eigenem Namen auf den Markt bringt, kann Anbieter sein. Manche Teams haben beide Rollen.

Für Teams, die Hochrisikosysteme betreiben, kehren in der Praxis folgende Kontrollbereiche regelmäßig wieder:

Menschliche Aufsicht
Bei Hochrisikosystemen müssen Aufsichtsmaßnahmen wirksam und den Risiken, der Autonomie und dem Kontext des Systems angemessen sein. Je nach System können die Maßnahmen Menschen ermöglichen, den Betrieb zu überwachen, zu interpretieren, zu übersteuern, rückgängig zu machen oder zu unterbrechen.
Transparenz
Bei erfassten Anwendungen nach Artikel 50 müssen Menschen möglicherweise darüber informiert werden, dass sie mit KI interagieren. Für bestimmte synthetische Inhalte und Deepfakes gelten Kennzeichnungs- oder Offenlegungspflichten. Für bestimmte Hochrisikosysteme gelten separate Dokumentationspflichten.
Aufzeichnungen
Anwendbare Pflichten für Hochrisikosysteme verlangen automatische Logs und die Aufbewahrung von Aufzeichnungen entsprechend dem System und der Rolle der Organisation. Betriebsdaten können Rekonstruktionen und Audits unterstützen, ohne jedes Plattformfeld zu einer allgemeinen gesetzlichen Anforderung zu machen.
Risikomanagement
Für Hochrisikosysteme verlangt Artikel 9 einen kontinuierlichen, iterativen Risikomanagementprozess über den gesamten Lebenszyklus. Teams identifizieren, bewerten und mindern relevante Risiken und testen die Wirksamkeit der Maßnahmen.
Daten-Governance
Für Hochrisikosysteme, die Trainings-, Validierungs- oder Testdatensätze verwenden, legt Artikel 10 Anforderungen an die Daten-Governance fest. Für Daten, die ein Agent verarbeitet, können außerdem die DSGVO und andere Datenschutzgesetze gelten.
Sicherheit und Robustheit
Artikel 15 verlangt von Hochrisikosystemen ein angemessenes Maß an Genauigkeit, Robustheit und Cybersicherheit. Die Maßnahmen sollten relevante Angriffe und Fehler adressieren.

Diese Kontrollen brauchen verknüpfte Aufzeichnungen. Die Plattform sollte Governance-Entscheidungen mit den Systemen und Laufzeitnachweisen verbinden, für die sie gelten.

Wie Connic die Vorbereitung auf Nachweisanfragen unterstützt

Connic Enterprise KI-Governance organisiert Aufzeichnungen rund um ein auf ein Projekt begrenztes KI-System. Teams können Zweckbestimmung, Verantwortliche, Regionen, betroffene Personen, verknüpfte Umgebungen, Bereitstellungen und Agenten dokumentieren, unveränderliche versionierte Vorbewertungen führen, betriebliche Kontrollen zuordnen, Transparenznachweise und Vorfälle verfolgen sowie abgegrenzte Nachweispakete exportieren.

Der durchgängige Prozess deckt die Rollen von Anbietern und Betreibern ab. Die Rollen Bevollmächtigter, Händler, Einführer und Produkthersteller bleiben in der Bewertung, blockieren aber Freigabe, Erstellung oder Aktualisierung von Kontrollen sowie den Export, bis die Abdeckung geklärt ist.

Connic bestimmt weder die Jurisdiktion noch nimmt es eine abschließende rechtliche Klassifizierung vor, berechnet Meldefristen, beurteilt die Akzeptanz von Nachweisen durch eine Behörde oder zertifiziert die Konformität. Diese Entscheidungen verbleiben bei der Organisation und ihrer Rechtsberatung. Die KI-Governance-Dokumentation und die Übersicht zur Governance-Funktion enthalten weitere Details.

Nachweise für Behördenanfragen bündeln
Ein Nachweispaket kann Systemeinträge, die neuesten Bewertungen und Kontrollen, Transparenzrichtlinien und deren Anwendung, Monitoring-Pläne, Vorfälle sowie abgegrenzte Telemetriedaten zu Ausführungen, Freigaben und Judges bündeln. Es ist unveränderlich und enthält nur Metadaten: Roh-Prompts und KI-Modell-Ausgaben sind bewusst ausgeschlossen, und seine Hashes bestätigen weder rechtliche Tragfähigkeit noch die Authentizität des Herausgebers.

Menschliche Aufsicht: bedingte Freigaberegeln

Artikel 14 des EU AI Act verlangt, dass Hochrisiko-KI-Systeme für wirksame menschliche Aufsicht ausgelegt sind. Artikel 26 verlangt von Betreibern, die Aufsicht Personen mit der nötigen Kompetenz, Schulung, Befugnis und Unterstützung zuzuweisen. Je nach System und Risiko kann die Aufsicht die Überwachung, Interpretation von Ausgaben, das Übersteuern oder Rückgängigmachen eines Ergebnisses oder die Unterbrechung des Betriebs umfassen. Eine Freigabe vor der Ausführung ist ein Implementierungsmuster für sensible Aktionen, keine allgemeine Pflicht.

Der Beitrag zu bedingten Freigaben beschreibt den Ablauf. Connic pausiert die Ausführung, wenn ein Agent eine sensible Aktion erreicht (Datensätze löschen, eine Erstattung verarbeiten, eine externe E-Mail senden). Eine prüfende Person sieht den Prüfkontext: Agent und Ausführung, das aufgerufene Tool und die verwendeten Parameter. Eine Freigabe setzt den Agenten fort; bei Ablehnung folgt er dem konfigurierten Fehler- oder Fortsetzungspfad.

Agent läuft autonomTool-Aufruf mit Freigaberegel → Ausführung pausiertMensch prüft Aktion + Parameter
Freigegeben → wird ausgeführtoderAbgelehnt → folgt konfigurierter Richtlinie

Aktionen ohne konfigurierte Regel laufen ohne Freigabe weiter. Bei jeder Entscheidung werden Zeitpunkt, prüfende Person, Tool, Parameter und eine optionale Begründung aufgezeichnet. Wo die Pflicht gilt, kann dieser Eintrag eine Nachweisprüfung nach Artikel 26 unterstützen.

Connic Approvals-Seite mit Agenten-Tool-Aufrufen im Status Approved oder Rejected, dem Reviewer der jeweiligen Entscheidung und Zeitstempel
Das Freigabeprotokoll zeichnet jeden Tool-Aufruf mit Freigaberegel, die Entscheidung, die prüfende Person, den Entscheidungszeitpunkt und eine optionale Begründung auf.

Transparenz: Agentenverhalten nachvollziehbar machen

Artikel 50 verlangt für bestimmte interaktive Anwendungen eine Offenlegung und für bestimmte synthetische Inhalte eine Kennzeichnung oder Offenlegung. Separate Pflichten für Hochrisikosysteme verlangen Informationen, Protokollierung und Aufsicht. Connic zeigt Betreibern, was der Agent tatsächlich getan hat, damit sie sein Verhalten untersuchen und Nachweise erstellen können.

Die Connic-Observability für KI-Agenten zeichnet folgende Daten zum Betrieb eines Agenten auf:

Aufgezeichneter Ausführungskontext
Jede Agentenausführung erzeugt einen hierarchischen Trace des Ausführungspfads: vom initialen Prompt über jeden LLM-Aufruf, Tool-Aufruf und jede Guardrail-Auswertung bis zur finalen Ausgabe. Der Trace zeigt, was der Agent in jedem Schritt getan hat.
Aufgezeichnete Betriebsdaten
Dashboards zeigen die Zahl der Ausführungen, Erfolgs- und Fehlerraten, die Zahl der Tool-Aufrufe, den Token-Verbrauch und die Token-Kosten. Ausführungsansichten zeigen Status und Dauer jeder Ausführung.
Agent-Dokumentation
Agentenkonfigurationen halten KI-Modell-Auswahl, System-Prompts, Tool-Zugriff und Guardrail-Regeln fest. In mit Git verbundenen Projekten bleibt die Änderungshistorie im Repository; reine CLI-Bereitstellungen erzeugen selbst keinen Git-Verlauf.
Connic Run Detail mit Input und Output eines einzelnen Agenten-Runs sowie einem hierarchischen Trace aus Run-, LLM-Agent- und Tool-Call-Spans mit Dauer und Status
Eine aus gespeicherter Telemetrie rekonstruierte Ausführung: Auslöser, aufgezeichnete Eingabe und Ausgabe sowie der verschachtelte Trace von der Ausführung über den LLM-Aufruf bis zum Tool-Aufruf mit Zeitangaben und Status.

Aufzeichnungen: abgegrenzte Betriebsnachweise

Artikel 12, 19 und 26 legen Protokollierungs-, Aufbewahrungs- und Monitoring-Pflichten für Hochrisikosysteme und die von diesen Vorschriften erfassten Betreiber fest. Fragt eine Behörde, was ein Agent an einem bestimmten Datum mit einer bestimmten Eingabe getan hat, erfordert die Antwort einen präzisen, abgegrenzten Betriebsnachweis.

Connic zeichnet die folgenden Betriebsdaten auf. Welche Felder rechtlich relevant sind, hängt vom System, der Rolle der Organisation, der Anfrage und der anwendbaren Pflicht ab:

Aufgezeichneter Ausführungskontext
Auslöser, Eingabedaten, verwendetes KI-Modell, Tool-Aufrufe, erzeugte Ausgaben, Dauer, Token-Verbrauch und finaler Status.
Guardrail-Auswertungen
Jede Guardrail-Prüfung wird als Trace-Span mit Regeltyp, Modus, Prüfergebnis und Erkennungsdetails aufgezeichnet.
Freigabeentscheidungen
Wer was geprüft hat, wann die Entscheidung fiel und welche Begründung angegeben wurde.
Audit-Ereignisse
Vom Audit-Log aufgezeichnete Projekt-, Bereitstellungs-, Verbindungs-, Judge-, Ausführungs- und Freigabeaktivitäten.
Versionshistorie
Verfügbarer Commit-Verlauf für automatische Git-basierte Bereitstellungen.

Diese Laufzeitaufzeichnungen lassen sich einem Governance-Prozess zuordnen und in Untersuchungen oder Compliance-Prüfungen verwenden. KI-Governance-Exporte enthalten nur Metadaten und schließen Roh-Prompts und KI-Modell-Ausgaben bewusst aus. Teams sollten deshalb bestimmen, welche zusätzlichen Aufzeichnungen sie außerhalb des Exports aufbewahren müssen.

Risikomanagement: Guardrails mit Laufzeitprüfungen

Artikel 9 und 15 legen Pflichten zu Risikomanagement, Robustheit und Cybersicherheit für Hochrisikosysteme fest. Relevante Risiken für Agenten umfassen Prompt-Injection, die Offenlegung personenbezogener Daten (PII), die Extraktion des System-Prompts, themenfremde Antworten und Datenexfiltration. Die OWASP Top 10 for Agentic Applications 2026 decken außerdem Goal Hijacking, Tool-Missbrauch, Missbrauch von Identitäten und Privilegien, Memory Poisoning und kaskadierende Fehler ab.

Der Beitrag zu Connic Guardrails beschreibt die Anwendung. Konfigurierte Regeln prüfen Eingabe- und Ausgabepfade auf solche Bedrohungen:

Prompt-Injection
Prüft auf Versuche, Anweisungen zu überschreiben, Encoding-Angriffe, Zeichenmanipulation und strukturelle Injection. Der konfigurierte Modus bestimmt, ob eine Erkennung blockiert oder das Ereignis nur aufgezeichnet wird.
Schutz personenbezogener Daten
Prüft Eingaben und Ausgaben auf E-Mail-Adressen, Telefonnummern, Kreditkarten und andere personenbezogene Daten. Eine konfigurierte PII-Regel kann blockieren, schwärzen oder warnen.
Offenlegung des System-Prompts
Prüft Antworten auf Fragmente des System-Prompts. Im Block-Modus wird eine erkannte Antwort blockiert und ersetzt; der Warn-Modus zeichnet das Ereignis auf und fährt fort.
Inhaltsmoderation
Prüft Agentenausgaben auf konfigurierte Inhaltskategorien. Thematische Einschränkungen können auch Antworten außerhalb des vorgesehenen Zwecks eines Agenten erkennen.

Guardrails unterstützen die Modi block und warn; konfigurierte PII-Regeln unterstützen außerdem redact. Teams können auch eigene Guardrails schreiben und in Python domänenspezifische Compliance-Regeln umsetzen, etwa für Finanzhinweise, regulatorische Sprachanforderungen und interne Terminologierichtlinien.

Jede Guardrail-Auswertung wird als Trace-Span aufgezeichnet. Der Eintrag zeigt, welche Kontrolle ausgeführt wurde, welches Ergebnis sie lieferte und wie die Laufzeitumgebung reagierte. Er kann Tests und Prüfungen der Kontrolle unterstützen, ohne ihre rechtliche Tragfähigkeit zu belegen.

Kontinuierliche Evaluation: Regressionssignale aufzeichnen

Anwendbare Monitoring-Pflichten bestehen nach der Bereitstellung fort. Das Verhalten eines Agenten kann sich durch KI-Modell-Updates, Prompt-Änderungen oder veränderte Nutzereingaben ändern. Automatische Evaluationen können fortlaufende Nachweise liefern.

LLM Judges bewerten passende Ausführungen mit der konfigurierten Stichprobenrate anhand eigener Kriterien. Genauigkeit, Nützlichkeit, Sicherheit und die Einhaltung organisationsinterner Richtlinien werden als strukturierte Ergebnisse erfasst; Änderungen der Bewertung werden im Dashboard sichtbar. Teams können außerdem A/B-Tests ausführen und bei Prompt-Änderungen die Ergebnisse vor einem breiteren Rollout vergleichen.

Connic LLM-Judge-Statistik mit Durchschnittswerten pro Kriterium für Qualität und Groundedness
Ein LLM-Judge-Dashboard mit Ergebnissen für die vom Team konfigurierten Kriterien Qualität und Groundedness.

Eine Evaluation je Ausführung kann einen Risikomanagementprozess nach Artikel 9 unterstützen, indem sie Regressionen zwischen formalen Prüfungen sichtbar macht. Diese Evaluation ersetzt nicht das umfassendere rechtliche und betriebliche Risikomanagementprogramm.

Daten-Governance: Kontrollen für Umfang und Datenresidenz

Artikel 10 legt Anforderungen an die Daten-Governance für Trainings-, Validierungs- und Testdatensätze fest, die von Hochrisikosystemen verwendet werden. Für Daten, die ein Agent verarbeitet, können separat die DSGVO und andere Datenschutzgesetze gelten. Unsere Plattform bietet folgende Kontrollen und Bereitstellungsoptionen:

  • Kein Training mit Kundendaten durch Connic. Unsere Plattform verwendet Kundendaten nicht zum Trainieren von KI-Modellen. Die Verarbeitung durch BYOK-Anbieter folgt den von unseren Kunden gewählten Anbieterbedingungen.
  • Zugriffskonfiguration. Tool-Konfiguration und Umgebungsvariablen begrenzen, auf welche Quellen ein Agent zugreifen kann. Unsere Kunden bestimmen diesen Umfang.
  • Datenresidenz. connic/*-Inferenz bleibt in der EU. Die durchgängige Datenresidenz eines Projekts hängt außerdem von der gewählten Deployment-Region und allen von unseren Kunden konfigurierten Anbietern, Tools, Judges, Guardrails und Zielen ab.
  • Durchgängige Verschlüsselung. Alle Daten werden bei der Übertragung (TLS 1.2+) und im Ruhezustand (AES-256) verschlüsselt. Secrets werden zur Laufzeit injiziert und nie in Code oder Logs gespeichert.
  • KI-Modell-Auswahl. Unsere Kunden können ein EU-gehostetes connic/*-KI-Modell auswählen oder einen BYOK-Anbieter konfigurieren und ihre eigenen Zugangsdaten verwenden. Artikel 51–56 der Verordnung (EU) 2024/1689 behandeln die Pflichten von GPAI-Modell-Anbietern. Pflichten für Anbieter und Betreiber auf Systemebene hängen weiterhin von der Rolle und dem Anwendungsfall unserer Kunden ab.

Sicherheit und Robustheit: Schutz auf Infrastrukturebene

Artikel 15 verlangt von Hochrisikosystemen ein angemessenes Maß an Genauigkeit, Robustheit und Cybersicherheit. Plattform- und Laufzeitkontrollen können diese Arbeit unterstützen, ihre rechtliche Tragfähigkeit hängt jedoch vom System und seinen Risiken ab.

Container-Isolation
Die Agenten unserer Kunden laufen in isolierten Containern mit strikten Ressourcenlimits.
Temporäre Ausführungsumgebungen
Die Ausführungsumgebungen werden nach der Nutzung gelöscht, damit weniger Daten zurückbleiben.
Sichere Netzwerkanbindung
Connic Bridge verbindet Agenten ohne das Öffnen eingehender Ports mit privater Infrastruktur.
Infrastruktur-Zertifizierungen
Die Cloud-Anbieter von Connic verfügen über Zertifizierungen nach SOC 2 Type II, ISO 27001 und PCI DSS.

Ausführliche Details stehen auf der Sicherheitsseite und der Compliance-Seite zum EU AI Act.

Sanktionsobergrenzen des EU AI Act

Der EU AI Act ist verbindliches Recht. Artikel 99 und 101 der Verordnung (EU) 2024/1689 legen die gesetzlichen Sanktionsstufen fest:

Verbotene Praktiken (Verstöße gegen Artikel 5)
Bis zu 35 Millionen Euro oder 7 % des gesamten weltweiten Jahresumsatzes, je nachdem, welcher Betrag höher ist.
Andere Verstöße einschließlich GPAI-Pflichten
Bis zu 15 Millionen Euro oder 3 % des gesamten weltweiten Jahresumsatzes, je nachdem, welcher Betrag höher ist.
Auskunftsverstöße bei KI-Systemen
Bis zu 7,5 Millionen Euro oder 1 % des gesamten weltweiten Jahresumsatzes, je nachdem, welcher Betrag höher ist.

Artikel 99 wendet umsatzbasierte Obergrenzen auf Unternehmen an und sieht niedrigere Maximalbeträge für KMU vor. Die genaue Obergrenze hängt daher von Organisation und Verstoß ab. Die genannten Beträge sind die höchsten Sanktionsstufen des EU AI Act, nicht die automatisch verhängte Geldbuße in jedem Fall.

Die Obergrenze von 7,5 Millionen Euro oder 1 % gilt für Auskunftsverstöße bei KI-Systemen. Die Übersicht der Kommission behandelt Auskunftsverstöße bei GPAI-Modellen mit anderen Maximalbeträgen. Teams sollten die Obergrenze für KI-Systeme daher nicht standardmäßig auf GPAI-Anfragen anwenden.

Durch die neuen Beschwerde- und Meldekanäle wird die Qualität der Nachweise Teil der Reaktion auf Vorfälle. Eine vollständige, abgegrenzte Aufzeichnung hilft einem Team, einen Vorwurf zu untersuchen, die Rechtsberatung zu informieren, ein Problem zu beheben und auf eine Behördenanfrage präzise zu antworten.

Governance und Laufzeitnachweise verknüpft halten

Teams können Prozesse für menschliche Aufsicht, Audit-Logging, Guardrails, Evaluationspipelines und Governance-Aufzeichnungen über separate Tools hinweg zusammenstellen. Sind diese Aufzeichnungen nicht verknüpft, müssen Anwendungsbereich und Beziehungen zwischen System, Bewertung, Kontrolle, Vorfall und Laufzeitnachweis manuell rekonstruiert werden.

Connic verknüpft diese Aufzeichnungen mit den Umgebungen, Bereitstellungen und Agenten, für die sie gelten. Freigaben, Ausführungs-Traces, darin aufgezeichnete Guardrail-Ergebnisse, Judges, Vorfälle und Nachweispakete unterstützen so einen gemeinsamen Prüfprozess, statt eine manuelle Rekonstruktion über getrennte Daten hinweg zu erfordern.

Nachweise zertifizieren keine Compliance
Unsere Plattform stellt Governance-Datensätze und technische Nachweisinfrastruktur bereit. Das Anwendungsteam und seine Rechtsberatung bestimmen weiterhin Anwendungsbereich, Klassifizierung, Pflichten, Fristen und ob die resultierenden Nachweise ausreichen. Ein dokumentierter Datensatz unterstützt die Compliance-Arbeit; er beweist keine Compliance.

Checkliste zur Vorbereitung auf Nachweisanfragen

Teams, die KI-Agenten betreiben oder deren Bereitstellung planen, sollten ein Nachweispaket für Behördenanfragen zusammenstellen, bevor eine Informationsanfrage, Beschwerde oder ein Vorfall eintrifft:

  • 1.Angaben zur rechtlichen Zuständigkeit festhalten.Für jedes System Zweckbestimmung, KI-Modell-Anbieter, die Rollen der Organisation, relevante Regionen, die Integration in einen VLOP oder VLOSE und die Nutzung durch eine EU-Institution dokumentieren.
  • 2.Eine versionierte Bewertung führen.Rollen- und Risikoanalyse, Begründung, Quellversion, prüfende Person, offene Fragen und die aus der neuesten freigegebenen Vorbewertung zugeordneten Pflichten aufbewahren.
  • 3.Kontrollen mit Nachweisen verknüpfen.Verantwortliche Person, Umsetzungs- und Nachweisstatus, Ausnahmen, Freigaben, Traces, Guardrail-Ergebnisse, Evaluationen und die kundenseitig verwaltete Dokumentation zu Artikel 50 erfassen.
  • 4.Den Verlauf eines Vorfalls pflegen.Zuständigkeit für das Monitoring, Signale, Prüfdaten, Zeitpunkt der Kenntnisnahme, Korrekturmaßnahmen, Entscheidungen zur Meldepflicht und Nachweise zu Behördenbenachrichtigungen festhalten.
  • 5.Die Antwort proben. Eine verantwortliche Person für Informationsanfragen benennen, den Exportpfad testen, Aufzeichnungen außerhalb reiner Metadatenpakete identifizieren und Genauigkeit, Vollständigkeit, Anwendungsbereich und Vertraulichkeit durch die Rechtsberatung prüfen lassen.

Die dokumentierten Nachweise sollten aktuell bleiben. Vor einer Antwort an eine Behörde sollten qualifizierte Rechtsberater den offiziellen Text, die Klassifizierung des Systems und den Umfang der Antwort prüfen.

Häufig gestellte Fragen

Das ist möglich. Der EU AI Act erfasst Anbieter, die KI-Systeme unabhängig vom Standort auf den EU-Markt bringen oder in Betrieb nehmen, in der EU ansässige Betreiber sowie Anbieter oder Betreiber aus Drittländern, wenn das Ergebnis eines KI-Systems in der EU verwendet wird. Artikel 2 des konsolidierten EU AI Act bildet die Grundlage; entscheidend sind die Fakten und nicht nur der Unternehmenssitz.

Die Zuständigkeitsübersicht der Kommission ordnet GPAI-Anbieter, KI-Systeme desselben Anbieters oder derselben Unternehmensgruppe wie das zugrunde liegende GPAI-Modell und KI-Systeme, die in benannte VLOPs oder VLOSEs integriert sind, dem AI Office zu. Nationale zuständige Behörden decken andere KI-Systeme ab, während der EDSB für KI-Systeme von EU-Institutionen zuständig ist.

Seit dem 2. August 2026 gelten einige Durchsetzungsbefugnisse des AI Office und der Mitgliedstaaten. Verbote für KI-Praktiken, Transparenzanforderungen für bestimmte KI-Systeme und Regeln für KI-Modelle mit allgemeinem Verwendungszweck sind durchsetzbar. Weitere Befugnisse beginnen mit der Anwendbarkeit der jeweiligen Vorschriften, darunter die Regeln für Hochrisikosysteme nach Artikel 6(2) und Anhang III am 2. Dezember 2027 sowie nach Artikel 6(1) und Anhang I am 2. August 2028. Offizieller Zeitplan zur Durchsetzung.

Nein. Die Verordnung (EU) 2026/1744 verschob die Anwendungsdaten für Hochrisikosysteme auf den 2. Dezember 2027 und den 2. August 2028, doch die Transparenzpflichten aus Artikel 50 gelten ab dem 2. August 2026. Anbieter von Systemen, die vor diesem Datum auf den Markt gebracht wurden, haben bis zum 2. Dezember 2026 Zeit, Artikel 50(2) zu erfüllen. Verordnung zum AI Omnibus.

Bei GPAI-Modellen und KI-Systemen kann das AI Office Informationen zur Prüfung der Konformität anfordern. Falsche oder irreführende Antworten auf eine einfache Anfrage können mit einer Geldbuße geahndet werden. Bei einer formalen Anfrage durch Beschluss der Kommission kann auch eine fehlende oder unvollständige Antwort des Anbieters sanktioniert werden. Bei GPAI-Modellen kann das AI Office außerdem Zugriff auf KI-Modelle für Evaluationen verlangen.

Die höchsten Stufen liegen bei bis zu 35 Millionen Euro oder 7 % des weltweiten Jahresumsatzes für Verstöße gegen verbotene Praktiken und bei bis zu 15 Millionen Euro oder 3 % für andere Verstöße einschließlich GPAI-Pflichten. Bei Auskunftsverstößen zu KI-Systemen beträgt das Maximum 7,5 Millionen Euro oder 1 %. Die genaue Sanktion hängt von der Organisation sowie Art, Schwere und Dauer des Verstoßes ab. Artikel 99 und 101 des konsolidierten EU AI Act.

Artikel 14 verlangt, dass Hochrisiko-KI-Systeme für wirksame menschliche Aufsicht ausgelegt sind. Artikel 26 verlangt von Betreibern, die Aufsicht zuzuweisen und die Anwendung der relevanten Maßnahmen sicherzustellen. Je nach System kann dies die Überwachung, Interpretation von Ausgaben, das Übersteuern oder Rückgängigmachen von Ergebnissen oder die Unterbrechung des Betriebs umfassen. Eine Freigaberegel vor der Ausführung ist ein Implementierungsmuster für sensible Aktionen, keine allgemeine Pflicht.

Die Protokollierungspflichten hängen vom System und der Rolle der Organisation ab. Artikel 12, 19 und 26 behandeln automatische Logs, Aufbewahrung und das Monitoring durch Betreiber von Hochrisikosystemen, schreiben jedoch nicht allgemein jedes Feld der Plattformtelemetrie vor. Eine abgegrenzte Aufzeichnung sollte Systemversionen, gegebenenfalls Eingaben und Ausgaben, Tool-Aktivität, Kontrollergebnisse, Vorfälle und menschliche Entscheidungen enthalten. Die Rechtsberatung sollte anschließend den erforderlichen Umfang und die Aufbewahrungsdauer bestätigen.

Mehr aus dem Blog

Branchen-Insights

SLA-Checkliste für KI-Agenten-Plattformen: Was Enterprise-Käufer prüfen sollten

Das SLA einer KI-Agenten-Plattform lässt sich anhand von Uptime-Abdeckung, Abhängigkeiten, Incident Response, Recovery, Security-Nachweisen, Abhilfen und Exit-Bedingungen bewerten.

29. August 202612 Min. Lesezeit
Branchen-Insights

EU-gehostete KI-Modelle 2026: Provider, Abhängigkeit und Optionen

EU-gehostete KI-Modelle im Vergleich: Standort, Aufbewahrung, Betreiber, Portabilität und Betriebsmodell unter Berücksichtigung einer 2026 von der EU-Kommission beauftragten Studie.

18. August 202611 Min. Lesezeit
Branchen-Insights

EU AI Gigafactories: Was der 30-Milliarden-Euro-Plan bedeutet

Die EU hat die Beschaffung für bis zu sieben AI Gigafactories eröffnet. Der 30-Milliarden-Euro-Plan könnte die Rechenkapazität in der EU ausbauen; Preise, Zugang und Zeitplan bleiben offen.

14. August 202610 Min. Lesezeit
Branchen-Insights

Der OpenAI-Hugging-Face-Hack: Was der Vorfall für KI-Agenten bedeutet

OpenAI-KI-Modelle entkamen im Juli 2026 aus einer Test-Sandbox und kompromittierten Hugging Face. Der Vorfall zeigt, welche Guardrails KI-Agenten im Produktivbetrieb benötigen.

24. Juli 20269 Min. Lesezeit
Branchen-Insights

Was ist eine MCP-Verbindung? Eine praktische Definition

Eine MCP-Verbindung verbindet eine KI-App über das Model Context Protocol mit externen Tools und Daten. Der Artikel erklärt die Funktionsweise und den Vergleich mit einer eigenen API-Integration.

8. Juli 20268 Min. Lesezeit
Branchen-Insights

KI-Agenten-Plattformen mit EU-Datenresidenz: Auswahl 2026

KI-Agenten-Plattformen nach EU-Datenresidenz vergleichen: Traces, Speicher, Modellaufrufe, Backups, Unterauftragsverarbeiter und Support-Zugriffe.

6. Juli 202612 Min. Lesezeit
Branchen-Insights

KI-Agenten in der DACH-Region 2026

Wie DACH-Teams 2026 KI-Agenten für den Produktivbetrieb entwickeln, auslösen und betreiben: Nutzung, KI-Modell-Mix, Verbindungen, Kosten, Zuverlässigkeit und Compliance auf Basis der Daten unserer Kunden.

27. Juni 202612 Min. Lesezeit
Branchen-Insights

Die besten KI-Agenten-Plattformen für EU-Unternehmen 2026

Vergleich von KI-Agenten-Plattformen nach EU-Datenresidenz, Self-Hosting, Unterstützung für MCP-Tools, BYOK, Vorbereitung auf den EU AI Act und SLA-Bedingungen. Aktualisiert im September 2026.

19. Mai 202616 Min. Lesezeit
Branchen-Insights

Deployment-Plattformen für KI-Agenten: 16 Anbieter im Vergleich (2026)

16 Deployment-Plattformen für KI-Agenten im Vergleich nach Betriebsumfang, Sprache, Hosting-Modell, Verantwortung für Verbindungen, Datenresidenz und Preismodell.

19. April 202615 Min. Lesezeit