Was sollten Sie eine KI-Agentur fragen, bevor Sie unterschreiben?

Avatar
Autor

Die Fragen an eine KI-Agentur haben mit Modellen fast nichts zu tun. Sieben davon trennen Anbieter voneinander, denn sie betreffen Dokumentation, die Frage, wer der Aufsicht antwortet, und was bei Ihnen bleibt, wenn der Vertrag endet.

Der Grund ist rechtlich. Seit dem 2. August 2026 gelten die Transparenzpflichten der KI-Verordnung und die Aufsichtsbefugnisse der nationalen Behörden. Der Aufsicht antwortet in der Regel, wer das System in Verkehr bringt oder wer es einsetzt. Nicht die Agentur, die es gebaut hat.

Verordnung (EU) 2024/1689 wurde durch die Verordnung (EU) 2026/1744 geändert, die am 27. Juli 2026 in Kraft trat. Die Pflichten für eigenständige Hochrisikosysteme nach Anhang III wurden auf den 2. Dezember 2027 verschoben, die für in Anhang-I-Produkte eingebettete KI auf den 2. August 2028. Die Pflichten des Artikels 50 wurden nicht verschoben.

2. Aug. 2026
Artikel 50 gilt. Aufsichtsbefugnisse der nationalen Behörden in Kraft
2. Dez. 2026
Artikel 50 Absatz 2 erfasst Systeme, die bereits in Verkehr sind
2. Dez. 2027
Hochrisikopflichten nach Anhang III
2. Aug. 2028
Anhang I, in regulierte Produkte eingebettete KI
Eine Agentur kann ein System liefern, das sehr gut funktioniert, und es ohne alles hinterlassen, was einer Aufsichtsbehörde als Antwort dient. Das ist keine Arglist, es ist Umfang. Wenn Sie die Dokumentation nicht verlangt haben, hat sie niemand erstellt.

Wer antwortet der Aufsicht, Sie oder die Agentur?

In der Regel Sie. Und das ist die Frage, die alle anderen verändert, weshalb es sich lohnt, sie vor der Diskussion über Umfang oder Preis zu klären.

Die KI-Verordnung verteilt Pflichten nach Rollen. Anbieter ist, wer entwickelt und unter eigenem Namen oder eigener Marke in Verkehr bringt. Betreiber ist, wer das System unter eigener Verantwortung einsetzt. Eine Agentur, die ein System für Sie baut, das dann unter Ihrer Marke genutzt wird, stellt es in Ihren Verantwortungsbereich und nicht in ihren.

Artikel 25 behandelt genau die Fälle, in denen die Rolle wechselt, etwa das Anbringen des eigenen Namens oder der eigenen Marke, eine wesentliche Änderung oder eine Änderung der Zweckbestimmung. Die Verordnung (EU) 2026/1744 hat ausgewählte Pflichten des Artikels 25 der mittleren Bußgeldstufe zugeordnet, ein Zeichen dafür, dass die Rollenfrage nicht mehr akademisch ist.

Die drei Bußgeldstufen des Artikels 99
35 Mio. oder 7 %
Verbotene Praktiken nach Artikel 5. Der höhere der beiden Werte
›
15 Mio. oder 3 %
Übrige Betreiberpflichten, einschließlich der Pflichten aus Artikel 50
›
7,5 Mio. oder 1 %
Falsche, unvollständige oder irreführende Angaben gegenüber Behörden
Für große Unternehmen gilt der höhere der beiden Werte. Für KMU und Start-ups kehrt Artikel 99 Absatz 6 die Regel um, und es gilt der niedrigere . Für die meisten Leser ist das die relevanteste Zeile der Verordnung.

Die sieben Fragen an eine KI-Agentur

Jede erzeugt messbar unterschiedliche Antworten zwischen Anbietern. Wir nennen auch die Antwort, die Sie beunruhigen sollte.

Wer ist Anbieter und wer Betreiber im Sinne der KI-Verordnung? Gute Antwort: die Unterscheidung erklärt und im Vertrag übernommen. Schlechte Antwort: das ist eine Rechtsfrage, oder das haben wir noch nicht betrachtet.
Welche technische Dokumentation liefern Sie, und wann? Gute Antwort: eine konkrete Liste, während des Projekts erstellt. Schlechte Antwort: wir dokumentieren am Ende, oder wir haben die Notebooks.
Woher kommen die Trainings- oder Kontextdaten, und wie wird das festgehalten? Gute Antwort: dokumentierte Herkunft mit je Quelle benannter Rechtsgrundlage. Schlechte Antwort: wir haben genutzt, was verfügbar war.
Wo läuft die Inferenz, und was wird gespeichert? Gute Antwort: Standort, Speicherung von Prompts und Ausgaben, und wer Zugriff hat, schriftlich. Wenn der Datenstandort die bindende Randbedingung ist, ist der On-Premise-Betrieb meist die ehrliche Antwort. Schlechte Antwort: eine allgemeine Aussage zur Verschlüsselung.
Wie wird bewertet, ob das System funktioniert, und wer hat Zugang zu dieser Bewertung? Gute Antwort: ein Bewertungsdatensatz, vorab festgelegte Kriterien, und Ergebnisse, die Sie selbst reproduzieren können. Es ist dasselbe Nachweisproblem, das wir beschreiben in Softwarequalitätsnachweis. Schlechte Antwort: wir haben getestet, ohne ein Artefakt, das bei Ihnen bleibt.
Wo entscheidet ein Mensch, und was passiert, wenn das System versagt? Gute Antwort: in der Anwendung gestaltete Aufsichtspunkte mit definiertem Fehlerverhalten. Schlechte Antwort: Aufsicht beschrieben als der Nutzer kann ja immer prüfen.
Was bleibt bei uns, wenn wir den Anbieter wechseln? Gute Antwort: Code, Infrastrukturdefinitionen, Bewertungsdatensatz und Dokumentation, alles übertragbar. Schlechte Antwort: die Plattform der Agentur, ohne Ausweg. Diese Frage wird am häufigsten umgangen, und Nachdruck ist berechtigt.
Sie bewerten KI-Anbieter? Stellen Sie uns die sieben Fragen in derselben Reihenfolge.
Sprechen Sie mit unserem Team

Welche Artefakte sollten Sie bei der Lieferung verlangen?

Vier. Was sie verbindet, ist, dass keines nachträglich entstehen kann, was sie zu Vertragsklauseln macht und nicht zu Bitten am Projektende.

Artefakt 1
Technische Dokumentation
Das Protokoll der Designentscheidungen, der geprüften Alternativen und der Begründungen. Es ist eine Aufzeichnung dessen, was geschah, während es geschah. Sechs Monate später rekonstruiert ist es wohlmeinende Fiktion.
Artefakt 2
Daten-Governance und Herkunft
Welche Daten, woher, auf welcher Rechtsgrundlage, mit welcher Verarbeitung. Nicht mehr rekonstruierbar, sobald sich niemand an die Quelle erinnert, und Menschen wechseln den Arbeitsplatz.
Artefakt 3
Gestaltung der menschlichen Aufsicht
Wo eine Person entscheidet, was sie in diesem Moment sieht, was sie ändern kann. Das ist Schnittstellen- und Ablaufgestaltung. Später hinzuzufügen bedeutet neu zu bauen.
Artefakt 4
Protokolle und Nachvollziehbarkeit
Welche Entscheidung getroffen wurde, mit welcher Eingabe, über welchen Pfad. Das muss in der Architektur liegen. Protokolle, die nie geschrieben wurden, lassen sich nicht rückwirkend erzeugen.
Ein schneller Test für jedes Angebot, das Ihnen vorliegt. Suchen Sie vier Wörter: Dokumentation, Herkunft, Aufsicht, Protokolle. Erscheint keines, deckt das Budget sie nicht ab, und Sie werden sie zweimal bezahlen.

Was ändert sich am 2. Dezember 2026?

Artikel 50 Absatz 2 erfasst Systeme, die bereits in Produktion sind. Es ist das nächstliegende Datum und das am wenigsten besprochene. Artikel 50 verlangt, dass von KI erzeugte Inhalte in maschinenlesbarer Form gekennzeichnet werden, damit sie als künstlich erzeugt erkennbar sind. Für neue Systeme gilt das seit dem 2. August 2026. Systeme, die zu diesem Zeitpunkt bereits in Verkehr waren, haben Zeit bis zum 2. Dezember 2026.

Drei Fragen an die Agentur, wenn irgendetwas in Ihrem Produkt Inhalte erzeugt. Wie viele Pfade im Produkt erzeugen generierte Ausgaben, wobei die ehrliche Antwort meist mehr umfasst als die erste Liste. Wird die Kennzeichnung bei der Erzeugung oder bei der Darstellung angebracht, wobei eine Kennzeichnung auf der Darstellungsebene verschwindet, sobald der Inhalt Ihre Oberfläche verlässt. Und wenn das Modell von Dritten kommt, kennzeichnen diese, und erben Sie diese Kennzeichnung, eine Frage für jetzt und nicht für November.

Und eine Ehrlichkeit, die einzufordern lohnt. Die Robustheit der Kennzeichnung hat bekannte Grenzen: Neukodierung, Beschneiden und Formatwandlung schwächen oder entfernen viele Markierungen. Eine Agentur, die Ihnen eine unentfernbare Kennzeichnung zusichert, verspricht, was sie nicht halten kann, und das ist bedenklicher als das Eingestehen der Grenze. Wir haben behandelt, was sich im August 2026 an der KI-Verordnung tatsächlich geändert hat gesondert, und unsere Notiz zur Claude Partner Network erklärt, wie wir nach den Vorgaben des Modellanbieters bauen, statt sie zu umgehen.

Welche Klauseln fehlen in den meisten KI-Verträgen?

Sechs, und keine davon ist exotisch. Sie fehlen, weil die Verträge vor Entstehen der Pflichten verfasst wurden. Lieferung der vier Artefakte als Abnahmevoraussetzung und nicht als wünschenswerter Anhang. Ausdrückliche Zuordnung der Rollen Anbieter und Betreiber. Standort der Inferenz und Aufbewahrungsrichtlinie für Prompts und Ausgaben. Ein Recht, den Bewertungsdatensatz unabhängig auszuführen. Eine Pflicht zur Mitteilung von Änderungen am Modell oder am zugrunde liegenden Modellanbieter. Und ein geordneter Ausstieg mit Angabe, was geliefert wird, in welchem Format und in welcher Frist.

Die fünfte ist die am wenigsten offensichtliche und die nützlichste. Wechselt die Agentur das zugrunde liegende Modell ohne Mitteilung, ändert sich das Verhalten Ihres Systems, und Ihre Dokumentation beschreibt nicht mehr, was in Produktion läuft. Das ist Ihr Problem, nicht ihres, und es kann eine wesentliche Änderung im Sinne des Artikels 25 sein.

Welche Signale sprechen dafür, dass das Projekt nicht in Produktion kommt?

Keines dieser Signale ist disqualifizierend. Alle verdienen vor der Unterschrift eine Rückfrage. Das Angebot beschreibt Modellfähigkeiten statt des Geschäftsproblems. Es gibt kein schriftliches Erfolgskriterium, weshalb niemand sagen kann, dass das Projekt gescheitert ist, und es lebt unbefristet im Pilotstatus. Nichts beschreibt, was passiert, wenn das System sich irrt, obwohl KI-Systeme konstruktionsbedingt irren. Die Demonstration ist tadellos und es gibt keine Bewertungsumgebung, was der Unterschied ist zwischen einer von ihnen und einer von Ihnen gewählten Stichprobe. Niemand fragt nach Ihren echten Daten, obwohl dort die Überraschungen liegen. Und das Wort Pilot erscheint ohne Ausstiegsbedingung.

Häufig gestellte Fragen

Verantwortung und Bußgelder

Wer haftet gegenüber der Aufsicht, das Unternehmen oder die KI-Agentur?
In der Regel derjenige, der das System unter eigenem Namen in Verkehr bringt oder es unter eigener Verantwortung einsetzt. Die KI-Verordnung verteilt Pflichten nach Rollen, wobei Anbieter ist, wer entwickelt und in Verkehr bringt, und Betreiber, wer es einsetzt. Artikel 25 behandelt die Fälle, in denen die Rolle wechselt, einschließlich des Anbringens des eigenen Namens oder einer Änderung der Zweckbestimmung.
Wie hoch sind die Bußgelder der KI-Verordnung?
Artikel 99 legt drei Stufen fest. Bis zu 35 Millionen Euro oder 7 % des weltweiten Jahresumsatzes für die verbotenen Praktiken des Artikels 5. Bis zu 15 Millionen oder 3 % für Verstöße gegen die übrigen Betreiberpflichten, einschließlich der Pflichten aus Artikel 50. Bis zu 7,5 Millionen oder 1 % für falsche oder irreführende Angaben. Für große Unternehmen gilt der höhere der beiden Werte, für KMU und Start-ups der niedrigere.

Fristen der KI-Verordnung

Was ändert sich am 2. Dezember 2026?
Artikel 50 Absatz 2, der eine maschinenlesbare Kennzeichnung von KI-erzeugten Inhalten verlangt, erfasst Systeme, die am 2. August 2026 bereits in Verkehr waren. Für neue Systeme gilt die Pflicht bereits seit diesem Datum. Es ist die Pflicht mit der nächstliegenden Frist und die am wenigsten diskutierte.
Wurde die KI-Verordnung verschoben?
Teilweise. Die Verordnung (EU) 2026/1744 trat am 27. Juli 2026 in Kraft und verschob die Hochrisikopflichten nach Anhang III auf den 2. Dezember 2027 und die nach Anhang I auf den 2. August 2028. Die Transparenzpflichten des Artikels 50 wurden nicht verschoben und gelten seit dem 2. August 2026.

Fragen an eine KI-Agentur zu Dokumentation und Ausstieg

Welche Dokumentation sollte man von einer KI-Agentur verlangen?
Vier Artefakte, alle als Abnahmevoraussetzung und nicht als Anhang. Technische Dokumentation der Designentscheidungen, Daten-Governance und Herkunft, Gestaltung der menschlichen Aufsicht, und Protokolle mit Nachvollziehbarkeit der Entscheidungen. Keines entsteht nach dem Projekt, was sie zu Vertragsgegenstand macht.
Was sollte bei uns bleiben, wenn wir den KI-Anbieter wechseln?
Code, Infrastrukturdefinitionen, Bewertungsdatensatz, technische Dokumentation und Herkunftsnachweise der Daten, in übertragbaren Formaten und innerhalb einer festgelegten Frist. Lautet die Antwort auf diese Frage die Plattform der Agentur ohne vorgesehenen Ausstieg, kaufen Sie eine Abhängigkeit und kein System.
Caixa Mágica Software
Caixa Mágica Team
Caixa Mágica Software ist ein portugiesisches Softwareunternehmen mit über 20 Jahren Erfahrung in Individualsoftware, KI-Lösungen und Nearshore-Entwicklungsteams für europäische Unternehmen.
AI Lab · Caixa Mágica Software
Stellen Sie uns die sieben Fragen
Unser AI Lab baut angewandte KI für regulierte Branchen, und unser Architekturteam ist im Rahmen des Claude Partner Network von Anthropic zertifiziert. Sollte eine unserer Antworten Sie beunruhigen, ist das eine nützliche Information für Sie.