KI-Werkzeuge bewerten: die Auswahlkriterien
Die Auswahl eines KI-Werkzeugs beginnt in vielen Unternehmen mit einer Vorführung und endet mit einem Abonnement. Dazwischen fehlt der Teil, der später über Nutzen und Ärger entscheidet: eine Prüfung, die nicht die Fähigkeiten des Werkzeugs bewertet, sondern seine Passung zum eigenen Betrieb.
Das ist keine Formalie. KI-Werkzeuge verarbeiten in aller Regel Daten, die dem Unternehmen nicht allein gehören — Kundendaten, Mitarbeiterdaten, Vertragsinhalte. Und sie werden pro Kopf und Monat abgerechnet, oft zusätzlich nach Verbrauch. Beides erzeugt Verpflichtungen, die über die Vorführung hinausreichen.
Ein KI-Werkzeug lässt sich entlang von fünf Kriterien bewerten: rechtliche Grundlage der Datenverarbeitung, Ort und Zweckbindung der Daten, Kostenmodell und dessen Verhalten bei Wachstum, Integrationsaufwand und Ausstiegsfähigkeit. Werden personenbezogene Daten verarbeitet, braucht es einen Auftragsverarbeitungsvertrag — das ist keine Verhandlungssache, sondern Voraussetzung. Der häufigste Fehler ist nicht die falsche Auswahl, sondern gar keine: Werkzeuge werden im Alltag eingeführt, ohne dass jemand sie je bewertet hat.
Kriterium 1: die rechtliche Grundlage
Sobald ein KI-Werkzeug personenbezogene Daten verarbeitet — und das beginnt bei einer E-Mail mit Namen im Text —, greift das Datenschutzrecht. Fachbeiträge zum Thema sind hier einheitlich: Wer ein KI-Werkzeug geschäftlich nutzt und personenbezogene Daten durchleitet, braucht einen Auftragsverarbeitungsvertrag mit dem Anbieter.
Das ist die erste Prüffrage, und sie ist binär. Bietet der Anbieter einen AVV an, ist der Weg offen. Bietet er keinen, ist das Werkzeug für die Verarbeitung personenbezogener Daten nicht einsetzbar — unabhängig davon, wie gut es funktioniert.
Die zweite Frage betrifft die Weiterverwendung: Werden die eingegebenen Daten zum Training der Modelle genutzt? Bei Geschäftskunden-Tarifen ist das meist ausgeschlossen, bei kostenlosen Varianten häufig nicht. Genau hier verläuft die Grenze zwischen der privaten Nutzung eines Werkzeugs und seinem betrieblichen Einsatz.
Kriterium 2: Ort und Zweckbindung der Daten
Wo werden die Daten verarbeitet, wo gespeichert, wie lange? Die drei Fragen klingen technisch, entscheiden aber über die Beantwortbarkeit einer Auskunftsanfrage — und die kann jederzeit kommen.
| Frage | Belastbare Antwort | Warnzeichen |
|---|---|---|
| Verarbeitungsort | benannte Region, vertraglich zugesichert | „global verteilt“, ohne Festlegung |
| Training mit Eingaben | vertraglich ausgeschlossen | nur in den AGB geregelt, änderbar |
| Aufbewahrungsdauer | konkrete Frist, konfigurierbar | „solange erforderlich“ |
| Unterauftragnehmer | Liste im AVV, Änderungen mit Vorlauf | keine Liste, keine Ankündigungspflicht |
| Löschung auf Verlangen | beschriebener Ablauf mit Frist | Verweis auf den Support |
Diese Angaben stehen selten auf der Produktseite. Sie stehen im AVV und in der Sicherheitsdokumentation — und wer sie dort nicht findet, sollte danach fragen. Die Reaktion auf diese Frage ist ihrerseits ein Auswahlkriterium.
Kriterium 3: das Kostenmodell
KI-Werkzeuge werden auf drei Arten abgerechnet, und die Unterschiede wirken erst nach Monaten.
Je Nutzer und Monat. Planbar, steigt aber linear mit der Zahl der Beteiligten. Der Betrag zum Auswahlzeitpunkt sagt wenig über den Betrag in zwei Jahren.
Nach Verbrauch. Abgerechnet wird, was tatsächlich verarbeitet wird — meist in Recheneinheiten. Fair, aber schwer vorhersehbar, und bei intensiver Nutzung schnell teurer als erwartet.
Gemischt. Grundpreis je Nutzer plus Verbrauchskontingent, darüber Zusatzkosten. Verbreitet und am schwersten zu überschauen, weil zwei Größen gleichzeitig wachsen.
Für die Bewertung genügt eine einfache Übung: den erwarteten Betrag für die heutige Nutzerzahl ausrechnen — und denselben für die doppelte. Wer diese zweite Zahl nicht nennen kann, hat das Kostenmodell nicht verstanden. Dass solche Abos still mitwachsen, ist der Normalfall; sie tauchen als Lastschrift auf und nicht in einer Budgetplanung. Werkzeuge, die laufende Software-Abos sichtbar machen, setzen genau an dieser Stelle an.
Kriterium 4: Integration und tatsächliche Nutzung
Ein Werkzeug, das neben dem Arbeitsalltag steht, wird nach der Anfangsbegeisterung nicht mehr geöffnet. Entscheidend ist deshalb, ob es dort ansetzt, wo ohnehin gearbeitet wird — im Postfach, im Dokument, im Fachsystem.
Drei Fragen führen weiter: Gibt es eine Anbindung an die vorhandene Anmeldung, sodass keine zweite Nutzerverwaltung entsteht? Greift das Werkzeug auf die eigenen Daten zu, oder muss alles manuell hineinkopiert werden? Und wie sieht die Rechteverwaltung aus — sehen alle dieselben Inhalte, oder lässt sich abbilden, wer worauf zugreifen darf?
Die letzte Frage wird regelmäßig zu spät gestellt. Ein Werkzeug, das auf einen Dateibestand zugreift, macht die dortigen Berechtigungsfehler sichtbar — und zwar auf einen Schlag für alle Beteiligten.
Kriterium 5: der Ausstieg
Vor der Einführung sollte feststehen, wie eine Beendigung abliefe: Welche Daten liegen im Werkzeug, in welchem Format kommen sie heraus, was passiert mit ihnen nach der Kündigung?
Das ist kein Misstrauen, sondern Verhandlungsposition. Wer den Ausstieg nie geprüft hat, verhandelt bei der nächsten Preiserhöhung ohne Alternative. Und Preiserhöhungen sind in diesem Marktsegment die Regel, nicht die Ausnahme — die Anbieterlandschaft ist jung und die Preismodelle sind es auch.
Der Weg von der Bewertung zur Entscheidung
- Anwendungsfall benennen Nicht „KI einführen“, sondern eine konkrete Aufgabe, die heute Zeit kostet. Ohne sie fehlt der Maßstab für die Bewertung.
- Datenarten klären Welche Daten würden hineinfließen? Personenbezogene Daten machen den AVV zur Voraussetzung.
- Zwei bis drei Kandidaten prüfen Entlang der fünf Kriterien, nicht entlang der Funktionslisten. Funktionen ähneln sich stärker, als die Produktseiten vermuten lassen.
- Begrenzt testen Eine Abteilung, ein Zeitraum, ein Kriterium für Erfolg. Ohne Kriterium endet jeder Test mit „war ganz gut“.
- Entscheiden und dokumentieren Wer ist zuständig, was kostet es, wann wird überprüft. Ein Termin für die Überprüfung ist der Unterschied zwischen einer Entscheidung und einem Dauerabo.
Was die Bewertung nicht leisten kann
Zwei Fragen bleiben offen, egal wie sorgfältig geprüft wird — und es ist besser, das vorher zu wissen.
Die Qualität der Ergebnisse. Sie lässt sich nicht aus Datenblättern ablesen und schwankt je nach Aufgabe erheblich. Ein Werkzeug, das Protokolle hervorragend zusammenfasst, kann bei Fachtexten unbrauchbar sein. Das beantwortet nur ein Test mit echten eigenen Inhalten, nicht mit Beispieldaten des Anbieters.
Die Bestandsfestigkeit des Anbieters. Der Markt ist jung, Übernahmen und Einstellungen sind häufig. Wer ein Werkzeug tief in Abläufe einbaut, sollte sich fragen, wie schwer der Wechsel fiele — die Antwort darauf ist wichtiger als eine Einschätzung, wie lange es den Anbieter noch gibt.
Beide Punkte sprechen für dasselbe Vorgehen: klein anfangen, an einer klar umrissenen Aufgabe, mit geprüftem Ausstieg. Nicht aus Zurückhaltung, sondern weil das die Position ist, aus der sich später am freiesten entscheiden lässt.
Der häufigste Fehler ist gar keine Auswahl
In der Praxis werden KI-Werkzeuge selten ausgewählt. Sie tauchen auf: Jemand probiert etwas aus, findet es nützlich, nutzt es weiter — und irgendwann arbeiten drei Abteilungen mit drei verschiedenen Werkzeugen, von denen keines je geprüft wurde.
Der Schaden ist doppelt. Rechtlich, weil unklar ist, welche Daten wohin geflossen sind. Und wirtschaftlich, weil mehrere Abos parallel laufen, die einander überschneiden.
Dagegen hilft weniger ein Verbot als eine niedrige Hürde: eine benannte Stelle, bei der man ein Werkzeug anmelden kann, und eine Prüfung, die in Tagen statt Wochen erledigt ist. Wer den offiziellen Weg langsamer macht als den inoffiziellen, bekommt den inoffiziellen.
Bewährt hat sich ein zweistufiges Vorgehen. Für Werkzeuge ohne personenbezogene Daten genügt eine kurze Anmeldung mit drei Angaben: wofür, was kostet es, wer ist zuständig. Erst wenn personenbezogene Daten im Spiel sind, greift die vollständige Prüfung mit AVV und Verarbeitungsverzeichnis. Diese Trennung nimmt der Regel die Schwerfälligkeit, ohne die rechtlich kritischen Fälle durchzulassen.
Dazu gehört eine Bestandsaufnahme dessen, was bereits läuft — und zwar über die Zahlungen, nicht über eine Umfrage. Wer nach genutzten Werkzeugen fragt, bekommt die genannt, die man für offiziell hält. Wer zwölf Monate Kontoauszug durchsieht, findet auch die anderen — und zwar mit Betrag, Anbieter und Startdatum, also genau den Angaben, die für die Bewertung gebraucht werden.
Häufige Fragen
Braucht man für KI-Werkzeuge einen AVV?
Sobald personenbezogene Daten verarbeitet werden — und das beginnt bei einer E-Mail mit Namen im Text —, ja. Fachbeiträge zum Thema sind hier einheitlich: Wer ein KI-Werkzeug geschäftlich nutzt und personenbezogene Daten durchleitet, braucht einen Auftragsverarbeitungsvertrag. Bietet der Anbieter keinen an, ist das Werkzeug für diesen Zweck nicht einsetzbar.
Werden eingegebene Daten zum Training verwendet?
Das hängt vom Tarif ab. Bei Geschäftskunden-Angeboten ist die Nutzung zum Modelltraining meist vertraglich ausgeschlossen, bei kostenlosen Varianten häufig nicht. Entscheidend ist, wo der Ausschluss steht: Eine Zusicherung im Vertrag ist belastbarer als eine Formulierung in den AGB, die der Anbieter einseitig ändern kann.
Welches Kostenmodell ist das günstigste?
Das hängt am Nutzungsprofil. Nutzerbasierte Preise sind planbar, wachsen aber linear mit der Zahl der Beteiligten. Verbrauchsbasierte Modelle sind fair, aber schwer vorherzusagen. Brauchbar ist die Gegenprobe: den Betrag für die heutige und für die doppelte Nutzerzahl ausrechnen. Wer die zweite Zahl nicht nennen kann, hat das Modell nicht verstanden.
Wie testet man ein KI-Werkzeug sinnvoll?
Begrenzt und mit vorher festgelegtem Erfolgskriterium: eine Abteilung, ein Zeitraum, eine messbare Aussage — etwa „die Bearbeitung dieser Aufgabe dauert danach kürzer“. Ohne Kriterium endet jeder Test mit einem allgemeinen Eindruck, aus dem sich keine Entscheidung ableiten lässt.
Was tun, wenn im Haus schon mehrere Werkzeuge im Einsatz sind?
Erst erfassen, dann bewerten. Die Kontoauszüge der letzten zwölf Monate zeigen zuverlässiger, was tatsächlich läuft, als eine Umfrage — sie enthalten auch das, was niemand gemeldet hat. Anschließend entlang der fünf Kriterien prüfen und zusammenführen, wo sich Werkzeuge überschneiden.
