KI im Betrieb testen: vom ersten Beispiel zum Pilotprojekt

Wenn jemand jede Woche Informationen aus E-Mails in eine Liste überträgt, kann ein KI-Werkzeug einen Entwurf liefern. Ob sich das lohnt, zeigt der ganze Ablauf: vom Lesen der Anfrage bis zum geprüften Eintrag. So kannst du einen ersten Test aufsetzen.

Eine wiederkehrende Aufgabe auswählen

Nimm beispielsweise eingehende Serviceanfragen. Heute liest jemand die Nachricht, sucht das betroffene Gerät und trägt den gewünschten Termin in die Auftragsliste ein. Für den Test soll die KI drei Felder vorschlagen: Gerät, Anliegen und Terminwunsch. Fehlt eine Angabe, bleibt das Feld leer. Die Mitarbeitenden sehen den Vorschlag neben der Originalnachricht und entscheiden, was sie übernehmen.

Mit Normalfällen und Ausnahmen testen

Schreibe zuerst nachgestellte Beispiele ohne echte Kundendaten. Sammle danach, falls für das Werkzeug freigegeben, repräsentative Fälle aus dem eigenen Ablauf. Halte für jeden Fall fest, was eine Person aus dem Text tatsächlich übernehmen kann.

  • Eine vollständige Anfrage prüft, ob alle Angaben korrekt übernommen werden.
  • Eine Anfrage ohne Datum prüft, ob ein Feld leer bleibt.
  • Ein weitergeleiteter Verlauf mit zwei Terminen prüft, ob die jüngste Änderung erkannt wird.
  • Eine widersprüchliche Nachricht prüft, ob das Werkzeug den Fall zur manuellen Klärung markiert.

Die Zeit bis zur Freigabe vergleichen

Miss bei vergleichbaren Fällen, wie lange der heutige Ablauf dauert. Miss anschliessend die Zeit mit KI-Vorschlag, einschliesslich Lesen, Prüfen und Korrigieren. Halte zusätzlich fest, welche Fehler besonders aufwendig sind. Ein falscher Termin kann mehr Arbeit verursachen als ein fehlendes Feld, das gleich auffällt.

Vereinbare vor dem Pilotbetrieb, welche Ergebnisse für euch ausreichen und welche Fehler einen Stopp auslösen. Wenn die Prüfung länger dauert als die Eingabe von Hand, vereinfacht zuerst die Eingabe oder reduziert die Zahl der vorgeschlagenen Felder. Wenn die Prüfung schnell geht und die Ausnahmen auffallen, könnt ihr den Test schrittweise ausweiten.

Vom Versuch zum Arbeitsablauf

Klärt, wer Vorschläge prüft, wer Fehler sammelt und welche Daten das Werkzeug erhalten darf. Schreibt den ersten Eintrag erst nach Freigabe in die Auftragsliste. Für eine vertiefte Orientierung zur Bewertung und zum Betrieb generativer KI gibt es das NIST-Profil zu generativer KI.

Du möchtest einen konkreten Ablauf prüfen? Beschreib mir deinen Ablauf im KI-Projektformular. Wenn vor allem mehrere Personen dieselben Daten pflegen, hilft dir auch der Vergleich zwischen Excel und einer individuellen Webapplikation.