Support-QA automatisieren Sie, indem KI jedes Ticket nach Ihrem eigenen Bewertungsbogen bewertet und Sie ihre Bewertungen gegen Ihre menschlichen Prüfer abgleichen, bevor Sie ihr vertrauen. Menschen behalten Kalibrierung, strittige Bewertungen, Risikotickets und Coaching. Die KI ersetzt die dünne Stichprobe, nicht Ihr Urteil darüber, wie ein gutes Ticket aussieht.
#Das Wichtigste in Kürze
- KI-Bewertung liest jedes Ticket, sodass die QA nicht mehr von einer kleinen Stichprobe abhängt.
- Der Bewertungsbogen bleibt Ihrer: Die Leitung des Supports schreibt ihn und gibt ihn frei.
- Prüfen Sie die KI an denselben Tickets gegen Ihre eigenen Prüfer, bevor Sie sich auf eine einzelne Bewertung verlassen.
- Beschwerden, Risikofälle und Streit um Bewertungen gehen immer an einen Menschen, und Coaching bleibt ein Gespräch zwischen Menschen.
#Warum reicht eine stichprobenartige QA-Prüfung nicht aus?
Eine übliche Prüfung liest nur einen kleinen Ausschnitt der Tickets. Beispiel zur Veranschaulichung, die Zahlen sind Annahmen: Ein Team schließt 12.000 Tickets, die Prüfer lesen 120. Das sind 1 Prozent. Die anderen 99 Prozent werden nie bewertet, sodass sich eine schlechte Angewohnheit lange unbemerkt halten kann.
KI-Bewertung liest alle. Der Gewinn ist Abdeckung, kein Ersatz für Ihre Prüfer. Ziel ist, deren Aufmerksamkeit auf die Tickets zu lenken, die einen Menschen brauchen, statt auf diejenigen, die die Stichprobe zufällig getroffen hat.
#Wie richte ich die KI-Bewertung nach meinem eigenen Bewertungsbogen ein?
Beginnen Sie mit dem Bewertungsbogen, den Sie bereits nutzen. Formulieren Sie jedes Kriterium als klare Frage mit definierter Skala. Claude Developer Docs, Anthropic, abgerufen im Oktober 2026 empfehlen, die Auswertung so aufzubauen, dass die Bewertung automatisiert werden kann, auch mit LLM-bewerteten Skalen wie einer Tonalitätsnote von 1 bis 5 für eine Support-Antwort.
Als Kriterien eignen sich die Punkte, die Anthropics Leitfaden für Kundenservice-Agenten an einer Stichprobe von Gesprächen prüft: ob die Absicht verstanden wurde, ob die Antwort passend war und ob Eskalationen richtig oder falsch waren. Ergänzen Sie eigene, etwa die Einhaltung von Richtlinien.
Die Leitung des Supports gibt den Bewertungsbogen frei. Die KI entscheidet nicht, was gut ist. Die KI-Beratung von Stennir beginnt genau hier, mit einem Bewertungsbogen in einfachen Worten, auf den sich Ihre Prüfer bereits geeinigt haben.
#Woher weiß ich, dass ich den KI-Bewertungen vertrauen kann?
Lassen Sie, bevor Sie einer Bewertung trauen, zwei Prüfer dieselben 100 Tickets blind bewerten und die KI sie ebenfalls. Vergleichen Sie dann. Beispiel zur Veranschaulichung, die Zahlen sind Annahmen: Die KI liegt bei 90 von 100 höchstens einen Punkt neben den Prüfern. Liegt sie unter Ihrer Schwelle, formulieren Sie den Bewertungsbogen um und starten Sie erneut.
Dieselbe Anthropic-Seite nennt es bewährte Praxis, mit einem anderen Modell zu bewerten als dem, das die Ausgabe erzeugt hat. Wenn ein Bot Antworten entwirft, sollte nicht dasselbe Modell sie bewerten. Wiederholen Sie die Blindprüfung für Arabisch und Englisch getrennt.
#Was sollte bei Menschen bleiben?
- Kalibrierung: Prüfer bewerten regelmäßig eine frische Stichprobe neu und vergleichen sie mit der KI.
- Streitfälle: Widerspricht ein Mitarbeiter einer Bewertung, entscheidet ein benannter Prüfer.
- Risiko- und Beschwerdetickets: Diese gehen an einen Menschen und werden nicht automatisch bewertet.
- Coaching: Die KI findet das Muster, eine Teamleitung führt das Gespräch.
We are
Stennir legt Ihren Bewertungsbogen fest, baut die Bewertung und prüft sie gegen Ihre eigenen Prüfer, damit Sie entscheiden, was sie bewerten darf.
We aren't
Ein QA-Dashboard, das Mitarbeitende nach eigenen Regeln benotet oder Menschen einordnet, ohne dass jemand das Ergebnis prüft.
#Was sollte die Leitung des Supports als Nächstes tun?
Schreiben Sie Ihren aktuellen Bewertungsbogen als einfache Fragen auf und ziehen Sie 100 Tickets, die Ihre Prüfer bereits bewertet haben. Das genügt, um die Idee zu testen. Sehen Sie, wie KI für den Kundensupport zu Ihrer Warteschlange passt, und lassen Sie die KI-Beratung von Stennir das gemeinsam mit Ihnen eingrenzen. Buchen Sie ein 30-minütiges Gespräch oder machen Sie die kostenlose Bereitschaftsprüfung.
#Häufige Fragen
Was braucht die KI von uns, bevor sie Tickets bewerten kann?
Sie braucht Ihren Bewertungsbogen als klare Fragen, eine Reihe von Tickets, die Ihre Prüfer bereits bewertet haben, und Lesezugriff auf den Ticketext. Dazu braucht sie eine Regel, welche Tickets nicht bewertet werden und direkt an einen Menschen gehen. Der Bewertungsbogen ist am wichtigsten, denn die KI kann nur anwenden, was Sie definieren.
Wer entscheidet, wie ein gutes Ticket aussieht, und wer gibt den Bewertungsbogen frei?
Die Leitung des Supports entscheidet, gemeinsam mit den Prüfern, die die Arbeit kennen. Die KI wendet den Bewertungsbogen an und schreibt ihn nicht. Stennir hilft, Ihre Maßstäbe in klare Fragen mit Skala zu übersetzen, aber Ihr Team gibt frei, und jede spätere Änderung läuft durch dieselbe Freigabe.
Bewertet sie arabische und englische Gespräche gleich?
Stennir unterstützt Arabisch und Englisch vollständig, weitere Sprachen auf Anfrage. Prüfen Sie dennoch jede Sprache einzeln, denn eine Bewertung, die auf Englisch zu Ihren Prüfern passt, muss auf Arabisch nicht passen. Führen Sie denselben Blindvergleich mit arabischen Tickets durch und korrigieren Sie die Formulierung, bevor Sie diesen Bewertungen vertrauen.
Was passiert, wenn ein Mitarbeiter einer Bewertung widerspricht?
Der Mitarbeiter meldet es, und ein benannter Prüfer bewertet das Ticket von Hand neu. Diese menschliche Bewertung ersetzt die KI-Bewertung. Behalten Sie die strittigen Tickets und schärfen Sie damit den Bewertungsbogen. Häufen sich Streitfälle bei einem Kriterium, ist es vermutlich unklar.
Was kann schiefgehen, und welche Tickets sollten immer an einen menschlichen Prüfer gehen?
Die KI kann Sarkasmus, regionale Wendungen oder ein fehlendes Richtliniendetail falsch lesen und zu milde oder zu streng bewerten. Schicken Sie Beschwerden, Rechtsdrohungen und Sicherheitsfälle an einen Menschen. Verstehen Sie die KI-Bewertung als Anstoß für Coaching, nicht als Urteil über einen Mitarbeiter.
