Kennzahlen & Tests
Teil von Kundenfeedback in Maßnahmen übersetzen
Den Effekt einer Serviceänderung prüfen
Prüfen Sie eine Serviceänderung anhand der betroffenen Kundenaufgabe, erneuter Probleme und geeigneter Vergleichsfälle.
Prüfen Sie eine Serviceänderung an der Hürde, die sie beseitigen sollte: Erledigen geeignete Kunden ihre Aufgabe nun besser? Legen Sie Ergebnis, betroffene Fälle und Beobachtungszeitraum möglichst vor der Einführung fest. Weniger Beschwerden allein belegen keinen Erfolg.
Eine prüfbare Frage formulieren
Angenommen, Kunden finden nach einer Terminänderung den gültigen Zeitpunkt nicht; das Team macht die Anzeige beim Vorgang deutlicher. Dann lautet eine passende Prüffrage: „Finden betroffene Kunden den bestätigten Zeitpunkt und können sie ihn richtig nennen?“ Das ist ein hypothetischer Prüfentwurf, kein durchgeführter Test.
Notieren Sie die ursprüngliche Hürde, die genaue Änderung und ihren Einführungszeitpunkt. Halten Sie fest, für welche Kanäle und Vorgänge sie verfügbar ist. Sonst enthält die Auswertung womöglich Fälle, die die neue Anzeige nie sehen konnten.
Schritte zur Prüfung des Effekts einer Serviceänderung
- Prüfbare Frage formulierenFinden betroffene Kunden den bestätigten Zeitpunkt und können sie ihn richtig nennen?
- Signale für Erfolg definierenAufgabenabschluss, erneute Kontakte, Beobachtungen der Nutzerinteraktion
- Vergleichsgruppen festlegenGleiche Falldefinition und Nutzungssituation vor und nach der Änderung
- Daten sammeln und analysierenBeobachtung, Feedback, Systemdaten zu Abschlüssen und Fehlversuchen
- Nebenwirkungen und offene Fälle prüfenFehlerquote, Rückfragen außerhalb des Kanals, Kundenumfragen
Passende Signale kombinieren
| Signal | Frage | Aussagegrenze |
|---|---|---|
| Aufgabenabschluss | Erreichen geeignete Kunden das beabsichtigte Ergebnis? | Der Abschluss zeigt nicht, wie mühsam der Weg war. |
| Erneute Kontakte zur Hürde | Müssen Betroffene nochmals nachfragen? | Weniger Meldungen können auch an einem schwer erreichbaren Meldeweg liegen. |
| Beobachtung der Aufgabe | Wo suchen Kunden, und wo bleiben sie stecken? | Einzelne Beobachtungen liefern keine Häufigkeit für alle Kunden. |
Wählen Sie wenige Signale, die zur Änderung passen. Bei einer neuen Erklärung kann das Verständnis des nächsten Schritts wichtiger sein als die Zahl der Seitenaufrufe. Prüfen Sie die Datenquelle, bevor Sie fehlende Ereignisse als gescheiterte Aufgaben zählen.
Vergleichbarkeit herstellen
Verwenden Sie vor und nach der Änderung möglichst dieselbe Definition geeigneter Fälle und desselben Ergebnisses. Vergleichen Sie Zeiträume mit ähnlicher Gelegenheit zur Nutzung. Berücksichtigen Sie gleichzeitige Änderungen an Angebot, Personal, Nachfrage oder Datenerfassung. Ein Rückgang von Beschwerden könnte auch daher kommen, dass weniger betroffene Vorgänge stattfanden.
Wenn die ursächliche Wirkung für eine Entscheidung wichtig ist, planen Sie einen geeigneten Vergleich vor der Einführung. Eine zeitversetzte Einführung in vergleichbaren Serviceeinheiten kann unter passenden Bedingungen Hinweise liefern. Die Einheiten müssen hinsichtlich Aufgabe, Zeitraum und Erfassung geprüft werden; sie sind nicht schon deshalb vergleichbar, weil sie denselben Service anbieten. Ein einfacher Vorher-nachher-Vergleich beschreibt zunächst eine Veränderung.
Nebenwirkungen und offene Fälle prüfen
Eine schnellere Erledigung kann mit mehr Korrekturen einhergehen. Beobachten Sie deshalb auch Fehlversuche, erneute Kontakte und Fälle außerhalb des geänderten Kanals. Fragen Sie bei Betroffenen nach, für die die Hürde bestehen blieb. Vielleicht erfasste die ursprüngliche Problembeschreibung nur einen Teil des Problems.
Berichten Sie am Ende getrennt: Was wurde geändert, was danach beobachtet, welche Aussage zur Ursache trägt der Vergleich und was bleibt offen? Reichen die Daten nicht, lautet die Entscheidung „weiter prüfen“ statt „Erfolg bestätigt“.
