Kennzahlen & Tests
Teil von Bindungsprogramme testen
Nachrichtenzeitpunkte bei gleichem Angebot testen
Frühen und späten Versand vergleichen: beim selben Anlass zuteilen, frühe Eigenhandlungen mitzählen und Kalendergrenzen beachten.
Für einen fairen Vergleich zwischen frühem und spätem Versand teilen Sie geeignete Kunden bereits beim gemeinsamen Anlass zu. Angebot, Kernbotschaft, Kanal und Empfängerregel bleiben gleich. Beobachten Sie beide Gruppen ab diesem Anlass über dasselbe Ergebnisfenster. Wer vor dem späten Versand von selbst handelt, bleibt in der spät zugeteilten Gruppe.
Einen gemeinsamen Startpunkt festlegen
Ein möglicher Anlass ist eine abgeschlossene Bestellung, nach der eine spätere Nachbestellung sinnvoll sein kann. Dann lautet die Testfrage: Hilft eine Erinnerung innerhalb eines fachlich passenden Bedarfsfensters früher oder später mehr? Einen allgemein besten Abstand in Tagen liefert das nicht.
Legen Sie vorab fest, wann ein Kunde geeignet wird und wann die Nachricht entfallen soll. Kauft jemand vor dem geplanten späten Versand erneut, wird die späte Nachricht nach der festgelegten Stoppregel nicht gesendet. Die Person bleibt dennoch in ihrer ursprünglichen Gruppe. Ein Vergleich nur der tatsächlich Angeschriebenen würde aus der späten Gruppe gerade die entfernen, die zuvor selbst handelten.
Das Angebot gleich und die Zeitwirkung sichtbar halten
Nutzen Sie dieselbe Angebotsfassung, denselben vorgesehenen Vorteil, denselben Kanal und dieselben Ausschlüsse. Auch Gutscheinbedingungen zählen zum Vergleich: Ein gemeinsames Enddatum kann der später angeschriebenen Gruppe weniger Nutzungszeit lassen.
Eine identische Gültigkeitsdauer ab Versand löst das Problem, gibt der frühen Gruppe aber mehr Kalenderzeit für eine Reaktion. Beschreiben Sie deshalb genau, welche Versand- und Nutzungsregel getestet wird. Ein Früh-gegen-spät-Test schätzt die Wirkung dieser gesamten Zeitregel unter den untersuchten Bedingungen.
Ändern sich Preis, Bestand, Text oder andere Kampagnen nur für eine Variante, lässt sich das Ergebnis nicht allein dem Versandzeitpunkt zuschreiben. Halten Sie solche Unterschiede fest und prüfen Sie, ob der Vergleich für die geplante Entscheidung noch taugt.
Beide Gruppen ab dem Anlass auswerten
Das Hauptziel beginnt für beide Gruppen am gemeinsamen Eignungszeitpunkt. Nutzen Sie dieselbe Definition eines gültigen Kaufs oder einer erledigten Aufgabe und dasselbe Ergebnisfenster. Erfassen Sie zusätzlich den Zeitpunkt des Ergebnisses. So unterscheiden Sie eine frühe Kaufspitze von einem Unterschied über das gesamte Fenster.
| Fall | Behandlung |
|---|---|
| Kunde handelt vor dem späten Versand | In der späten Gruppe belassen; die Nachricht nach der Stoppregel auslassen. |
| Nachricht fällt wegen eines Fehlers aus | In der ursprünglichen Gruppe belassen; Ausfall gesondert berichten. |
| Kauf wird später erstattet | Nach derselben Regel in beiden Gruppen korrigieren. |
| Ergebnisfenster ist noch offen | Ergebnis als vorläufig kennzeichnen. |
Öffnungen und Klicks zeigen allenfalls Reaktionen auf den Kontakt. Für die Entscheidung zählen das vorab gewählte Kundenergebnis und mögliche Gegenzeichen wie Abmeldungen, Beschwerden und Kontaktkosten.
Kalendergrenzen der Aussage beachten
Treffen frühe Nachrichten überwiegend vor und späte überwiegend während einer Nachfragewelle ein, ändert die Zeitregel zugleich die berührte Kalenderphase. Zufallszuteilung beim gleichen Anlass hält die Ausgangsgruppen vergleichbar, trennt diese beiden Teile der Zeitwirkung aber nicht. Der Befund gilt zunächst für die getesteten Anlässe und Kalenderbedingungen.
Soll das Ergebnis auch für andere Wochen gelten, nehmen Sie nach Möglichkeit mehrere Eintrittswochen auf, in denen jeweils beide Varianten vorkommen. Dokumentieren Sie Feiertage, Aktionen und Verfügbarkeit. Ein Ergebnis aus einer einzelnen besonderen Saison ist keine allgemeine Regel für den optimalen Versandtag.
Entscheiden Sie anhand des Ergebnisses über das gemeinsame Fenster, ob die frühere oder spätere Zeitregel für die getestete Situation vorzuziehen ist. Bleiben Unterschiede oder Kalenderbedingungen unklar, benennen Sie diese Grenze.
