A/B-Tests im E-Mail-Marketing
Betreffzeile, Absendername, Handlungsaufruf, Inhalt und Versandzeit vergleichen: wie A/B-Tests geplant, ausgewertet und dokumentiert werden, ohne die Einwilligung und die Abmeldung zu berühren.
Wonach ein A/B-Test fragt
Ein A/B-Test beantwortet eine Frage, die sich sonst im Bauchgefühl entscheidet: Welche von zwei Fassungen einer E-Mail bringt Ihre Empfänger näher an dem Ziel, das Sie sich mit der Nachricht gesetzt haben? Dafür gehen zwei Varianten an vergleichbare Teile Ihrer Liste, und entschieden wird an beobachtbarem Verhalten – nicht daran, welche Fassung Ihnen persönlich besser gefällt.
Gute Kandidaten sind wiederkehrende Nachrichten: ein Newsletter mit fester Struktur, eine Begrüßungsreihe, die viele Neuanmeldungen durchläuft, eine Erinnerung mit festem Platz im Ablauf. Einzelmeldungen mit einmaligem Anlass eignen sich dagegen schlecht, ebenso kleine Verteiler, in denen selbst ein deutlicher Unterschied auf wenigen Reaktionen beruht.
Voraussetzung ist außerdem eine Liste, die sicher ankommt. Wer unklare Einwilligungen, zahlreiche unzustellbare Adressen oder gehäufte Beschwerden im Bestand hat, erhält auch aus sorgfältig aufgesetzten Vergleichen kein Ergebnis, dem zu trauen ist.
Was sich testen lässt
Fünf Stellen kehren in der Praxis besonders oft wieder, weil sich an ihnen regelmäßig etwas ändern lässt und die Wirkung in Kennzahlen sichtbar wird, die Sie ohnehin beobachten.
- Betreffzeile: Der Betreff entscheidet darüber, ob die Nachricht überhaupt auffällt. Vergleichen Sie eine klar unterscheidbare Formulierung gegen eine andere – eine konkrete gegen eine vage, eine personalisierte gegen eine neutrale – und ändern Sie daneben nichts weiter.
- Absendername: Der Name neben dem Betreff prägt Vertrauen und Wiedererkennbarkeit. Eine persönliche Anschrift gegen die Firmenbezeichnung, die Marke allein gegen Marke mit Person: solche Vergleiche verändern, wer öffnet, auch wenn der Text unverändert bleibt.
- Handlungsaufruf (CTA): Text, Größe und Position des Buttons, die Zahl der Links, die Formulierung der Einladung – hier zeigt sich, ob geöffnete Nachrichten auch die gewünschte Handlung auslösen.
- Inhalt: Länge, Aufbau, Bildanteil und Tonfall lassen sich vergleichen, solange Betreff und Absender währenddessen unverändert bleiben. Auch der Absatz, an dem die Hauptbotschaft steht, ist eine eigene Prüfstelle.
- Versandzeit: Wochentag und Tageszeit beeinflussen, ob Ihre Nachricht in einem vollen Posteingang untergeht. Prüfen Sie ganze Tage gegeneinander statt einzelner Stunden, damit sich Werktags- und Wochenendverhalten zeigt.
Eine Variable, ausreichende Empfänger, angemessene Dauer
Halten Sie pro Vergleich genau eine Änderung fest, die variiert wird. Wer gleichzeitig Betreff, Text und Button anpasst, kann hinterher nicht auseinanderhalten, welcher Unterschied wofür verantwortlich ist; das Ergebnis wirkt interessant, taugt aber nicht als Grundlage für die nächste Entscheidung. Formulieren Sie vor dem Versand in einem Satz, was sich ändert und welche Wirkung Sie erwarten.
Wie viele Empfänger Sie brauchen, lässt sich nicht pauschal beziffern. Die Zahl hängt davon ab, wie häufig die beobachtete Handlung überhaupt vorkommt und wie groß der Unterschied sein soll, den Sie erkennen möchten. Seltene Ereignisse brauchen deutlich mehr Empfänger als häufige, und kleine Vorteile verschwinden zwischen normalen Schwankungen, bevor sie sichtbar werden. Faustregeln aus zweiter Hand ersetzen diese Überlegung nicht.
Deshalb gibt es auch keine feste Stunden- oder Tagezahl für das Ende einer Prüfung. Lassen Sie beide Varianten über einen Zeitraum laufen, der Werktage und Wochenenden umfasst und der nicht zufällig in eine Aktionswoche oder auf einen Feiertag fällt. Start, Laufzeit und Abbruchregel gehören vor den Versand; mitten im Vergleich werden sie nicht geändert.
Ein vorläufiger Zwischenstand wechselt häufig. Ein abgeschlossener Zeitraum mit ruhigem Vergleich ist aussagekräftiger als ein schneller Blick auf halbe Ergebnisse.
Sieben Anbieter und ihre Einstiegstarife
Die Reihenfolge der Anbieter ist beliebig und stellt keine Rangfolge dar. Entscheidend ist, welcher Tarif zu Ihrer Listengröße und zu Ihrem Versandrhythmus passt.
Mailchimp
Mailchimp deckt den Anfang ab, solange die Liste klein bleibt: kostenlos bis 250 Kontakte und 500 Sendungen im Monat, Standard ab 20 $ für 500 Kontakte. Zur Auswahl stehen A/B- und multivariate Tests, Zielgruppen-Segmentierung und Marketing-Automatisierung.
MailerLite
MailerLite richtet sich an kleine Verteiler mit knappem Budget: kostenlos bis 250 Abonnenten und 2.500 E-Mails im Monat, Comfort 12 $ pro Monat für 500 Abonnenten. Dazu gehören A/B-Tests, E-Mail-Automatisierung und Landingpages.
Brevo
Brevo startet niedrig und wächst mit dem Versandvolumen: Starter ab 9 $ pro Monat für 5.000 E-Mails, kostenlos 300 Sendungen pro Tag. A/B-Tests und erweiterte Berichte liegen im Standard-Plan (18 $ pro Monat ab 5.000 E-Mails); Marketing-Automatisierung und Transaktions-E-Mail sind ebenfalls Teil des Angebots.
ActiveCampaign
Für Teams, die Automatisierung im Mittelpunkt sehen, nennt ActiveCampaign einen festen Einstieg: Starter 15 $ pro Monat bei jährlicher Abrechnung für 1.000 Kontakte, 1 Benutzer. Im Starter-Plan enthalten sind E-Mail-Marketing und Marketing-Automatisierung.
Kit
Kit begleitet regelmäßige Publikationen mit eigenen Listen: Creator 33 $ pro Monat bei jährlicher Abrechnung für 1.000 Abonnenten. A/B-Tests für Betreffzeilen und Sequenzen beginnen jeweils ab Creator.
GetResponse
Für den Einstieg nennt GetResponse einen festen Monatstarif: Starter 19 $ pro Monat für 1.000 Personen. Ob die Leistungen zu Ihren Vorhaben passen, entnehmen Sie der Tarifübersicht des Anbieters.
Campaign Monitor
Campaign Monitor stellt einen Einstiegstarif für kleine Verteiler bereit: Lite ab 13 $ pro Monat für 500 Kontakte. Prüfen Sie vor der Entscheidung, welche Funktionen in diesem Tarif enthalten sind.
Am Ziel auswerten, nicht an der Öffnungsrate
Die Öffnungsrate ist bequem zu messen und schlecht zu steuern: Vorschaubilder, sortierende Postfächer und Spam-Ordner bewegen sie, ohne dass Ihre Nachricht besser geworden wäre. Als alleiniges Ziel eines Verglechs taugt sie deshalb wenig.
Entscheidend ist die Handlung, die die Nachricht auslösen soll. Für einen Newsletter zählen die Klicks, die weiterführen; für eine Anmeldung die abgeschickten Formulare; für einen Shop die abgeschlossenen Käufe. Welche Größe den Vergleich entscheidet, legen Sie vor dem Start fest – gemeinsam mit der Regel, ab wann ein Unterschied zählt.
Begleitend im Blick behalten sollten Sie die Gegenanzeigen: Abmeldungen, Beschwerden und unzustellbare Adressen. Eine Variante, die mehr Klicks sammelt und zugleich mehr Abmeldungen auslöst, ist nicht automatisch die richtige Wahl für Ihre Liste.
Für die Einordnung weiterer Größen hilft die Übersicht zu E-Mail-Kennzahlen; was die Zustellbarkeit technisch beeinflusst, erklärt der Leitfaden zur Zustellbarkeit.
Tests dokumentieren
Jeder Vergleich hinterlässt Spuren, die kaum noch rekonstruierbar sind, wenn niemand sie festhält. Halten Sie deshalb pro Prüfung fest: Fragestellung, geplante Änderung, betroffenes Segment, Zeitraum, verwendete Kennzahl und Ergebnis.
Dokumentieren Sie auch die getroffene Entscheidung – ausdrücklich in dem Fall, dass Sie sich für keine der beiden Fassungen entschieden und alles unverändert gelassen haben. Diese Notizen verhindern, dass dieselbe Frage in zwei Monaten erneut aufwendig untersucht wird und dass eine verworfene Fassung ohne Begründung wieder auftaucht.
Eine gemeinsame Übersicht hilft dabei: eine Zeile pro Prüfung, dieselben Felder wie zuvor, abgelegt dort, wo auch die Kampagnenpläne liegen. So lässt sich jede Fassung später wiederfinden, und neue Kolleginnen und Kollegen verstehen ohne Rückfrage, warum sich Betreff, Handlungsaufruf oder Versandzeit so entwickelt haben.
Einwilligung und Abmeldung bleiben unberührt
Ein Vergleich ändert nichts an der Grundlage, aus der jemand überhaupt Nachrichten von Ihnen erhält. Wer eingewilligt hat, wird weiter angeschrieben; wer nicht eingewilligt hat, gehört auch während einer laufenden Prüfung aus der Auswahl heraus.
Beide Varianten tragen dieselben Pflichten: einen funktionierenden Abmeldelink, eine korrekte Absenderadresse und eine klare Kennzeichnung. Prüfen Sie den Abmeldeweg in beiden Fassungen, bevor die Prüfung startet – eine Fassung ohne erreichbaren Abmeldelink wird nicht verschickt.
Die Aufzeichnungen des Versanddienstes zu Einwilligung, Quelle und Abmeldung bleiben unangetastet: ein Test verändert weder den Zeitpunkt der Anmeldung noch einen Widerruf. Halten Sie interne Testadressen getrennt von der eigentlichen Auswahl, damit Kolleginnen und Kollegen nicht versehentlich in eine Variante geraten.
Kontrollieren Sie außerdem nach jeder Prüfung, dass Abmeldungen aus beiden Varianten im gleichen Takt verarbeitet werden. Eine Fassung, die den Abmeldelink weiter unten zeigt als die andere, verzerrt das Vergleichsergebnis und verschiebt zugleich den Zeitpunkt, ab dem die Adresse aus dem Versand fällt.
Häufige Fragen
Wie oft sollte ich einen A/B-Test durchführen?
So oft, wie Sie eine wiederkehrende Nachricht mit einer entscheidbaren Frage haben. Ein fester Rhythmus ist mehr wert als spontane Einzelprüfungen, deren Ergebnis niemand festhält.
Soll die Öffnungsrate oder die Klickrate das Ziel sein?
Wählen Sie die Kennzahl, die der Nachricht am nächsten ist: Klicks und abgeschlossene Handlungen, wenn es um Reaktionen geht; die Öffnungsrate allenfalls als frühes Signal bei einem reinen Betreffvergleich.
Was mache ich, wenn keine der beiden Fassungen gewinnt?
Dann bleibt die Frage offen, und das ist selbst ein Ergebnis. Notieren Sie Zeitraum und verwendete Muster, verwerfen Sie nichts vorschnell und starten Sie die Prüfung gegebenenfalls mit einer klareren Unterscheidung erneut.
Beeinflusst ein A/B-Test die Einwilligung der Empfänger?
Nein. Die Auswahl der Varianten greift nicht in den Einwilligungsstatus ein; maßgeblich bleiben erteilte Zustimmung, Widerruf und Abmeldung – auch während einer laufenden Prüfung.