A/B-Tests

Mit A/B-Tests können Sie zwei Versionen eines Elements in Ihrer Kampagne vergleichen – Betreffzeile, Absender, Inhalt oder Call-to-Action-Bild – und die besser abschneidende Version automatisch an den Rest Ihrer Liste senden. Sie entfernt das Rätselraten aus Ihren Kampagnenentscheidungen und liefert Ihnen Daten, mit denen Sie auch bei zukünftigen Versendungen arbeiten können.

A/B-Tests sind in den Abonnements Pro und Premium verfügbar.

Voraussetzungen

Sie verfügen über ein Pro- oder Premium-Flexmail-Abonnement.
Sie haben eine Kampagne im Kampagnenerstellungsprozess in Schritt 3 (Übersichtsseite) bereit.
Für Absendertests: Beide Absenderadressen müssen in Ihrem Konto validiert sein.
Für Inhaltstests: Sie haben zwei verschiedene Nachrichten vorbereitet.

So funktioniert es

Sie erstellen zwei Varianten eines Elements. Flexmail teilt einen Teil Ihrer Empfängerliste – die Testgruppe – in zwei Hälften und sendet Variante A an die eine Hälfte und Variante B an die andere. Nach einer von Ihnen festgelegten Wartezeit wertet Flexmail die Ergebnisse aus und sendet automatisch die Gewinnervariante an den Rest Ihrer Liste.

Der Gewinner wird bei Betreffzeilen- und Absendertests anhand der Öffnungsrate und bei Inhaltstests anhand der Klickrate ermittelt. Call-to-Action-Tests funktionieren anders – siehe unten.

Wenn beide Varianten am Ende der Wartezeit gleich abschneiden, wählt Flexmail standardmäßig Variante A als Gewinner aus.

Achtung Sie können pro Kampagne nur einen A/B-Testtyp ausführen, und Sie können den Typ nach Beginn des Tests nicht mehr ändern.

Die vier A/B-Testtypen

Betreffzeilentest

Testen Sie zwei verschiedene Betreffzeilen. Die Variante mit der höheren Öffnungsrate nach dem Testzeitraum gewinnt, und die siegreiche Betreffzeile geht an den Rest Ihrer Liste. Dies ist einer der einfachsten Tests und kann sich spürbar auf Ihre Gesamtöffnungsraten auswirken.

Absendertest

Testen Sie zwei verschiedene Absendernamen oder E-Mail-Adressen. Beide Adressen müssen in Ihrem Flexmail-Konto validiert sein. Der Gewinner wird anhand der Öffnungsrate ermittelt.

Inhaltstest

Testen Sie zwei vollständig unterschiedliche Nachrichten. Dies ist der umfassendste Testtyp, der sich eignet, wenn Sie verschiedene Ansätze, Layouts oder Angebote vergleichen möchten. Der Gewinner wird anhand der Klickrate ermittelt.

Call-to-Action-Test

Testen Sie verschiedene Bilder für einen bestimmten Call-to-Action in Ihrer Nachricht. Im Gegensatz zu den anderen Testtypen wird dieser an Ihre gesamte Liste gesendet, nicht an eine Testgruppe. Flexmail wechselt zwischen den Varianten und kürt einen Gewinner, sobald eine festgelegte Anzahl an Klickaktionen erreicht ist. Ab diesem Zeitpunkt sehen alle Leser die Gewinnerversion.

Einen Betreffzeilen-, Absender- oder Inhaltstest einrichten

Klicken Sie auf der Kampagnenübersichtsseite (Schritt 3 des Kampagnenerstellungsprozesses) auf die Schaltfläche A/B-Test, bevor Sie zu den Versandoptionen übergehen.

Wählen Sie den Testtyp.
Geben Sie die zweite Variante ein. Die erste Variante ist das, was Sie in Schritt 1 der Kampagne eingegeben haben.
Legen Sie die Größe Ihrer Testgruppe als Anzahl oder Prozentsatz Ihrer Kontaktliste fest.
Legen Sie die Wartezeit fest. Nach Ablauf dieser Zeit wertet Flexmail die Ergebnisse aus und versendet den Gewinner.
Klicken Sie auf Speichern, um Ihre Testeinrichtung zu bestätigen.

Anzeigen Ihrer Ergebnisse

Sobald der Test abgeschlossen ist, finden Sie die Ergebnisse im A/B-Test-Bereich Ihres Kampagnenberichts. Die Gewinnervariante ist deutlich gekennzeichnet, zusammen mit der Öffnungs- bzw. Klickrate für jede Variante.

Achtung Entfernen Sie während eines laufenden A/B-Tests keine Kontakte aus Ihrer Liste. Andernfalls sind die Ergebnisse in Ihrem Bericht nicht korrekt.

Profi-Tipps

Führen Sie ein laufendes Protokoll Ihrer A/B-Testergebnisse über mehrere Kampagnen hinweg. Mit der Zeit zeichnen sich Muster ab – Ihre Zielgruppe bevorzugt möglicherweise konsequent kürzere Betreffzeilen, handlungsorientierte Sprache oder die Personalisierung mit Namen. Dieses Wissen ist wertvoller als jeder allgemeine Best-Practice-Leitfaden.
Testen Sie jeweils nur ein Element. Wenn Sie im selben Test sowohl die Betreffzeile als auch den Absender ändern, wissen Sie nicht, welche Änderung das Ergebnis bewirkt hat.
Wählen Sie Ihre Testgruppe groß genug, um aussagekräftige Ergebnisse zu erhalten – mindestens einige Hundert Kontakte pro Variante. Sehr kleine Testgruppen liefern unzuverlässige Daten.
Ein Unterschied von 1 bis 2 Prozentpunkten zwischen Varianten liegt oft im Bereich des Zufalls. Bevor Sie Ihren Ansatz aufgrund eines einzelnen Tests ändern, achten Sie auf dasselbe Muster über mehrere Kampagnen hinweg. Ein konstanter kleiner Vorsprung ist aussagekräftiger als ein einmaliger großer Unterschied.

Häufige Fehler, die Sie vermeiden sollten

Zu kurze Wartezeit. Ein Fenster von zwei Stunden erfasst möglicherweise nicht die Kontakte, die später am Tag ihre E-Mails prüfen. Wählen Sie mindestens 4 Stunden oder über Nacht bei B2B-Zielgruppen.
Ein Testergebnis als aussagekräftig zu deklarieren, obwohl der Unterschied sehr gering ist. Wenn beide Varianten innerhalb von 1–2 Prozentpunkten voneinander liegen, ist der Unterschied möglicherweise statistisch nicht signifikant. Achten Sie auf konsistente Muster über mehrere Tests hinweg, anstatt aufgrund eines einzelnen knappen Ergebnisses zu handeln.
Zu selten testen. Ein Test pro Kampagne ist in Ordnung, aber wenn Sie nur ein paar Mal im Jahr testen, bauen Sie kein nützliches Wissen über Ihre Zielgruppe auf.
Einen Call-to-Action-Test für eine wenig engagierte Liste verwenden. Dieser Testtyp benötigt eine Mindestanzahl an Klicks, um einen Gewinner zu küren. Bei einer kleinen Liste oder einer niedrigen Klickrate kann der Test sehr lange laufen.

Ergebnisse interpretieren und Erkenntnisse anwenden

Einen Gewinner zu sehen ist nur der erste Schritt. Um A/B-Tests in einen langfristigen Vorteil zu verwandeln, sollten Sie jedes Ergebnis als einen Datenpunkt und nicht als endgültige Antwort behandeln.

Arbeiten Sie nach jedem Test diese Fragen durch:

War der Unterschied aussagekräftig? Ein Unterschied von 1 bis 2 Prozentpunkten ist wahrscheinlich Rauschen. Ein Unterschied von 5 Punkten oder mehr, der bei ähnlichen Zielgruppensegmenten konsistent auftritt, ist handlungsrelevant.
Was sagt Ihnen das über Ihre Zielgruppe? Eine Betreffzeile mit einer Frage, die eine Aussage übertrifft, deutet darauf hin, dass Ihre Kontakte auf Neugier reagieren. Ein einfacher Absendername, der einen Firmennamen schlägt, deutet darauf hin, dass sie einen persönlichen Ton schätzen. Schreiben Sie das auf.
Würde dieses Ergebnis auch für ein anderes Segment gelten? Ihre vollständige Liste umfasst Personen in verschiedenen Beziehungsphasen. Erwägen Sie, denselben Test in einem bestimmten Segment auszuführen, um zu sehen, ob die Präferenz bestehen bleibt.

Führen Sie ein einfaches Protokoll – ein Tabellenblatt reicht aus –, in dem Sie Folgendes festhalten: Testtyp, Varianten, Ergebnis, Marge und Ihre Interpretation. Nach 5 bis 10 Tests werden Sie Muster erkennen, die spezifisch für Ihre Zielgruppe sind und weit zuverlässiger als jede allgemeine E-Mail-Marketing-Empfehlung.

Nächste Schritte

Führen Sie Ihren ersten Betreffzeilentest bei Ihrer nächsten Kampagne durch. Vergleichen Sie eine funktionale Betreffzeile mit einer neugierdgetriebenen und sehen Sie, worauf Ihre Zielgruppe reagiert.
Sobald Sie mehrere Tests durchgeführt haben, suchen Sie nach Mustern in Ihren Ergebnissen – siehe "Was macht eine gute Betreffzeile aus?" für Hinweise zur Betreffzeile.
Kombinieren Sie A/B-Tests mit Segmentierung: Testen Sie verschiedene Ansätze für unterschiedliche Zielgruppensegmente, um segmentspezifische Erkenntnisse aufzubauen.