E-Commerce-Personalisierungs-Blog

Veröffentlicht: 2020-12-11

Was sind die effektivsten E-Commerce-Ab-Tests? Während Sie jedes AB-Test-Framework mit Barilliance verwenden können, haben wir eine Reihe von Best Practices gefunden, die die besten Kundenerlebnisse generieren.


Zuerst definieren wir Testkonzepte wie AB-Tests, muti-armed bandit und Publikumsgrößen. Zweitens werden wir die Vorteile, die AB-Tests versprechen, detailliert beschreiben. Abschließend werden wir Best Practices für AB-Tests aufschlüsseln und mit Beispielen veranschaulichen.

Wenn Sie direkt zu den Best Practices für AB-Tests springen möchten, klicken Sie hier.


Inhaltsverzeichnis
Was ist ein AB-Test? (in einer eCommerce-Umgebung)
Vorteile von AB-Tests: So nutzen Sie Tests zur Verbesserung von E-Commerce-Shops
Vorteil 1 von AB-Tests: ROI aus aktuellem Datenverkehr verbessern
AB Testing Vorteil 2: Verbessern Sie das Kundenerlebnis
Vorteil 3 von AB-Tests: Verbessern Sie die Kundeninteraktionen außerhalb des Standorts
Welche AB-Tests sollte ich zuerst durchführen?
1. Berührungspunkte mit hohem Traffic
2. Wichtige Kundensegmente
3. Identifizieren Sie Engpässe
Best Practices für AB-Tests: So führen Sie einen AB-Test richtig durch
1. Definieren Sie Ihre Erfolgskriterien
2. Erkunden vs. Optimieren ausbalancieren – große Hebel in Betracht ziehen.
3. Optimieren Sie Ihre Stichprobenumfänge
4. Vertraue keinen Durchschnittswerten. Segmentieren Sie Ihre Ergebnisse
Beispiele für erfolgreiche AB-Tests
Wie MOO AB-Tests verwendet, um Conversions zu verbessern
Nächste Schritte...

Was ist ein AB-Test? (in einer eCommerce-Umgebung)

AB-Tests sind eine bestimmte Art von kontrolliertem Experiment. AB-Tests werden verwendet, um die beste Option aus einem möglichen Bereich zu bestimmen. Im E-Commerce-Kontext könnte dies die Bestimmung sein, welche Angebote gezeigt, welche Produkte empfohlen werden sollen oder sogar welche Produktbilder oder -layouts für bestimmte Erfolgskriterien am besten geeignet sind.


Wie bei anderen mehrarmigen Banditentests gibt es zwei unterschiedliche Teile. Zunächst gibt es eine Erkundungsphase, in der mehrere Optionen in Betracht gezogen werden. Sobald ein Gewinner feststeht, beginnt die zweite Verwertungsphase. In dieser Phase wird der Gewinner ermittelt und der Verlierer ausgeschieden.

Korrekt konstruierte AB-Tests bestehen aus den folgenden Teilen:

  • Hypothese - eine prüfbare Aussage, die vorhersagt, was im Test passieren wird.
  • Unabhängige Variable - Die unabhängige Variable ist das, was wir ändern, um zu sehen, welche Auswirkungen sie hat. Im Zusammenhang mit eCommerce AB-Tests kann es sich ändern, welche Pakete wir anbieten, oder andere Anreize (z. B. kostenloser Versand vs. Rabatte).
  • Abhängige Variable (Erfolgskriterien) – Die abhängige Variable ist, wie wir den Erfolg messen. Bei einem eCommerce AB-Test ist die abhängige Variable oft ein KPI, den Sie verbessern möchten, wie z. B. die Konversionsrate, die Erhöhung des durchschnittlichen Bestellwerts oder Nachbestellungen.
  • Test- und Kontrollgruppen – Test- und Kontrollgruppen sind die Besucher, Interessenten oder Kunden, die die unterschiedlichen unabhängigen Variablen erleben und deren Aktionen die abhängige Variable darstellen.

„AB-Tests werden verwendet, um die beste Option aus einem möglichen Bereich zu ermitteln.

Während die Definition eines AB-Tests nett ist, ist es hilfreich, einige anschauliche Beispiele dafür zu geben, wie AB-Tests E-Commerce-Shops zugute kommen können.

Vorteile von AB-Tests: So nutzen Sie Tests zur Verbesserung von E-Commerce-Shops

Denken Sie daran, dass AB-Tests die beste Option aus einem möglichen Bereich bestimmen. Vor diesem Hintergrund können wir schnell eine Reihe von AB-Testmöglichkeiten durchgehen.

Wir konnten testen, welches Angebot bei wiederkehrenden Kunden am besten ankommt.

Wir konnten testen, welche Produktempfehlungen für eine bestimmte Produkt-SKU am besten konvertieren.

Auch Kundenerlebnisse können getestet werden. Beispielsweise könnten wir testen, ob ein Willkommens-Popup besser abschneidet als eine Nachrichtenleiste.

Vorteil 1 von AB-Tests: ROI aus aktuellem Datenverkehr verbessern

Als grundlegendes Tool zur Optimierung der Conversion-Rate maximieren Tests Ihre Fähigkeit, bestehenden Traffic zu monetarisieren.


Mit AB-Tests können Sie:

  • Gewinn direkt multiplizieren
  • Senken Sie Ihre Kosten pro Kundengewinnung
  • Schalten Sie Kanäle für die Lead-Generierung frei
  • Erhöhen Sie die Partnervorteile und zahlen Sie, ohne das Endergebnis zu beeinträchtigen

Homepage 2016

Homepage 2018

AB Testing Vorteil 2: Verbessern Sie das Kundenerlebnis

Als Werkzeug für Personalisierungssoftware erschließt das Testen datenbasierte Verbesserungen Ihrer Kundenerfahrungen.

Während Barilliance maschinelles Lernen nutzt, um personalisierte Erfahrungen automatisch zu optimieren, haben Sie auch die Wahl, maschinenbasierte Erfahrungen mit regelbasierten Varianten zu überschreiben.

Dies ist besonders hilfreich, wenn Sie bevorstehende Veranstaltungen, Feiertage, neue Produkte, Kategorien oder Kampagnen haben.

In diesen Fällen ist es wichtig, Tests zu nutzen, um die besten Ergebnisse zu erzielen.

  • Verbessern Sie die Produktfindung
  • Bessere regelbasierte Personalisierung von Inhalten

Oben sehen Sie eine Vorschau des Live-Editors von Barilliance. Kunden verwenden es, um schnell personalisierte Erlebnisse zu erstellen, ohne dass Entwicklerressourcen erforderlich sind.

Vorteil 3 von AB-Tests: Verbessern Sie die Kundeninteraktionen außerhalb des Standorts

Schließlich können und sollten AB-Tests auf alle Kundenerlebnisse angewendet werden. Um Omnichannel-Strategien effektiv umzusetzen, sind Testmöglichkeiten absolut notwendig.

Zu den Vorteilen von AB-Tests außerhalb des Standorts gehören:

  • Effizientere Kampagnen zum Verlassen des Einkaufswagens und zum Verlassen des Stöberns .
  • Erstellen Sie erstklassige Willkommens-E-Mail-Sequenzen .
  • Social-Media-Kampagnen wie Facebook Messenger

Oben wiederholt Instacart seine Aktivierungskampagne. In dieser E-Mail stellen sie ein neues Angebot vor, einen zusätzlichen Rabatt von 5 $.

Welche AB-Tests sollte ich zuerst durchführen?

Jedes Unternehmen hat begrenzte Ressourcen.

Beim Testen wird die Qualität und Anzahl der Tests, die Sie ausführen können, begrenzt durch:

  • Zielgruppengröße – Die Zielgruppengröße bestimmt, wie viele Tests Sie durchführen können und trotzdem zu schlüssigen Ergebnissen kommen.
  • Zeit – Sie müssen AB-Testbemühungen mit laufenden Verantwortlichkeiten wie Kampagnenaufbau, Urlaubsvorbereitung und anderen Vorgängen in Einklang bringen.
  • Skillsets - Ebenso erfordert AB-Testing verschiedene Skillsets, die möglicherweise auf Ihr Team beschränkt sind. Dazu gehören Design, Texterstellung und Produktbeschaffung.
  • Finanzierung - Letztendlich werden alle anderen Einschränkungen durch Finanzierungsüberlegungen weiter eingeschränkt.

Angesichts dieser Einschränkungen lautet die nächste Frage, welche Tests Sie durchführen sollten.


Obwohl Ihr Geschäftskontext einzigartig sein wird, sind hier einige Wegweiser, die Ihnen helfen sollen, die besten AB-Tests für die Durchführung zu identifizieren.

1. Berührungspunkte mit hohem Traffic

Welche Teile Ihres Kundenerlebnisses erleben die meisten Kunden?

Wenn beispielsweise eine Produktkategorie 75 % des Umsatzes ausmacht, sollten Sie AB-Tests in diesem Bereich zuerst priorisieren. Wenn andererseits andere Kategorien derzeit nur geringfügigen Traffic erhalten, warten Sie mit der Optimierung dieser Teile, bis Sie sich Gewinne in Bereichen mit höherem Traffic gesichert haben.

2. Wichtige Kundensegmente

Zweitens, welche Kundensegmente sind für Ihr Unternehmen wichtig?

Wir empfehlen die Nutzung der RFM-Analyse, um die wichtigsten Kundensegmente für Ihr Unternehmen zu ermitteln.

3. Identifizieren Sie Engpässe

Überlegen Sie abschließend, welche Engpässe in Ihrem Unternehmen bestehen.


Engpässe sind Stellen, an denen sich jeder Kunde durchbeißen muss. Bei den meisten E-Commerce-Shops umfasst dies Ihren Checkout-Prozess, Produktseiten und möglicherweise Anzeigen.

Best Practices für AB-Tests: So führen Sie einen AB-Test richtig durch

Es gibt viele Möglichkeiten, mit eCommerce-Optimierung erfolgreich zu sein. Wir haben jedoch festgestellt, dass diese Best Practices zu konsistenteren und schnelleren Ergebnissen führen.

1. Definieren Sie Ihre Erfolgskriterien

Fragen Sie sich: "Was wird diesen Test erfolgreich machen?" Sie sollten den einzelnen besten KPI identifizieren, um einen Test auszuwerten.

In der Regel handelt es sich bei Ihrer Bewertungsmetrik um eine zusammengesetzte Metrik, wie z. B. den Return on Marketing Investment. Es sollte Vorhersagen über langfristige Ergebnisse geben.

Die Harvard Business Review hat eine hervorragende Beschreibung einer Reihe von Herausforderungen, denen Bing bei der Bestimmung der zu priorisierenden Metrik gegenüberstand.

Während es zunächst den Anschein haben mag, dass der generierte Umsatz eine gute Metrik wäre, stellten sie fest, dass sie den Umsatz manipulieren konnten, indem sie mehr Anzeigen hinzufügten. Leider hat die Metrik die Kosten dieser Umsatzverbesserungen nicht vollständig erfasst – nämlich ein schlechteres Kundenerlebnis und letztendlich weniger Menschen, die Bing verwenden.

Das Team hat sich eine Alternative einfallen lassen. Sie wollten sich zuerst auf das Kundenerlebnis konzentrieren, und daher bestand die primäre Metrik darin, die Anzahl der Abfragen zu minimieren, die zum Abschließen einer Sitzung erforderlich sind, und gleichzeitig die Anzahl der Sitzungen pro Benutzer zu maximieren.

2. Erkunden vs. Optimieren ausbalancieren – große Hebel in Betracht ziehen.

Es besteht eine ständige Spannung zwischen der Erforschung neuer Möglichkeiten und der Nutzung früherer Erkenntnisse.

Bei AB-Tests kann es verlockend sein, vor großen Redesigns zurückzuschrecken und sich stattdessen nur auf kleinere Optimierungen zu konzentrieren. Die großen Durchbrüche kommen jedoch eher von großen Hebeln – großen Änderungen in Ihrem Angebot oder Design.

Stellen Sie sicher, dass Sie Platz für diese größeren Experimente lassen.

3. Optimieren Sie Ihre Stichprobenumfänge

Ein häufiges Missverständnis ist, dass die Größe Ihrer Kontroll- und Testzielgruppe gleich sein muss.

Die Wahrheit ist, dass Ihre Kontrolle der Gewinner aller vorherigen AB-Tests ist. Es ist eine erprobte und wahre effektive Erfahrung, die zu Verkäufen führt.

Aus diesem Grund ist es am üblichsten, der Kontrollgruppe mehr Datenverkehr zuzuweisen, während nach Verbesserungen mit einem geringeren Prozentsatz des Datenverkehrs gesucht wird.

Wenn Sie andererseits den Durchsatz der Tests, die Sie durchführen können, erhöhen möchten, können Sie den Datenverkehr für Testgruppen erhöhen.

4. Vertraue keinen Durchschnittswerten. Segmentieren Sie Ihre Ergebnisse

Ihre AB-Tests werden gemischte Ergebnisse haben. Es wird einige Besucher positiv und andere negativ beeinflussen.

Wer nur den aggregierten Zahlen vertraut, läuft Gefahr, ganze Kundensegmente zu verprellen.

Die Antwort lautet, die Ergebnisse nach Kundensegment aufzuschlüsseln. Wenn Sie in Ihrem Personalisierungstool keine etablierten Segmente definiert haben, schlage ich vor, eine RFM-Analyse durchzuführen, um Segmente mit hoher Priorität zu identifizieren.

Letztendlich möchten Sie eine definierte Kundengruppe isolieren, für die das Experiment funktioniert, und dann den Gewinner nur für dieses Segment zeigen.

Automatisieren Sie Ihre RFM-Analyse:

Barilliance verbindet Ihre Offline- und Online-Kundendaten. Sie können beliebig viele Segmente definieren, Kunden basierend auf ihren Aktionen automatisch registrieren und eine beliebige Anzahl von Marketingkampagnen auslösen. Erfahren Sie hier mehr .

Beispiele für erfolgreiche AB-Tests

Wir haben hier eine laufende Sammlung erfolgreicher eCommerce AB-Testbeispiele.

In diesem Leitfaden schlüsseln wir die Beispieltests im Detail auf. Hier stellen wir kurz Tests aus größeren E-Commerce-Shops vor.

Wie MOO AB-Tests verwendet, um Conversions zu verbessern

Moo ist ein führender E-Commerce-Shop im Bereich Visitenkarten und Schreibwaren.


Oben ist ein kommentierter Screenshot ihrer aktuellen Homepage "above the fold". Unten haben wir die gleiche Seite, vor nur einem Jahr.

Moo 2019

Beim Vergleich der beiden Seiten gibt es sechs wichtige Verbesserungen, die das Team von Moo implementiert hat. Für die vollständige Aufschlüsselung dieser Verbesserungen und warum sie funktionieren, klicken Sie hier.

Nächste Schritte...

Um AB-Tests richtig durchzuführen, benötigen Sie einen Personalisierungspartner.

Wir haben hier eine detaillierte Anleitung zur Auswahl eines Personalisierungspartners für Ihren E-Commerce-Shop verfasst.

Kurz gesagt, Sie möchten jedoch eine Technologie, die in der Lage ist, Ihre Daten an einem Ort zu verbinden, profitable Segmente zu identifizieren und personalisierte Erfahrungen und AB-Tests bereitzustellen, die auf diese Segmente ausgerichtet sind.

Wenn Sie sehen möchten, warum sich Hunderte von E-Commerce-Geschäften für Unternehmen für Barilliance als AB-Testlösung entschieden haben, fordern Sie hier eine Demo an.