Artikel über: Angebote

A/B-Tests

Ein A/B-Test zeigt deinen Kunden zwei bis vier Versionen eines Angebots und misst, welche mehr einbringt. Teste einen größeren Rabatt gegen einen kleineren, andere Bundle-Optionen oder neue Titel und Badges, und behalte dann die Version, die gewinnt.

Du findest A/B-Tests unter Supr Bundles & Subscriptions > Wachstum: Öffne dort A/B-Tests.

Inhaltsverzeichnis

So funktioniert ein A/B-Test
Einen Test erstellen
Die Varianten bearbeiten
Den Test starten und jede Variante in der Vorschau ansehen
Die Ergebnisse lesen
Den Test beenden und den Gewinner behalten
Was noch nicht gemessen wird
Häufige Fragen
Verwandte Anleitungen

So funktioniert ein A/B-Test

Ein Test startet mit einem deiner Angebote. Dieses Angebot, so wie es jetzt ist, ist Variante A. Jede weitere Variante (B, C und D) ist eine Kopie davon, die du unter Angebote änderst. So kann eine Variante andere Rabatte, Abonnementoptionen, Bundle-Optionen, Geschenke, Add-ons, Texte und Badges haben.

Sobald der Test läuft, sieht jeder Kunde eine Variante und sieht bei jedem Besuch mit demselben Browser immer wieder dieselbe. Jede Variante bepreist ihre eigenen Optionen im Checkout, genau wie jedes andere Angebot. Die App zählt, wie viele Kunden jede Variante gesehen, wie viele sie in den Warenkorb gelegt und was sie gekauft haben, und zeigt dir, welche Variante pro Besucher am meisten einbringt.

Diese Punkte bleiben in jeder Variante gleich, weil sie bestimmen, wer das Angebot sieht, und nicht, was es bietet:

die Produkte, für die das Angebot gilt,
Märkte, Kunden und Zeitplan,
das Design, mit dem das Angebot dargestellt wird.

Sie folgen Variante A: Ändere sie in Variante A und speichere, und alle anderen Varianten übernehmen das.

Einen Test erstellen

Gehe zu Wachstum > A/B-Tests und klicke auf A/B-Test erstellen.
Wähle unter Zu testendes Angebot das Angebot aus. Aufgelistet werden nur veröffentlichte Angebote, die nicht bereits in einem Test sind.
Gib dem Test einen Namen oder behalte den vorgeschlagenen.
Wähle unter Varianten 2 (A und B), 3 (A bis C) oder 4 (A bis D).
Wähle unter Traffic-Aufteilung Gleichmäßig, damit jede Variante den gleichen Anteil an Kunden erhält, oder Benutzerdefiniert, um den Anteil festzulegen, der die anderen Varianten sieht (von 5 % bis 95 %). Bei Benutzerdefiniert erhält Variante A den Rest, und die anderen Varianten teilen sich ihren Anteil gleichmäßig. Die Zeile darunter zeigt die Aufteilung, zum Beispiel A 70 %, B 15 %, C 15 %.
Klicke auf Test erstellen.

Der Test wird als Entwurf gespeichert. Seine Varianten ab B werden unter Angebote als Entwürfe mit demselben Namen wie das Angebot erstellt, weil der Name der Titel ist, den Kunden sehen. Unter Angebote trägt jede Variante ein Badge A/B-Test mit ihrem Buchstaben, zum Beispiel A/B-Test: B. In deinem Shop ändert sich nichts, bis du den Test startest.

Die Varianten bearbeiten

Klicke auf der Seite des Tests neben einer Variante auf Bearbeiten, um sie unter Angebote zu öffnen. Eine Zeile oben zeigt, zu welchem Test und welcher Variante sie gehört.

Solange ein Test ein Entwurf ist oder läuft, hat die Vorschau im Editor jeder Variante Schaltflächen für jede Variante: A, B und so weiter. Klicke auf eine, um diese Variante mit ihrer eigenen Vorschau zu öffnen. So kannst du beim Bearbeiten zwischen den Varianten wechseln und sie vergleichen. Speichere deine Änderungen vorher: Bei ungespeicherten Änderungen bleibt der Editor, wo er ist, bis du sie speicherst oder verwirfst. A/B-Test daneben öffnet die Seite des Tests.

Ändere, was du testen möchtest, und speichere. Für ein klares Ergebnis änderst du pro Variante nur eine Sache, zum Beispiel nur den Rabatt, damit du weißt, was den Unterschied ausgemacht hat.

In den Varianten ab B sind die Produkte ausgegraut, Märkte, Kunden und Zeitplan werden nicht angezeigt, und beim Design steht Design folgt Variante A. Ändere sie in Variante A.

Den Test starten und jede Variante in der Vorschau ansehen

Wenn alle Varianten bereit sind, klicke auf der Seite des Tests auf Test starten. Jede Variante wird veröffentlicht, und die Kunden werden ab sofort zwischen ihnen aufgeteilt. Solange der Test läuft, kann eine Variante unter Angebote weder auf Entwurf gesetzt noch gelöscht werden.

Sobald er läuft, klicke neben einer Variante auf Vorschau, um die Produktseite mit dieser Variante in einem neuen Tab zu öffnen. Die Vorschau gilt nur für deinen eigenen Browser, sodass du jede Variante prüfen kannst, bevor Kunden sie kaufen. Gib in jeder Variante eine Testbestellung auf, wenn du auch den Checkout prüfen möchtest.

Du kannst den Test jederzeit umbenennen oder die Traffic-Aufteilung ändern, während er läuft. Nimm die Änderung unter Einstellungen vor und klicke auf Speichern. Eine geänderte Aufteilung verschiebt einige Kunden, die das Angebot bereits gesehen haben, in eine andere Variante. Leg dich also möglichst vor dem Start fest.

Die Ergebnisse lesen

Die Ergebnisse auf der Seite des Tests decken standardmäßig den gesamten Test ab. Mit der Datumsschaltfläche siehst du dir einen Teil davon an.

Die Zeile oben zeigt, wie der Test steht:

Wenn eine Variante pro Besucher eindeutig mehr einbringt, nennt sie diese Variante, wie viel mehr sie einbringt als die nächstbeste, und gibt an, dass du zu 95 % sicher sein kannst, dass der Unterschied von deiner Änderung und nicht vom Zufall kommt. Diese Variante erhält das Badge Signifikanter Gewinner.
Bis dahin rät sie, den Test weiterlaufen zu lassen, und zeigt ungefähr, wie viele Besucher jede Variante noch braucht, bevor das Ergebnis verlässlich ist.

Der Umsatz pro Besucher entscheidet über den Gewinner. Er berücksichtigt sowohl, wie viele Kunden kaufen, als auch, wie viel sie ausgeben. So gewinnt ein größerer Rabatt, der mehr verkauft, aber weniger einbringt, nicht aus Versehen.

Die Karten, das Diagramm (eine Linie pro Variante, die Kennzahl wählst du darüber) und die Variantentabelle verwenden diese Zahlen:

Besucher: Kunden, die die Variante gesehen haben, jeweils einmal pro Tag gezählt.
Aufrufe: wie oft eine Seite die Variante gezeigt hat, einschließlich Neuladen.
In den Warenkorb und Warenkorbrate: wie oft Kunden die Variante in den Warenkorb gelegt haben, und dieser Wert im Verhältnis zu ihren Besuchern.
Bestellungen und Conversion-Rate: Bestellungen mit einem über die Variante gekauften Produkt, und dieser Wert im Verhältnis zu ihren Besuchern.
Umsatz: wofür die über die Variante gekauften Produkte nach Rabatten verkauft wurden.
Zusätzlicher Umsatz: was Bundles über eine Einheit zum vollen Preis hinaus eingebracht haben. Ein Bundle für 18 $ aus einem Produkt für 10 $ bringt 8 $ zusätzlich.
Durchschnittlicher Bestellwert: Umsatz geteilt durch Bestellungen.
Umsatz pro Besucher: Umsatz geteilt durch Besucher.
Bundle-Bestellungen, Abonnierte Bestellungen und Abonnementrate: Bestellungen mit einem Bundle, Bestellungen mit einem Abonnement und der Anteil der Bestellungen mit einem Abonnement.
Einheiten pro Bestellung: über die Variante gekaufte Einheiten geteilt durch Bestellungen.
Chance, A zu schlagen: bei den Varianten ab B, wie wahrscheinlich es ist, dass die Variante pro Besucher wirklich mehr einbringt als Variante A.

Die Tabelle Optionen darunter schlüsselt jede Variante nach Option auf: wie oft jede Abonnementoption, jede Bundle-Option und der Einmalkauf gewählt, in den Warenkorb gelegt und bestellt wurde und was sie eingebracht haben.

Die erste Bestellung eines Abonnements zählt für seine Variante. Spätere Verlängerungen zählen nicht. Eine Variante, die mehr Abonnements verkauft, kann also auf Dauer mehr wert sein, als ihre Zahlen hier zeigen.

Den Test beenden und den Gewinner behalten

Klicke auf Test beenden. Das Fenster listet jede Variante mit ihren Besuchern, ihrer Conversion-Rate und ihrem Umsatz pro Besucher auf und wählt den signifikanten Gewinner aus, falls es einen gibt. Wähle die Variante, die du behalten möchtest, und klicke auf Beenden und … behalten mit ihrem Buchstaben (zum Beispiel Beenden und B behalten).

Die Gewinnervariante bleibt veröffentlicht und wird allen Kunden gezeigt.
Die anderen Varianten werden unter Angebote wieder zu Entwürfen, wo du sie löschen oder später wiederverwenden kannst.
Die Ergebnisse bleiben auf der Seite des Tests, und die Zahlen jeder Variante bleiben unter Analysen > Angebote, wo jede Variante ein Angebot mit eigener Leistungsseite ist.
Klicke auf der Seite des Tests über den Varianten auf Anzeigen, um das Widget jeder Variante nebeneinander zu sehen, so wie es beim Ende des Tests war, auch wenn du später eine unterlegene Variante bearbeitest oder löschst. Vor dem Ende des Tests zeigt Anzeigen die Varianten in ihrem aktuellen Zustand.

Ein Test endet nicht von selbst und wählt nie einen Gewinner für dich.

Um einen Test zu löschen, öffne ihn und klicke auf Löschen. Beim Löschen eines Testentwurfs werden auch seine Variantenentwürfe ab B gelöscht. Das Angebot von Variante A bleibt unverändert. Beim Löschen eines beendeten Tests bleibt das Angebot jeder Variante erhalten. Beende einen laufenden Test, bevor du ihn löschst.

Was noch nicht gemessen wird

Checkout-Rate: wie viele Kunden den Checkout erreicht haben.
Gewinn: Umsatz abzüglich deiner Produktkosten.
Rückerstattungen und stornierte Bestellungen: Eine Bestellung zählt, wenn sie aufgegeben wird, auch wenn sie später erstattet wird.

Häufige Fragen

Wie lange sollte ich einen Test laufen lassen?
Bis die Ergebniszeile einen signifikanten Gewinner nennt. Bei wenig Traffic kann das Wochen dauern. Früher zu beenden ist deine Entscheidung, aber die Zahlen können dann noch auf Zufall beruhen.

Sieht ein Kunde morgen eine andere Variante?
Nein. Ein Kunde behält seine Variante bei jedem Besuch mit demselben Browser. Auf einem anderen Gerät oder nach dem Löschen seiner Browserdaten erhält er möglicherweise eine andere.

Kann ich zwei verschiedene Angebote gegeneinander testen?
Ein Test startet immer mit einem Angebot und seinen Kopien. Um zwei bestehende Angebote zu vergleichen, erstelle einen Test aus einem von ihnen und richte Variante B wie das andere ein.

Kann ich Widget-Designs testen?
Noch nicht. Jede Variante wird mit dem Design von Variante A dargestellt.

Ändert ein A/B-Test, wie die Checkout-Preise funktionieren?
Nein. Jede Variante bepreist ihre eigenen Abonnement- und Bundle-Optionen wie jedes Angebot. Ein Kunde sieht immer nur eine Variante und zahlt deshalb den Preis dieser Variante.