Qualitätssicherung (QA)
Kurz gefasst
QA vor dem Live-Gang hilft dir, Fehler frühzeitig zu erkennen, sorgt für eine saubere Nutzererfahrung und schützt deine Daten vor Verzerrungen. Varify bietet dir dafür mehrere QA-Optionen - der QA-Modus wird empfohlen.
QA mit dem QA-Modus (empfohlen)
Sobald du dein Experiment erstellt und das Page Targeting sowie das Audience Targeting festgelegt hast, kannst du den QA-Modus starten und prüfen, ob dein Experiment wie geplant läuft. Im QA-Modus wird dein Experiment noch nicht getrackt und normalen Nutzern nicht angezeigt. So kannst du sicherstellen, dass alles korrekt funktioniert, bevor es live geht, ohne dass deine Nutzer etwas davon merken.
Der QA-Modus ist besonders geeignet, wenn du Folgendes überprüfen möchtest:
- Experimente auf einzelnen Seiten und über mehrere Seiten hinweg
- ob dein Experiment-Targeting wie erwartet funktioniert
- ob es Konflikte mit anderen Experimenten gibt
Schritt 1: QA-Modus starten
- Öffne dein Experiment im Dashboard.
- Klicke auf „Preview (QA-Mode)“.
Ein modales Fenster öffnet sich.
Schritt 2: Variante öffnen oder teilen
Im modalen Fenster hast du folgende Optionen:
- QA-Link teilen: Sende den Link an Kollegen, damit sie das Experiment ebenfalls testen können.
- Auf deinem Handy öffnen: Öffne den QA-Link auf deinem Handy, um die Variante auf einem mobilen Gerät zu prüfen.
- „Open variation“: Öffnet die Seite mit der aktiven Variante. Diese Variante ist nur über den QA-Modus verfügbar.
Schritt 3: Varianten im Overlay wechseln
Auf deiner Website siehst du jetzt das Varify „QA Mode“-Overlay. Nutze es, um zwischen den Varianten deines Experiments zu wechseln.
Dort kannst du auch durch die Varianten anderer aktiver Experimente wechseln. So erkennst du schneller, ob es unerwünschte Wechselwirkungen zwischen zwei oder mehr Experimenten gibt.
Ob dein Experiment auf der aktuellen Seite funktioniert, kannst du in der Spalte „Targeted“ sehen:
- Grünes Häkchen: Die Targeting-Kriterien stimmen überein, das Experiment ist auf dieser Seite aktiv.
- Graues X: Die Targeting-Kriterien stimmen hier nicht überein, das Experiment wird auf dieser Seite nicht angezeigt.
Schritt 4: Varianten über das Dashboard öffnen
Im Dashboard wird ein Experiment im QA-Modus gelb hervorgehoben. Klicke neben einer Variante auf „Force this variation“, um sie zu öffnen, oder kopiere den Link, um ihn mit anderen zu teilen.
Schritt 5: QA-Modus beenden
- Auf deiner Website: Klicke im Overlay auf „Exit QA Mode“, um den QA-Modus in deinem Browser zu verlassen.
- Im Dashboard: Klicke auf „Stop QA Mode“, um den QA-Modus für alle QA-Nutzer zu beenden. Danach kannst du dein Experiment starten.
QA mit dem Vorschau-Link im Editor
Hinweis: Diese Methode eignet sich nicht für eine gründliche QA. Verwende stattdessen den QA-Modus.
Die Vorschau ist Teil des Editors. Wenn du eine Variante im Editor speicherst, kannst du sie als Vorschau öffnen. Ein neuer Tab öffnet sich mit dieser Variante.
Varify hängt einen Vorschau-Parameter an die URL an, zum Beispiel ?varify-preview="Experimentname". Du kannst den Parameter auch an andere URLs anhängen, um die Variante auf anderen Seiten anzuzeigen.
Beachte Folgendes:
- Die Vorschau ist unabhängig vom Targeting. Die Variante wird angezeigt, auch wenn die Targeting-Bedingungen nicht zutreffen.
- Die Variante ist nur sichtbar, solange der Vorschau-Parameter an die URL angehängt ist. Ohne den Parameter siehst du die Seite normal.
- Andere Experimente werden nicht angezeigt.
Diese QA-Methode eignet sich besonders, wenn du eine Variante schnell ansehen oder mit anderen teilen möchtest. Sie ist am besten für einzelne Seiten geeignet, auf denen kein anderes Experiment aktiv ist.
QA über die Varify Chrome-Erweiterung
Hinweis: Diese Methode eignet sich nicht für eine gründliche QA. Verwende stattdessen den QA-Modus.
Mit der Varify Chrome-Erweiterung kannst du Varianten über den URL-Parameter „varify-force“ erzwingen. Verwende dazu dieses Format: varify-force={experimentId}-{variationId}.
Mit der Chrome-Erweiterung ist das noch einfacher: Du wählst das Experiment und die Variante in einem Dropdown aus und erhältst dir den Aufwand, den Parameter manuell zu erstellen.
Diese Methode eignet sich gut, um ein Experiment auf verschiedenen Seiten zu testen und auch das Targeting zu überprüfen. Wir empfehlen dennoch den QA-Modus, da du die Varianten dort übersichtlicher sehen und schneller zwischen ihnen wechseln kannst.
So verwendest du die Chrome-Erweiterung:
- Stelle die Traffic-Verteilung deines Experiments auf 100 % Original ein. So ist das Experiment für normale Nutzer nicht sichtbar (alle sehen die Originalversion).
- Öffne eine Seite, auf der dein Experiment funktionieren soll. Stelle sicher, dass du die Targeting-Bedingungen erfüllst.
- Klicke auf die Chrome-Erweiterung und wähle das aktive Experiment im „Experiment Variation Switcher“ aus (du befindest dich zunächst in der Originalversion).
- Wähle die Variante aus, die du testen möchtest, und klicke auf „Switch variation“.
- Der Force-Parameter setzt dich auf die ausgewählte Variante. Du bleibst dort, bis du aktiv erneut wechselst. So kannst du das Experiment in aller Ruhe testen.
Hinweis: Hinweis: Während der QA des Experiments wird das Tracking in verschiedenen Varianten ausgelöst. Du solltest das Experiment daher pausieren und erneut duplizieren, nachdem deine QA abgeschlossen ist. Starte anschließend das neu duplizierte Experiment mit einer 50:50-Traffic-Verteilung, um bereinigte Daten zu erhalten.
Beispiel mit der Varify Chrome Extension:
In der Abbildung siehst du ein Experiment mit dem Namen „Example Experiment“. Es ist auf „https://www.demo.com“ aktiv und die Traffic-Verteilung ist auf 100 % Original eingestellt. Das bedeutet: Ohne weiteres Zutun siehst du immer die Original-Variante.
So erzwingst du eine Variante mit der Extension:
- Öffne „https://www.demo.com“ im Browser.
- Klicke auf die Varify Chrome Extension.
- Wähle im Bereich „Experiment Variation Switcher“ „Example Experiment“ aus. Du befindest dich jetzt in der Originalvariante.
- Wähle die Variante, die du testen möchtest, und klicke auf „Switch variation“.
Was im Hintergrund passiert:
-
Die Extension hängt automatisch den Parameter „varify-force“ an die URL an, zum Beispiel:
https://www.demo.com/?varify-force=6396-7385
-
Dadurch landest du direkt in dieser Variante, obwohl die Traffic-Verteilung auf 100% Original eingestellt ist.
So kannst du zu einer anderen Variante oder zurück zum Original wechseln:
-
Wähle einfach die Originalversion des Experiments in der Extension aus und klicke erneut auf „Switch variation“. Die URL wird entsprechend angepasst.
-
Alternativ kannst du für die Variation ID im Parameter einfach 0 für die Originalvariante setzen, zum Beispiel:
https://www.demo.com/?varify-force=6396-0