Glossar zu Experimenten und CRO

Eine Methode, bei der zwei Versionen einer Seite oder eines Elements verglichen werden, um festzustellen, welche die beste Leistung erbringt.

Ein statistischer Ansatz, der die Wahrscheinlichkeit, dass eine Variante die Gewinnerin ist, aktualisiert, sobald neue Daten eintreffen, anstatt auf einen festen Schwellenwert zu warten.

Eine Funktion, die die Verkehrsverteilung automatisch auf die leistungsstärkste getestete Variante ausrichtet.

Ein Algorithmus, der den leistungsstärksten getesteten Varianten nach und nach mehr Datenverkehr zuweist, anstatt ihn gleichmäßig auf alle Varianten zu verteilen.

Ein Fehler, der auftritt, wenn die Stichprobe der Besucher, die einem Test unterzogen werden, nicht repräsentativ für die gesamte Zielgruppe ist und dadurch die Ergebnisse verfälscht werden.

Eine visuelle Darstellung, die zeigt, wo Besucher auf einer Seite klicken, mit der Maus darüberfahren oder scrollen. Dies ist hilfreich, um Bereiche zu identifizieren, die optimiert werden können.

Eine Methode, bei der die aktuelle Version einer Seite (der Champion) gegen eine oder mehrere neue Versionen (die Herausforderer) antritt, um zu sehen, welche am besten abschneidet.

Segmentierung der Besucher basierend auf ihren Aktionen oder ihrem Verlauf auf der Website.

Alle Maßnahmen, die darauf abzielen, die Konversionsrate einer Website oder Anwendung zu verbessern.

Eine Benutzeroberfläche, mit der Sie das Erscheinungsbild einer Seite (Text, Farben, Elemente) ändern können, ohne Code schreiben zu müssen, um Testvarianten zu erstellen.

Kurze Anzeige des Originalinhalts vor dessen Ersetzung durch die getestete Variante, was sich negativ auf das Benutzererlebnis auswirken kann.

Die folgenden Schritte, die ein Besucher durchläuft, bevor er eine Conversion ausführt (z. B. Produktseite, dann Warenkorb, dann Zahlung), sind hilfreich, um festzustellen, wo Nutzer ihre Käufe abbrechen.

Zu fälschlicherweise zu schlussfolgern, dass eine Variante die Oberhand gewinnt, wenn der beobachtete Unterschied auf Zufall beruht.

Das Scheitern bei der Feststellung eines tatsächlichen Unterschieds zwischen Varianten ist häufig auf eine unzureichende Stichprobengröße zurückzuführen.

Ein technischer Mechanismus, der es ermöglicht, eine Funktion für bestimmte Benutzer zu aktivieren oder zu deaktivieren, ohne den Code neu bereitstellen zu müssen; wird häufig verwendet, um Tests schrittweise einzuführen.

Eine überprüfbare Aussage, die vor einem Experiment formuliert wird und die erwartete Veränderung sowie deren mutmaßliche Auswirkung auf das Besucherverhalten beschreibt.

Eine Kennzahl, die zur Messung des Erfolgs eines Tests oder Experiments gewählt wird, wie z. B. die Konversionsrate oder der durchschnittliche Bestellwert.

Wertebereich, innerhalb dessen das wahre Ergebnis eines Tests mit einer gewissen Sicherheit geschätzt wird.

Gleichzeitiges Testen mehrerer Variablenkombinationen auf derselben Seite, um die effizienteste Kombination zu ermitteln.

Spezifische Aktion, die von einem Besucher erwartet wird (Kauf, Registrierung, Klick usw.), anhand derer die Leistung einer Variante gemessen wird.

Die Seite, auf der ein Besucher nach dem Anklicken eines Links landet, ist oft Gegenstand von Optimierungstests.

Die angezeigten Inhalte werden an das Profil oder das Verhalten des Besuchers angepasst.

Die Wahrscheinlichkeit, dass ein Test einen tatsächlichen Unterschied zwischen Varianten erkennt, falls ein solcher existiert; sie hängt insbesondere von der Stichprobengröße ab.

Eine zufällige Verteilung der Besucher auf die verschiedenen Varianten eines Tests ist unerlässlich, um zuverlässige Ergebnisse zu gewährleisten.

Aufteilung der Besucher in Gruppen nach gemeinsamen Kriterien (Verhalten, Quelle, Gerät usw.) für gezielte Analysen oder Tests.

Kontinuierliche Aktivitätsdauer eines Besuchers auf einer Website, die häufig als Maßeinheit in der Testanalyse verwendet wird.

Ein Indikator zur Bestimmung, ob der beobachtete Unterschied zwischen zwei Varianten zuverlässig ist und nicht auf Zufall beruht.

Eine Testart, die zwei unterschiedliche URLs vergleicht, anstatt zwei Versionen derselben Seite.

Die Anzahl der Besucher oder Sitzungen, die erforderlich ist, damit ein Test eine zuverlässige statistische Signifikanz erreicht.

Prozentsatz der Besucher, die auf ein Element (Schaltfläche, Link, Banner) klicken, im Vergleich zur Gesamtzahl der Personen, die es gesehen haben.

Anteil der Besucher, die eine definierte Zielaktion abgeschlossen haben, im Verhältnis zur Gesamtzahl der Besucher.

Prozentsatz der Besucher, die eine Website verlassen, nachdem sie nur eine Seite angesehen haben, ohne weitere Interaktion.

Ein Test, bei dem zwei identische Versionen einer Seite verglichen werden, um zu überprüfen, ob das Testwerkzeug und die Messmethode korrekt funktionieren.

Eine eingehende Analyse der Ergebnisse nach Abschluss eines Tests, beispielsweise nach Zielgruppensegmenten, um weitere Erkenntnisse zu gewinnen.

Die Wahrscheinlichkeit, ein Ergebnis zu beobachten, das mindestens so extrem ist wie das gemessene, wenn kein wirklicher Unterschied zwischen den Varianten bestünde; ein niedriger Wert stärkt das Vertrauen in das Ergebnis.

Eine alternative Version einer Seite oder eines Elements, die mit dem Original (der Kontrollvariante) verglichen wird, um ihre Auswirkungen zu messen.