Abbruchschwelle
Der Metrikwert, der ein Experiment früh beendet. Du setzt ihn vorab, damit du nicht mit dir selbst verhandelst, wenn die Zahlen kommen.
Eine Abbruchschwelle wird im Vertrag festgelegt, bevor das Experiment läuft. Wenn die Metrik darunter fällt (bei höher-ist-besser-Metriken) oder darüber steigt (bei niedriger-ist-besser-Metriken), endet das Experiment und das Urteil lautet verwerfen.
Die Abbruchschwelle ist keine Hoffnung. Sie ist eine Vorab-Festlegung. Ihr Job ist es, die Entscheidung automatisch zu machen, wenn die Daten schlecht sind, damit das Team nicht ein Quartal darüber streitet, ob es weitermachen soll.
Ein konkretes Beispiel
Bei einem Paid-Channel-Test, bei dem gemischter CAC die Metrik ist, könnte die Abbruchschwelle bei $210 gegenüber einem Kontrollwert von $185 liegen. Wenn der CAC unterwegs $210 überschreitet, wird das Experiment beendet und das Budget zurückgenommen.
Verwandte Begriffe
Wähle eine Hypothese. Vokabular durch.
Der schnellste Weg, dieses Vokabular zu lernen, ist, ein Experiment festzuhalten. Der Vertrag ist in etwa fünf Minuten geschrieben.