Obama und Split Testing

Vor einigen Tagen stieß ich im Optimizely-Blog, einem Tool, das A / B-Tests erleichtert, auf einen sehr interessanten Artikel darüber, wie es dem Obama-Team 2007 dank eines einfachen Experiments gelungen ist, die Conversion-Rate einer Zielseite für Spenden zu erhöhen.

Dieses einfache Experiment, das darin bestand, verschiedene Variationen von Bildern und Handlungsaufforderungen auf der Zielseite zu testen, ermöglichte es ihnen, den Verlauf der Kampagne zu ändern.

Die zu testenden Zielseitenabschnitte wurden als "Medien" (für das obere Bild) und "Schaltfläche" (für die Schaltfläche mit dem Aufruf zum Handeln) bezeichnet.

Während des Experiments wurden 6 verschiedene Arten von "Medien" (3 Bilder und 3 Videos) und 4 Schaltflächen getestet, was insgesamt 24 Kombinationen ergab. Das Experiment wurde unter Verwendung der durchgeführt Google Website Optimizer.

Die Schaltflächen hatten alle das gleiche Format und variierten nur den Aufruf zum Handeln. Die folgenden Aufrufe zum Handeln wurden verwendet: "Jetzt anmelden", "Jetzt anmelden", "Weitere Informationen" und "Jetzt beitreten".

Sie können die verschiedenen Bilder und Videos sehen, die während des Experiments getestet wurden, indem Sie auf den folgenden Link klicken: Splash-Page-Experiment

Ergebnisse

Die Metrik zur Messung des Erfolgs der Kampagne war der Prozentsatz der abonnierten Besucher. Die Gewinnkombination war folgende:

Die Conversion-Rate der Gewinnerversion betrug 11.6%. was darstellt eine Verbesserung von 40,61 TP1T In Bezug auf die Conversion-Rate der ursprünglichen Zielseite von nicht mehr als 8.22%

Es wird geschätzt, dass dank des Anstiegs des Prozentsatzes der Conversions zusätzliche Spenden in Höhe von 60 Millionen Dollar gesammelt werden könnten.

Es sollte beachtet werden, dass Obama-Mitarbeiter Videos gegenüber Bildern bevorzugten und erwogen, sie auf der Zielseite zu verwenden. Das wäre ein großer Fehler gewesen da während des Experiments die Videos die schlechteste Leistung zeigten.

Die Moral

Oftmals werden Entscheidungen auf der Grundlage von Annahmen getroffen und im schlimmsten Fall ausschließlich auf dem persönlichen Geschmack der Person mit dem höchsten Rang.

Dank des großen Arsenals an Werkzeugen, das wir heute haben, viele sogar kostenlos, ist es zumindest dumm, Entscheidungen auf diese Weise zu treffen.

Mit etwas mehr Aufwand können Sie Entscheidungen eher auf der Grundlage harter Fakten als auf der Grundlage Ihrer eigenen Vorlieben treffen.

Und welche Erfahrungen mit Tests können Sie teilen? 😉

Sie können den Originalartikel hier sehen: Optimizely Blog