Die Optimisation Manager von Admiral erhielten praxisnahes Training, Onboarding und Begleitung vom Optimizely-Team. Ben Williams berichtete, dass Admiral mit dem erhaltenen Training sehr zufrieden war, und erklärte, dass Optimizely „uns an die Hand genommen und umfangreiche Schulungen mit verschiedenen freundlichen und hilfsbereiten Experten durchgeführt hat … alle waren super freundlich, und das hat dazu beigetragen, dass der Prozess eher angenehm als nur ein weiteres langweiliges Onboarding wirkte."
Nach dem Onboarding machte sich Admiral schnell daran, die Experimentier-Plattformen von Optimizely zu nutzen, um das digitale Erlebnis für seine Kunden zu verbessern und gleichzeitig neue Ideen, Produkteinführungen sowie Conversion-Optimierung und -Strategie zu testen und weiterzuentwickeln.
Obwohl Admiral kein Neuling in der Disziplin des Web Experimentation und A/B-Testing ist, hat der erneuerte und gezielte Fokus des Unternehmens auf Conversion Rate Optimierung, unterstützt durch die Plattform von Optimizely und das Rapid-Experimentation-Team, sich ausgezahlt.
Admiral nutzt wichtige Web Experimentation-Funktionen wie den Visual Editor, der es Nutzern ermöglicht, einfach visuelle und textliche Änderungen an Webseiten vorzunehmen, und die Stats Engine, die sicherstellt, dass Experimente so schnell wie möglich statistische Signifikanz erreichen. Admiral profitiert außerdem von Optimizelys Stats Accelerator, der es Nutzern ermöglicht, bei Experimenten mit vielen Variationen (mindestens drei) bis zu 300 % schneller statistische Signifikanz zu erreichen, indem dynamische Aktualisierungen und Gewichtungen der Tests eingesetzt werden, um die Zeit bis zum Finden der besten signifikanten Variation zu verkürzen.
Ben Williams merkte an, dass „wir als Optimierungsteam an die Ergebnisse glauben und ihnen vertrauen", und hob damit das volle Vertrauen des Teams in die statistische Validität der Experimentier-Plattform von Optimizely hervor.
Die Geschwindigkeit der Experimente ist in der gesamten Organisation dramatisch gestiegen. Die Anzahl der gestarteten Tests stieg zwischen 2020 und 2021 um 126 % und zwischen 2021 und 2022 um 53 %. Williams teilte außerdem mit: „Wir haben definitiv die Zeit verkürzt, die es braucht, einen Test zu starten, wie man an der Geschwindigkeit erkennen kann. Wir nutzen den WYSIWYG-Visual-Editor (What You See Is What You Get) mit Optimizely deutlich häufiger, was Entwicklungs- und Designzeit reduziert."
Die von Admirals Optimierungsteams durchgeführten Experimente werden maßgeblich vom Rapid Experimentation (Rapid X)-Team von Optimizely unterstützt. Admiral wendet einen systematischen internen Prozess für die Durchführung von Experimenten an. Stakeholder-Briefings oder intern generierte Ideen werden in wöchentlichen Meetings mit Rapid-X-Teammitgliedern besprochen, in denen Testkonzepte diskutiert und verfeinert werden. Anschließend gelangen diese Ideen in das Projektmanagement zur Dimensionierung und Entwicklung, wobei eine Zusammenarbeit mit mehreren Designteams stattfindet.
Bei diesem strukturierten Ansatz liegt ein Großteil der Umsetzung in den Händen des Rapid-X-Teams, das mit seiner Expertise wesentliche Teile des Testprozesses verwaltet – von der Projektdimensionierung über die Zusammenarbeit mit Designteams bis hin zur Entwicklung und Qualitätssicherung. Das Vertrauen, das Admiral dem Optimizely-Team entgegenbringt – wobei Rapid-X-Teammitglieder oft als Teil des eigenen Teams betrachtet werden –, ist ein Beweis für die starke Beziehung, die aufgebaut wurde. Dieses Vertrauen in das Rapid-Experimentation-Team hat zu einem reibungslosen und erfolgreichen Testprozess geführt.