Admirals Optimisation Managers fikk praktisk opplæring, onboarding og veiledning fra Optimizely-teamet. Ben Williams fortalte at Admiral var svært fornøyde med opplæringen de mottok, og forklarte at Optimizely «tok oss i hånden og ga omfattende opplæringsøkter med forskjellige vennlige og hjelpsomme eksperter … alle var supervennlige, og dette bidro virkelig til at prosessen føltes morsom i stedet for bare nok en kjedelig onboarding-prosess.»
Etter onboarding kom Admiral raskt i gang med å utnytte Optimizelys eksperimenteringsplattformer for å heve den digitale opplevelsen for sine abonnenter, samtidig som de testet og itererte på nye ideer, produktlanseringer og konverteringsoptimalisering og -strategi.
Selv om Admiral ikke er nybegynnere innen webeksperimentering og A/B-testing, har organisasjonens fornyede og målrettede fokus på konverteringsoptimalisering, støttet av Optimizelys plattform og Rapid Experimentation-teamet, gitt gode resultater.
Admiral benytter viktige Web Experimentation-funksjoner som Visual Editor, som gjør det enkelt for brukere å gjøre visuelle og tekstmessige endringer på nettsider, og Stats Engine, som sørger for at eksperimenter når statistisk signifikans så raskt som mulig. Admiral får også verdi fra Optimizelys Stats Accelerator, som lar brukernes eksperimenter nå statistisk signifikans opptil 300 % raskere på eksperimenter med mange variasjoner (minst tre), ved å bruke dynamiske oppdateringer og vekting av testene for å redusere tiden det tar å finne den beste signifikante variasjonen.
Ben Williams bemerket at «som et optimaliseringsteam stoler vi på resultatene og har tillit til dem», noe som fremhever teamets fulle tillit til den statistiske validiteten til Optimizelys eksperimenteringsplattform.
Hastigheten på eksperimenter har økt dramatisk i hele organisasjonen. Antallet lanserte tester økte med 126 % mellom 2020 og 2021 og 53 % mellom 2021 og 2022. Williams delte også at «vi har definitivt redusert tiden det tar å lansere en test, noe man kan se på hastigheten. Vi bruker WYSIWYG (What You See Is What You Get) visual editor-verktøyet mye mer med Optimizely, noe som reduserer utvikler- og designtid.»
Eksperimentene som kjøres av Admirals optimaliseringsteam, støttes i stor grad av Optimizelys Rapid Experimentation (Rapid X)-team. Admiral bruker en systematisk intern prosess for å kjøre eksperimenter. Interessentbriefinger eller internt genererte ideer diskuteres under ukentlige møter med Rapid X-teammedlemmer, der testkonsepter gjennomgås og foredles. Deretter går disse ideene inn i prosjektledelse for dimensjonering og utvikling, med samarbeid på tvers av flere designteam.
Med en strukturert tilnærming overlates mye av implementeringen til Rapid X-teamet, og man støtter seg på deres ekspertise for å håndtere store deler av testprosessen, fra dimensjonering av prosjekter, samarbeid med designteam, til utvikling og QA. Tilliten Admiral har til Optimizely-teamet, der Rapid X-teammedlemmer ofte betraktes som en del av deres eget team, er et bevis på det sterke forholdet som har blitt bygget opp. Denne tilliten til Rapid Experimentation-teamet har resultert i en smidig og vellykket testprosess.