Å mislykkes briljant: Det hemmelige våpenet for suksess med eksperimenter

9. sep. 2024

Når man optimaliserer, finnes det ingen feil – bare muligheter til å lære og vokse. Oppdag hvordan du kan hente ut innsikt fra hver test, enten den er vellykket eller ikke, og bygge en kultur for kontinuerlig forbedring i eksperimenteringsprogrammet ditt.

Husker du da det å kjøre et eksperiment var så enkelt som å endre en knappfarge og se konverteringene strømme inn?

Ja, de dagene er forbi, akkurat som med telefoner og oppringt internett.

Akkurat nå er ting tøft. Budsjettene er stramme. Jobbsikkerhet føles som et fjernt minne. HIPPO-er er ivrige etter at du leverer statistisk signifikante resultater og viser verdi, raskt.

Men her er greia med eksperimentering - hver gang vi mislykkes, vokser vi.

Jeg husker fortsatt hårklippen min fra videregående. Det var en massiv fiasko for meg :)

bad haircut gif

Kilde: Tenor

Ikke vær redd for å omfavne fiasko og lær av hver test du har kjørt.

I denne bloggen skal vi utforske hvordan du kan gjøre mislykkede eksperimenter om til verdifulle læringsmuligheter.

Når man optimaliserer, finnes det ingen feil – bare muligheter til å lære og vokse. Oppdag hvordan du kan hente ut innsikt fra hver test, enten den er vellykket eller ikke, og bygge en kultur for kontinuerlig forbedring i eksperimenteringsprogrammet ditt.

Eksperimenteringens virkelighet: Å gjøre feil kult igjen

Fiasko hindret ikke Vincent van Gogh i å male mesterverk, Albert Einstein i å revolusjonere fysikken eller Michael Jordan i å bli en basketballlegende.

Likevel har det lammet utallige eksperimentteam og hindret dem i å nå sitt fulle potensial.

Hvorfor? I den høyrisiko forretningsverdenen, hvor suksessen til målinger styrer budsjettet, blir mislykkede eksperimenter ofte sett på som kostbare feil snarere enn læringsmuligheter. Denne tankegangen kveler innovasjon og hindrer team i å oppnå gjennombrudd.

Men kan du gjette hva den gjennomsnittlige seiersraten er på tvers av eksperimenteringsprogrammer?

Den er knapt 12 %.

Vanlige feil inkluderer statistisk signifikante men negative utfall, ufullstendige resultater og feilaktige testdesign.

Og det gjør vondt. Det føles som:

  • Du kastet bort tid og ressurser
  • Du går tilbake til start
  • Du klarte ikke å bevise at noen tok feil

Imidlertid er ikke fiasko noe negativt, i hvert fall ikke i eksperimentering. Du kan omformulere feiling til noe positivt.

Hvorfor spør du?

Hver mislykket test lot deg validere en funksjon eller en opplevelse som du ellers ville brukt mye tid og penger på å bygge ut.

I tillegg lærte du sannsynligvis mer/noe nytt om brukerens preferanser.

Tror du fortsatt ikke på kraften i feiling?

Vi har 5 eksempler fra ekte utøvere som beviser at du kan lære interessante ting fra hvert eksperiment du kjører.

💡Før en logg over «lærdommer» for hvert eksperiment, uavhengig av utfallet. Denne praksisen bidrar til å forvandle feil til verdifull innsikt.

Hall of Fame: 4 lærdommer fra mislykkede eksperimenter

Innhold med lav interaksjon er viktig

Felix Kirmse (Digital Marketing Manager, Optimizely): Felix ønsket å redusere innhold med lav interaksjon på startsiden for å øke antall skjemainnsendinger.

Resultat

Skjemainnsendinger gikk ytterligere ned (uh oh)

Konklusjon

Selv innhold med lav interaksjon kan bidra til brukertillit og engasjement, noe som er viktig for å oppmuntre til skjemainnsendinger.

Ekte bokomslag vs. abstrakt versjon

Joe Geoghan (Senior Visual Brand Design Specialist, Optimizely): Joe ønsket å teste det virkelige omslaget vs. en abstrakt versjon av den store eksperimenteringsboken i e-postens brødtekst. Forutsatt at det virkelige omslaget ville vinne, var det omslaget som ble brukt i de fleste e-postene.

Bokomslag 1 for den store eksperimenteringsboken

Bildekilde: Optimizely (versjon 1)

Bokomslag 2 for den store eksperimenteringsboken

Bildekilde: Optimizely (versjon 2)

Resultat

Den abstrakte versjonen vant likevel

Konklusjon

Den lille versjonen av omslaget var for liten til å vise den viktige informasjonen -- Både illustrasjonen og teksten var uleselige. Den sammendragsmessige versjonen var konsis og viste deg nøyaktig hva du gikk til. I design er klarhet viktig.

Bilder er ikke alltid bedre enn lenker

Jeffrey de Wijs (Digital Marketing Manager, Optimizely): Jeff, han som sender Optimizely-nyhetsbrevet til innboksene dine, testet forrige uke om bruk av bilder i stedet for punktlister vil øke klikk i nyhetsbrevet vårt.

Optimizely nyhetsbrev A/B-test

Bildekilde: Optimizely

Resultat

Bilder og lenker presterte ikke bedre enn lenker alene

Konklusjon

De fleste teammedlemmene Likte bildevarianten bedre, men det var fortsatt ingen reell forskjell i klikk mellom dem. Så ikke stol på antagelser. Gå ut og test det ut selv.

Kundeperspektiv: Forutsi den nest beste handlingen

Virgin Media (Optimizely Customer): Charlotte Golding og teamet hennes hos Virgin Media ønsket å forutsi Next Best Action (NBA) slik at de kunne designe personlige opplevelser for kundene sine. De antok at kunden bare ville ha spesifikke forespørsler, som å forbedre nettverket i området eller oppgradere sitt eksisterende bredbånd, osv.

Resultat

Teamet fant ut at den samme kunden ville komme inn med forskjellige forespørsler hver dag. Den ene dagen lette de etter kundeservice, og den neste dagen ville de bare oppgradere. Dette ble ikke tatt med i betraktning i NBA i utgangspunktet, men etter eksperimentet måtte teamet optimalisere modellen sin for å bedre forstå hvilken neste beste handling de skulle vise til en kunde.

Konklusjon

Kunder kan komme til nettstedet ditt om en annen ting hver dag. Ikke bare plasser dem i en enkelt personlig tilpasset opplevelse og forvent de samme resultatene. Optimaliser modellen regelmessig.

Hva viser dette deg om å omformulere konseptet med å mislykkes i eksperimentering?

For det første handler det om å fremme en risikopositiv kultur. Slik gjør du det:

  • Gi tid og rom til å kjøre tester i stor skala
    Balanser hastighet med grundighet for å sikre meningsfulle resultater.
  • Start fra toppen
    Når ledere støtter eksperimentering, blir det en del av bedriftskulturen.
  • Sikt mot både øyeblikksvise og trinnvise gevinster
    Kombiner raske gevinster med dristige eksperimenter for maksimal læring og effekt.
  • Oppmuntre teammedlemmer til å dele ideer
    Lag et system for å samle inn og evaluere ideer fra alle nivåer i organisasjonen.
  • Feir "produktive feil"
    Eksperimentsamarbeid forvandler eksperimentering til en integrert del av bedriftskulturen. Ved å standardisere arbeidsflyter, dele planer og resultater åpent, og gjøre det mulig for alle å delta, skaper du et miljø der testing blir en selvfølge.

På et kjent bryggeri anerkjenner CTO-ens F*UP-pris alle veldesignede eksperimenter, uavhengig av utfall. Denne tilnærmingen oppmuntrer teamet til å innovere dristig, prøve nye ting og åpent dele all lærdom – ikke bare suksesser. Det gjør hver test til en verdifull mulighet, og fremmer en kultur for kontinuerlig forbedring og banebrytende oppdagelser.

Å dyrke en kontinuerlig eksperimenteringskultur

Alt i alt er effekt viktigere enn seiersraten. For å lære av mislykkede tester må du imidlertid sette passende risikoterskler og omfavne en eksperimenteringskultur. Slik gjør du det:

  • Omdefiner målinger: Gå utover seiersrater. Spor innhentet innsikt, validerte/ugyldiggjorte hypoteser og langsiktig innvirkning på viktige målinger.
  • Gjør det enkelt å kjøre tester: Optimizely Webeksperimentering og funksjonseksperimentering lar team kjøre tester uten å være avhengige av tekniske ressurser.
  • Implementer et læringsarkiv: Dokumenter alle testresultater, innsikt og oppfølgingstiltak.
  • Kjør gjennomgangsøkter: Hold månedlige møter der team presenterer sine mest effektive tester – både seire og tap.
  • Sett tydelige risikoterskler: Definer akseptable risikonivåer for ulike typer eksperimenter. For eksempel, tillat høyere risiko for tester på sider eller segmenter med lav trafikk.

💡Organiser en kvartalsvis «Failure Fiesta». Teamene viser frem sine mest spektakulære mislykkede eksperimenter, diskuterer viktige lærdommer og idémyldrer nye tilnærminger. Belønn den mest innsiktsfulle fiaskoen med et trofé eller en bonus.

Læring fra hver test du kjører

I eksperimentering (som i livet) kan fiasko være et kraftig verktøy for vekst. Starter med individet – du kan ta praktiske skritt for å endre perspektivet ditt og lære av feil. Men lederskap må også etablere de rette forholdene for å frembringe lærdommen som kommer fra fiasko og ikke se det som et feilsteg/negativt.

Husk:

  • Påvirkning trumfer seiersrate. Fokuser på innsikt og langsiktige forbedringer.
  • Gjør eksperimentering tilgjengelig i hele organisasjonen.
  • Dokumenter og del lærdom for å bygge kollektiv kunnskap.
  • Sett tydelige risikoterskler for å styrke kalkulert risikotaking.