Å mislykkes på en glimrende måte: Det hemmelige våpenet for å lykkes med eksperimenter

Husker du da det var så enkelt som å endre fargen på en knapp og se konverteringen rulle inn?

Ja, den tiden er forbi, akkurat som klaptelefoner og oppringt internett.

Akkurat nå er det tøffe tider. Budsjettene er stramme. Jobbsikkerheten føles som et fjernt minne. HIPPO-er er opptatt av at du skal levere statistisk signifikante resultater og vise verdi, raskt.

Men her er tingen med eksperimentering - hver gang vi feiler, vokser vi.

Jeg husker fortsatt frisyren min på videregående. Det var en stor fiasko for meg :)

Ikke vær redd for å omfavne det å mislykkes, og lær av hver test du har kjørt.

I denne bloggen skal vi se nærmere på hvordan du kan gjøre mislykkede eksperimenter om til verdifulle læringsmuligheter.

Når du optimaliserer, finnes det ingen feil - bare sjanser til å lære og vokse. Finn ut hvordan du kan trekke ut innsikt fra alle tester, vellykkede eller mislykkede, og bygg en kultur for kontinuerlig forbedring i eksperimenteringsprogrammet ditt.

Eksperimenteringens virkelighet: Gjør det kult å mislykkes igjen

Å mislykkes hindret ikke Vincent Van Gogh i å male mesterverk, Albert Einstein i å revolusjonere fysikken eller Michael Jordan i å bli en basketballlegende.

Likevel har det lammet utallige eksperimenteringsteam og hindret dem i å nå sitt fulle potensial.

Hvorfor er det slik? I en forretningsverden der det står mye på spill, og der suksessen til måleparameterne styrer budsjettet, blir mislykkede eksperimenter ofte sett på som kostbare feil i stedet for læringsmuligheter. Dette tankesettet kveler innovasjon og hindrer team i å oppnå gjennombrudd.

Men kan du gjette hva som er den gjennomsnittlige suksessraten i eksperimenteringsprogrammer?

Dener på knapt 12 %.

Vanlige feil inkluderer statistisk signifikante , men negative resultater, ufullstendige resultater og mangelfull design av testene.

Og det gjør vondt. Det føles som om

• Du har kastet bort tid og ressurser
• Du går tilbake til start
• Du klarte ikke å bevise at noen tok feil

Men å mislykkes er ikke noe negativt, i hvert fall ikke når det gjelder eksperimentering. Du kan se på fiasko som noe positivt.

Hvorfor, spør du?

Hver mislykket test ga deg muligheten til å validere en funksjon eller en opplevelse som du ellers ville brukt mye tid og penger på å utvikle.

I tillegg har du sannsynligvis lært mer/noe nytt om brukernes preferanser.

Har du fortsatt ikke troen på kraften i å mislykkes?

Vi har fem eksempler fra virkelige utøvere som beviser at du kan lære interessante ting fra hvert eneste eksperiment du kjører.

💡Før en"Lessons Learned"-logg for hvert eksperiment, uansett utfall. Denne praksisen bidrar til å forvandle feil til verdifull innsikt.

Hall of fame: 4 lærdommer fra mislykkede eksperimenter

1. Innhold med lite interaksjon er viktig

   Felix Kirmse (Digital Marketing Manager, Optimizely): Felix ønsket å redusere innhold med lite interaksjon på startsiden for å øke antall skjemainnleveringer.

   Resultat

   Skjemainnsendinger gikk ytterligere ned (uh oh)

   Takeaway

   Selv innhold med lite interaksjon kan bidra til brukernes tillit og engasjement, noe som er avgjørende for å oppmuntre til innsending av skjemaer.

1. Ekte bokomslag vs. abstrakt versjon

   Joe Geoghan (Senior Visual Brand Design Specialist, Optimizely): Joe ønsket å teste det virkelige omslaget mot en abstrakt versjon av den store eksperimentboken i e-postteksten. Han antok at det ekte omslaget ville vinne, og det ble derfor brukt i de fleste e-postene.

   Versjon 1	Versjon 2

   Resultat

   Den abstrakte versjonen endte likevel opp med å vinne

   Takeaway

   Den lille versjonen av omslaget var for liten til å vise den viktige informasjonen - både illustrasjonen og teksten var uleselig. Den abstrakte versjonen var kortfattet og viste deg nøyaktig hva du gikk til. Når det gjelder design, er klarhet viktig.

2. Bilder er ikke alltid bedre enn lenker

   Jeffrey de Wijs (Digital Marketing Manager, Optimizely): Jeff, som er den som sender Optimizely-nyhetsbrevet til innboksen din, testet i forrige uke om bruk av bilder i stedet for kulepunkter vil øke antall klikk i nyhetsbrevet vårt.

   

   Resultat

   Bilder og lenker ga ikke bedre resultater enn lenker alene

   Takeaway

   De fleste teammedlemmene likte bildevarianten bedre, men det var likevel ingen reell forskjell i antall klikk mellom dem. Så ikke stol på antagelser. Gå ut og test det ut selv.

3. Kundeperspektiv: Forutsi den neste beste handlingen

   Virgin Media (Optimizely-kunde): Charlotte Golding og teamet hennes hos Virgin Media ønsket å forutsi den neste beste handlingen (NBA), slik at de kunne utforme personaliserte opplevelser for kundene sine. De antok at kundene kun ville ha spesifikke forespørsler, for eksempel om å forbedre nettverket i området de bor i, oppgradere eksisterende bredbånd osv.

   Resultat

   Teamet fant ut at den samme kunden kom inn med forskjellige forespørsler hver dag. Den ene dagen var de ute etter kundeservice, mens de neste dag bare ønsket å oppgradere. Dette var i utgangspunktet ikke tatt med i NBA, men etter eksperimentet måtte teamet optimalisere modellen for å få en bedre forståelse av hva som var den neste beste handlingen å vise kunden.

   Takeaway

   Kunder kan komme til nettstedet ditt om forskjellige ting hver dag. Ikke bare gi dem en enkelt personalisert opplevelse og forvent de samme resultatene. Optimaliser modellen regelmessig.

   Hva viser dette deg om hvordan du kan omformulere konseptet med å mislykkes i eksperimentering?

   Til å begynne med handler det om å fremme en risikopositiv kultur. Slik gjør du det:

   • Gi tid og rom til å kjøre tester i stor skala
     Balanser hastighet med grundighet for å sikre meningsfulle resultater.
   • Start fra toppen
     Når ledere støtter eksperimentering, blir det en del av bedriftskulturen.
   • Sikt etter både måneskudd og inkrementelle gevinster
     Kombiner raskegevinstermed dristige eksperimenter for maksimal læring og effekt.
   • Oppmuntre medarbeiderne til å dele ideer
     Laget system for å samle inn og evaluere ideer fra alle nivåer i organisasjonen.
   • Feir "produktive feil"
     Experiment Collaboration gjør eksperimentering til en integrert del av bedriftskulturen. Ved å standardisere arbeidsflyten, dele planer og resultater åpent og gjøre det mulig for alle å delta, skaper du et miljø der testing blir en naturlig del av hverdagen.

   På et berømt bryggeri anerkjenner teknologidirektørens F*UP-pris alle veldesignede eksperimenter, uavhengig av utfallet. Denne tilnærmingen oppmuntrer teamet til å tenke nytt, prøve nye ting og åpent dele alle erfaringer - ikke bare suksessene. Det gjør hver test til en verdifull mulighet, og fremmer en kultur for kontinuerlig forbedring og banebrytende oppdagelser.

Dyrk en kontinuerlig kultur for eksperimentering

Overordnet sett er effekten viktigere enn suksessraten. For å lære av mislykkede tester må du imidlertid sette passende risikoterskler og omfavne en kultur for eksperimentering. Slik gjør du det:

• Omdefiner måleparametere: Ikke bare seiersprosent. Spor innsikt, hypoteser som valideres/avkreftes, og langsiktig innvirkning på nøkkeltallene.
• Gjør det enkelt å kjøre tester: Optimizely Web Experimentation og Feature Experimentation gjør det mulig for team å kjøre tester uten å være avhengig av tekniske ressurser.
• Implementer et læringslager: Dokumenter alle resultater, innsikt og oppfølgingstiltak fra testene.
• Gjennomfør evalueringsmøter: Hold månedlige møter der teamene presenterer de mest effektive testene sine - både de som har gitt resultater og de som ikke har gitt resultater.
• Sett klare risikoterskler: Definer akseptable risikonivåer for ulike typer eksperimenter. Tillat for eksempel høyere risiko for tester på sider eller segmenter med lav trafikk.

💡Organiseren kvartalsvis "fiaskofest". Teamene viser frem sine mest spektakulære mislykkede eksperimenter, diskuterer viktige erfaringer og brainstormer nye tilnærminger. Beløn den mest innsiktsfulle fiaskoen med et trofé eller en bonus.

Lær av hver eneste test du kjører

I eksperimentering (som i livet) kan det å mislykkes være et kraftfullt verktøy for vekst. Det begynner med den enkelte - du kan ta praktiske skritt for å endre perspektiv og lære av feilene. Men ledelsen må også legge forholdene til rette for at man kan lære av å mislykkes, og ikke se på det som et feilsteg/negativt resultat.

Husk på dette:

• Effekt trumfer gevinstprosent. Fokuser på innsikt og langsiktige forbedringer.
• Gjør eksperimentering tilgjengelig i hele organisasjonen.
• Dokumenter og del erfaringer for å bygge kollektiv kunnskap.
• Sett klare risikoterskler for å styrke kalkulert risikotaking.