Att misslyckas briljant: Det hemliga vapnet för framgångsrika experiment

Kommer du ihåg när det var lika enkelt att köra ett experiment som att ändra färgen på en knapp och se konverteringarna rulla in?

Ja, de dagarna är förbi, precis som med fällbara telefoner och uppringt internet.

Just nu är det tufft. Budgetarna är knappa. Anställningstryggheten känns som ett minne blott. HIPPO:er är angelägna om att du levererar statistiskt signifikanta resultat och visar värde, snabbt.

Men grejen med experiment är att varje gång vi misslyckas växer vi.

Jag minns fortfarande min frisyr från gymnasiet. Det var ett stort misslyckande för mig :)

Källa: Tenor

Var inte rädd för att omfamna misslyckanden och lär dig av varje test du har kört.

I den här bloggen ska vi utforska hur man förvandlar misslyckade experiment till värdefulla lärandetillfällen.

När man optimerar finns det inga misslyckanden – bara möjligheter att lära sig och växa. Upptäck hur du kan utvinna insikter från varje test, oavsett om det är lyckat eller inte, och bygga en kultur av kontinuerlig förbättring i ditt experimentprogram.

Misslyckanden hindrade inte Vincent van Gogh från att måla mästerverk, Albert Einstein från att revolutionera fysiken eller Michael Jordan från att bli en basketlegend.

Ändå har det förlamat otaliga experimentteam och hindrat dem från att nå sin fulla potential.

Varför? I den pressade affärsvärlden, där framgången med mätvärden styr budgeten, ses misslyckade experiment ofta som kostsamma misstag snarare än läromöjligheter. Denna inställning hämmar innovation och hindrar team från att uppnå genombrott.

Men kan du gissa vad den genomsnittliga vinstprocenten är för experimentprogram?

Den är knappt 12%.

Vanliga misslyckanden inkluderar statistiskt signifikanta men negativa resultat, ofullständiga resultat och bristfälliga testdesigner.

Och det gör ont. Det känns som:

• Du slösade bort tid och resurser
• Du går tillbaka till ruta ett
• Du kunde inte bevisa att någon hade fel

Misslyckanden är dock inte en negativ sak, åtminstone inte inom experiment. Du kan omformulera misslyckande som något positivt.

Varför frågar du?

Varje misslyckat test gjorde det möjligt för dig att validera en funktion eller en upplevelse som du annars skulle lägga ner en massa tid och pengar på att bygga ut.

Dessutom lärde du dig förmodligen mer/något nytt om dina användares preferenser.

Tror du fortfarande inte på kraften i misslyckanden?

Vi har 5 exempel från verkliga utövare som bevisar att du kan lära dig intressanta saker från varje experiment du kör.

💡För en logg över "Lärdomar" för varje experiment, oavsett resultat. Denna praxis hjälper till att omvandla misslyckanden till värdefulla insikter.

Innehåll med låg interaktion är viktigt

Felix Kirmse (Digital Marketing Manager, Optimizely): Felix ville minska innehåll med låg interaktion på startsidan för att öka antalet formulärinskick.

Resultat

Formulärinskickningarna minskade ytterligare (uh oh)

Slutsats

Även innehåll med låg interaktion kan bidra till användarnas förtroende och engagemang, vilket är avgörande för att uppmuntra till formulärinskick.

Riktigt bokomslag kontra abstrakt version

Joe Geoghan (Senior Visual Brand Design Specialist, Optimizely): Joe ville testa det riktiga omslaget kontra en abstrakt version av den stora experimentboken i e-postmeddelandets brödtext. Om vi ​​antar att det riktiga omslaget skulle vinna, var det det omslag som användes i de flesta e-postmeddelandena.

Bildkälla: Optimizely (Version 1)

Bildkälla: Optimizely (Version 2)

Resultat

Den sammanfattningsversionen vann ändå

Slutsats

Den lilla versionen av omslaget var för liten för att visa den viktiga informationen -- Både illustrationen och texten var oläsliga. Den sammanfattande versionen var koncis och visade exakt vad man gav sig in på. Tydlighet är viktigt i design.

Bilder är inte alltid bättre än länkar

Jeffrey de Wijs (Digital Marketing Manager, Optimizely): Jeff, den som skickar Optimizely-nyhetsbrevet till era inkorgar, testade förra veckan om användning av bilder istället för punktlistor kommer att öka klick i vårt nyhetsbrev.

Bildkälla: Optimizely

Resultat

Bilder och länkar presterade inte bättre än länkar ensamma

Slutsats

De flesta teammedlemmar gillade bildvarianten mer, men det fanns fortfarande ingen egentlig skillnad i klick mellan dem. Så lita inte på antaganden. Gå ut och testa det själv.

Kundperspektiv: Förutsäga nästa bästa åtgärd

Virgin Media (Optimizely Customer): Charlotte Golding och hennes team på Virgin Media ville förutsäga Nästa bästa åtgärd (NBA) så att de kunde designa personliga upplevelser för sina kunder. De antog att kunderna bara skulle ha specifika önskemål, som att förbättra nätverket i sitt område eller uppgradera sitt befintliga bredband etc.

Resultat

Teamet upptäckte att samma kund kom in med olika önskemål varje dag. Ena dagen sökte de kundtjänst och nästa dag ville de bara uppgradera. Detta togs inte med i beräkningen från början i NBA, men efter experimentet var teamet tvungna att optimera sin modell för att bättre förstå vilken näst bästa åtgärd de skulle visa för en kund.

Slutsats

Kunder kan komma till din webbplats om en annan sak varje dag. Sätt dem inte bara i en enda personlig upplevelse och förvänta dig samma resultat. Optimera modellen regelbundet.

Vad visar detta dig om att omformulera konceptet misslyckande i experiment?

Till att börja med handlar det om att främja en riskpositiv kultur. Så här gör du det:

• Ge tid och utrymme för att köra tester i stor skala
  Balansera hastighet med noggrannhet för att säkerställa meningsfulla resultat.
• Börja från toppen
  När chefer förespråkar experiment blir det en del av företagskulturen.
• Sikta på både snabba och stegvisa vinster
  Kombinera snabba vinster med djärva experiment för maximalt lärande och effekt.
• Uppmuntra teammedlemmar att dela idéer
  Skapa ett system för att samla in och utvärdera idéer från alla nivåer i organisationen.
• Fira "produktiva misslyckanden"
  Experimentsamarbete förvandlar experiment till en integrerad del av din företagskultur. Genom att standardisera arbetsflöden, dela planer och resultat öppet och göra det möjligt för alla att delta, skapar du en miljö där testning blir en andra natur.

På ett känt bryggeri erkänner CTO:ns F*UP-pris alla väl utformade experiment, oavsett resultat. Denna metod uppmuntrar teamet att djärvt förnya sig, prova nya saker och öppet dela alla lärdomar – inte bara framgångar. Det förvandlar varje test till en värdefull möjlighet och främjar en kultur av kontinuerlig förbättring och banbrytande upptäckter.

Sammantaget är effekt viktigare än vinstfrekvens. Men för att lära av misslyckade tester måste du sätta lämpliga riskgränser och anamma en experimentkultur. Så här gör du:

• Omdefiniera mätvärden: Gå bortom vinstfrekvenser. Spåra insikter som vunnits, validerade/ogiltigförklarade hypoteser och långsiktig effekt på viktiga mätvärden.
• Gör det enkelt att köra tester: Optimizely Webbexperimentation och funktionsexperimentering gör det möjligt för team att köra tester utan att behöva förlita sig på tekniska resurser.
• Implementera ett lärarkiv: Dokumentera alla testresultat, insikter och uppföljningsåtgärder.
• Kör granskningssessioner: Håll månatliga möten där team presenterar sina mest effektfulla tester - både vinster och förluster.
• Sätt tydliga risktrösklar: Definiera acceptabla risknivåer för olika typer av experiment. Till exempel, tillåt högre risk för tester på sidor eller segment med låg trafik.

💡Organisera en kvartalsvis "Misslyckandefest". Team visar upp sina mest spektakulära misslyckade experiment, diskuterar viktiga lärdomar och brainstormar nya tillvägagångssätt. Belöna det mest insiktsfulla misslyckandet med en trofé eller bonus.

I experiment (som i livet) kan misslyckanden vara ett kraftfullt verktyg för tillväxt. Börjar med individen - du kan vidta praktiska åtgärder för att ändra ditt perspektiv och dra nytta av misslyckanden. Men ledarskapet måste också skapa rätt förutsättningar för att åstadkomma de lärdomar som kommer från misslyckanden och inte se det som ett felsteg/negativt.

Kom ihåg:

• Påverkan trumfar vinstprocenten. Fokusera på insikter och långsiktiga förbättringar.
• Gör experiment tillgängliga i hela din organisation.
• Dokumentera och dela lärdomar för att bygga kollektiv kunskap.
• Sätt tydliga risktrösklar för att möjliggöra beräknat risktagande.