Att misslyckas på ett briljant sätt: Det hemliga vapnet för framgångsrik experimentering

Kommer du ihåg när det var så enkelt att köra ett experiment som att ändra en knappfärg och se konverteringarna rulla in?

Ja, den tiden är förbi, precis som flipptelefoner och uppringt internet.

Just nu är saker och ting tuffa. Budgetarna är snäva. Anställningstrygghet känns som ett avlägset minne. HIPPO:s är angelägna om att du levererar statistiskt signifikanta resultat och visar värde, snabbt.

Men så här är det med experimentering - varje gång vi misslyckas växer vi.

Jag minns fortfarande min frisyr i gymnasiet. Det var ett stort misslyckande för mig :)

Var inte rädd för att omfamna misslyckanden och lär dig av varje test du har kört.

I den här bloggen kommer vi att utforska hur man kan vända misslyckade experiment till värdefulla inlärningsmöjligheter.

När du optimerar finns det inga misslyckanden - bara chanser att lära sig och växa. Upptäck hur du kan utvinna insikter från varje test, framgångsrikt eller inte, och bygga en experimenteringskultur med ständiga förbättringar i ditt experimenteringsprogram.

Verkligheten bakom experimentering: Gör misslyckande coolt igen

Misslyckanden hindrade inte Vincent Van Gogh från att måla mästerverk, Albert Einstein från att revolutionera fysiken eller Michael Jordan från att bli en basketlegend.

Ändå har det förlamat otaliga team inom experimentering och hindrat dem från att nå sin fulla potential.

Varför är det så? I en affärsvärld med höga insatser, där framgången med mätvärden styr budgeten, ses misslyckade experiment ofta som kostsamma misstag snarare än möjligheter att lära. Detta tankesätt kväver innovation och hindrar team från att uppnå genombrott.

Men kan du gissa vad som är den genomsnittliga vinsten i program för experimentering?

Denär knappt 12 %.

Vanliga misslyckanden inkluderar statistiskt signifikanta men negativa resultat, otydliga resultat och bristfälliga utformningar av tester.

Och det gör ont. Det känns som om

• Du har slösat bort tid och resurser
• Du går tillbaka till ruta ett
• Du kunde inte bevisa att någon hade fel

Men misslyckanden är inte något negativt, åtminstone inte när det gäller experimentering. Du kan omformulera misslyckande som något positivt.

Varför frågar du?

Varje misslyckad test gjorde det möjligt för dig att validera en funktion eller en upplevelse som du annars skulle spendera en massa tid och pengar på att bygga ut.

Dessutom lärde du dig sannolikt mer/något nytt om dina användares preferenser.

Tror du fortfarande inte på kraften i att misslyckas?

Vi har 5 exempel från verkliga utövare som bevisar att du kan lära dig intressanta saker från varje experiment du kör.

💡Förvara en"Lessons Learned"-logg för varje experiment, oavsett resultat. Denna praxis hjälper till att omvandla misslyckanden till värdefulla insikter.

Hall of fame: 4 lärdomar från misslyckade experiment

1. Innehåll med låg interaktion är viktigt

   Felix Kirmse (Digital Marketing Manager, Optimizely): Felix ville minska innehåll med låg interaktion på startsidan för att öka antalet formulärinlämningar.

   Resultat

   Formulärinlämningarna minskade ytterligare (uh oh)

   Att ta med sig

   Även innehåll med låg interaktion kan bidra till användarnas förtroende och engagemang, vilket är viktigt för att uppmuntra till formulärinlämningar.

1. Verkligt bokomslag vs. abstrakt version

   Joe Geoghan (Senior Visual Brand Design Specialist, Optimizely): Joe ville testa det riktiga omslaget mot en abstrakt version av den stora boken om experimentering i e-postens brödtext. Han antog att det riktiga omslaget skulle vinna, och det var det omslag som användes i de flesta e-postmeddelanden.

   Version 1	Version 2

   Resultat

   Den abstrakta versionen vann ändå i slutändan

   Att ta med sig

   Den lilla versionen av omslaget var för liten för att visa den viktiga informationen - både illustrationen och texten var oläsliga. Den abstrakta versionen var kortfattad och visade exakt vad man gick in i. När det gäller design är tydlighet viktigt.

2. Bilder är inte alltid bättre än länkar

   Jeffrey de Wijs (Digital Marketing Manager, Optimizely): Jeff, den som skickar Optimizely One-nyhetsbrevet till era inkorgar, testade förra veckan om det skulle öka antalet klick i vårt nyhetsbrev om vi använde bilder istället för punktlistor.

   

   Resultat

   Bilder och länkar presterade inte bättre än enbart länkar

   Att ta med sig

   De flesta teammedlemmar gillade bildvarianten mer, men det fanns ändå ingen verklig skillnad i klick mellan dem. Så lita inte på antaganden. Gå ut och testa det själv.

3. Kundperspektiv: Förutsägelse av nästa bästa åtgärd

   Virgin Media (kund hos Optimizely): Charlotte Golding och hennes team på Virgin Media ville förutse nästa bästa åtgärd (NBA) så att de kunde utforma personaliserade kundupplevelser för sina kunder. De antog att kunderna bara skulle ha specifika önskemål som att förbättra nätverket i sitt område eller uppgradera sitt befintliga bredband, etc.

   Resultat

   Teamet upptäckte att samma kund kom in med olika förfrågningar varje dag. Ena dagen ville de ha kundtjänst och nästa dag ville de bara uppgradera. Detta togs inte med i NBA från början, men efter experimentet var teamet tvungna att optimera sin modell för att bättre förstå vilken nästa bästa åtgärd som skulle visas för en kund.

   Att ta med sig

   Kunder kan komma till din webbplats för olika saker varje dag. Låt dem inte bara få en enda personaliserad upplevelse och förvänta dig samma resultat. Optimera modellen regelbundet.

   Vad visar detta dig om hur man kan omformulera begreppet misslyckande i experimentering?

   Till att börja med handlar det om att främja en riskpositiv kultur. Så här gör du det:

   • Ge tid och utrymme för att köra tester i skala upp
     Balansera snabbhet med noggrannhet för att säkerställa meningsfulla resultat.
   • Börja från toppen
     När cheferna stöder experimentering blir det en del av företagskulturen.
   • Sikta på både moonshots och stegvisa vinster
     Kombinera snabba vinster med djärva experiment för maximal inlärning och påverkan.
   • Uppmuntra teammedlemmarna att dela medsig av idéer
     Skapa ett system för att samla in och utvärdera idéer från alla nivåer i organisationen.
   • Fira "produktiva misslyckanden"
     Experiment Collaboration gör experimentering till en integrerad del av företagskulturen. Genom att standardisera arbetsflöden, dela planer och resultat öppet och göra det möjligt för alla att delta skapar du en miljö där testning blir en självklarhet.

   På ett berömt bryggeri belönar CTO:s F*UP-pris alla väldesignade experiment, oavsett resultat. Det här tillvägagångssättet uppmuntrar teamet till modiga innovationer, att prova nya saker och att öppet dela med sig av alla lärdomar - inte bara framgångar. Det gör varje test till en värdefull möjlighet och främjar en kultur av ständiga förbättringar och banbrytande upptäckter.

Odla en kontinuerlig experimenteringskultur

Sammantaget är effekten viktigare än vinstfrekvensen. Men för att lära av misslyckade tester måste du sätta lämpliga risktrösklar och anamma en experimenteringskultur. Så här gör du:

• Omdefiniera mätvärden: Gå bortom vinstnivåer. Spåra insikter, hypoteser som valideras eller ogiltigförklaras och långsiktig påverkan på nyckeltal.
• Gör det enkelt att köra tester: Optimizely Web Experimentation och Feature Experimentation gör det möjligt för team att köra tester utan stort beroende av tekniska resurser.
• Implementera ett läranderegister: Dokumentera alla resultat av tester, insikter och uppföljningsåtgärder.
• Genomför granskningssessioner: Håll månatliga möten där teamen presenterar sina mest effektiva tester - både vinster och förluster.
• Sätt tydliga tröskelvärden för risk: Definiera acceptabla risknivåer för olika typer av experiment. Till exempel, tillåt högre risk för tester på sidor eller segmenteringar med låg trafik.

💡Organiseraen kvartalsvis "Failure Fiesta". Teamen visar upp sina mest spektakulära misslyckade experiment, diskuterar viktiga lärdomar och brainstormar nya tillvägagångssätt. Belöna det mest insiktsfulla misslyckandet med en trofé eller bonus.

Lär dig av varje test du kör

I experimentering (liksom i livet) kan misslyckanden vara ett kraftfullt verktyg för tillväxt. Det börjar med individen - du kan vidta praktiska åtgärder för att ändra ditt perspektiv och dra lärdom av misslyckanden. Men ledarskapet måste också skapa rätt förutsättningar för att man ska kunna lära sig av misslyckanden och inte se det som ett felsteg/negativt.

Kom ihåg detta:

• Effekt trumfar vinstprocent. Fokusera på insikter och långsiktiga förbättringar.
• Gör experimentering tillgänglig i hela organisationen.
• Dokumentera och dela lärdomar för att bygga upp kollektiv kunskap.
• Sätt tydliga risktrösklar för att möjliggöra ett kalkylerat risktagande.