Bucket testing

Bucket testing är en term som används för att beskriva metoden att testa två versioner av en webbplats mot varandra för att se vilken som presterar bättre.

Vad är bucket testing?

Bucket testing (ibland kallat A/B-test eller split testing) är en term som används för att beskriva metoden att testa två versioner av en webbplats mot varandra för att se vilken som presterar bättre på angivna nyckeltal (som klick, nedladdningar eller köp). Det används för datadrivet beslutsfattande och för att förbättra användarupplevelsen i digitala produkter.

I bucket testing finns det minst två variationer i varje test: Variation A (vanligtvis kontrollversionen eller den befintliga versionen) och Variation B (den nya versionen). Mätvärden från varje sidvariation mäts och besökare placeras slumpmässigt i respektive «buckets» där datan kan registreras och analyseras för att avgöra vilken som presterar bäst.

Varför är bucket testing viktigt?

Företag som marknadsför och säljer produkter eller tjänster online förlitar sig på bucket testing för att:

Dessutom är statistisk signifikans verkligt viktigt för bucket testing. Det avser sannolikheten att prestandaskillnaden mellan variationerna inte beror på slumpen.

Vanligtvis anses en konfidensnivå på 95 % eller högre vara statistiskt signifikant. Statistisk analys säkerställer tillförlitligheten hos testresultaten så att du kan fatta välgrundade beslut för din målgrupp.

Så fungerar det: Ett exempel

Låt oss titta på ett hypotetiskt exempel. Varje bucket test börjar med en hypotes om att en annan version av en landningssida kommer att prestera bättre än kontrollen. Säg att du har en befintlig landningssida för en gratis kost-e-bok, «Ät råa livsmedel och lev längre.» 

Knappen längst ned i landningssidans registreringsformulär säger «Skicka», men du antar att en ändring av texten till «Hämta din gratis kopia» kommer att resultera i fler formulärkonverteringar. Den befintliga sidan med «Skicka»-knappen är kontrollen eller Variation A. Sidan med «Hämta din gratis kopia» på knappen är Variation B. Det viktigaste mätvärdet du kommer att mäta är procentandelen besökare som fyller i formuläret.

Eftersom du har en annonskampanj som driver flera tusen besökare per dag till din landningssida tar det bara några dagar att få resultaten från ditt bucket test. Det visar sig att «Hämta din gratis kopia» har en betydligt högre klickfrekvens än «Skicka», men formulärifyllnadsgraden är i princip densamma. Eftersom formulärifyllnadsgraden är det viktigaste mätvärdet väljer du att prova något annat.

Bucket testing vs. andra testmetoder

Även om bucket testing är kraftfullt är det inte den enda tillgängliga testmetodologin:

  • Multivariat testning: Ger funktionalitet för att testa flera variabler samtidigt, användbart för komplexa sidor men kräver mer trafik.
  • Multi-armed bandit-testning: Allokerar trafik dynamiskt till bättre presterande variationer, användbart för kortsiktiga kampanjer.

Bucket testings fördel ligger i dess enkelhet och tydliga resultat, vilket gör det idealiskt för att testa specifika hypoteser.

Bucket testing-processen och konverteringsoptimering

Användbarheten hos bucket testing spelar en stor roll i konverteringsoptimering. När du förstår användarbeteendet gör ett bucket test att du kan testa vilken hypotes som helst som kan förbättra användarengagemang och en sidas konverteringar. Du kan fortsätta att prova knapptexten med högre konverteringsgrad för Ät råa livsmedel och lev längre, eller så kan du gå vidare till att testa andra hypoteser, som fetare rubriktext, mer färgstarka bilder eller pilar som pekar mot registreringsknappen som får fler personer att konvertera.

Företag spenderar miljontals kronor på att driva trafik till landningssidor och webbplatser som marknadsför deras produkt eller tjänst. Med enkla variationer av sidtext, bilder och layouter kan du genomföra en serie bucket tester för att samla in data och iterera mot den bäst presterande versionen av sidan.

Du skapar helt enkelt variationer av sidan, ändrar ett element i taget och mäter nyckeltal, sedan samlar du in resultaten tills du når statistiskt signifikanta resultat för varje experiment.

Bucket testing kan ha en betydande inverkan på konverteringar per sida, vilket resulterar i intäktsökningar på dina mest trafikerade sidor.

Bucket testing kan också hjälpa till att eliminera subjektiva åsikter som avgörande faktorer i en sidas design eller layout. Författaren till Ät råa livsmedel och lev längre kanske tror att hennes foto kommer att driva mer kundefterfrågan – eller hon kanske insisterar på en regnbågsfärgad palett.

Med bucket testing behöver du inte diskutera vilka design- eller sidelement som bäst konverterar en kund. De kvantitativa uppgifterna talar för sig själva och driver beslutet åt dig.

Tester bör prioriteras att köras på dina mest trafikerade sidor, eftersom du kanske behöver hundratals eller tusentals besökare för varje variation för att samla in statistiskt signifikanta data. Ju mer trafik en sida tar emot, desto snabbare kan du utse en vinnare.

Vanliga sidelement att testa:

  1. Rubriker och underrubriker: varierar längd, storlek, typsnitt och specifika ordkombinationer
  2. Bilder: Varierar antalet bilder, placering, typ av bildmaterial (fotografi vs. illustration) och bildmotiv
  3. Text: Varierar antalet ord, stil, typsnitt, storlek och placering
  4. Uppmaning till handling (CTA)-knappar: varierar vanliga sådana som «Köp nu», «Registrera dig», «Skicka», «Kom igång» eller «Prenumerera» och varierar storlekar, färger och sidplacering
  5. Logotyper från kunder eller tredjepartssajter: bygger trovärdighet och förmedlar tillförlitlighet (kan inkludera Better Business Bureau-, TRUSTe- eller VeriSign-logotyper samt kundlogotyper)

Begränsningar och bästa praxis för bucket testing

Här är några begränsningar med bucket testing:

  • Kräver betydande trafik för resultat
  • Den här metoden kanske inte lämpar sig för att testa radikala förändringar
  • Resultat kan påverkas av externa faktorer (säsongsvariation, kampanjer etc.)
  • Att genomföra flera tester samtidigt kan störa varandra

Det är därför du måste följa några av de bästa praxiserna nedan för att säkerställa effektivitet.

  • Ha en tydlig hypotes innan du startar testet
  • Testa ett element i taget för tydliga resultat
  • Se till att din urvalsstorlek är tillräckligt stor för statistisk signifikans
  • Kör tester under lämplig tid (vanligtvis minst en vecka)
  • Var medveten om externa faktorer som kan påverka resultaten negativt (t.ex. helgdagar, marknadsföringskampanjer)
  • Prioritera alltid testning på sidor med hög trafik för snabbare resultat

Kom igång med bucket testing

Bucket testing är ett kraftfullt verktyg för att optimera digitala upplevelser och driva affärstillväxt. Genom att systematiskt testa hypoteser och mäta resultat kan du förbättra användarupplevelsen och öka konverteringar.

Optimizelys A/B-testningsprogramvara låter dig köra bucket tester på alla dina webbsidor och landningssidor utan att förlita dig på IT för support. Du kan konfigurera tester på minuter, optimera alla dina sidor och börja fatta mer välgrundade beslut om ditt företag.

Börja testa med Optimizely Web Experimentation idag!