Optimization glossary

Forholdstallsmålinger

Hva er forholdstallsmålinger?

Forholdstall er beregnede beregninger som måler forholdet mellom to ulike hendelser i én enkelt beregning. I motsetning til enkle beregninger, som automatisk normaliseres etter antall brukere i en variasjon, kan du med forholdstallsmålinger definere en egendefinert nevner, noe som gir deg fleksibilitet til å konstruere målinger som er direkte i tråd med hvordan virksomheten din evaluerer ytelsen.

Ved å dividere en hendelses totale antall, unike antall, totale inntekter eller totale verdi med en annen hendelses tilsvarende aggregering, kan du lage avanserte målinger som "inntekter per klikk for å legge til i handlekurven", "funksjonsadopsjon per konto" eller "gjennomsnittlig ordreverdi".

Forholdstallsmålinger gir deg fleksibilitet til å konstruere målinger som bedre gjenspeiler hvordan virksomheten din evaluerer resultatene. De gjør det mulig å lage egendefinerte beregninger som samsvarer med etablerte KPI-er, og bringer forretningslogikken direkte inn i eksperimenteringsplattformen.

Denne tilpasningen bygger bro over gapet mellom eksperimentdata og de beregningene som interessentene er mest opptatt av, og gjør eksperimentresultatene mer handlingsrettede og relevante for forretningsbeslutninger.

Merk: Ratio-målinger er tilgjengelige i produktene Web Experimentation (WX), Feature Experimentation (FX) og Optimizely Analytics.

Ratio metric edit creation

Bildekilde: Optimizely

Men er det noen forskjell mellom forholdstallsmålinger og enkle målinger?

Enkle beregninger er enklere å analysere og tolke, noe som gjør dem ideelle når de fanger opp det du måler på en god måte. Forholdstallsmålinger gir verdifull fleksibilitet når du trenger å tilpasse eksperimentering til etablerte KPI-er som allerede er uttrykt som forholdstall."

Slik fungerer forholdstallsmålinger

Forholdstallsmålinger gir verdifull fleksibilitet når du trenger målinger som gjenspeiler virksomhetens etablerte KPI-er. Mange organisasjoner bruker allerede forholdstallsbaserte beregninger i den daglige driften, og med forholdstallsmålinger kan du bruke de samme målingene i eksperimenteringsprogrammet ditt.

Beregningsprosessen følger en bestemt metodikk. Først sjekker systemet om en bruker fullfører nevnerhendelsen. Hvis nevnerhendelsen har funnet sted, ser det deretter etter tellerhendelser for den samme brukeren i løpet av et 48-timers vindu. Det teller dem på brukernivå, og aggregerer deretter forholdet fra et forholdstall per bruker. Systemet aggregerer verdier for tellerhendelser ved å summere verdier for numerisk baserte hendelser eller telle forekomster for tellbaserte hendelser. Deretter beregnes forholdstallet per enhet og gjennomsnittet for alle kvalifiserende enheter.

Forholdstall kan også brukes som primære, sekundære eller overvåkende måleparametere i eksperimentene dine, avhengig av hvor godt de samsvarer med forretningsmålene og målene for eksperimentet.

Når du bør bruke forholdstallsmålinger

Forholdstallsmålinger er spesielt effektive i flere scenarier. Bruk dem når du trenger å måle effektivitet eller verdi per hendelse i stedet for per bruker, når nøkkelindikatoren for ytelse allerede er uttrykt som et forholdstall (for eksempel inntekter per økt eller kjøp per konto), eller når du vil lage traktlignende beregninger for å analysere sekvensielle hendelsesforhold.

Disse beregningene er gode til å bygge bro mellom eksperimentdata og etablerte KPI-er for virksomheten. I stedet for å spore enkle inntekter per bruker, kan du for eksempel måle inntekter per klikk i handlekurven for å forstå hvor effektivt det å legge til noe i handlekurven genererer inntekter.

Her er et innblikk i Optimizely-resultatene med en forholdsberegning.Optimizely results with a ratio metric

Bildekilde: Optimizely

Eksempler på forholdstallsmålinger

  1. Optimalisering av e-handel: Spor "Inntekt per klikk i handlekurven" i stedet for inntekt per bruker. Dette hjelper deg å forstå om forbedringer på produktsiden fører til kjøp med høyere verdi når brukerne engasjerer seg, selv om klikkfrekvensen forblir stabil.

  2. B2B SaaS-plattformer: For bedriftsprogramvare med flere brukere per selskap bør du måle "Feature Adoption per Account" i stedet for per bruker. Dette avslører organisatoriske adopsjonsmønstre i stedet for individuell bruk.

  3. Strømmetjenester: I stedet for å måle seertid per bruker, bør du måle "Total seertid per husholdningskonto". Dette gir innsikt i innholdsengasjement på abonnementsnivå, noe som har direkte innvirkning på beslutninger om å beholde innholdet.

  4. Markedsføringstrakter: Opprett beregninger som "Skjemainnleveringer per bannerklikk" for å vurdere konverteringseffektiviteten ved spesifikke berøringspunkter og forstå det betingede forholdet mellom tilknyttede hendelser.

Statistiske betraktninger for forholdstallsmålinger

Forholdstall krever nøye statistisk håndtering på grunn av deres komplekse natur. Siden de involverer to hendelser, krever fastsettelse av statistisk signifikans at man estimerer variansen i forholdstallet ved hjelp av en førsteordens Taylor-serieapproksimasjon (Delta-metoden).

Den statistiske metoden tar hensyn til det faktum at de to hendelsene i et forholdstall ikke nødvendigvis er uavhengige - verdiene deres kan være statistisk avhengige, noe som betyr at endringer i den ene hendelsen kan korrelere med endringer i den andre. Denne avhengigheten fanges opp i variansberegningen for å sikre nøyaktige statistiske slutninger.

Beste praksis for implementering av forholdstallsmålinger

  1. Inkluder alltid komponentmålinger: Legg til telleren og nevneren som separate, enkle beregninger i samme eksperiment. Dette gir en viktig kontekst for å tolke endringer i forholdstall, og bidrar til å identifisere når forholdstallene blir skjeve på grunn av dramatiske endringer i bare én komponent.

  2. Se opp for villedende signaler: Du kan forbedre forholdstallet ved å redusere nevneren mens telleren forblir uendret. For eksempel kan "inntekt per besøk" vise en forbedring fordi antall besøk har gått ned, ikke fordi inntektene har økt.

  3. Velg riktig type måling: Begynn med enkle beregninger når de fanger opp målet ditt på en god måte. Bruk forholdstall når en tilpasset nevner er avgjørende for å samkjøre med virksomhetens KPI-er.

  4. Analyser i kontekst: Bruk analyseoversikten til å forstå hvordan både telleren og nevneren oppfører seg, slik at du forstår hva som driver endringene i forholdstallet.

For å oppsummere...

Forholdstallsmålinger bygger bro over gapet mellom eksperimentdata og reelle forretningsresultater ved at du kan måle det som er viktigst for organisasjonen din.

Når de implementeres med omtanke, med nøye fokus på komponentmålinger og tilpasning til etablerte KPI-er, kan de forvandle eksperimentell innsikt til handlingsrettet forretningsinformasjon.

Nøkkelen ligger i å velge riktig type måling for de spesifikke målene dine og tolke resultatene i en bredere kontekst av forretningsmålene dine.