John Cline
Engineering lead, Growth/Member Experience, Blue Apron
Blue Apronskjerneprodukt er en måltidsopplevelse som kundene skaper med de originale oppskriftene og ferske, sesongbaserte ingrediensene som er inkludert i hver eske. Alle oppskriftene ledsages av trykt og digitalt innhold, inkludert instruksjoner og historier om leverandører og spesialingredienser. Blue Apron selger også vin, som kan kombineres med måltidene, samt et kuratert utvalg av matlagingsverktøy, kjøkkenutstyr og spiskammerartikler, som er testet og anbefalt av Blue Aprons kulinariske team.
Blue Apron har utviklet et integrert økosystem som tar i bruk teknologi og ekspertise på tvers av mange fagområder. Selskapets aktiviteter for å koordinere tilbud og etterspørsel - planlegging av etterspørsel, oppskriftsproduksjon, salg av oppskrifter, oppfyllelse av krav og markedsføring - driver hele verdikjeden.
John Cline
Engineering lead, Growth/Member Experience, Blue Apron
Blue Apron har helt siden oppstarten vært en datadrevet, kundefokusert organisasjon, og siden kategorien nettmat vokser og er i stadig utvikling, ligger det i selskapets DNA å eksperimentere.
I begynnelsen brukte Blue Apron Optimizely Web til testing. Det var enkelt for ikke-tekniske brukere å opprette og sette i gang eksperimenter uten teknisk støtte, og verktøyet fungerte også godt sammen med enkeltsidesapplikasjonen deres. Men det var noen ulemper. Optimizely Web fungerte bare med endringer på klientsiden på nettet, noe som begrenset Blue Aprons mulighet til å kjøre eksperimenter for å optimalisere mobilappene eller backend-applikasjonene deres.
Akkurat da John og teamet vurderte alternativer og løsninger, lanserte Optimizely sitt nye tilbud, Optimizely Feature Experimentation. Løsningen var rettet mot Blue Aprons presise eksperimenteringsbehov og inneholdt SDK-er for mobil- og serversiden for test i kodebasen deres.
Med Optimizely Feature Experimentation får Blue Apron statistisk gyldige eksperimentelle resultater på server- og mobilapplikasjonene sine, noe som hjelper dem med å ta raskere og mer informerte forretningsbeslutninger. Med Optimizelys sanntidsresultater kunne Blue Apron unngå å lansere en redesignet reaktiveringsflyt, noe som ville ha resultert i et betydelig inntektstap.
Blue Apron kan nå raskt og enkelt bygge og sette opp nye tester som rett og slett ikke var mulig før.
På grunn av Blue Aprons unike innkjøps- og leveringsmodell må kundene bestemme seg for om de vil motta en kommende bestilling kort tid etter at den forrige esken har ankommet. Dette systemet fungerer godt for erfarne kunder, men nye brukere trenger ofte mer hjelp. De la merke til at det var større sannsynlighet for at nye kunder ikke klarte å overholde fristen for ordrehåndtering i løpet av den andre uken. Blue Apron antok at kunder som mottok disse "overraskelsesboksene", hadde en dårligere dynamikk, og følgelig dårligere livstidsverdi, enn de som unngikk overraskelsesbokser gjennom riktig abonnementsstyring.
De testet å minne nye brukere på at de snart skulle avslutte abonnementet, og oppmuntre dem til å administrere de kommende leveransene sine for å se om det ville redusere antallet rapporterte problemer med "overraskelsesbokser" og forbedre den generelle kundeopplevelsen. Etter å ha testet e-posten ved hjelp av Optimizely Feature Experimentation, så de en reduksjon på 37 % i uventede ordrerapporter fra kunder.
Med et konsekvent rammeverk på plass har antallet personer hos Blue Apron som utfører tester, utvidet seg langt utover Growth/Member Experience-teamet. Alle i selskapet, uansett team, kan opprette en test, se resultatene, analysere dem og bruke dataene som grunnlag for beslutninger.
"Nå som vi har denne muligheten, har andre grupper begynt å bruke den. Vi har gått fra å ha ett eller to team som gjorde én eller to tester i kvartalet, til nå, da vi sannsynligvis har minst 10 tester live til enhver tid, og et stort antall tester hvert kvartal som kjøres av hvert produktteam." - John Cline