Test en ændring. Få et brugbart beslutningsgrundlag.

Vi hjælper med hypotese, implementering og analyse af A/B-tests på websites og webshops. Testen planlægges efter jeres trafik og forretningsmål, så resultatet bliver fortolket på et holdbart grundlag.

Fortæl om jeres opgave Se, hvad vi hjælper med ↓

Direkte dialog med Phil i København.
Vi aftaler omfang og estimat, før arbejdet starter.

Få vurderet jeres opgave

Beskriv kort, hvad I vil have løst. Phil vender tilbage om mulighederne og næste skridt.

Foretrækker I direkte kontakt? +45 23 63 23 03 eller philip@openocean.dk.

Det kan vi hjælpe jer med.

Tag udgangspunkt i den opgave, I står med. Vi finder et konkret sted at begynde.

Hypotese og målepunkt

Vi beskriver ændringen, den forventede effekt og ét primært målepunkt. Eventuelle risikomål aftales samtidig.

Datakrav og stopplan

Baseline, mindste relevante effekt, stikprøve og varighed vurderes før start. Vi vælger metode og regler for afslutning på forhånd.

Implementering og kontrol

Varianter, tilfældig fordeling, tracking og tekniske fejl kontrolleres. Vi undersøger skævheder i trafikfordeling og datakvalitet.

Analyse og anbefaling

Effektstørrelse og usikkerhed vurderes sammen med den praktiske betydning. Resultatet kan også være uklart eller utilstrækkeligt til at vælge en vinder.

Fra beskrivelse til aflevering.

01
Vi afklarer opgaven
Send en kort beskrivelse. Vi spørger ind til mål, nuværende løsning og det, der skal fungere.
02
I vælger næste skridt
Vi aftaler leverance, adgang, estimat og tidspunkt. Kræver det en betalt analyse, aftaler vi den først.
03
Vi udfører og gennemgår
Arbejdet kontrolleres mod det aftalte mål. I får en gennemgang og overblik over eventuelle næste opgaver.

Ved lav trafik kan analyse af brugerflow, brugertest eller en tydelig fejlrettelse være et bedre første skridt. Vi stopper ikke en almindelig fastlagt test alene, fordi en midlertidig p-værdi ser god ud.

Fra kundeprojekterne

Konkrete opgaver. Rigtige virksomheder.

Se, hvad opgaven krævede, og hvordan vi greb den an. Hver case beskriver sit eget forløb.

Mouseflow

Fra hardcoded website til et redigerbart marketingværktøj.

Migration til WordPress, flersproget indhold og A/B-tests af landingssider og signup-flow. Heatmaps og optagelser fra Mouseflow indgik i arbejdet med konvertering.

Læs casen

Skandium

Shopify-optimering dér, hvor kunderne vælger.

Teknisk SEO, strukturerede data og A/B-tests på produkt- og kategorisider hos designforhandleren Skandium. Arbejdet tog udgangspunkt i deres eksisterende Shopify-shop.

Læs casen

Før I beslutter jer

Et godt samarbejde starter med klare forventninger.

Tal med os om jeres opgave

Hvor meget trafik kræver en A/B-test?

Det afhænger af baseline, variation og den mindste effekt, der er relevant for jer. Vi vurderer datakravet før implementering.

Betyder 95 % signifikans, at vinderen er 95 % sikker?

Nej. Et signifikansniveau er en del af testmetodens fejlkontrol under dens forudsætninger. Vi fortolker effekt og usikkerhed samlet og undgår at love sikkerhed om en vinder.

Kan vi følge testen undervejs?

Ja, for driftsfejl og aftalte kvalitetsmål. Reglerne for beslutninger aftales på forhånd; en sekventiel metode kræver sin egen plan.

Kan I kun lave analysen?

Ja. Vi kan gennemgå et eksisterende eksperiment, datagrundlaget og konklusionerne som en afgrænset opgave.