Hva er en delt test?

En delt test (også kalt A/B-testing) er en enkel måte å finne ut hva som fungerer best i butikken din. Du oppretter to eller flere varianter av samme side, for eksempel forsiden din, og lar Shoporama vise hver besøkende en av variantene tilfeldig. Etter en stund kan du se hvilken variant som genererte mest salg, størst handlekurv eller høyest konvertering. I stedet for å gjette hva kundene dine liker best, lar du dem stemme med atferden sin.

Det fine med en delt test er at den er rettferdig. Begge variantene blir sett av besøkende på samme tid og under samme forhold, slik at verken været, årstiden eller en kampanje påvirker resultatet. Når den ene varianten vinner, er det fordi den faktisk presterer bedre.

Et konkret eksempel: En grønn "Legg i handlekurven"-knapp som konverterer 8 % bedre enn den røde, høres lite ut, men over tusenvis av besøk er det snakk om ekte penger.

To typer deltester i Shoporama

Du kan teste to ulike typer endringer opp mot hverandre:

1. Sideoppsett. To eller flere varianter av samme side i sidedesigneren. Du kan for eksempel teste to forskjellige forsideoppsett, to versjoner av kategorisiden eller to produktsideoppsett. Du kan endre bilder, seksjoner, tekst, rekkefølge - alt i Sidedesigneren.
2. Stilark. To eller flere CSS-varianter mot hverandre. Test knappefarger, skriftstørrelser, layoutjusteringer eller hele designstemninger. Hvis du kan skrive litt CSS (eller har en hjelper som kan det), er det her du finner de overraskende vinnerne. Små visuelle endringer kan ha stor innvirkning på konverteringen.

Begge typer tester fungerer teknisk sett på samme måte og bruker samme statistikk. Du bestemmer selv hvilken type test som gir mening for det du ønsker å teste.

Tidsstyring - også uten splittest

Klassisk eksempel: Black Friday. I stedet for å huske å logge inn 28. november kl. 00:00 og endre forsiden, oppretter du en Black Friday-forside på forhånd og sier til systemet: "Vis denne fra 28. november til 1. desember". Shoporama tar seg av resten.

Det fungerer for alle de store sesongene: sommersalg, jul, farsdag, Singles Day, Valentinsdag. Du kan ha flere tidsbestemte varianter samtidig, f.eks. en vanlig forside hele året, en sommerversjon i juni-august og en Black Friday-versjon for den uken. Systemet bytter automatisk mellom dem på de riktige datoene.

Hvis du bare vil at varianten skal vises på en bestemt dato, lar du avkrysningsboksen "Online" være avmerket og fyller bare inn datoene. Da blir den automatisk aktivert i intervallet og forsvinner igjen når sluttdatoen er passert.

Slik kommer du i gang

Først trenger du to varianter som du kan teste mot hverandre:

1. Gå til Page Designer (eller Stylesheet hvis du vil teste CSS), finn siden du vil teste, og klikk på kopi-ikonet (de to arkene) ved siden av sidens navn. Du får en kopi som starter offline, slik at du trygt kan redigere den.
2. Tilpass kopien. Endre bildet, korriger tekst, omorganiser seksjoner. Det er dette du vil at kundene dine skal se som et alternativ til originalen.
3. Legg ut kopien på nettet. Nå har du to nettversjoner av samme side. Hvis du bare hadde lagt ut begge på nettet uten å teste, ville den med høyest prioritet vunnet og blitt vist til alle. Det er her splitt-testen kommer inn i bildet.
4. Gå til Split test, opprett en ny test. Velg hva du vil teste (siden eller stilarkene), gi testen et navn ("Home Hero A vs B"), legg til de to variantene, velg trafikkfordelingen (start med 50/50) og klikk på Start. Nå fordeles de besøkende automatisk, og hver bruker får tildelt én variant som følger dem ved gjentatte besøk.

Hvordan finner vi vinneren?

Bak kulissene bruker Shoporama en moderne statistisk metode (Bayesiansk) for å beregne hvor sannsynlig det er at hver variant er den beste. Du trenger ikke å forstå matematikken, men i motsetning til klassiske p-verdier gir Bayesian deg svar du faktisk kan bruke: "Variant B har 87 % sannsynlighet for å være best". Når sannsynligheten når 95 % og det er nok data, erklærer vi varianten som vinner.

Vi kårer IKKE en vinner for raskt. Selv om variant B ser bedre ut etter to dager, kan det være tilfeldigheter eller en kort kampanje som pumper opp salget. For å unngå falske positive vinnere krever vi:

• Minst 5000 visninger per variant
• Minst 100 bestillinger totalt på tvers av varianter
• Minst 14 dagers varighet (slik at vi dekker en hel ukes syklus to ganger)
• 95 % bayesiansk sannsynlighet for at vinneren er den beste

Hvis kriteriene ikke er oppfylt, viser vi deg hvilken variant som ligger foran akkurat nå, men markerer tydelig at testen ikke er avgjort. Slik vet du om du må vente, eller om resultatet allerede er pålitelig.

Automatisering - sett det og glem det

Du trenger ikke å sitte og se på testen hver dag. To uavhengige innstillinger gjør at systemet kan håndtere det selv:

• Stopp automatisk når det er en klar vinner. Så snart kriteriene er oppfylt og en variant har en sannsynlighet på 95 % eller mer, stopper testen automatisk. Du vil bli varslet i admin.
• Bruk vinneren som ny standard når testen stoppes. Vinneren legges på nett med høy prioritet, og de andre variantene legges frakoblet. Du har fortsatt alle variantene i systemet, så du kan alltid rulle tilbake manuelt fra variantlisten. Dette fungerer både ved automatisk stopp OG når du selv stopper testen manuelt.

Når begge alternativene er aktivert, kan du opprette en test, klikke på Start og glemme alt om den. Når den avsluttes, er butikken din allerede oppgradert til den vinnende versjonen, og du får et varsel i administratoren som forteller deg hva som har skjedd.

Statistikken du får

Shoporama viser for hver variant:

• Visninger - antall sidevisninger av varianten (ekskludert roboter)
• Bestillinger - antall fullførte bestillinger fra besøkende som har sett varianten
• Inntekter - totale inntekter per variant, inkludert moms og frakt
• Konverteringsrate - bestillinger delt på antall visninger, vist i prosent
• Inntekt per besøkende (RPV) - den viktigste KPI-en innen e-handel fordi den fanger opp både konvertering og handlekurvstørrelse i ett og samme tall
• Vinnersannsynlighet - Bayesiansk prosentandel for at varianten er den beste, vist som en farget stolpe

Den ledende varianten er uthevet med grønn bakgrunn, og når en vinner er erklært med 95 %+ sannsynlighet, får den et trofémerke. Tallene står stille mellom oppdateringene til nye data kommer inn, slik at du trygt kan laste inn på nytt uten å se prosentandelene hoppe.

Hva skjer bak kulissene?

Når en besøkende besøker butikken din for første gang under en pågående test, tildeler vi dem en variant basert på trafikkfordelingen. Tildelingen lagres i en liten informasjonskapsel som kalles pb_v, slik at de ser den samme varianten ved gjentatte besøk. Dette er avgjørende. Hvis kunden så variant A på telefonen i går og variant B på den bærbare datamaskinen i dag, var det ikke lenger en gyldig test.

Når kunden legger en vare i handlekurven, lagrer vi varianttilordningen i selve handlekurven. Når bestillingen fullføres, tagges den med hvilken variant kunden så. Dette betyr at vi kan måle reelle inntekter per variant, ikke bare estimerte klikk. Hver natt kjører et skript som oppdaterer statistikken og automatisk stopper tester som har nådd signifikans.

Informasjonskapsler og GDPR

Du trenger ikke å gjøre noe for at deltesting skal være i samsvar med GDPR. Det er en funksjonell informasjonskapsel som ikke deler data med tredjeparter, og som ikke brukes til markedsføring.

Informasjonskapselen inneholder kun en tilfeldig besøks-ID og en mapping til hvilken variant brukeren ser på. Den kan ikke leses av JavaScript på siden, sendes bare ved førstepartsnavigering og utløper etter 30 dager. Hvis besøkende avviser informasjonskapsler via informasjonskapselbanneret ditt, blir ikke informasjonskapselen satt. I stedet bruker vi en øktbasert fallback som følger brukeren resten av økten uten å skrive til disk.

Du bør legge til informasjonskapselen i retningslinjene dine for informasjonskapsler som en funksjonell/preferanseinformasjonskapsel. Vi viser også en diskret merknad i Split-Test-administrasjonen som minner deg om dette. Datatilsynet anser sticky A/B-test-informasjonskapsler som funksjonelle informasjonskapsler som ikke krever eksplisitt markedsføringssamtykke.

Bots og søkemotorer

Googlebot, Bingbot og andre crawlere får alltid den samme varianten (den med høyest trafikkvekt i testen). De får ingen informasjonskapsel og er ikke inkludert i statistikken. Dette er verken et SEO-problem eller et problem med cloaking, fordi vi ikke leverer ulikt innhold basert på brukeragent - alle nye besøkende får samme valg som boten. Den kanoniske URL-en er stabil, slik at Google kan rangere siden uten forstyrrelser.

Når testen er fullført

Hvis du har aktivert "Bruk vinneren som ny standard", skjer det automatisk: vinneren aktiveres, taperne tas offline, og du får et varsel. Hvis ikke kan du selv klikke deg inn i testen for å se hvilken variant som vant, og manuelt oppdatere butikken din til den versjonen.

Statistikken bevares uansett hva som skjer. Du kan alltid gå tilbake og se historiske tester og resultatene av dem. Over tid gir dette deg et bibliotek med kunnskap om hva som fungerer for butikken din. Du vil planlegge neste test smartere fordi du forstår kundene dine bedre.

Tips for en god test

• Test én ting om gangen. Endre bare fargen på knappen, eller bare overskriften, eller bare bildet. Hvis du endrer fem ting samtidig og B vinner, vet du ikke hva som gjorde forskjellen.
• Velg endringer som kan utgjøre en reell forskjell. En endring fra grå til mørkegrå knapp flytter sjelden noe. Test store visuelle eller tekstlige endringer først, og nørd ned på detaljene senere når de store tingene er optimalisert.
• La testen kjøre i minst 14 dager. Det er vanligvis forskjell på ukedager og helger, og en hel ukes syklus to ganger gir et mer balansert bilde.
• Ikke avbryt en test for tidlig fordi den "ser bra ut". Dette er den klassiske fellen som fører til falske positive resultater. Hvis du har slått på signifikansstopp, vil systemet automatisk vente til det er nok data.
• Ha en hypotese. Skriv ned hva du forventer FØR testen starter ("Jeg tror den grønne knappen konverterer 5 % bedre fordi den skiller seg mer ut"). Selv om du tar feil, lærer du noe om kundene dine.
• 50/50 er raskest. Hvis du er forsiktig og bare vil eksponere en ny variant for 10 % av trafikken, kan du kjøre 90/10 - men aksepter at det vil ta lengre tid før du har nok data til å trekke en konklusjon.

Konkrete testideer til å begynne med

• For mote/livsstil: Test overskriften "Vårnyheter" mot "Nye varer i butikken" på forsiden, eller test et modellbilde mot et flatlay-bilde.
• For boligartikler: Test "Bestselgere" mot "Siste nytt" som første blokk.
• For spesialvarer: Test om en kort produktbeskrivelse eller en lang teknisk spesifikasjon konverterer best.
• Universell: Test primærfargen på knappen. Den klassiske CRO-testen viser at små fargeendringer ofte endrer konverteringen med 3-10 %.

Kombiner med tidsstyring og AI

Tidsstyring og splitt-testing kan kombineres. Du kan for eksempel lage en Black Friday-forside, legge den ut på nettet den uken, og samtidig splitt-teste to varianter av den (rød helt vs. grønn helt) for å finne ut hva som fungerer best for Black Friday-trafikk. Sesongdata vil være gull verdt neste år.

Hvis du har aktivert AI-kontroll, kan du også opprette tidsbestemte sider direkte ved å chatte med AI-klienten din: "Opprett en Black Friday-landingsside som automatisk går online 28. november og offline 1. desember" eller "Ta sommerlandingssiden min offline nå". Selve splittest-orkestreringen (opprett test, velg varianter, start/stopp) er bevisst ikke automatisert via AI. Dette er valg du må ta selv, slik at ingen starter en test ved et uhell.

Ofte stilte spørsmål

Må jeg være teknisk for å bruke delt testing?

Nei, det trenger du ikke. For sideoppsett (forsider, kategorisider osv.) klikker du deg gjennom sidedesigneren som alltid og kopierer med ett klikk. For stilark må du eller en hjelper kunne skrive litt CSS, men resten av deltestflyten er den samme: velg varianter, start, vent på resultatet.

Hvor lang tid tar det før jeg har en vinner?

Det avhenger av trafikken din. En butikk med 5 000 besøk per dag kan være ferdig på minst 14 dager. En mindre butikk kan trenge 4-8 uker for å samle inn nok data. Hvis du ikke har 5 000 visninger per variant + 100 bestillinger totalt innen en rimelig tidsramme, vil signifikansstoppen aldri utløses, og du må gjøre en manuell vurdering basert på tallene du har. For svært små butikker kan splitt-testing fortsatt være et godt verktøy for å fange opp åpenbare forskjeller (f.eks. en variant som konverterer dobbelt så godt).

Hva skjer hvis jeg sletter en variant midt i en test?

Hvis testen faller under to varianter på grunn av sletting, stoppes den automatisk. Innsamlede data beholdes som historikk på merkede bestillinger, men testen kan ikke fortsette. Vi kårer ikke en "vinner" i denne situasjonen, fordi en test med bare én variant ikke gir mening.

Påvirker det hastigheten til e-handelsbutikken min?

Neppe i det hele tatt. Variantvalget skjer på serveren før HTML-en gjengis, så det er ingen flimmer eller forsinkelse i nettleseren. Den eneste ekstra kostnaden er en rask filkontroll og ett databaseoppslag per besøk under en aktiv test. Når testene ikke kjører, er kostnadene minimale. Cachen er imidlertid deaktivert mens en test kjører, og også for brukere som har deltatt i en test (opptil 30 dager etter at de har blitt tildelt en variant), slik at de alltid får servert den tildelte versjonen uten risiko for at cachen blir forurenset.

Hvordan vet jeg om jeg bør stole på resultatet?

Vinnersannsynligheten er din rettesnor. Under 70 % - testen er for tett, vent på mer data. 70-94 % - det er en klar leder, men det er ikke statistisk sikkert ennå. 95 %+ med minimumskrav oppfylt - du kan trygt velge vinneren som standard. Vi viser fargede søyler og merker for å gjøre det visuelt enkelt å se hvor langt du er kommet.

Kan jeg kjøre flere deltester samtidig?

Ja, så lenge de ikke konkurrerer om det samme målet. Du kan ha en delt test av forsiden OG en delt test av stilarket samtidig - de tester forskjellige ting. Men du kan ikke ha to forskjellige deltester for forsiden kjørende parallelt, fordi det forurenser hverandres data. Systemet håndhever denne regelen automatisk og varsler deg hvis du prøver.

Hva skjer med variantene som taper?

De forsvinner ikke. Hvis du har aktivert automatisk anvendelse av vinner, blir de tatt offline. Men de ligger fortsatt i systemet med innholdet intakt. Du kan alltid legge dem ut på nettet igjen manuelt eller bruke dem som utgangspunkt for en ny variant. Statistikken fra den fullførte testen blir også bevart.

Hva om flere besøkende havner på den ene varianten enn den andre?

Vi sjekker daglig om trafikkfordelingen er skjev. Hvis trafikken er tydelig annerledes fordelt enn vektene dine (f.eks. 70/30 i stedet for 50/50), vil du få en advarsel i admin. Dette skyldes vanligvis en hurtigbufferkonfigurasjon eller et uvanlig botmønster, og resultatet bør tas med forsiktighet inntil problemet er løst.

Når vises inntekt per besøkende (RPV)?

RPV beregnes så snart det er bestillinger for en variant, men vi krever minst 30 bestillinger per variant før vi kan gi et statistisk pålitelig RPV-basert svar. Inntil da kan du fortsatt se råtallene og bruke konverteringsfrekvensen som den primære KPI-en.

Sender delt testing data til Google Analytics?

Nei, det gjør det ikke. All statistikk oppbevares internt i Shoporama. Du trenger ikke å konfigurere noe eksternt for å få tallene.

Koster delt testing ekstra?

Nei, det gjør det ikke. Det er inkludert i Shoporama-løsningen uten ekstra kostnad, ingen begrensning på antall tester, ingen kostnad per besøkende. Du kan kjøre så mange tester du vil, så lenge du vil.

Kom i gang

Finn Design → Delt testing i Shoporama-administratoren, og opprett din første test. Hvis du ikke er sikker på hva du skal teste, kan du begynne med forsiden. Det er den siden de fleste kundene dine ser, og selv små forbedringer her vil gi stort utbytte. Test for eksempel to ulike heltebilder eller to ulike overskrifter opp mot hverandre.

Hvis du har spørsmål, er du velkommen til å kontakte oss på support@shoporama.dk.