Vad är ett split-test?

Ett split-test (även kallat A/B-test) är ett enkelt sätt att ta reda på vad som fungerar bäst i din butik. Du skapar två eller flera varianter av samma sida, t.ex. din förstasida, och låter Shoporama slumpmässigt visa varje besökare en av varianterna. Efter ett tag kan du se vilken variant som genererat mest försäljning, störst varukorg eller högst konvertering. Istället för att gissa vad dina kunder gillar bäst låter du dem rösta med sitt beteende.

Det fina med ett split-test är att det är rättvist. Båda varianterna ses av besökarna vid samma tidpunkt och under samma förutsättningar, så varken väder, säsong eller kampanj påverkar resultatet. När den ena varianten vinner beror det på att den faktiskt presterar bättre.

Ett konkret exempel: en grön "Lägg till i korgen"-knapp som konverterar 8 % bättre än den röda låter lite, men över tusentals besök är det riktiga pengar.

Två typer av split-test i Shoporama

Du kan testa två olika typer av förändringar mot varandra:

1. Sidlayouter. Två eller flera varianter av samma sida i Page Designer. Testa till exempel två olika layouter för framsidan, två versioner av din kategorisida eller två layouter för produktsidor. Du kan ändra bilder, sektioner, text, ordning - allt i siddesignern.
2. Stylesheets. Två eller flera CSS-varianter mot varandra. Testa knappfärger, teckenstorlekar, layoutjusteringar eller hela designstämningar. Om du kan skriva lite CSS (eller har en hjälpreda som kan det) är det här du hittar de överraskande vinnarna. Små visuella förändringar kan ha stor inverkan på konverteringen.

Båda typerna fungerar på samma sätt tekniskt och använder samma statistik. Du bestämmer vilken typ av test som är meningsfullt för det du vill testa.

Tidshantering - även utan split-test

Klassiskt exempel: Black Friday. Istället för att komma ihåg att logga in den 28 november kl. 00.00 och ändra din förstasida skapar du en Black Friday förstasida i förväg och säger till systemet: "Visa den här från den 28 november till den 1 december". Shoporama tar hand om resten.

Det fungerar för alla de stora säsongerna: sommarförsäljning, jul, fars dag, singeldag, alla hjärtans dag. Du kan ha flera tidsinställda varianter samtidigt, t.ex. en vanlig förstasida året runt, en sommarversion juni-augusti och en Black Friday-version för den veckan. Systemet växlar automatiskt mellan dem på rätt datum.

Om du bara vill att varianten ska visas på ett visst datum lämnar du kryssrutan "Online" omarkerad och fyller bara i datumen. Den kommer då att aktiveras automatiskt i intervallet och försvinna igen när slutdatumet har passerats.

Så här kommer du igång

Först behöver du två varianter som du kan testa mot varandra:

1. Gå till Page Designer (eller Stylesheet om du vill testa CSS), leta upp den sida du vill testa och klicka på kopieringsikonen (de två pappersarken) bredvid sidnamnet. Du får en kopia som startar offline så att du kan redigera den på ett säkert sätt.
2. Anpassa kopian. Byt bild, korrigera text, flytta om avsnitt. Det här är vad du vill att dina kunder ska se som ett alternativ till originalet.
3. Lägg upp kopian på nätet. Nu har du två onlineversioner av samma sida. Om du helt enkelt hade lagt ut båda online utan att testa skulle den med högst prioritet vinna och visas för alla. Det är här split-testet kommer in i bilden.
4. Gå till Split test, skapa ett nytt test. Välj vad du vill testa (sidan eller formatmallarna), ge testet ett namn ("Home Hero A vs B"), lägg till de två varianterna, välj trafikfördelningen (börja med 50/50) och klicka på Start. Nu fördelas dina besökare automatiskt och varje användare tilldelas en variant som följer dem vid upprepade besök.

Hur hittar vi vinnaren?

Bakom kulisserna använder Shoporama en modern statistisk metod (Bayesian) för att beräkna hur sannolikt det är att varje variant är den bästa. Du behöver inte förstå matematiken, men till skillnad från klassiska p-värden ger Bayesian dig svar som du faktiskt kan använda: "variant B har 87 % sannolikhet att vara bäst". När den sannolikheten når 95 % och det finns tillräckligt med data utnämner vi varianten till vinnare.

Vi väljer INTE en vinnare för snabbt. Även om variant B ser bättre ut efter två dagar kan det vara en slump eller en kort kampanj som pumpar upp försäljningen. För att undvika falskt positiva vinnare kräver vi:

• Minst 5 000 visningar per variant
• Minst 100 totala beställningar för alla varianter
• Minst 14 dagars varaktighet (så att vi täcker en hel veckocykel två gånger)
• 95 % bayesiansk sannolikhet för att vinnaren är den bästa

Om kriterierna inte uppfylls visar vi dig vilken variant som ligger före just nu, men markerar tydligt att testet inte är avgjort. Så du vet om du behöver vänta eller om resultatet redan är tillförlitligt.

Automatisering - ställ in och glöm det

Du behöver inte sitta och titta på ditt test varje dag. Två oberoende inställningar gör att systemet kan hantera det själv:

• Stoppa automatiskt när det finns en tydlig vinnare. Så snart kriterierna är uppfyllda och en variant har 95%+ sannolikhet stoppas testet automatiskt. Du kommer att meddelas i admin.
• Använd vinnaren som ny standard när testet stoppas. Vinnaren sätts online med hög prioritet och de andra varianterna sätts offline. Du har fortfarande alla kvar i systemet, så du kan alltid rulla tillbaka manuellt från variantlistan. Detta fungerar både när testet stoppas automatiskt OCH när du själv stoppar testet manuellt.

Med båda alternativen aktiverade kan du skapa ett test, klicka på Start och sedan glömma bort det. När det är klart är din butik redan uppgraderad till den vinnande versionen och du får ett meddelande i admin som berättar vad som hände.

Statistiken du får

För varje variant visar Shoporama:

• Visningar - antal sidvisningar av varianten (bots uteslutna)
• Beställningar - antal slutförda beställningar från besökare som tittat på varianten
• Intäkter - totala intäkter per variant inklusive moms och frakt
• Konverteringsgrad - beställningar dividerat med visningar, visas som en procentsats
• Intäkt per besökare (RPV) - det viktigaste nyckeltalet inom e-handel eftersom det fångar både konvertering och korgstorlek i ett och samma tal
• Vinstsannolikhet - Bayesiansk procentsats för att varianten är den bästa, visas som en färgad stapel

Den ledande varianten är markerad med en grön bakgrund och när en vinnare utropas med 95%+ sannolikhet får den ett trofémärke. Siffrorna står stilla mellan uppdateringarna tills nya data kommer in, så du kan tryggt ladda om utan att se procentsatserna hoppa.

Vad händer bakom kulisserna?

När en besökare besöker din butik för första gången under ett pågående test tilldelar vi dem en variant baserat på trafikfördelningen. Tilldelningen lagras i en liten cookie som heter pb_v så att de ser samma variant vid upprepade besök. Detta är avgörande. Om kunden såg variant A på telefonen i går och variant B på den bärbara datorn i dag var det inte längre ett giltigt test.

När kunden lägger en vara i korgen sparar vi varianttilldelningen på själva korgen. När ordern slutförs taggas den med vilken variant kunden såg. Det innebär att vi kan mäta verklig intäkt per variant, inte bara uppskattade klick. Varje natt körs ett skript som uppdaterar statistiken och automatiskt stoppar tester som har uppnått signifikans.

Cookie och GDPR

Du behöver inte göra något för att split testing ska följa GDPR. Det är en funktionell cookie som inte delar data med tredje part och som inte används för marknadsföring.

Cookien innehåller endast ett slumpmässigt besökar-ID och en mappning till vilken variant användaren tittar på. Den kan inte läsas av JavaScript på sidan, skickas endast vid förstapartsnavigering och upphör att gälla efter 30 dagar. Om besökare avvisar cookies via din cookie-banner, sätts inte cookien. Istället använder vi en sessionsbaserad reservlösning som följer användaren under resten av sessionen utan att skriva till disken.

Du bör lägga till cookien i din cookiepolicy som en funktionell/preferenscookie. Vi visar också en diskret anteckning i Split-Test-administrationen som påminner dig om detta. Den danska dataskyddsstyrelsen betraktar sticky A/B-testcookies som funktionella cookies som inte kräver uttryckligt marknadsföringsmedgivande.

Bots och sökmotorer

Googlebot, Bingbot och andra crawlers får alltid samma variant (den med högst trafikvikt i testet). De får ingen cookie och ingår inte i statistiken. Detta är varken cloaking eller ett SEO-problem eftersom vi inte levererar olika innehåll baserat på användaragent - alla nya besökare får samma val som botten. Den kanoniska URL:en är stabil så Google kan ranka sidan utan störningar.

När testet är klart

Om du har aktiverat "Använd vinnaren som ny standard" sker det automatiskt: vinnaren aktiveras, förlorarna tas offline och du får ett meddelande. Om inte, kan du själv klicka in i testet för att se vilken variant som vann och manuellt uppdatera din butik till den versionen.

Statistiken bevaras oavsett vad som händer. Du kan alltid gå tillbaka och se historiska tester och deras resultat. Med tiden ger detta dig ett bibliotek med kunskap om vad som fungerar för din butik. Du kommer att planera nästa test smartare eftersom du förstår dina kunder bättre.

Tips för ett bra test

• Testa EN sak i taget. Ändra bara färgen på knappen, eller bara sidhuvudet, eller bara bilden. Om du ändrar fem saker samtidigt och B vinner, vet du inte vad som gjorde skillnaden.
• Välj förändringar som kan göra verklig skillnad. En ändring från grå till mörkgrå knapp flyttar sällan något. Testa större visuella eller textuella förändringar först och nörda ner dig i detaljerna senare när de stora sakerna är optimerade.
• Låt testet pågå i minst 14 dagar. Det finns vanligtvis en skillnad mellan vardagar och helger, och en hel veckas cykel två gånger ger en mer balanserad bild.
• Avbryt inte ett test i förtid för att det "ser bra ut". Det här är den klassiska fällan som leder till falska positiva resultat. Om du har "significance stopping" aktiverat kommer systemet automatiskt att vänta tills det finns tillräckligt med data.
• Ha en hypotes. Skriv ner vad du förväntar dig INNAN testet startar ("Jag tror att den gröna knappen konverterar 5% bättre eftersom den sticker ut mer"). Även om du har fel kommer du att lära dig något om dina kunder.
• 50/50 är snabbast. Om du är försiktig och bara vill exponera en ny variant för 10% av trafiken, kör 90/10 - men acceptera att det kommer att ta längre tid innan det finns tillräckligt med data för att dra en slutsats.

Konkreta testidéer att börja med

• För mode/livsstil: Testa rubriken "Vårnyheter" mot "Nya varor i butik" på förstasidan, eller testa en modellbild mot en flatlay-bild.
• För heminredning: Testa "Bästsäljare" mot "Senaste nytt" som första block.
• För specialartiklar: Testa om en kort produktbeskrivning eller en lång teknisk specifikation konverterar bäst.
• Universellt: Testa din primära knappfärg. Det klassiska CRO-testet visar att små färgförändringar ofta förändrar konverteringen med 3-10%.

Kombinera med tidsstyrning och AI

Tidshantering och split testing kan kombineras. Du kan till exempel skapa en förstasida för Black Friday, lägga upp den online under den veckan och samtidigt split-testa två varianter av den (red hero vs green hero) för att ta reda på vad som fungerar bäst för Black Friday-trafiken. Säsongsdata kommer att vara guld värt nästa år.

Om du har aktiverat AI-kontroll kan du också skapa tidsinställda sidor direkt genom att chatta med din AI-klient: "Skapa en Black Friday-landningssida som automatiskt går online den 28 november och går offline den 1 december" eller "Ta min sommarlandningssida offline nu". Själva split-test-orkestreringen (skapa test, välj varianter, starta/stoppa) är medvetet inte automatiserad via AI. Det här är val som du måste göra själv så att ingen startar ett test av misstag.

Ofta ställda frågor

Måste jag vara teknisk för att använda split testing?

Nej, det behöver du inte. För sidlayouter (förstasidor, kategorisidor etc.) klickar du dig genom Page Designer som vanligt och kopierar med ett klick. För formatmallar behöver du eller en hjälpreda kunna skriva lite CSS, men resten av split testing-flödet är detsamma: välj varianter, starta, vänta på resultatet.

Hur lång tid tar det innan jag har en vinnare?

Det beror på din trafik. En butik med 5 000 besök per dag kan vara klar på minst 14 dagar. En mindre butik kan behöva 4-8 veckor för att samla in tillräckligt med data. Om du inte har 5 000 visningar per variant + 100 totala beställningar inom en rimlig tidsram kommer signifikansstoppet aldrig att utlösas och du måste göra en manuell bedömning utifrån de siffror du har. För mycket små butiker kan split-testing fortfarande vara ett bra verktyg för att fånga upp uppenbara skillnader (t.ex. en variant som konverterar dubbelt så bra).

Vad händer om jag tar bort en variant mitt i ett test?

Om testet faller under två varianter på grund av radering stoppas det automatiskt. Insamlade data sparas som historik på taggade ordrar, men testet kan inte fortsätta. Vi utser ingen "vinnare" i den här situationen eftersom ett test med bara en variant inte är meningsfullt.

Påverkar det hastigheten i min e-handelsbutik?

Knappast alls. Variantvalet sker på servern innan HTML-texten renderas, så det blir inget flimmer eller fördröjning i webbläsaren. Den enda extra kostnaden är en snabb filkontroll och en databasuppslagning per besök under ett aktivt test. När testerna inte körs är overheadkostnaden minimal. Cachen inaktiveras dock medan ett test pågår och även för användare som har deltagit i ett test (upp till 30 dagar efter att de har tilldelats en variant), så att de alltid får den version de har tilldelats utan risk för att cachen förorenas.

Hur vet jag om jag ska lita på resultatet?

Vinstsannolikheten är din riktlinje. Under 70% - testet är för jämnt, vänta på mer data. 70-94% - det finns en tydlig ledare men ännu inte statistiskt säkerställd. 95%+ med minimikraven uppfyllda - du kan tryggt välja vinnaren som standard. Vi visar färgade staplar och märken för att göra det visuellt enkelt att se hur långt du har kommit.

Kan jag köra flera splittester samtidigt?

Ja, så länge de inte konkurrerar om samma mål. Du kan ha ett splittest för förstasidan OCH ett splittest för stylesheet samtidigt - de testar olika saker. Men du kan inte ha två olika split-test för framsidan som körs parallellt eftersom det förorenar varandras data. Systemet upprätthåller automatiskt regeln och meddelar dig om du försöker.

Vad händer med de varianter som förlorar?

De försvinner inte. Om du har aktiverat automatisk tillämpning av vinnare tas de offline. Men de finns fortfarande kvar i systemet med sitt innehåll intakt. Du kan alltid manuellt lägga upp dem igen eller använda dem som utgångspunkt för en ny variant. Statistiken från det avslutade testet bevaras också.

Vad händer om fler besökare hamnar på den ena varianten än på den andra?

Vi kontrollerar dagligen för skev trafikfördelning. Om trafiken är tydligt annorlunda fördelad än dina vikter (t.ex. 70/30 istället för 50/50) får du en varning i admin. Detta beror vanligtvis på en cache-konfiguration eller ett ovanligt bot-mönster och resultatet bör tas med försiktighet tills problemet är löst.

När visas intäkt per besökare (RPV)?

RPV beräknas så snart det finns beställningar för en variant, men vi kräver minst 30 beställningar per variant innan vi kan ge ett statistiskt tillförlitligt RPV-baserat svar. Fram till dess kan du fortfarande se de råa siffrorna och använda konverteringsfrekvensen som primär KPI.

Skickar split testing data till Google Analytics?

Nej, det gör det inte. All statistik hålls internt i Shoporama. Du behöver inte konfigurera något externt för att få siffrorna.

Kostar split testing extra?

Nej, det gör det inte. Det ingår i din Shoporama-lösning utan extra kostnad, ingen begränsning av antalet tester, ingen avgift per besökare. Du kan köra så många tester som du vill så länge du vill.

Kom igång att testa

Hitta Design → Delad testning i din Shoporama-administratör och skapa ditt första test. Om du inte är säker på vad du ska testa kan du börja med din förstasida. Det är den sida som de flesta av dina kunder ser, och även små förbättringar här kommer att ge stor utdelning. Testa till exempel två olika hjältebilder eller två olika rubriker mot varandra.

Om du har några frågor är du välkommen att kontakta oss på support@shoporama.dk.