Vad är ett split-test?

Ett split-test (även kallat A/B-test) är ett enkelt sätt att ta reda på vad som fungerar bäst i din webbutik. Du skapar två eller flera varianter av samma sida, till exempel din startsida, och låter Shoporama visa varje besökare en av varianterna slumpmässigt. Efter en tid kan du se vilken variant som genererade flest försäljningar, störst varukorg eller högst konvertering. Istället för att gissa vad dina kunder gillar bäst låter du dem rösta med sitt beteende.

Det smarta med ett split-test är att det är rättvist. Båda varianterna visas för besökarna samtidigt och under samma förhållanden, så varken vädret, säsongen eller en kampanj påverkar resultatet på ett snedvridet sätt. När en variant vinner är det för att den faktiskt presterar bättre.

Ett konkret exempel: en grön ”Lägg i varukorgen”-knapp som konverterar 8 % bättre än den röda låter kanske inte av mycket, men över tusentals besök blir det riktiga pengar.

Tre typer av split-tester i Shoporama

Du kan testa tre olika typer av ändringar mot varandra:

1. Sidlayouter. Två eller flera varianter av samma sida i Sidedesignern. Testa till exempel två olika startsidlayouter, två versioner av din kategorisida eller två olika uppbyggnader av produktsidor. Du kan ändra bilder, avsnitt, text, ordning – allt som finns i Sidedesignern.
2. Stylesheets. Två eller flera CSS-varianter mot varandra. Testa knappfärger, teckenstorlekar, layoutjusteringar eller hela designstilarter. Om du kan skriva lite CSS (eller har någon som kan det) är det här du hittar de överraskande vinnarna. Små visuella förändringar kan ha stor effekt på konverteringen.
3. Hela teman. A/B-testa två av dina egna teman mot varandra – från HTML-struktur till JavaScript och CSS sammantaget. Det är den mest ingående formen av test, där du jämför två fundamentalt olika affärsmodeller (t.ex. en konventionell webbshop mot ett flöde på en enda sida). Kräver pro-abonnemang och Smarty 4. Om 80 % av dina optimeringar ändå sker direkt i temafilerna är det här du mäter om de fungerar.

Alla tre typerna fungerar på samma sätt tekniskt sett och använder samma statistik. Du bestämmer själv vilken typ av test som är lämpligast för det du vill testa.

Tidsstyrning – även utan split-test

Ett klassiskt exempel: Black Friday. Istället för att behöva komma ihåg att logga in den 28 november kl. 00:00 och byta ut din startsida, skapar du i förväg en Black Friday-startsida och säger till systemet: ”Visa den här från den 28 november till den 1 december”. Resten sköter Shoporama själv.

Det fungerar för alla stora säsonger: sommarrean, jul, fars dag, Singles Day, alla hjärtans dag. Du kan ha flera tidsstyrda varianter samtidigt, t.ex. en vanlig startsida året runt, en sommarversion från juni till augusti och en Black Friday-version under den veckan. Systemet växlar automatiskt mellan dem på rätt datum.

Om du bara vill att varianten ska visas på ett visst datum, lämna kryssrutan ”Online” avmarkerad och fyll endast i datumen. Då aktiveras den automatiskt under det angivna tidsintervallet och försvinner igen när slutdatumet har passerat.

Så här kommer du igång

Först måste du ha två varianter att testa mot varandra:

1. Gå till Siddesigner (eller Stylesheet om du vill testa CSS), hitta den sida du vill testa och klicka på kopieringsikonen (de två pappersarken) bredvid sidans namn. Du får en kopia som startar offline, så att du tryggt kan göra ändringar i den.
2. Anpassa kopian. Byt bild, redigera text, ordna om avsnitt. Det är detta som dina kunder ska se som ett alternativ till originalet.
3. Publicera kopian online. Nu har du två onlinevarianter av samma sida. Om du bara hade publicerat båda online utan att testa dem skulle den med högst prioritet vinna och visas för alla. Det är här split-testet kommer in.
4. Gå till Split-test och skapa ett nytt test. Välj vad du vill testa (sidan eller stilmallar), ge testet ett namn (”Forsida Hero A vs B”), lägg till de två varianterna, välj trafikfördelning (börja med 50/50) och klicka på Start. Nu fördelas dina besökare automatiskt, och varje användare tilldelas en variant som följer dem vid återkommande besök.

Hur hittar vi vinnaren?

Bakom kulisserna använder Shoporama en modern statistisk metod (Bayesiansk) för att beräkna hur sannolikt det är att varje variant är den bästa. Du behöver inte förstå matematiken, men till skillnad från klassiska p-värden ger Bayesianska metoder dig svar som du faktiskt kan använda: ”variant B har 87 % sannolikhet att vara bäst”. När sannolikheten når 95 % och det finns tillräckligt med data utser vi varianten till vinnare.

Vi utser INTE en vinnare för tidigt. Även om variant B ser bättre ut efter två dagar kan det vara slumpen eller en kort kampanj som driver upp försäljningen. För att undvika falska positiva vinnare kräver vi:

• Minst 1 000 besökare per variant
• Minst 100 beställningar totalt över alla varianter
• Minst 14 dagars varaktighet (så att vi täcker en hel veckocykel två gånger)
• 95 % bayesiansk sannolikhet för att vinnaren är bäst

Om kriterierna inte är uppfyllda visar vi vilken variant som ligger i täten just nu, men markerar tydligt att testet inte är avgjort. Då vet du om du ska vänta eller om resultatet redan är tillförlitligt.

Automatisering – ställ in och glöm bort

Du behöver inte sitta och hålla koll på ditt test varje dag. Två oberoende inställningar gör att systemet kan sköta det själv:

• Avsluta automatiskt när det finns en tydlig vinnare. Så snart kriterierna är uppfyllda och en variant har 95 %+ sannolikhet avslutas testet automatiskt. Du får ett meddelande i admin.
• Använd vinnaren som ny standard när testet avslutas. Vinnaren läggs online med hög prioritet, och de övriga varianterna tas offline. Du har fortfarande alla kvar i systemet, så du kan alltid återgå manuellt från variantlistan. Det fungerar både vid automatisk avslutning OCH när du själv avslutar testet manuellt.

Med båda inställningarna aktiverade kan du skapa ett test, klicka på Start och sedan glömma bort det. När testet väl är avslutat har din butik redan uppgraderats till den vinnande versionen, och du får ett meddelande i admin som informerar om vad som har hänt.

Statistiken du får

För varje variant visar Shoporama:

• Besökare — antal unika besökare som såg varianten (bortsett från bots)
• Beställningar — antal genomförda beställningar från besökare som såg varianten
• Omsättning — total omsättning per variant inkl. moms och frakt
• Konverteringsgrad — antal beställningar dividerat med antalet besökare, uttryckt i procent
• Omsättning per besökare (RPV) — den viktigaste KPI:n inom e-handel eftersom den fångar både konvertering och varukorgsstorlek i ett enda tal
• Vinnarsannolikhet — Bayesiansk sannolikhet för att varianten är den bästa, visad som en färgad stapel

Den ledande varianten markeras med grön bakgrund, och när en vinnare utses med 95 %+ sannolikhet får den en trofémarkering. Siffrorna förblir oförändrade mellan uppdateringarna tills nya data kommer in, så du kan tryggt ladda om sidan utan att procenttalen hoppar.

Vad händer bakom kulisserna?

När en besökare besöker din butik för första gången under ett pågående test tilldelar vi dem en variant baserat på trafikfördelningen. Tilldelningen sparas i en liten cookie som heter pb_v så att de ser samma variant vid återkommande besök. Det är avgörande. Om kunden såg variant A på mobilen igår och variant B på den bärbara datorn idag, skulle det inte längre vara ett giltigt test.

När kunden lägger en vara i varukorgen sparar vi varianttilldelningen i själva varukorgen. När beställningen genomförs märks den med vilken variant kunden såg. Det innebär att vi kan mäta den faktiska omsättningen per variant, inte bara uppskattade klick. Varje natt körs ett skript som uppdaterar statistiken och automatiskt avslutar tester som har nått signifikans.

Cookie och GDPR

Du behöver inte göra något för att split-testet ska följa GDPR. Det är en funktionell cookie som inte delar data med tredje part och inte används för marknadsföring.

Cookien innehåller endast ett slumpmässigt besökar-ID och en koppling till vilken variant användaren ser. Den kan inte läsas av JavaScript på sidan, skickas endast vid förstapartsnavigering och löper ut efter 30 dagar. Om besökaren avvisar cookies via din cookie-banner sätts inte cookien. Istället använder vi en sessionsbaserad fallback som följer användaren resten av sessionen utan att skriva till hårddisken.

Du bör lägga till cookien i din cookiepolicy som en funktionell cookie eller preferenscookie. Vi visar också själva en diskret påminnelse i Split-test-administrationen som påminner dig om detta. Datatilsynet betraktar sticky A/B-test-cookies som funktionella cookies som inte kräver uttryckligt marknadsföringssamtycke.

Bots och sökmotorer

Googlebot, Bingbot och andra sökrobotar får alltid samma variant (den med högst trafikvikt i testet). De får ingen cookie och ingår inte i statistiken. Det är varken cloaking eller ett SEO-problem eftersom vi inte levererar olika innehåll baserat på user-agent – alla nya besökare får samma val som boten. Den kanoniska URL:en är stabil, så Google kan rangordna sidan utan störningar.

När testet är klart

Om du har aktiverat ”Använd vinnaren som ny standard” sker det automatiskt: vinnaren aktiveras, förlorarna tas ur drift och du får ett meddelande. Om inte kan du själv klicka in på testet och se vilken variant som vann, och manuellt uppdatera din butik till den versionen.

Statistiken sparas oavsett vad som händer. Du kan alltid gå tillbaka och se tidigare tester och deras resultat. Med tiden ger det dig en kunskapsbank om vad som fungerar just för din butik. Du kan planera nästa test på ett smartare sätt eftersom du har fått en bättre förståelse för dina kunder.

Tips för ett bra test

• Testa EN sak i taget. Ändra bara knappens färg, eller bara rubriken, eller bara bilden. Om du ändrar fem saker på en gång och alternativ B vinner, vet du inte vad som gjorde skillnaden.
• Välj förändringar som kan göra en verklig skillnad. En förändring från grå till mörkgrå knapp påverkar sällan resultatet. Testa större visuella eller textmässiga förändringar först, och finjustera detaljerna senare när de stora delarna är optimerade.
• Låt testet pågå i minst 14 dagar. Det är vanligtvis skillnad mellan vardagar och helger, och en hel veckas cykel två gånger ger en mer balanserad bild.
• Avbryt inte ett test i förtid bara för att det ”ser bra ut”. Det är den klassiska fällan som ger falska positiva resultat. Om du har aktiverat signifikansstopp väntar systemet automatiskt tills det finns tillräckligt med data.
• Ha en hypotes. Skriv ner vad du förväntar dig INNAN testet startar (”jag tror att den gröna knappen konverterar 5 % bättre eftersom den sticker ut mer”). Även om du har fel lär du dig något om dina kunder.
• 50/50 går snabbast. Om du är försiktig och bara vill exponera en ny variant för 10 % av trafiken, kör då 90/10 – men acceptera att det tar längre tid innan det finns tillräckligt med data för att dra en slutsats.

Konkreta testidéer att börja med

• För modekläder/livsstil: Testa rubriken ”Vårnyheter” mot ”Nya varor i butiken” på din startsida, eller testa en modellbild mot en flat-lay-bild.
• För heminredning: Testa avsnittet ”Bästsäljare” mot ”Senaste produkter” som första blocket.
• För specialvaror: Testa om en kort produktbeskrivning eller en lång teknisk specifikation konverterar bäst.
• Allmänt: Testa färgen på din huvudknapp. Klassiska CRO-tester visar att små färgförändringar ofta påverkar konverteringen med 3–10 %.

Kombinera med tidsstyrning och AI

Tidsstyrning och split-test kan kombineras. Du kan till exempel skapa en Black Friday-försida, lägga upp den online under den veckan och samtidigt split-testa två varianter av den (röd hero vs grön hero) för att ta reda på vad som fungerar bäst just för Black Friday-trafiken. Säsongsdata blir guld värda nästa år.

Om du har AI-styrningen aktiverad kan du också skapa tidsstyrda sidor direkt genom att chatta med din AI-klient: ”Skapa en Black Friday-försida som automatiskt går online den 28 november och stängs av den 1 december” eller ”Ta min sommarförsida offline nu”. Själva genomförandet av split-testen (skapa test, välja varianter, starta/stoppa) är medvetet inte automatiserat via AI. Det är val du måste göra själv så att ingen råkar starta ett oavsiktligt test.

Vanliga frågor

Måste jag ha tekniska kunskaper för att använda split-test?

Nej. För sidlayouter (försidor, kategorisidor osv.) klickar du dig igenom Siddesignern precis som vanligt och kopierar med ett enda klick. För stilmallar måste du eller någon som hjälper dig kunna skriva lite CSS, men resten av split-test-flödet är detsamma: välj varianter, starta, vänta på resultatet.

Hur lång tid tar det innan jag har en vinnare?

Det beror på din trafik. En webbutik med 5 000 besök per dag kan vara klar på minst 14 dagar. En mindre webbutik kan behöva 4–8 veckor för att samla in tillräckligt med data. Om du inte har 1 000 besökare per variant + totalt 100 beställningar inom en rimlig tidsram kommer signifikansstoppet aldrig att utlösas, och du måste då göra en manuell bedömning utifrån de siffror du har. För mycket små butiker kan split-test ändå vara ett bra verktyg för att upptäcka tydliga skillnader (t.ex. en variant som konverterar dubbelt så bra).

Vad händer om jag tar bort en variant mitt i ett test?

Om testet efter en radering endast omfattar två varianter avbryts det automatiskt. Insamlade data sparas som historik för taggade beställningar, men testet kan inte fortsätta. Vi utser ingen ”vinnare” i den situationen, eftersom ett test med endast en variant inte är meningsfullt.

Påverkar det min webbutiks hastighet?

Nästan inte alls. Valet av variant sker på servern innan HTML-koden renderas, så det uppstår varken flimmer eller fördröjning i webbläsaren. Den enda extra kostnaden är en snabb filkontroll och en databasuppslagning per besök under ett aktivt test. När inga tester körs är belastningen minimal. Cachen inaktiveras dock medan ett test pågår, och även för användare som har deltagit i ett test (upp till 30 dagar efter att de har tilldelats en variant), så att de alltid får den tilldelade versionen utan risk för cacheförorening.

Hur vet jag om jag kan lita på resultatet?

Sannolikheten för att vinna är din riktlinje. Under 70 % — testet är för jämnt, vänta på mer data. 70–94 % – det finns en tydlig ledare, men resultatet är ännu inte statistiskt säkert. 95 %+ och minimikraven uppfyllda – du kan tryggt välja vinnaren som standard. Vi visar färgade staplar och märken som gör det visuellt enkelt att se hur långt du har kommit.

Kan jag köra flera split-tester samtidigt?

Ja, så länge de inte konkurrerar om samma målgrupp. Du kan ha en split-test på startsidan OCH en split-test av stylesheets samtidigt – de testar olika saker. Men du kan inte ha två olika split-tester av startsidan igång parallellt, eftersom det förvränger varandras data. Systemet tillämpar regeln automatiskt och meddelar dig om du försöker.

Vad händer med de varianter som förlorar?

De försvinner inte. Om du har aktiverat ”auto-apply-vinder” tas de ur drift. Men de finns fortfarande kvar i systemet med sitt innehåll intakt. Du kan alltid manuellt sätta dem online igen, eller använda dem som utgångspunkt för en ny variant. Statistiken från det avslutade testet bevaras också.

Vad händer om fler besökare hamnar på den ena varianten än den andra?

Vi kontrollerar dagligen om trafikfördelningen är skev. Om trafiken är tydligt annorlunda fördelad än dina viktningar (t.ex. 70/30 istället för 50/50) får du en varning i admin. Det beror vanligtvis på en cachekonfiguration eller ett ovanligt botmönster, och resultatet bör tolkas med försiktighet tills problemet är löst.

När visas omsättning per besökare (RPV)?

RPV beräknas så snart det finns beställningar på en variant, men vi kräver minst 30 beställningar per variant innan vi kan ge ett statistiskt tillförlitligt RPV-baserat svar. Fram till dess kan du fortfarande se de råa siffrorna och använda konverteringsgraden som primär KPI.

Vad är skillnaden mellan att split-testa stylesheet och tema?

Stylesheet-test är för ren CSS – knappfärger, teckenstorlekar, avstånd. Det går snabbt att sätta upp, och du behöver inte ett eget tema. Tematest går ett steg längre: du jämför två av dina egna teman i sin helhet, inklusive HTML-struktur, JavaScript-beteende, sektionsuppbyggnad och anpassade funktioner. Om du redan skräddarsyr ditt tema och vill mäta om en större ombyggnad lönar sig, är tematestet svaret. Om du bara vill testa en knappfärg är stylesheet-testet enklare.

Varför kräver tematestet ett Pro-abonnemang?

Tematestet förutsätter att du har egna privata teman i butiken – det är en Pro-funktion i sig. Sidlayouter och stylesheet-test är gratis tillgängliga för alla, eftersom de fungerar på alla Shoporama-teman direkt. Tematest är för butiker som har investerat i anpassad design och vill mäta effekten på ett datadrivet sätt.

Varför kräver tematestet Smarty 4?

Det är en teknisk förutsättning för att två olika teman ska kunna visas sida vid sida i samma butik utan att deras mallcache kraschar. Smarty 4 isolerar automatiskt kompilerade mallar per tema; Smarty 2 gör inte det. Om din webbutik kör Smarty 2 kan du byta till Smarty 4 under temainställningarna och därmed aktivera tematestningen.

Skickas data från split-testet till Google Analytics?

Nej. All statistik lagras internt i Shoporama. Du behöver inte konfigurera något externt för att få siffrorna.

Kostar split-testen extra?

Nej. Det ingår i din Shoporama-lösning utan extra kostnad, utan begränsning av antalet tester och utan avgift per besökare. Du kan köra så många tester du vill, så länge du vill.

Kom igång

Gå till Design → Split-test i din Shoporama-admin och skapa ditt första test. Om du är osäker på vad du ska testa, börja med din startsida. Det är den sida som de flesta av dina kunder ser, och även små förbättringar här ger stor avkastning. Testa till exempel två olika hero-bilder eller två olika rubriker mot varandra.

Om du har frågor är du välkommen att kontakta oss på support@shoporama.dk.