Är du förvirrad över om du ska utföra delad testning eller multivariattestning på dina webbsidor, e-postmeddelanden och prenumerationer? Det är ett vanligt problem när du kommer igång med konverteringsoptimering.
De flesta råd om konverteringsoptimering säger att du ska testa, testa igen och fortsätta testa. Men det är inte alltid lätt att förstå vilka tester du ska köra och när du ska köra dem.
I den här guiden kommer vi att jämföra delad testning med multivariattestning. I slutet kommer du att känna till för- och nackdelarna med varje typ, några viktiga misstag att undvika och vilken typ av test du ska använda och när. Sedan kan du starta din testplan för att få fler konverteringar från din marknadsföringsstrategi.
Definitioner av delad testning vs. multivariat testning
Låt oss börja med att definiera delad testning och multivariattestning. Vi kommer att förklara dem mer i detalj när vi går igenom guiden, men dessa korta definitioner är en utgångspunkt.
Splittestning innebär att testa en kontroll med en variation för ett enskilt element. Kontroll är det ursprungliga elementet och variation är det som förändras. Med andra ord, ändra ett element på en sida och se hur resultaten på den sidan skiljer sig från originalversionen.
Multivariattestning är att testa flera kombinationer av element samtidigt. Med andra ord, du ändrar flera element på en sida och en version kan se radikalt annorlunda ut från en annan.
Förstå Split Testing
Splittestning kallas även A/B-testning. Som vi sa ovan är det där du tar ett element på en webbsida som en uppmaningsknapp, ändrar det och sedan jämför resultaten för varje version av sidan.
Den gör detta genom att dela upp din trafik jämnt, så att 50 % av dina besökare ser den ursprungliga versionen av sidan och de andra 50 % ser den nya.
En annan version av splittestet är A/B/n-testning. Det är där du testar fler varianter av ett enskilt element och delar trafiken jämnt mellan dem. Så om du ville testa fyra olika versioner av en uppmaningsknapp, skulle dina besökare delas upp i fyra, där 25 % av det totala antalet ser varje variant.
För- och nackdelar med delad testning
Det finns ett par fördelar med att använda delad testning som ett konverteringsoptimeringsverktyg. För det första fungerar delad testning bra även på webbplatser med låg trafik. Därför, även om du precis har börjat bygga upp din verksamhet, kan du använda splittestning.
För det andra ger delade tester tillförlitliga data eftersom variablerna är små. Med andra ord, eftersom du bara byter ett element i taget får du resultat snabbt och de är lätta att mäta.
Men det finns också en nackdel med att använda A/B-tester: du kan inte veta hur olika element på en sida interagerar. Du kan välja att ändra texten på din uppmaningsknapp, men det kan finnas något annat på den sidan som påverkar hur folk svarar. Delad testning tillåter dig inte att mäta det.
Misstag att undvika med Split Testing
Om du ska köra ett effektivt delat test finns det några misstag du bör undvika.
En av dessa är provar fel sidor. Om det inte finns någon verklig möjlighet till förbättring eller om ingen besöker en viss sida, så är det ingen idé att sätta upp ett delat test. På samma sätt, om att ändra ett sidelement inte kommer att göra någon skillnad för det slutliga resultatet, varför ändra det?
Men om du har möjlighet att göra en förändring som tar dig närmare att nå dina affärsmål är det när du kör ett delat test.
Det är också lämpligt att undvika provar för många varianter. Även om du i teorin skulle kunna göra detta, skulle det i praktiken göra testningen för tidskrävande. De flesta A/B/n-tester fungerar med två till fyra varianter.
Ett annat stort misstag är inte bildar en adekvat hypotes innan du börjar testa. Vad är en hypotes? Det är en kvalificerad gissning om vad ett problem är och hur du kan lösa det, baserat på den data du har.
Genom att skapa en hypotes kan du ta reda på vad du vill testa och varför, och fundera på hur du ska mäta dina resultat.
Digital Marketer har en bra mall för att skapa en hypotes:
För vi observerar [A] och feedback [B]vi tror att förändras [C] för besökare [D] ska göra [E] inträffa. Vi kommer att veta detta när vi ses [F] och få [G].
Så här skulle det se ut i en verklig situation:
Eftersom vi såg en låg konverteringsfrekvens och besökare rapporterade att de inte kunde hitta uppdateringsknappen, tror vi att om knappen blir mer framträdande för alla besökare kommer uppdateringsregistreringarna att öka. Vi får veta när vi ser en ökning av uppgraderingsregistreringar under en testperiod på två veckor och får enkätdata som visar att folk nu kan se knappen.
Ögonblick är ett annat vanligt problem med splittestning. Det finns två aspekter på detta:
- Kör ditt test för kort tid. Om du inte har gjort testet tillräckligt länge är resultaten otillförlitliga och du kan inte dra säkra slutsatser. Digital Marketer har ett diagram som guidar dig till den idealiska längden för ett delat test.
- Körde ett delat test vid fel tidpunkt. Till exempel, om du vanligtvis får ökad trafik till din e-handelsbutik före en storhelg, kan du inte jämföra resultaten med en testkörning vid en annan tid på året. Du måste jämföra like med like för att kunna lita på testresultaten.
Om du vill veta om dina delade testresultat är tillförlitliga kan du kontrollera statistisk signifikans. Det är ett fint sätt att säga att du ser till att siffrorna går ihop, och VWO har ett verktyg som hjälper dig att göra just det.
Det är också viktigt att vara ganska säker på att alla förändringar kommer att ge resultat. Det kallas för förtroendebetyg och branschstandarden är 95 %. Det här verktyget från Get Data Driven hjälper dig att fastställa konfidenspoängen för ditt delade test.
Förstå multivariat testning
Som vi sa, multivariat testning låter dig testa flera varianter på en webbsida samtidigt. Enligt Kissmetrics leder testning med fyra varianter till förbättringar 27 % av gångerna, jämfört med bara 14 % med delad testning.
Det finns flera typer av multivariata test:
- Fullständigt faktortest, som testar alla möjliga kombinationer av element tills det finns en klar vinnare. Detta kräver mycket trafik och trafiken är jämnt fördelad mellan variationerna.
- Fraktionellt faktoriellt test (ofta använder Taguchi-metoden), som använder en samplingsmetod för att testa kombinationer och statistisk analys för att avgöra vinnaren. Detta innebär dock att du delvis litar på antaganden, snarare än data.
- adaptiv testningsom använder livedata om besökarnas handlingar för att avgöra den vinnande kombinationen.
För- och nackdelar med multivariat testning
Som ett konverteringsoptimeringsverktyg erbjuder multivariattestning flera fördelar. För det första är det snabbare än att köra en serie delade tester eftersom du kan ändra och testa flera sidelement samtidigt.
För det andra hjälper det dig att se hur olika element på en sida interagerar så att du kan utvärdera den övergripande effekten. Detta kan vara bra när du designar om en sida, eftersom du kan testa rubriker, sidkopia, knappar, bilder och formulär på en gång (även om det, som du ser nedan, har konsekvenser).
Och du kan också enkelt upptäcka vilka element som bidrog mest till eventuella ökningar av konverteringar.
Men det finns också några nackdelar med multivariat testning. Det kommer till exempel inte att fungera för webbplatser med låg trafik på grund av antalet kombinationer du försöker. Du måste ha minst 100 000 besökare i månaden för att överväga det.
Det gäller även enskilda sidor. Om en sida inte får tillräckligt med trafik är det ingen idé att köra ett multivariattest på den.
Ju fler kombinationer av element du provar, desto längre tid tar testet. Om du bestämmer dig för att testa tre element, som titeln, uppmaningsknappen och bilden, ger det dig redan åtta kombinationer att prova. Testar du fler element ökar även testtiden och trafiken som behövs.
Fel att undvika med multivariat testning
Som med delad testning, använd inte multivariat testning utan hypotes. Du kanske testar flera objekt, men du måste fortfarande ha en uppfattning om de resultat du förväntar dig.
Som nämnts ovan, undvik testwebbplatser som inte har tillräckligt med trafik för att göra multivariattestning värt besväret. På sådana platser kan det ta lång tid att få tillräcklig tillförlitlig statistik från multivariattestning.
Kör inte ditt test för för lite tid. Ju fler varianter du har i ditt test, desto längre tid tar det och desto mer trafik behöver du. Använd denna VWO-längdskalkylator för att räkna ut.
Den kalkylatorn hjälper dig också att avgöra om din provstorlek är tillräckligt stor, eftersom att inte testa med tillräckligt mycket trafik är ett annat testfel med flera varianter.
Det är viktigt att välja element som sannolikt har en effekt på konverteringar. Som nämnts med delad testning är det ingen idé att testa något obetydligt.
Slutligen, använd inte multivariattestning för att testa enskilda element. Det är bättre att använda ett A/B-test för det.
Vilken typ av test ska jag använda och när?
Så vilken är den bästa typen av test att använda? Den goda nyheten är att du inte behöver välja mellan multivariattestning och splittestning; du kan använda båda. Splittestning går snabbt och du kan göra större vinster när du använder den. Multivariattestning låter dig få en överblick över flera förändringar, sedan kan du använda splittestning för att justera enskilda element.
ConversionXL rekommenderar att du använder delad testning för att hitta den bästa layouten för en sida och multivariattestning för att finjustera interaktionen mellan olika sidelement.
Oavsett vilken typ av test du använder, vill du följa denna testcykel:
- Identifiera problemet baserat på data.
- Formulera en hypotes om vad som orsakar problemet.
- Tänk på en möjlig lösning.
- Testa med delad testning, multivariattestning eller båda.
- Analysera och se vad dina resultat är.
- Starta cykeln igen.
Verktyg för A/B och multivariat testning
Slutligen, här är en snabb lista över A/B- och multivariattestverktyg som du kan använda:
Och naturligtvis kan du dela testa dina OptinMonster-alternativ för att se vilken version som är mest effektiv.
Nu vet du skillnaden mellan delad testning och multivariattestning, så du kan börja med dessa tester som ett konverteringsoptimeringsverktyg. Du kan också använda delad testning som en del av e-postmarknadsföring. Glöm inte att följa oss på Twitter och Facebook för fler gratis guider.
