Multivariat vs A/B-testning: Skillnaden förklaras
Trustmary teamSenast redigerad: November 3rd, 2022
Vill du ha ett snabbt svar om den ultimata skillnaden mellan A/B-testning och multivariat testning?
Jag ska ge dig svaret på en gång:
- A/B-testning är testning mellan två versioner av din sida (vanligtvis).
- Multivariat testning innebär att man testar flera variabler och deras kombinationer.
Om detta inte riktigt tillfredsställde din hunger efter information är det ingen fara. Jag har en mer ingående jämförelse nedan.
A/B-testning förklaras
A/B-testning är en strategi för optimering av konverteringsgraden där du försöker ta reda på vilken av de två versionerna av din webbplats som fungerar bäst = konverterar mer.
I allmänhet omfattar ett A/B-test två versioner av din webbplats eller ett webbplatselement. Dessa versioner bör bara ha en enda skillnad för att vi ska kunna se hur denna enda faktor påverkar konverteringsgraden.
I praktiken innebär detta att du har din ursprungliga webbplats, skapar en ny version av den med en liten ändring och ställer dig själv frågan: fungerar den nya versionen bättre än den nuvarande versionen?
Användningsfallet kan vara
- Vilken bild fungerar bäst
- Vilken placering av CTA-knappen fungerar bäst
- Vilken recension fungerar bäst
- Och andra detaljer av det slaget
Om du startar ett A/B-test med för många sidelement kan du inte vara säker på vilka av dem som påverkade resultatet av experimentet. Metodiken är helt enkelt inte tillräckligt flexibel för det.
Definition av multivariat testning
Multivariat testning (MVT-testning) är A/B-testning på steroider.
I stället för två variabler kan du undersöka olika sidelement och deras kombinationer!
Du kan till exempel ta tre olika bilder och tre olika typsnitt och skapa en separat sidversion för varje kombination, vilket ger nio olika versioner av sidan.
Med den här metoden lär du dig hur variablerna interagerar med varandra, dvs. vilka element som fungerar bäst tillsammans.
Men gör inte för mycket, annars blir testet för tungt och tar för lång tid.
Faktum är att multivariata tester är ganska komplexa och tar tid att genomföra, vilket är anledningen till att du bör fokusera på helheten.
Välj element som verkligen gör skillnad för din konverteringsgrad, snarare än att fixa mindre detaljer (lämna det till A/B-testarna).
Användningsområden för multivariat testning:
- När du vill göra radikala förändringar
- Att se hur olika element fungerar tillsammans
- När du har flera förbättringsidéer och vill testa dem alla samtidigt.
Vad är skillnaden mellan de två?
Tekniskt sett är multivariat testning en “underkategori” av A/B-testning.
En gång till: Skillnaden är att medan A/B-tester vanligtvis fokuserar på en variabel åt gången kan multivariata tester (som namnet antyder) användas för att testa flera variabler samtidigt.
Uppmärksamhet! I exempelbilden nedan visas 9 olika versioner av en webbplats, men det betyder inte att den måste vara exakt likadan i ditt test.
Ta en titt på tabellen för en mer detaljerad jämförelse.
| A/B | MVT |
| Testa två variabler för ett element | Testa kombinationer av flera variabler av flera element. |
| Bra för att testa detaljer | Bra för större radikala förändringar |
| Berättar vilken version som är bäst | Berättar vilken kombination av element som är bäst. |
| Kan användas för webbplatser som har mindre trafik | Kräver mycket trafik som ska delas upp på flera stickprov. |
| Resultaten är lätta att tolka | Det kan vara svårt att analysera resultaten |
| Resultaten är tydliga och specifika | Resultaten kan vara tvetydiga och testet kan inte ge meningsfulla resultat. |
| Snabbt att installera och köra | Det är relativt svårt att sätta upp och tar längre tid att genomföra. |
| Relativt enkel metodik | Komplex metodik |
| Lämplig för nybörjare | Bättre för avancerade optimerare |
Likheter mellan de två
Nu ska vi se vad dessa två har gemensamt!
Likheterna har mer att göra med planeringsprocessen, hur man får de bästa resultaten och hur man reagerar på dem.
- Innan du startar ett test ska du analysera problemet
- Bestäm ett konverteringsmål
- Utarbeta en hypotes eller flera hypoteser.
- Ställ noggrant in testet så att det mäter det du vill att det ska mäta.
- Få tillräckligt med trafik till varje testsida
- Resultaten måste vara statistiskt signifikanta för att vara meningsfulla.
- Efter att ha analyserat resultaten och bekräftat att de är korrekta, genomföra förändringar.
- Båda testerna kan utföras med hjälp av programvaruverktyg.
- Framgångsrika tester hjälper dig att få fler konverteringar och mer försäljning.
- Om du inte märker någon större förändring i testresultaten bör du rikta din uppmärksamhet mot andra saker än din webbplats.
Vad sägs om att använda dem samtidigt?
Som du kan se har båda testmetoderna sina egna för- och nackdelar. Du kanske undrar om du kan utnyttja båda samtidigt.
Det rekommenderas inte att köra flera tester samtidigt för samma sida. Det är extremt svårt att fördela trafiken jämnt mellan alla olika versioner av sidan, och det skulle ta lång tid att uppnå statistisk signifikans.
Att använda det ena eller det andra betyder dock inte att du måste hålla dig till det för alltid!
Om du har flera landningssidor kan du testa en landningssida med MVT-test och en annan med A/B-test om det skulle påskynda processen att komma fram till hur du ska organisera din webbplats på lång sikt. Denna strategi har dock sina faror .
Det kan vara en bra idé att använda metoderna som stöd för varandra i konverteringsoptimeringsprocessen.
Om du till exempel har två mycket olika idéer för landningssidor (till den grad att ni inte ens talar om samma element) kan du köra ett A/B-test med de två sidorna först, ta reda på vilken sida som ger bäst resultat och sedan gräva djupare i vilka enskilda element och kombinationer som maximerar effekten.
Tänk dock på att du inte kan utföra dessa tester på samma sätt som andra uppgifter, och du bör noggrant utvärdera om testerna är det bästa sättet att använda din tid och dina ansträngningar.
Vad ska man göra om det inte sker någon förbättring?
A/B- och multivariata tester är effektiva tekniker för optimering av konverteringsgraden som kan hjälpa dig att få ut det mesta av din befintliga webbplatstrafik.
Kom ihåg att optimering av webbplatsens konvertering inte är allt. Om testerna inte visar någon betydande förbättring av konverteringsgraden oavsett vad du gör är det inte ett tecken på att du bör göra fler tester, utan ett tecken på att du bör fokusera på att förbättra något annat.
Kanske behöver du mer trafik i första hand (gör mer uppsökande marknadsföring), eller så är det något med din produkt, pris, kundupplevelse, trovärdighet och så vidare.
För att ta reda på vad som verkligen hindrar besökarna på din webbplats från att konvertera kan du genomföra feedbackundersökningar och fråga besökarna direkt!
Slutsats
Skillnaden mellan A/B- och multivariata tester är att
- i A/B-testning testar du mellan två versioner av din webbsida (utan att veta vad som faktiskt orsakar skillnaderna i konverteringar), och
- I ett multivariat test tar man hänsyn till alla element och alla möjliga kombinationer och avslöjar exakt vilka sidelement som besökarna interagerar mest med.
Båda testmetoderna har sina för- och nackdelar, och du bör noga överväga vilken som är bäst för ditt nästa test.
Det är möjligt att använda båda testerna för att stödja varandra i optimeringsprocessen, men inte samtidigt.
Glöm inte att verkligen utvärdera om optimering av webbplatsens konvertering är det bästa du kan göra för ditt företag just nu. Om du inte redan har mycket trafik eller om din produkt är bristfällig finns det mer brådskande problem att lösa.
När du bestämmer dig för att köra ett multivariat eller A/B-test finns det många programvaruverktyg som kan hjälpa dig, till exempel Trustmary.
Ytterligare läsning
Vanliga Frågor
Vad är skillnaden mellan A/B-testning och multivariat testning?
Skillnaden mellan de två metoderna är att ett A/B-test kan berätta vilken av de (vanligtvis två) versionerna av sidan som fungerar bäst, och ett multivariat test (MVT) kan berätta vilken av alla möjliga kombinationer av sidelement som leder till flest konverteringar.
Vilka likheter finns det mellan A/B- och multivariata tester?
Båda testmetoderna kräver att du noggrant analyserar ditt problem, sätter upp mål, formulerar hypoteser, ser till att det finns tillräckligt med trafik till de testade sidorna, och i bästa fall hjälper båda metoderna dig att få fler konverteringar från din webbplats och få ditt företag att växa.
Kan jag använda A/B- och multivariata tester samtidigt?
Det rekommenderas inte att köra flera tester samtidigt, eftersom det kan störa resultatet och ta lång tid att genomföra. Du kan dock använda båda metoderna i ditt CRO-arbete på olika sidor och vid olika tidpunkter.
Vad betyder det om A/B- eller MVT-testet inte visar någon signifikant skillnad?
Om dina framgångsrika tester och välanalyserade resultat inte visar någon skillnad i konverteringar mellan webbplatserna betyder det att båda webbplatserna fungerar lika bra (eller dåligt). Antingen har du en så attraktiv produkt att planeringen av webbplatsen inte har någon effekt på konverteringsviljan, eller så är det något som hindrar besökarna från att konvertera. Jag rekommenderar att du genomför feedbackundersökningar för att ta reda på vad dina besökare och kunder tycker.
