Danske split-test cases

20. Jan 2010 23:43

Der er efterhånden mange danskere der har set værdien i at split-teste og forhåbentlig bliver vi mange flere i fremtiden. Når man er helt ny i split-testing kan det måske være svært at finde ud af præcis hvad man bør teste. Jeg har derfor samlet en liste over alle de danske split-test cases jeg har kunnet finde rundt omkring på nettet. Listen kan både give inspiration til hvilke elementer man kan teste og derudover beskriver nogle af artiklerne også hvordan testen er lavet, hvis man ikke helt har styr på det tekniske. Det er dog vigtigt at påpege at man primært bør bruge listen som inspiration og ikke som facit-liste. Selvom en grøn knap virker godt på en side, behøver den ikke nødvendigvis være den bedste på en anden side, så man er altså nødt til at køre testen på sin egen side for at være sikker.

Split-test cases:

Det store knap-farveeksperiment

Mattias Skovhøj har lavet en test af 4 knapper i forskellige farver og tester hvilken farve der konverterer bedst. Ud fra det screenshot som kan ses i artiklen er der ikke nogen signifikant vinder i testen, men det er alligevel en spændende test som er god at prøve på sin egen side på de vigtige call-to-actions.

Røde knapper ER farlige!

Morten Vadskær er en af de danskere der går forrest i kampen for at bruge Google Website Optimizer til at forbedre ens konverteringsrate og han har indtil videre offentliggjort en af sine test, som også tester hvilken farve der konverterer bedst. Resultatet på hans test er noget mere signifikant (omend ikke helt 95%) og her blev det den grønne knap der blev vinderen.

Den evindelige snak om fragtpriser

Per Allerup tester hvor meget det betyder at folk får oplyst hvad fragtprisen på en given ordre vil være. På trods af at Per faktisk har ladet testen køre så begge varianter har fået masser af trafik, så er forskellen så lille at der skal meget mere trafik til for at man kan udråbe en vinder i en test som denne. Men en lille tendens kan man da se, og det er i hvert fald et spændende emne at tage fat i og lidt anderledes end de normale design ændringer man plejer at teste.

E-mærket er spild af penge

Per Allerup er en produktiv mand når det kommer til split-testing og har også testet (i 2 omgange her og her) om det giver højere konverteringsrate at have E-mærket. Det er en meget spændende test, men den er lidt vanskelig at udføre. Som jeg beskriver i min artikel om statistikken bag Google Website Optimizer så er udgangspunktet i en test at der ikke er nogen forskel på varianterne og man kan derfor ikke bruge GWO til at konkludere at det ikke giver nogen forskel. Det er designet til at finde signifikante forskelle ikke signifikante ligheder. Så hvis man vil konkludere noget i en test som denne, så er man nødt til at lade den køre indtil der kommer en signifikant forskel, selvom det vil tage meget lang tid, med de små forskelle der er registreret i testen. Men en spændende test er det helt sikkert!

Bed om mindre og få mere

Inden jeg fik min egen blog lavede jeg en test på mit linkkatalog hvor jeg testede om det betød noget for konverteringsraten hvor mange felter man skulle udfylde for at tilmelde sit link - altså hvor meget information man skulle aflevere. Resultatet af testen blev, ikke overraskende, at jo mindre information man skal udfylde jo højere er konverteringsraten, og det betyder faktisk en hel del hvor mange felter man skal udfylde. Dette hænger godt sammen med tankegangen i Steve Krug - Dont Make Me Think som netop siger at jo mere man tvinger brugeren til at tænke over de valg der skal foretages på nettet jo større er risikoen for at brugeren giver op og forsvinder og jo flere felter der skal udfyldes jo mere skal der tænkes. Så væk med de unødvendige felter!

Èn ændring = 196% bedre konvertering

Johnny har lavet en spændende test af hvor meget synlige call-to-actions betyder. Udgangspunktet var at den primære call-to-action var "below the fold" altså hvor den ikke er synlig på siden og man skal scrolle ned for at finde den. Ved blot at flytte knappen op "above the fold" har han hævet konverteringsraten dramatisk. En god test der virkelig viser hvor stærkt et værktøj split-testing kan være i de rette hænder :)

Halvering af forsidens bouncerate med GWO

Mogens Møller har udført en spændende test på sin webshop, med henblik på at få halveret bounceraten på shoppens forside. Da testen begyndte var bounceraten 32% og den skulle gerne ende med at blive det halve. Hop over og læs indlægget og se om det lykkedes. Testen er udført meget kreativt, ved at opsætte ordrebekræftelsen som mål, men faktisk bruge Google Analytics til at finde den rigtige vinder da det er det eneste sted man kan se bounceraten - GWO kan kun bruge unikke sidevisninger som mål. Mogens har desværre ikke vedlagt en rapport fra GWO i artiklen, så man kan ikke se om resultatet er signifikant, men med 5000 besøgende fordelt på de to forskellige forsider, så er der en god chance for det. Det er i hvert fald en fornuftig stikprøve-størrelse at arbejde ud fra.

147% forbedring med en motiverende CTA

Michael Aagaard er fortaler for at teksten på dit website kan have en stor betydning for hvor godt sitet er til at konvertere de besøgende. Denne meget simple test går ud på at identificere hvad det er brugerens behov er og fokusere sin tekst og Call-To-Action på det - og det virker!

Test af den vigtige "welcome blurp" på forsiden

Michael Aagaard har af to gange testet sig frem til en enorm forbedring af konverteringsgraden udelukkende ved at ændre på den lille tekst øverst på forsiden som fortæller en ny bruger hvad sitet handler om og kan tilbyde af fordele. Selvom der er langt fra forsiden til en gennemført konvertering er det absolut ikke ligegyldigt hvad der står på forsiden og det beviser denne test til fulde. Michael har været igennem mange varianter før han fandt den rigtige og han har taget fejl flere gange i løbet af processen, så det har været lærerigt at teste det på brugerne.

Mangler der noget på listen?

Det er så de danske cases jeg har kunnet finde på nettet. Kender du til en der ikke er på listen så smid gerne en kommentar herunder.

Kommentarer:

1
Frank
17/02-2010 - 13:04
En god samling af cases. De har fået mig til at indse at jeg nok lige skal have sat mig ordentlig ind i det med weboptimizer og analytics.
Kender du nogle gode danske manualer jeg kan læse.

Frank

2
Jacob Worsøe
17/02-2010 - 14:10
Frank: Det er godt du kan bruge det, og det giver lyst til at komme igang med det.

For at få det grundlæggende på plads ligger der her en række gode artikler som jeg kan anbefale:
http://www.v4d5.net/websiteoptimizer/

Ellers må du selvfølgelig komme og spørge hvis der er noget du skal have lidt hjælp til, så skal jeg gerne hjælpe :)

Jacob Worsøe's seneste blogindlæg: I nærkontakt med Matt Cutts

3
Jacob Worsøe
12/03-2010 - 10:41
Så er listen opdateret med Mogens Møllers spændende test af forsidens bouncerate.

4
Peter
16/04-2010 - 09:40
hej Jacob, ville sådan set bare sige tak for en fed post.

er strandet i wien på grund af islandsk vulkan aske så har GOD tid :)

MVH

Peter


5
Jacob Worsøe
17/04-2010 - 01:54
Godt du kunne bruge den Peter. Jeg håber snart der kommer nogle flere danske cases som skal tilføjes listen. Måske laver I selv nogen? Jeg har i hvert fald et par stykker igang, som snart er færdige... Håber du snart kommer væk fra Wien :)

6
Michael Aagaard
07/05-2010 - 11:22
Hej Jacob

Fed samling og super godt initiativ - det gælder bare om at få flere til at forstå vigtigheden af at teste!

Jeg har selv publiceret nogle interessante CTA-tests på min blog. Du kan tjekke dem ud her:

http://online-tekstforfatter.dk/category/cases/

- Michael

7
Jacob Worsøe
13/05-2010 - 11:32
Michael: Tak ska du ha, det er i hvert fald vigtigt med noget inspiration når man står og skal igang med den allerførste test.

Jeg har godt set dine spændende CTA-tests, men jeg kunne godt tænke mig at du havde smidt et screenshot med fra GWO da testen var slut? På den måde kan man også give "de nye" en mulighed for at se hvor man besøgende der skal igennem de forskellige tests før der kan konkluderes noget.

Kunne du få fat på det? Jeg vil meget gerne have dine tests med på oversigten.

8
Michael Aagaard
18/05-2010 - 10:00
Hej Jacob - jeg har dem liggende på min computer et eller andet sted. Jeg giver dig lige besked, når jeg har fået dem smidt ind i indlæggene.

Tak!

Michael

9
Jacob Worsøe
19/05-2010 - 01:49
Michael: Det er super, så skal jeg få skrevet dine tests ind i indlægget.

10
John Dencker
15/09-2010 - 22:53
Super fede indlæg, må igang med at teste.
http://www.marjoe.dk

11
Patrick Rasmussen
17/09-2010 - 11:26
Hvis man ikke allerede splittester, så handler det bare om at komme igang og det kan ikke gå for langsomt!

12
Kasper Bergholt
05/11-2010 - 09:31
Tak for de gode cases.

Er der nogen, der ved, hvilket af de store bureauer der pt. er markedsførende i a/b- og multivariat-test?



Kasper Bergholt's seneste blogindlæg: Google lancerer mod_pagespeed-modul til Apache

13
Jacob Worsøe
05/11-2010 - 13:55
Kasper: Tak for roserne og godt spørgsmål. Jeg tror der er mange bureauer som kan udføre det, men jeg kender ikke lige til nogen der har specialiseret sig i det.

Jacob Worsøe's seneste blogindlæg: Status på "Google and China"-testen

14
Kasper Bergholt
05/11-2010 - 14:22
Tak for hurtigt svar & go' weekend!

/Kasper


15
Jacob Worsøe
20/11-2010 - 15:29
Så er der tilføjet en ny case på listen fra Michael Aagaard som tester webtekst.

Jacob Worsøe's seneste blogindlæg: Status på "Google and China"-testen

16
Kim Sørensen
02/02-2011 - 09:16
Det er nogle gode cases du har samlet.

17
Jacob Worsøe
02/02-2011 - 15:11
Kim: Mange tak, håber du kan bruge det til lidt inspiration. Sig endelig til hvis du kender til nogen danske tests jeg ikke har med på listen.

Jacob Worsøe's seneste blogindlæg: Undgå at spilde din tid på døde linkkataloger

18
Jesper
20/02-2011 - 15:06
Det er utroligt hvad små ændringer kan gøre ved en netbutik. Spændende læsning her på siden omkring højere konvertering. Der er vist noget jeg selv skal have kigget på - tak for input og gode fif. Mvh Jesper

19
Hjort Smykker
05/04-2011 - 07:21
Sådan - super god liste. Splittest er noget af det meste interessante læsning. Helt ufatteligt hvad små ændringer kan gør af forskel ved konverteringen.

Bliver helt inspireret til at sætte splittests op på Hjortsmykker.dk - er sikker på man kunne eksperimentere meget med e-mærket, opbygning, iconer osv.

Skide godt indlæg Jacob :-)

Nikolaj


20
Mark
18/01-2012 - 19:23
En fornuftig samling af brugbar information - der er tydeligvis brugt mere end 3 minutter på indlægget hvilket er dejligt.

21
Frisør
22/01-2012 - 20:21
super god liste

22
Ole Gregersen
06/02-2012 - 11:44
Hej. Jeg har også delt en del cases på min blog usabilitybog.dk/olesblog - og der kommer hele tiden flere, samt gode råd til dig der bruger optimizely.

/Ole

Smid en kommentar: