26 Dec 2008 21:28
29 kommentarer
Faktisk havde jeg slet ikke forestillet mig, at det gjorde nogen forskel. Tænkte, at folk jo havde set indkøbskurven, når de startede på siden. Men det er åbenbart slet ikke tilfældet. Godt, jeg testede.
Jeg har desværre ikke tid til at teste alt. Men jeg forsøger at hænge i og synes altid, at det er sjovt at se de første resultater, når man har lavet en ny test.
Lige nu er jeg faktisk af den opfattelse, at det er vigtigt, at indkøbskurven "stjæler opmærksomhed". Folk skal jo nok finde deres kondomer, hvis de vil købe noget. Men det kan jo godt være, jeg tager fejl. Må teste igen, når jeg har fået den scrollende indkøbskurv rullet ud over alle siderne.
>>Det gav en ikke ubetydelig ændring i konverteringsprocenten.
Kan du uddybe denne dobbeltnegation ;-)
Hvor meget mere taler vi om? over hvor lang tid har du målt det? Der vil jo altid være en usikkerhedsfaktor idet at du formentlig ikke har kørt sideløbende måling (A/B-splittest)
Jeg er bare nysgerrig, men tror gerne at det har haft en effekt.
Spændende!
Kunne man overtale dig til at lave en opfølgning, når du får lidt data ind? Med screenshots af gammel/ny, samt hvad det helt nøjagtigt har haft af effekt på CR?
@Amjad - velkommen til. Ja, jeg ved ikke hvorfor, men jeg elsker at komme med sådanne dobbeltnegationer ;o) Ved godt, at de kan virke forvirrende.
Jeg bør nok med det samme sige, at jeg ikke fik målt ordentligt på det. Det er jo lidt sværere, da en bruger godt kan lægge noget i kurven på en side, hvor der er den gamle indkøbskurv og så surfe videre til en side med den nye indkøbskurv, hvor han så vælger at gå til kassen. Jeg burde jo have lave en rigtig A/B test på det, og det har jeg ikke gjort, fordi jeg med det samme var så tilfreds med den nye løsning, at jeg valgte at den skulle på alle siderne, hvis bare den performede ligeså godt som den gamle.
Jeg har testet i lidt over 3 mdr. Lige nu ville jeg ønske, jeg lavede en rigtig A/B test for at overbevise jer med klokkeklare tal. Men på et par af siderne er konverteringsprocenten steget med over 50%.
Det faldt desværre også sammen med at jeg tilføjede "gå til kassen"-knappen (der før bare var tekst). Den har helt klart også ændret antallet af brugere, der gik til kassen (ikke dermed sagt konverteringen).
Ikke desto mindre har vi set væsentlig bedre konvertering på de sider, der har den nye indkøbskurv, så inden længe bliver den rullet ud over hele siden.
Søren, hvilke screenshots er det, du gerne vil se? Af indkøbskurven...
Jeg vil også godt lige tilslutte mig den del af befolkningen der godt kunne tænke sig at se en A/B -test af det her :)
Men er det overhovedet muligt? Normalt tester man jo forskellige elementer på en enkelt side, men kan man teste forskellige elementer på tværs af et helt site? Jeg har tit tænkt på at køre en A/B-test med e-mærket, men det er jo også vist på alle sider, så enten skal brugeren se det på alle sider, eller også skal han se det på ingen sider. Men jeg ved ikke om det er muligt?
Nu har jeg lige surfet lidt rundt i din shop (igen, igen) og fundet et par smuttere.
1. Man kan ikke tilgå din side ved bare at skrive "kondomaten.dk"? Man skal skrive www foran, ellers kan den ikke findes. Måske noget dns der skal rettes? Du kan nok godt miste lidt direkte trafik på den konto.
2. Hvis man går ind på shoppen og trykker på farvede kondomer og ligger det øverste produkt i kurven, så får man en HTTP 500 fejl. Det er ikke alle produkter på siden der giver fejlen og det er vist kun det første produkt man ligger i kurven, der giver fejlen. Jeg tror man skal lukke og åbne browseren og starte helt fra scratch for at få fejlen. Fejlen er fundet i Chroma, Firefox og IE7
Og så lidt ros: Super-fed knap til "gå til kassen". Jeg vil godt tror at den virker, for man bliver virkelig tiltrukket af den og får lyst til at klikke på den. En guide over hvordan den er tilblevet kunne være rigtig dejligt :)
@Jacob - tak for dine mange kommentarer.
Ad 1. Hos mig virker det fint med kondomaten.dk alene. Er du sikker på, du har skrevet rigtigt?
2. Tak for at du fandt fejlen på farvede kondomer. Det var en programmeringsfejl ene og alene på min side. Jeg har lavet en nød-løsning lige p.t., da jeg ikke har tid til at få det ordnet.
Mht min gå-til-kassen-knap, så er jeg også selv vildt godt tilfreds med den. Historien bag den er bare, at jeg på et andet forum fandt en fyr, der lavede grafik for sjov. Han er vildt dygtig til det, så jeg skrev og spurgte ham om, hvad han skulle have for at lave noget til mig. Han gider ikke ha' penge for det, da han kun laver det på hobby-plan. Han er også manden bag mine gratis baggrunde, som du bør have på dit skrivebord ;o)
Desværre har han jo også meget andet at se til - men han har lovet at hjælpe med flere forskellige ting til både Kondomaten og min side mXchange.dk.
Men jeg kan da spørge ham, om han har lyst til at skrive en lille guide omkring den.
1) Har lige prøvet igen og det er stavet rigtigt. Mystisk. Er der andre der vil prøve det efter?
2) Så er der styr på det :)
3) Ja, det kunne være cool, hvis han gad lave en tutorial. Hvad er det for et forum du fandt ham på?
Ad pkt 3: Jacob - jeg deler gerne ud af min viden og mine ressourcer. Men min "grafiker" har ikke engang tid til at hjælpe mig, så ham holder jeg helt for mig selv...
Til gengæld kan jeg fortælle en anden sjov historie om det forum. For ca. et halvt år siden tilbød jeg en fyr derinde at hjælpe ham med noget, der krævede, at vi udvekslede harddisk. Det viste sig, at manden boede et par gader fra mig.
Da jeg så kontaktede ham grafikeren, viste det sig dælme også, at vi bor et par gader fra hinanden. Er det ikke pudsigt??.. Vi behøver jo ikke noget forum - kan bare mødes nede ved Fakta.
Nå - men min grafiker får du ikke (jeg har sagt, at han skal stoppe på arbejdet og så lave fuldtids web-grafik, men han vil kun lave det på hobby-plan. Han er ellers super-dygtig).
Okay, så får du ham for dig selv :)
Jeg tænkte bare på om det var amino.dk? Det var nu ikke for at stjæle ham, var bare nysgerrig efter hvilke forums du hænger ud på :)
Hæ - nej, det var ikke Amino.dk. Der hænger jeg ikke så meget ud. Det er også sjældent, at folk arbejder gratis derinde ;o)
Jeg sider netop og arbejder på en ny shop til en af mine virksomheder og havde da ikke lige tænkt over det med at "Gå til indkøbskurven" skal være synligt hele tiden. For et par år siden lavede vi denne løsning:
http://thyfisk.dk/shop/rogvarer.php#varer
Jeg må nok indrømme jeg ikke bryder mig om svæveeffekten. Primært fordi det minder mig om alle de reklamer der bruger samme teknik.
En general kommentar til test og optimering af landing pages: AB-splittests har deres store begrænsning i at man i princippet kun tester effekten af én, eller få variationer ad gangen. Men som menneske betragter jeg (ubevidst) helheden, ikke de enkelte elemeneter. AB splittest ignorer altså en helt elementær ting hos brugeren, nemlig at det er kombinationen af enkeltheder man reagerer på.
Så det interessante er at finde den kombination af elementer (overskrifter/placeringer/størrelser/funktioner)på landing pagen der konverterer bedst.
F.eks. rød knap/blå knap kombineret med overskrift 1/overskrift 2. Det tager tid, og i praksis vil du teste kombinationerne af rød/blå og Overskrift1/overskrift2. det giver 4 kombinationer, eller fire landing pages du skal teste. det er til at overskue.
Men lad os nu sige at du har identificeret 10 elementer med (for nemhedens skyld) to variationer hver (f.eks. rød/blå)og vil finde den bedste konvertering, så får du pludselig 1024 kombinationer 2*2*2*2*2*2*2*2*2*2=1024. En af disse konverterer bare bedre end de 1023 andre. I realiteten vil der være flere end 2 variationer per element (rød/blå/grøn/sort knap), og så stiger antallet af kombinationer eksplosivt.
Det er indlysende at det er helt udelukkket at lave en AB-splittest med dette antal kombinationer.
Jeg er faldet over dem her (se herunder), og også læst deres bog (som dog er lidt for lærebogsagtig, dvs. for lang). Jeg synes at de har fat i noget superinteressant, som altfor mange forsømmer efter den intense og dyre jagt på at skaffe trafik.
tjek dem her ud: http://www.sitetuners.com/tuning-engine.html. de operer med noge de kalder 'Non-parametric tuning'.
Jeg har ikke selv nogen praktisk erfaring med dem, men det kunne være interessant at høre hvad I andre siger til deres metode.
Tjek også her en oversigt over de forskellige testmetoder: http://www.sitetuners.com/comparison-conversion-tuning-methods.html
Her fremgår det også at ovenstående testmetode kræver et site med meget trafik
Amjad: Du har fat i noget af det helt rigtige. Desværre er det, som du selv er inde på, umuligt at teste så mange forskellige kombinationer på en gang.
Der findes en tommefinger-regel som siger at for hver 100 konverteringer du har bør du teste en variant. Det vil sige, at hvis du på en måned har 400 salg, så kan du i den måned max. teste 4 variationer af den side som giver de 400 salg. Simpelthen for at få et høj nok signifikans-niveau til at man kan drage en holdbar konklusion.
Det giver nogle store problemer for mange af de små kælder-virksomheder som måske kun har 100-150 ordre om måneder. Det vil tage lang tid at få testet bare 6 forskellige landingpages, og på den tid kan udsving i markedet have ligeså stor indflydelse på antallet af konverteringer end designet af ens landingpage. F.eks. hvis der opstår finanskrise midt i en 6 måneders testperioden :)
Jacob: Enig i at et af problemerne med AB splittest er, at du har en uens kontekst: sæsonudsving, VM i fodbold, etc.
vil nu mene at det er antallet af besøg der er det væsentligste for signikansen, selvom det er konverteringen der interessere os.
Jeg ved ikke hvor mange variationer det er realistisk at teste samtidigt? Lad os sige at du vil teste 5 overskrifter, og 3 priser, så får du 15 landing pages. Jeg vil mene at det er realistisk at teste simultant over 2 måneder.
Et andet spørgsmål vdr. signifikans er, hvilken præcision du vil have i din test. Hvis du partout skal have 95% sikkerhed på dine testresultater, så kan det jo godt tage sin tid, men hvis du bare skal have en 80 % sikkerhed, for at vælge blandt din 15 landing pages, så behøver det ikke tage mere end 2 måneder vil jeg tro.
@Mikkel - jeg har lige kigget forbi Thyfisk. Min indkøbskurv opdateres ikke, når jeg lægger noget i. Til gengæld er det i kurven, hvis jeg klikker "se kurv". Men slår jeg Javascript fra, så virker siden ikke (jeg ved godt, at alle reelt har Javascript slået til). Jeg synes, du skulle prøve at split-teste med en altid synlig indkøbskurv på Thyfisk. Det giver et godt resultat.
@Amjad & Jacob - spændende dialog I har haft, mens jeg var til julefrokost. Skal nok få kigget på SiteTuners. Jeg er selv klar over, at der er mange faktorer, der spiller ind og skal man gøre det rigtigt, skal man jo teste i evigheder. Jeg er mere til at gøre det forkert lynhurtigt. På Kondomaten er omsætningen rimeligt stabil, så det er faktisk ret nemt at se selv ganske små ændringer.
Jeg tror, at Google snart vil diske op med noget rigtigt lækkert til at splitteste ens sider med. Jeg har brugt mit eget hjemmestrikkede system til det, men har vist mere eller mindre besluttet helt at gå over til Googles software, da Analytics + Adwords er så godt integreret.
Mht jeres test-periode er jeg mere til at sige X antal konverteringer frem for X antal måneder. Men ser vi en positiv udvikling, så rykker vi hurtigt på den. I øvrigt er vores salg steget under finanskrisen, så folk hygger åbenbart derhjemme i stedet for at gå i biffen/på restaurant etc. etc. Der er ikke noget, der er så skidt, at det ikke er godt for noget ;o)
>>Jeg tror, at Google snart vil diske op med noget rigtigt lækkert til at splitteste ens sider med.
Er det noget i denne stil du tænker på:
https://www.google.com/accounts/ServiceLogin?service=websiteoptimizer&continue=https%3A%2F%2Fwww.google.com%2Fanalytics%2Fsiteopt%2F%3Fet%3Dreset%26hl%3Den&hl=en
Amjad: Er det egentlig det samme produkt som før i tiden var tilgængeligt gennem adwords, eller er der noget nyt i det?
Jacob: Jo det har levet en urimelig stille tilværelse i nogle år.
Jeg synes at konvertering er et led i kæden, som er voldsomt undervurderet, og voldsomt spændende.
Nogle af der ved hvem om der er en 'guru' indenfor landing page konvertering i DK (ikke fordi jeg selv vil søge stillingen). Men kunne godt forestille mig at der var basis for at etablere et specialisret forum, eller bare en blog.
@Amjad - uden at have kendskab til deres færdigheder, så tror jeg, at det er sådan een som Søren Sprogø fra Afdeling 18, du efterspørger (men om han decideret har forstand på landingssider, ved jeg ikke).
Ellers har jeg også hørt at Strategen gør sig i at optimere landingssider. Men hvor meget specialist han er, det ved jeg ikke.
Men jeg vil godt give dig ret i, at konvertering er alt for undervurderet. Danmark svømmer i SEO'ere i øjeblikket. Det er forholdsvis nemt at få trafikken. At få trafikken til at konvertere er kunsten.
Ud fra hvad der bliver skrevet rundt omkring på de blogs jeg kender, så er Søren Sprogø i hvert fald en af de danskere der ved mest om konverteringsoptimering - eller i hvert fald intereserer sig mest for det. Hvilket jo tit er det samme.
Derudover giver e-pusher også et indtryk af at Martin Thorborg bruger en del tid på denne disciplin.
Dette beviser jo meget godt argumentet om at det man deler med sine læsere på sin blog, tit kan give ens person en masse god branding og ekspert-status.
Ja - men jeg har ikke mødt Sprogø eller nogen, der har arbejdet sammen med ham, så jeg kan kun viderebringe, hvad jeg læser (nok samme sted, som dig). Men jeg læser med på hans blog og der falder jævnligt guldkorn af (specielt fordi han anbefalede min tema-uge ;o))
Jeg har læst e-pusher og er meget positiv overfor den. Det meste vidste jeg, men jeg havde også syv års erfaring med e-handel. Jeg ville dog ønske, jeg havde læst den, inden jeg startede min webshop. Men lige præcis hvilken webshop Thorborg har, ved jeg ikke. Han er vist medejer af en børnetøjsbutik, men tvivler på at han selv sidder med A/B tests ;o)
Jeg er enig med Jacob. det er en rigtig fed knap og en tutorial om hvordan man laver sådan en ville jeg i hvert fald blive glad for.
Vads: Han sidder i bestyrelsen i www.billigvvs.dk - så de nyder nok godt af hans store erfaring. Men jeg tror du har ret I at han ikke sidder med A/B-tests. Han kender jo også svaret allerede, så hvorfor teste? :)
Nej, selvfølgelig skal alting testes - uanset hvem man er. Men jeg tror han er en god sparringspartner at have med om bord :)
Med hensyn til Sprogø, så kender jeg ham også kun fra hans blog. Jeg ved faktisk ikke engang hvad der giver ham det daglige brød på bordet? Måske noget konsulent-arbejde?
Ja, men selvom han sidder i bestyrelsen, så ved jeg stadig ikke, hvad hans erfaring er. Man skal jo have noget jord under neglene på et tidspunkt.
Til gengæld tror jeg, at han er god til bare at sige "det gør vi sgu'" - i stil med Frank Rasmussen fra Bibob. Nogle gange er det dét, der skal til.
Virker kommentar-feedet??..
Jeg sidder lige nu og roder med at skal lave GWO på min check-ud procedure med tre forskellige farver knapper. Det skal indgå som en del af en kanal i GA samtidigt med at jeg godt vil lave noget test på et ekstra tilbud, der "slider ned". Det er en kompliceret omgang og jeg overvejer seriøst, om ikke jeg bør lave noget af det server-side. Men sjovt nok, så fik jeg i dag denne recommendation i min indbakke fra Stumbleupon:
http://www.fastcompany.com/blog/cliff-kuang/design-innovation/300-million-button
Ganske interessant omend jeg synes 300 mio dollars lyder af rigtigt meget. Men måske det er en jumbojet-webshop.
Brug dit eget navn - ikke sådan noget "billig arganolie" eller "mobilt bredbånd"
Mikael Rieck 26/12/08 22:17
Ja den slags ved man jo godt, men i kampens hede er det jo netop den slags man glemmer. Det eneste den nye version får mig til at tænke på, er om ikke det at den bevæger sig tager for meget fokus fra produkterne?
Jeg ville nok anbefale dig at teste den version overfor en version for indkøbskurven ikke stjæler så meget af billedet (jeg har ikke en god løsning).
Men jeg ved jo at du tester alt, så det har du sikkert også selv tænkt på.