Hjælp til salg (Ikke internet)

Svar: YouTube Tester 1.024 forskellige forsider og fik 15% flere signups med GWO

Jacob Worsøe — Sun, 16 Aug 2009 16:04:00 GMT

Super fedt indlæg.

I tilfælde af at nogen har overset det, så skriver John fra VKI (firmaet der har lavet testen for YouTube) i kommentarerne på youtube's blog at de vil blogge lidt nærmere omkring testen ovre på deres blog i nærmeste fremtid:

http://blog.vkistudios.com/index.cfm/2009/8/13/The-Largest-Google-Website-Optimizer--Experiment-Ever

Det kunne godt være spændende at følge lidt med derovre og måske få lidt tips og tricks :)

Svar: YouTube Tester 1.024 forskellige forsider og fik 15% flere signups med GWO

Karsten Lund — Sat, 15 Aug 2009 10:12:46 GMT

super tilføjelse og indlæg Molvins. Det er dejligt at se debatten komme igang. Vi har brug for mange flere starter med at teste deres tiltag så de kan blive meget klogere på hvad der netop tjener penge i deres shop. Jeg vil så lige sige at MAGENTO som platform i en 3 - 4 mdr. Har tilbudt integration med GWO på landing. Det ville dog være fedt at andre udbydere begyndte at tænke i test og analyse baner.

Svar: YouTube Tester 1.024 forskellige forsider og fik 15% flere signups med GWO

Morten Vadskær — Sat, 15 Aug 2009 08:55:06 GMT

Jeg må indledningsvis stemme i med, at det er et super godt indlæg - og så vil jeg takke for linket og omtalen af min Website Optimizer introduktion.

Mht det med at split-teste priser, så er jeg ikke 100% sikker på at det er ulovligt i Danmark, men mener at have hørt det. Man må derimod godt teste en side med produkt A til 99,- og en anden side med 2 x A til 178,-. Sådan som jeg har forstået lovgivningen. Så det er nok måden at gøre dét på.

Lundsby, det lyder eddermanme lækkert, at I shop shop-udbyder er klar til at tilbyde GWO. Jeg er overbevist om, at det bliver en gigantisk fordel over konkurrenterne (omend jeg forventer, at alle shop-platforme snart tilbyder integreret GWO).

Mht at teste på stylesheets, så har jeg testet det og det kan sagtens lade sig gøre. Hvis man læser deres Techie Guide, så er man i stand til væsentligt mere end "bare" deres A/B og multivariate test.

Jeg savnede dog et link i Wikien: gwotricks.com - det er siden, man besøger, når man vil lave nogle ekstraordinære tricks med GWO. Jeg har derfor tilføjet det til din i forvejen suveræne wiki-artikel. Håber, det er i orden.

Bedste hilsner

Molvins

Svar: YouTube Tester 1.024 forskellige forsider og fik 15% flere signups med GWO

Lundsby — Fri, 14 Aug 2009 22:04:35 GMT

Mikkel deMib Svendsen:
Lundsby, du glemmer, at scriptet på de forskellige URL-varianter skal eksekveres i browseren - du kan ikke bare redirecte siden server side, så trackes den jo ikke :)

Det har du ret i, men det kan løses trivielt ved at lade den side der redirectes til inkluderer scriptet. Det eneste der skal til er en session variabel der fortæller om scriptet er kørt eller ej.

Mikkel deMib Svendsen:
Jeg synes ikke det lyder som den mest elegante løsning...

Såvidt jeg kan se er der ikke nogle ulemper for den besøgende og jeg tror også den er okay overfor søgemaskinerne, men her er jeg ingen ekspert.

Umiddelbart vil den også være rigtigt hurtig for os at implementerer formendligt under 2 dage.

Men hvis du kan finde på en mere elegant løsning, så vil jeg meget gerne hører den ?

Svar: YouTube Tester 1.024 forskellige forsider og fik 15% flere signups med GWO

Mikkel deMib Svendsen — Fri, 14 Aug 2009 21:27:56 GMT

Lundsby, du glemmer, at scriptet på de forskellige URL-varianter skal eksekveres i browseren - du kan ikke bare redirecte siden server side, så trackes den jo ikke :)

Jeg synes ikke det lyder som den mest elegante løsning...

Svar: YouTube Tester 1.024 forskellige forsider og fik 15% flere signups med GWO

Mikkel deMib Svendsen — Fri, 14 Aug 2009 21:09:02 GMT

Boysen:

Har I overvejet GWO til Redpitt? Eller måske kan det allerede bruges til systemet?

Ingen af vores kunder har bedt om det endnu - men det ville da være helt logisk for os at indbygge en let måde at styre det på.

Svar: YouTube Tester 1.024 forskellige forsider og fik 15% flere signups med GWO

Lundsby — Fri, 14 Aug 2009 20:56:50 GMT

Hej Mikkel

Da jeg umiddelbart læste om det, synes jeg at multivariant testing var relativt, uinteressant ud fra et integrationsperspektiv. Dels kan sætte på stortset alle shopløsninger, men de er også begrænset til at lave indholdsudskiftningstests på enkelte sider, ændrering i stylesheet, layout m.m. er synes jeg ikke det virker så egnet til.

A-B split delen, var helt klart mere spændende, her kan vi lave vores shopsystemer, så man nemt kan producere to versioner af en side, og så kan google klare hele hypotese prøvningsdelen.

Det er relativt nemt at løse problemet med de unikke url'er, det man gør er holde styr på de aktuelle versioner, via session variable. Så når en bruger besøger en side med splittest, så køres splittest scriptet første gang og der redirectes til en af de to test url'er denne url, sætter en session variable for om det er version a eller b, der skal vises, så redirectes tilbage til den url, som brugeren oprindeligt forespurgte, men den gang ved shopsystemet hvilken version der skal vises.
Hvis det f.eks. er en test der gælder hele sitet, som f.eks. udskiftning af topbanneret, så skal tricket kun udføres første gang man besøger sitet. Faktisk vil tricket kun skulle udføres maks. en gang pr. test pr. besøgende.

Umiddelbart, burde dette gøre at den almindelige besøgende aldrig bemærker splittesten, eller ser de forskellige url'er, der burde ikke være duplicate content problemer, da det er samme url der vises forskellige versioner for, faktisk kan jeg ikke rigtigt se nogle ulemper ved løsningen, andet det dobbelte redirect, men det er en minor, bare der er den defaulter til version a, hvis js ikke understøttes. Jeg tænkte lidt på om google ville se det som et forsøg på snyd, det tror jeg ikke, men det er ude for mit ekspert område, hvad siger du ?

Svar: YouTube Tester 1.024 forskellige forsider og fik 15% flere signups med GWO

Michael Kjeldsen — Fri, 14 Aug 2009 20:43:33 GMT

Mikkel deMib Svendsen:
Alt ovenstående har med multivariant testing at gøre. Jeg har ikke kigget nærmere på hvordan de håndterer A/B testing endnu, men tilsyneladende er det fortsat med unikke URL'er som varianter og det er jeg bestemt ikke vild med!

Jeg kan ihvertfald røbe, at Silverstripe (der i øvrigt er er udmærket CMS) suger MAX i forhold til MVT, så der er man som udgangspunkt bundet til A/B-test...

Svar: YouTube Tester 1.024 forskellige forsider og fik 15% flere signups med GWO

Boysen — Fri, 14 Aug 2009 19:46:28 GMT

Mikkel deMib Svendsen:
Alt ovenstående kan dog teknisk set sagtens løses - hvis din leverandør gider at gøre det eller hvis det er noget du selv kan fikse.

Hej Mikkel

Har I overvejet GWO til Redpitt? Eller måske kan det allerede bruges til systemet?

Svar: YouTube Tester 1.024 forskellige forsider og fik 15% flere signups med GWO

Mikkel deMib Svendsen — Fri, 14 Aug 2009 19:35:21 GMT

Jeg kan se, at der er kommet en del forbedringer til GWO siden sidst jeg forsøgte mig med det. Dengang var det godt nok skidt. Ser lidt bedre ud nu :)

Der er dog mange ting, som man næsten kun kan teste ordentligt, hvis man bygger et test-system ind i sit publicerings-system - herunder forskellige style sheets, priser, produktvarianter osv - ting der kræver at de forskellige variationer der skal testes reflekteres i back end systemerne.

I princippet ser implementeringen enkel nok ud - problemet er, hvis man arbejder med en publiceringsplatform, hvor tracking script til Google Analytics allerede er implementeret og håndteres fra nogle lokale funktioner. For at få det til at virke på den type platforme, skal der laves et par "hacks" så de (test-) side-specifikke tilføjelser til GA tracking scriptet kan indsættes.

Et andet problem er, at det ikke er altid er alle tekstelementer på en side, der kan redigeres voa HTML - som det kræves for at sætte "Sideafsnit" ind. Det drejer sig f.eks. typisk om OVERSKRIFT og TEASER flter.

Samme problem opståpr også, når sider er opbygget af flere dynamiske elementer - hvilket de fleste websites baseret på moderne publiceringssystsmer vil være. Det kan f.eks. være navigeringselementer, footer eller andre faste eller variable elementer på siderne. Disse vil normalt ikke kunne redigeres direkte på den enkelte side og derfor kan der ikke indsættes "Sideafsnit" omkring dem - og dermed teste dem.

Alt ovenstående kan dog teknisk set sagtens løses - hvis din leverandør gider at gøre det eller hvis det er noget du selv kan fikse.

Alt ovenstående har med multivariant testing at gøre. Jeg har ikke kigget nærmere på hvordan de håndterer A/B testing endnu, men tilsyneladende er det fortsat med unikke URL'er som varianter og det er jeg bestemt ikke vild med!

Svar: YouTube Tester 1.024 forskellige forsider og fik 15% flere signups med GWO

Lundsby — Fri, 14 Aug 2009 18:47:30 GMT

Hej Karsten

Super indlæg, jeg havde selv fornøjelsen at være til Webshop ERFA, hvor Morten Vadskær fremviste GWO. Som dælen hvor er det et sejt værktøj, og man må sige Morten havde sat sig godt og grundigt ind i det.

En af de ting han nævnte var, at det rent faktisk er ulovligt at teste på pris, så det skal man nok varer med at følge dit eksempel.

Jeg har brugt lidt af formiddagen, på at læse techie guide til GWO, og det viser sig at det ser rigtigt let ud for os shop-leverandører at integrere med GWO, så mon ikke vi snart ser split-test funktionalitet i de forskellige shopløsninger, meget snart, vi har ihvertfald puttet det på udviklingsplanen. Og tidsestimatet er under 2 dage. Sørme fedt, af Google at stille den slags værktøjer gratis til rådighed!!! (Så slipper jeg også for at læse op på hypotese prøvning)

GWO brug den før din konkurrant :-)

Svar: YouTube Tester 1.024 forskellige forsider og fik 15% flere signups med GWO

Karsten Lund — Fri, 14 Aug 2009 17:59:19 GMT

Hold da fest det er dejligt med noget ros!

- Tak til dem der fandt mit indlæg så godt, jeg skrev det sådan set bare fordi jeg godt kunne tænke mig at dele min glæde med jer.

Og Mikkel -du er en snu ræv- havde jeg vidst det ville få så meget opmærksomhed, havde jeg lige løbet URL'sene igennem før jeg postede, og derefter glemte alt om det, indtil tidsbegrænsningen for redigering var løbet :)

Jeg har oprettet en wikipost om det på jeres opfordring og til Mikkels ære, har jeg lavet det med RIGTIGE URLS, og et par flere cases og gode ressourcer.

Ha'en rigtig dejlig weekend :)

-Karsten

Svar: YouTube Tester 1.024 forskellige forsider og fik 15% flere signups med GWO

Mikkel deMib Svendsen — Fri, 14 Aug 2009 17:29:34 GMT

Karsten, der er en del af dine links i indlægget der ikke virker - dels er et par af de sidste URL'er forkerte, og så har du glemt http:// på nogle af de andre.

Specielt savnede jeg personligt linket til "Et godt online tutorial (engelsk) om at teste med GWO", som jeg da gerne lige ville se :)

Svar: YouTube Tester 1.024 forskellige forsider og fik 15% flere signups med GWO

Michael Kjeldsen — Fri, 14 Aug 2009 15:31:17 GMT

I forhold til GWO, hvordan udfører du så prisdifferencieringen i praksis? Ét er at skrive det på landing-page'n, nogen andet er at sørge for, at prisskiftet går igen over hele sitet...

Svar: YouTube Tester 1.024 forskellige forsider og fik 15% flere signups med GWO

Jacob Rohde — Fri, 14 Aug 2009 14:22:42 GMT

Ja, det er et genialt indlæg. Kopier det over i wikien.