A/B en Multi Variatie Testen wordt snel mainstream


 door 

Eind oktober was weer het jaarlijkse Emetrics congres in Washington en daarbij is het ondertussen traditie geworden dat Google nieuwe ontwikkelingen rondom haar webanalyse software aankondigt. Overal op internet werd ruim de aandacht gegeven aan de 8 grote verbeteringen in Google Analytics. De op hetzelfde congres aangekondigde veranderingen in het A/B en Multi Variatie Test product Website Optimizer zijn daardoor volledig ondergesneeuwd, terwijl de lange termijn impact hiervan veel groter is dan de wederom goede verbeteringen in Google Analytics.

Waar de concurrentie rondom het servicen van segmenten gebruikers van Google Analytics toeneemt door de opkomst van bijvoorbeeld specifieke engagement analytics software voor weblogs (zoals PostRank analytics) en het voor consultancy partijen interessantere Yahoo Analytics heeft Google nog een volledig monopolie in het aanbieden van gratis A/B en Multi Variatie Test software. Op Emetrics werden hierbij 2 vernieuwingen aangekondigd.

Website Optimizer over time charts

De eerste vernieuwing is niet heel spannend, maar vooral praktisch. Eén van de pluspunten bij het gebruiken van een A/B en Multi Variatie Test pakket zoals Omniture’s Test & Target (en dan met name het oude Offermatica gedeelte) is de aanwezigheid van de “over-time grafieken”. Met deze cumulatieve grafiek krijg je grafisch inzicht in de presentatie van de verschillende test variaties over de test tijd heen. Natuurlijk wil je wachten tot significantie is bereikt, maar bijna altijd kun je al redelijk snel uit grafieken opmaken of dit wel of niet binnen een redelijke tijd gaat lukken. Het is immers beter snel te stoppen met een test die niet veel verschil gaat opleveren en te starten met een nieuwe test, dan te wachten totdat het verschil ooit significant is geworden.

Optimizer conversion graph

Website Optimizer API

Wat wel een belangrijke stap is in het gebruiken van A/B en Multi Variatie Test software is het 2e nieuws: het feit dat Google voor het opzetten managen van experimenten binnen Website Optimizer een API heeft geopend. Hierdoor wordt het voor Content Management Systeem pakketten mogelijk om de Website Optimzer software binnen hun eigen omgeving te integreren. Dit betekent een stap richting main stream.

Integratie Website Optimizer en CMS

De meeste test software pakketten zijn immers kwa usability bedoeld voor development nerds en niet geschikt om te gebruiken door webredacteuren of marketeers. Nu is het dus mogelijk gemaakt om meerdere variaties van pagina’s of elementen op een webpagina binnen je CMS bij elkaar te klikken en automatisch te laten uittesten. Binnen de bekende omgeving kan alleen met uitleg waarom door iedere gebruikers een test worden aangemaakt (zonder dat dit een test wordt genoemd…). Hierbij ga ik er natuurlijk vanuit dat CMS leveranciers de koppelingen met de Website Optimizer API gaan maken. Ik vermoed van wel, vanwege het feit dat de druk zal worden opgebouwd vanuit de open source wereld. M.i. zullen pakketten zoals WordPress, Drupal en Magento binnen kort tijd een goede Website Optimizer plugin aanbieden.

Website Optimizer API geeft geen data

De gelanceerde API betreft echter alleen de management mogelijkheden. Statistieken worden niet gedeeld en die zijn wel nodig bij verder gaande automatisering van testen binnen een CMS. Dit is echter geen probleem. Je hebt immers al vaker geleerd dat testen zonder segmentatie redelijk zinloos is. Je optimaliseert immers van poldermodel A naar poldermodel B, waarbij je in de nieuwe versie hopelijk meer mensen helpt dan wegjaagt. Wanneer je gaat testen met Website Optimizer is het koppelen van de test en conversie aan Google Analytics een must om te bepalen hoe welk segment bezoekers reageert op een variatie.

CMS van de toekomst met automatische testen

Het grote voordeel van Google Analytics is dat daar wel een dat API van ontsloten is. Het is dus mogelijk om de prestatie van Website Optimizer testen uit te lezen via de API van Google Analytics en op basis daarvan een test aan te passen. Dit geeft de mogelijkheid van de ontwikkeling van een volledig automatische test cyclus binnen een CMS waarbij een redacteur standaard voor buttons, images, teksten etc. meerdere versies moet opgeven die automatisch worden getest op de bezoekers. Doordat het CMS op basis van Google Analytics data kan bepalen welke versie het beste werkt voor welk segment bezoekers creëer je een zelflerend systeem dat bij lage prestaties van contentonderdelen zelf een notificatie kan sturen naar een webredacteur met de vraag bepaalde specifieke content te vervangen.

Zie daar het toekomstige, verkoop en service optimalisatie gerichte CMS waarbij de gebruikers niet eens hoeven na te denken of ze aan het testen zijn. Het zit dan volledig in de manier van werken ingebakken.

6 reacties


Developers die willen meewerken aan de ontwikkeling van tool of plugin voor een automatische optimalisatie via de website optimizer en google analytics API’s. Mail mij! Hier zitten interessante commerciele proposities achter.


Jajaja! Goed stuk! Al lezende kwam ik ook met de GA API resultaten oplossing die je dan weer kan gebruiken in je CMS om je GWO (API) test mee aan te passen. Dat klinkt mij als muziek in de oren :D Ik ben ook zeer benieuwd naar de eerste WordPress plugins en kan niet wachten om zelfregulerende tests op te zetten! (is dat een nieuwe term? ;) )


Leuk artikel! Ik zit net als jullie te trappelen van ongeduld als het gaat om vernieuwende tools die op de API van de GWO gebaseerd zijn. Wij krijgen vaak het bezwaar dat testen zo ingewikkeld is binnen een CMS. Hopelijk gaan de open-source pakketten snel met eerste plugins komen.


Heel interessant Ton! Op het moment dat je vanuit bijvoorbeeld Drupal op deze manier tests “in elkaar kunt klikken” en daar ook nog eens geautomatiseerd de juiste acties aan kunt verbinden (bijv. tonen van de best scorende content voor een bepaald segment), dan wordt optimaliseren op basis van betrouwbare tests voor veel organisaties wellicht een stuk toegankelijker. En, niet onbelangrijk, WA en optimizing wordt dan mogelijk makkelijker onderdeel van de standaard webprocessen.

Is er voor zover bekend eigenlijk al een CMS dat m.b.v. de GA API visitordata helemaal geïntegreerd in het CMS interface inzichtelijk maakt, netjes gekoppeld aan de content elementen en/of eventuele goals?


@ Foris:
http://www.motivitycms.com/ GWO & GA
http://www.siteflex.com.au/ GA

Dit zijn enkele voorbeelden van een cms met GA API integratie.


Goed artikel! Testen kan me niet snel genoeg mainstream worden ;) De uitspraak over de lange termijn effecten van de GWO API t.o.v. de GA update (die ook niet mis is) is denk ik kort door de bocht. Door de laatste GA updates wordt GA meer en meer een enterprise tool. Het effect hiervan zal in mijn optiek ook als een katalysator werken in het GWO gebruik. De API daarbij opgeteld, valt er zeker een enorme groei op lange termijn te verwachten, echter zou ik deze niet bij voorbaat meteen toewijzen aan de API. Ik hoop natuurlijk wel dat veel CMS leveranciers de API hoog op de agenda gaan zetten, hoe meer er getest wordt hoe beter wat mij betreft.

Plaats een reactie | Houd u op de hoogte van reacties via e-mail

* Verplicht in te vullen

Houd mij op de hoogte van nieuwe reacties. Of abonneer jezelf op deze discussie zonder te reageren.

Door:

Ton Wesseling (1974) is een ervaren online rendement consultant. Zijn inhoudelijke passie vervult hij als partner en chief optimization officer bij Online Dialogue. Hij heeft ervaring met trajecten voor onder andere ABN AMRO, Booking, Es...

  • Aantal woorden: 732

  • Aantal tweets: 5

  • Aantal reacties: 6

Nieuwsbrief

Voortdurend op de hoogte van het laatste analytics en optimalisaties nieuws met onze nieuwsbrief!

Gebruik je al Advanced Web Stats?

Lees meer over Advanced Web StatsAangeboden door AboutAnalytics