´Cijfers zeggen alles´, zei laatst een verdwaald schaap tegen mij. Het was tijdens een workshop voor een multivariatietest, waarbij we met z´n allen moesten bedenken welke variaties we gingen testen. De pagina die eraan zou moeten geloven was een uitlogpagina. Zelfs Stevie Wonder kon zien dat deze pagina 1. extreem lelijk was en 2. dat hij niet zou converteren omdat hij op geen enkele manier geoptimaliseerd was.
Ik was met het verdwaalde schaap en een paar van de andere webanalisten in discussie geraakt omdat ik vond dat je niet alles met cijfers aan moet tonen. Soms is gezond verstand voldoende. Het gevaar van alles met cijfers aantonen is dat je de beslissers er een verkeerd signaal mee geeft. Bij de workshop zaten marketingprofessionals, contentspecialisten, webanalisten, communicatiespecialisten, interactiedesigners etc. Is een multivariatietest nou echt nodig om te bepalen dat poep stinkt? Moet je nou echt in een tabelletje terug zien dat poep inderdaad stinkt? En als je eenmaal het meest voor de hand liggende gaat meten, moet je dan ook gaan meten dat water nat is omdat anders je professionele mening niks waard is?
´Cijfers liegen niet,´ vloog me in dezelfde discussie even later ook nog eens om de oren. Ook zo´n non-opmerking. Cijfers liegen op zichzelf uiteraard niet. Cijfers doen niet zoveel. De waarde van cijfers hangt af van vele factoren. Als ik zeg dat 5 mensen borstkanker krijgen, dan zegt dat helemaal niks. Als ik zeg dat 5 van de 6 vrouwen in Nederland borstkanker krijgen, dan zegt dat al veel meer. Als ik zeg dat het 5 van de 6 rokende vrouwen in Nederland zijn, komen we nog een stapje dichter bij het hele verhaal. Maar ook dan kunnen er hele andere factoren dan het roken leiden tot die borstkanker. Kort gezegd, de analyse van de cijfers en de vertaling ervan is belangrijk. Het verdwaalde schaap had voor mij meteen de vinger op de zere plek gelegd.
Natuurlijk moet je meten, maar daarmee zit je absoluut nog niet keihard te weten. Als het werk van een webanalist bestaat uit het uitdraaien van rapportages uit coole meetpakketten, dan heb ik weinig behoefte aan een webanalist bij het verbeteren van mijn site en heb ik voldoende aan iemand die de juiste knop weet te vinden in het coole pakket van de dag. Nee, daar zit de meerwaarde van de webanalist niet in. Het analyseren, in de context plaatsen en bedenken wát moet worden gemeten, daar zit de meerwaarde van de webanalist in. Een goede webanalist meet niet elke punt en komma, om dan die cijfers de digi-ether in te gooien. Een goede webanalist kijkt, luistert en gebruikt de kennis van professionals (inclusief de eigen kennis uiteraard). Bepaalt dan wat er zinnig is om te meten. En neemt wanneer de cijfers binnenrollen de context in acht bij het analyseren van de gegevens.
Toch kom ik nog teveel meet-weters tegen. Teveel cijferprinters. Dat kan toch nooit webanalyse zijn?
Contentgirls
33, werkzaam in de internetbiz sinds ‘98, tijdens de internetbuzz, maar gelukkig ook nog na de internetbust.Onder andere dienst gedaan als ontwerper, webredacteur, contentmanager, webmaster, flashbouwer en nu dan teamleider van een...
Lees verder »Nieuwsbrief
Voortdurend op de hoogte van het laatste analytics en optimalisaties nieuws met onze nieuwsbrief!
Gebruik je al eSurveysPro?
Deze User Surveys software wordt in Nederland onder andere gebruikt door
Lees meer over eSurveysProAangeboden door AboutAnalyticsNieuwste reacties
- the pilatesbiz: Hi there! Quick question thats entirely off topic. Do you know how to make your site mobile friendly? My web site looks...
- Leendert: Als ik het nu zo kijk heeft independer dit met de lening site wel aangepast. Ik vind dit een interessante materie. Al...
- Jan de Vries: Dank Michel voor je tip!
- Michel Kompanje: Leuke site om in de gaten te houden is http://visual.ly/. Binnenkort kun je hier op een gemakkelijker manier je eigen...
14 reacties
http://en.wikipedia.org/wiki/Lies,_damned_lies,_and_statistics is een leuke voor je.
Cijfers zijn ook alleen maar cijfers, het gaat erom wat je er verder mee doet. Belangrijk is wel dat ‘management’ vaak erg van cijfertjes houdt en dat het vaak noodzakelijk is om cijfers te overleggen om zodoende een bepaalde actie geaccordeerd te krijgen. Helaas is een gut-feeling vaak niet voldoende om de decision maker te kunnen overtuigen.
Leuk artikel
Leuk stuk! Ben het ook met bovenstaande reacties eens. Cijfers kan je goed gebruiken als onderbouwing van iets dat een open deur lijkt (bijvoorbeeld ‘dat poep stinkt’). Het versterkt iets wat jij al weet en kan verbeteringen aandragen (die jij wellicht nog niet weet). Context is inderdaad belangrijk. Weet altijd wat je wilt meten en met welk doel je iets meet. Het kan beter zijn om testen klein te houden, waardoor de kans groter is dat de context gelijk blijft, waardoor je beter kunt zeggen wat het effect van veranderingen is.
Amen!
Webanalyse is natuurlijk niet het rapporteren van cijfers, getallen en statistieken. Daar ben ik het absoluut mee eens. Het zou wel een heel saaie bezigheid zijn om alleen maar naar cijfers te kijken, dat kan natuurlijk niet het doel zijn bij webanalyse.
Het gaat bij webanalyse om het analyse gedeelte van het woord, dat je verbanden gaat leggen tussen dingen en zo oorzaak-gevolg relaties gaat zien. Daarbij moet je ook je gezond verstand gebruiken en nooit het doel uit het oog verliezen. Het doel van een multivariatie test is om te kijken welke variatie beter is. De gebruikte variaties moeten dus allemaal goed genoeg zijn, in ieder geval beter dan de oorspronkelijke versie (in veel gevallen kun je slechte variaties direct aanwijzen).
Ten eerste heeft het geen enkel nut om een goede variatie te vergelijken met een slechte variatie. Ten tweede zorgt een slechte variatie voor minder conversie. Dus als je test periode vrij lang is, kunnen al die variaties die minder goed zijn ervoor zorgen dat je juist klanten verliest. Zo schiet je je doel helemaal voorbij.
Kortom, bij een mvt test zou je het aantal variaties beperkt moeten houden zodat je het overzicht en controle over de test houdt.
@Ton: Leukk om aan boord te zijn! Ik zal die links eens even bekijken. Ben het wel met je eens dat het goed kan zijn zaken met cijfers aan te tonen. Maar ook risicovol. Wanneer een manager aan de haal gaat met de cijfers – zonder enige kennis van zaken – gebeuren er vaak vervelende dingen. Daarbij voed je die manager verkeerd op als je stelt dat iets pas waar is wanneer de cijfers het zeggen.
@Vincent: Zoals ik ook tegen Ton zei kunnen cijfers ook risicovol zijn – indien niet kundig geanalyseerd. Een goede webanalist weet die analyse – met behulp van andere professionals ook rond te maken zonder die cijfers – in sommige gevallen dus.
@reinout: Inderdaad – vooral dat laatste wat je zegt: weet wat je wilt meten en met welk doel. Ãlles valt te becijferen – dat kan elke statisticus je vertellen..
@Robin: Proost!
Hier zal geen webanalist het mee oneens zijn lijkt me!
Wat je aanhaalt betreft de ontwikkeling van de markt. Eerst zijn er cijfers, daarna ga je bedenken wat je met die cijfers kunt en vervolgens wordt er bedacht welke cijfers nog meer interessant zijn. Dat wordt in eerste instantie volledig overdreven zodat ALLES maar gemeten moet kunnen worden, om daarna in een fase te komen waarin duidelijker bepaald wordt welke gegevens nu écht interessant zijn.
In deze fase is het van belang dat er ook tijd wordt uitgetrokken (FTE of inkoop) om dit soort werkzaamheden uit te kunnen voeren.
@Martijn: maar waar zijn ze het niet mee oneens? Dat analyse de sleutel is óf dat er nog teveel webanalisten zijn die dat vergeten?
Het eerste. Naar mijn mening zijn de mensen “die dat vergeten” geen webanalisten. Ze willen het misschien wel worden en zijn er mee bezig, maar ze zijn nog in opleiding
Veelal zijn dat mensen waar het een onderdeel is van hun functie (marketingmedewerker) en niet bij diegene waar het hun enige activiteit is (specialisme).
Ik kan me ook helemaal vinden in bovenstaande verhaal. Om even met een praktijkvoorbeeld aan te haken:
Onze website heeft een redelijk constant aantal bezoekers en een licht stijgende omzet. Op het eerste gezicht blijkt hier niet zoveel uit. Als ik echter als analist weet dat in de markt een terugloop is in het aantal bestellingen met 20-40% en ik (tegen de trend in) dus constante omzet hou, dan weet ik dat ik het beter doe dan mijn concurrenten. Kun je niet uit het “coole-pakket-van-de-dag” halen!
Onder het motto: Don’t deliver dead tries, but insights. Vind ik dat nog te veel “analisten” zich bezig houden met alleen rapporteren. Het is denk ik veel belangrijker specifieke dingen te gaan meten. Dit eventueel in samenwerking met andere specialisten (bijv. interaction designers en usability experts), en daar je conclusies uit te gaan trekken. Daarom is het denk ik ook belangrijk te weten waarom je dingen meet, om de cijfers die hier uitkomen weer in de juiste context te kunnen zetten.