Hoe deelnemen aan een studie je resultaten al verpest voordat het experiment begint
Stel: een onderzoek naar een dieetinterventie vindt dat deelnemers biologisch jonger worden.
Het Hawthorne-effect is een klassiek fenomeen in de sociale wetenschappen: mensen die weten dat ze worden geobserveerd, veranderen hun gedrag. Ze slapen beter, bewegen meer, eten gezonder, drinken minder alcohol. Dat klinkt onschuldig, maar in klinisch onderzoek is het een serieus methodologisch probleem. Want als die gedragsveranderingen biologische biomarkers beïnvloeden — en dat doen ze — dan weet je als onderzoeker niet meer of het de interventie was die werkte, of de loutere aanwezigheid in een studie.
In het verouderingsonderzoek speelt dit extra sterk, zo beargumenteert een publicatie in Nature Aging. Geroscience-studies meten biomarkers van biologische leeftijd: bloedwaarden, epigenetische klokken, ontstekingsmarkers. Die zijn gevoeliger voor leefstijlveranderingen dan veel andere uitkomstmaten. Een deelnemer die iets gezonder gaat eten omdat ze in een studie zit, kan daarmee een meetbaar effect produceren op haar biologische leeftijdsscore — een effect dat los staat van welke pil of interventie dan ook wordt getest.
Hoe groot is het probleem eigenlijk?
De auteurs laten zien dat observatie-geïnduceerde gedragsveranderingen biomarkerverschuivingen kunnen produceren die vergelijkbaar zijn met — of zelfs groter zijn dan — de effecten van de geteste interventies zelf. Dat is een schokkend gegeven. Het betekent dat een deel van de positieve resultaten in verouderingstrials mogelijk niet aan de interventie toe te schrijven is, maar aan de studie-deelname als zodanig.
Het klassieke antwoord hierop is dubbelblinde placebocontrole: noch de deelnemers, noch de onderzoekers weten wie het echte middel krijgt en wie de neppil. Maar in veel verouderingsstudies is dat lastig uitvoerbaar. Een dieetinterventie of een bewegingsprogramma laat zich niet makkelijk ‘blinden’. En zelfs bij geneesmiddelstudies met een echte placebo kunnen deelnemers gedragsveranderingen doorvoeren die niet worden ondervangen door de blindering.
Een methodologisch raamwerk als gedeeltelijke oplossing
De publicatie doet meer dan het probleem signaleren: ze stelt een methodologisch raamwerk voor om het Hawthorne-effect te isoleren en te kwantificeren. Dat omvat onder meer het toevoegen van een ‘observatiearm’ — een groep die alleen wordt gevolgd zonder enige interventie, om de baseline-effecten van studie-deelname in kaart te brengen. Ook suggereren de auteurs dat studies langere acclimatisatieperioden inbouwen, zodat initiële gedragsveranderingen zijn uitgedoofd voor de eigenlijke meting begint.
Voor lezers die verouderingsstudies volgen, biedt dit een nuttig kompas. Wanneer een studie spectaculaire verbeteringen in biologische leeftijdsbiomarkers rapporteert zonder expliciete controle voor het Hawthorne-effect, is enige scepsis op zijn plaats. De vraag is niet of het effect echt is — het kan zeer reëel zijn — maar of het toewijsbaar is aan de interventie. Dat onderscheid is precies wat wetenschap probeert te maken, en het is in dit veld nog lang niet altijd gelukt.