Was me dat even een merkwaardige studie die klinisch fysicus Jeroen Verbunt me tipte. Voor een wetenschappelijk onderzoek renden Amsterdamse zorgmedewerkers op klompen door de gang van het ziekenhuis. De ene helft moest daarbij maat 38 dragen, de andere helft maat 47 en deze groepen waren willekeurig ingedeeld zodat de onderzoekers keurig konden bepalen welke schoenmaat de beste is.
Intensivecare-arts Paul Elbers beschrijft met zijn collega’s waarom dit onderzoek zo belangrijk is: goede klompen zijn cruciaal op de intensive care. Die moeten goed zitten, zeker als je naar een spoedgeval rent. Hun onderzoek laat overtuigend zien dat maat 38 beter werkt dan maat 47, want daarmee waren deelnemers gemiddeld sneller de gang door. Elbers en consorten schrijven dan ook dat ze verwachten dat maat 38 als gouden standaard in de gezondheidszorg wordt ingevoerd.
Net als de moed je in je schoenen begint te zinken over het niveau van de hedendaagse wetenschap, blijkt wat de echte bedoeling is van hun onderzoek. De onderzoekers geven schoorvoetend toe dat er een kleine kans is dat hun experiment misschien niet helemaal eerlijk was opgezet. Zowel hun interventie- als hun controlegroep zijn niet zo representatief voor hoe het echt gaat in de praktijk. Normaal dragen zorgmedewerkers namelijk gewoon klompen in hun eigen schoenmaat.
Het doel van dit artikel is om te waarschuwen voor dit soort methodologische fouten: zo’n knullige onderzoeksopzet geeft een resultaat waar je in de praktijk helemaal niets aan hebt. De auteurs noemen fijntjes een hele reeks serieuze medische studies die precies zo’n opzet hebben gevolgd met het vergelijken van een ‘lage’ en ‘hoge’ waarde. Bijvoorbeeld een behandeling voor een shocklong met als instelling 6ml/kg of 12 ml/kg. Ik weet ook niet wat dat betekent, maar blijkbaar is dat net zoiets als klompen in maat 38 of 47 met elkaar vergelijken.
Het klompenartikel is gepubliceerd onder het trefwoord ‘covid-19’ (oftewel coronavirus) – wat goed nieuws is voor u, want daardoor is het artikel voor iedereen gratis te lezen in het covid-19-archief van Elsevier. De laatste alinea van het artikel vermeldt echter dat het belangrijk is om op te merken dat deze studie he-le-maal niets te maken heeft met covid-19. De auteurs schrijven dat ze het trefwoord covid-19 alleen toevoegden om de kans op een snelle publicatie te vergroten (en vermoedelijk ook om aan te geven dat lang niet al het gepubliceerde corona-onderzoek even hoogstaand is). Nu breekt mijn klomp – zoals de auteurs zelf ook vrolijk als laatste zin opschrijven.
Er is veel dat mij hieraan verbaast. Dat dit artikel door het proces van peer-review kwam. Dat Elsevier het trefwoord ‘covid-19’ accepteerde. Dat het nodig was om uit te leggen dat zo’n onderzoeksopzet een dom idee is. Dat de onderzoekers daarvoor echt de moeite namen om mensen op twee maten klompen door de gang te laten rennen. Maar het meest van alles verbaast het me dat ik zelf nooit op het idee ben gekomen om dit soort kritiek in de vorm van een krankzinnig wetenschappelijk artikel te gieten.
Deze column verscheen op 11 september 2020 in de Volkskrant.