Wetenschappelijke artikelen worden geschreven door ervaren onderzoekers en ingediend bij tijdschriften die een bepaald kwaliteitsniveau moeten garanderen. Om een goede kwaliteit te garanderen, werven tijdschriften specialisten in het vakgebied aan om de kwaliteit van de papers te beoordelen en op basis van hun commentaar wordt het werk goedgekeurd of afgekeurd voor publicatie. Dit proces wordt peer review genoemd.

Maar door de jaren heen is het duidelijk geworden dat het simpelweg citeren van een paper niet langer voldoende is om een argument te winnen. Het is veel belangrijker dat het publiek begrijpt hoe een wetenschappelijk artikel in zijn context moet worden geplaatst en wat de werkelijke relevantie ervan is.

Waarom we voorzichtiger moeten zijn met wetenschappelijke referenties

Jaarlijks worden er ongeveer 3,4 miljoen artikelen gepubliceerd. De Nature Index 2024 laat zien dat de VS en China de publicaties domineren, terwijl Portugal in absolute aantallen op de 29e plaats staat. Landen als Pakistan, Vietnam en India zijn echter koplopers wat betreft het aantal publicaties per hoofd van de bevolking. Wereldwijd stijgt het aantal wetenschappelijke publicaties. Dit kan betekenen dat meer landen in onderzoek investeren, dat meer wetenschappers aan belangrijke vragen werken of dat de nieuwsgierigheid toeneemt. Het brengt echter uitdagingen met zich mee: hoe kunnen we miljoenen artikelen beoordelen en hun resultaten vertrouwen? Teruggetrokken publicaties zijn een zorgwekkende trend. Uitgevers verwijderen publicaties met ernstige problemen, zoals wangedrag, methodologische fouten of ethische bezwaren.

De situatie wordt nog gecompliceerder als papers worden geciteerd in openbare discussies. Het komt vaak voor dat tegenstrijdige beweringen worden ondersteund door "studies". Een bekend voorbeeld is een artikel uit 1998 waarin een verband werd gesuggereerd tussen het MMR-vaccin en autismespectrumstoornissen. De studie kreeg veel media-aandacht en droeg bij aan een daling van de vaccinatiegraad. Later onderzoek bracht ernstige methodologische fouten, belangenverstrengeling en ethische overtredingen aan het licht en het artikel werd uiteindelijk ingetrokken. Desondanks wordt het artikel nog steeds geciteerd door sommige publieke figuren, die beweringen herhalen die al lang in diskrediet zijn gebracht door de wetenschappelijke gemeenschap.

Het is belangrijk om te weten dat wanneer een artikel later wordt weerlegd, dit niet noodzakelijk betekent dat wetenschappers oneerlijk waren. Vaak weerspiegelt het hoe de wetenschap zich ontwikkelt: door meerdere onderzoeken die dezelfde vraag vanuit verschillende invalshoeken testen.

Auteur: João R. Neves ;

Waarom er zoveel artikelen worden gepubliceerd

De organisatie van de moderne wetenschap zet onderzoekers vaak onder druk om resultaten te fabriceren of te manipuleren om financiering veilig te stellen en academische posities te behouden. Dit leidt tot Paper Mill-schema's die artikelen produceren met vervalste gegevens tegen een vergoeding of die auteursaccreditatie uitwisselen om het aantal publicaties op te krikken. Roofzuchtige tijdschriften bieden publicatie aan met minimale of geen echte peer review om de winst te maximaliseren. Zelfs zonder wangedrag beïnvloeden prikkels op subtiele wijze onderzoek. Replicatiestudies, die de betrouwbaarheid van eerdere resultaten verifiëren, zijn zelden haalbaar vanwege de moeilijkheid om financiering te krijgen. Ten slotte worden negatieve resultaten vaak niet gepubliceerd omdat tijdschriften dergelijke resultaten niet willen accepteren, omdat ze prioriteit geven aan transformerend bewijs.


Betekent dit dat wetenschap niet te vertrouwen is?

Natuurlijk niet. Door haar zelfcorrigerende aard blijft wetenschap de meest betrouwbare methode die we hebben om de wereld te begrijpen. Eén enkel artikel bepaalt niet de kracht ervan, maar het draagt bij aan het collectieve proces van testen, repliceren en valideren. Het wetenschappelijke proces is dus in staat om zichzelf na verloop van tijd te corrigeren door mogelijke fouten te ontdekken en experimenten opnieuw uit te voeren om een eerdere hypothese te valideren of te weerleggen. In die zin kan wat vandaag waar en overtuigend lijkt, morgen in diskrediet worden gebracht. Tussen de 17e en het begin van de 20e eeuw werd tabak bijvoorbeeld geadviseerd om astma en andere aandoeningen aan de luchtwegen te behandelen. In die tijd wees de kennis van artsen, gebaseerd op het beste beschikbare bewijs, in die richting. Nu weten we echter beter dat tabak deze aandoeningen niet alleen niet behandelt, maar zelfs verergert. Deze voortdurende correctie, hoewel het tegenstrijdig lijkt, is de manier waarop kennis zich ontwikkelt.

Soorten wetenschappelijke artikelen

Wanneer mensen "een studie" noemen, denken ze vaak aan een origineel onderzoeksartikel. Dit is echter niet het enige type wetenschappelijk artikel. Wetenschappelijke literatuur bestaat uit verschillende soorten documenten met verschillende doeleinden. De meest voorkomende zijn originele onderzoeksartikelen waarin nieuwe experimenten of gegevens worden gepresenteerd. Verkennende studies onderzoeken nieuwe of over het hoofd geziene onderzoeksrichtingen en eindigen vaak met een gestructureerde hypothese en een oproep tot verder onderzoek. Bevestigend onderzoek volgt een striktere structuur, ontworpen om een specifieke hypothese te testen.

Auteur: João R. Neves ;

Hoewel de meeste mensen denken aan papers als bevestigende studies, zou ik zeggen dat de meerderheid (afhankelijk van het vakgebied) verkennend is. In beide gevallen richten deze studies zich op specifieke vragen, dus een enkele studie alleen geeft zelden een definitief antwoord.

In overzichtsartikelen worden de resultaten van veel studies over een onderwerp samengevat, zodat er een duidelijker beeld ontstaat van het begrip van de wetenschappelijke gemeenschap. De meeste reviews zijn verhalend en hebben geen gedefinieerde zoekstrategie, wat de bedoeling van de auteurs kan weerspiegelen. Tot de gestructureerde benaderingen behoren systematische reviews en meta-analyses. Systematische reviews volgen een gedefinieerde methodologie voor het doorzoeken van de literatuur, inclusief sleutelwoorden, databases en criteria. Meta-analyses verzamelen kwantitatieve gegevens van onderzoeken en analyseren deze statistisch om de richting van het gecombineerde bewijs te bepalen.

Tot slot zouden onderzoekers interpretaties kunnen bespreken in plaats van nieuwe resultaten te presenteren in commentaren of opiniestukken. Het herkennen van het type paper helpt bij het beoordelen van het gewicht van de conclusies.

Kunnen we zeggen of een studie betrouwbaar is?

Het zou handig zijn als elk wetenschappelijk artikel een betrouwbaarheidsscore had. Sommige tools proberen al iets soortgelijks te doen door citaten te analyseren, statistische consistentie te controleren of te evalueren of methoden duidelijk worden gerapporteerd. Het beoordelen van de betrouwbaarheid van een onderzoek alleen op basis van de paper is echter ingewikkelder. De kracht van een onderzoek hangt af van factoren zoals het experimentele ontwerp, de steekproefgrootte en hoe de resultaten passen bij eerder werk.

Toch kunnen een paar eenvoudige vragen helpen om een onderzoek in de juiste context te plaatsen. Een daarvan is of de claim gebaseerd is op één artikel of op meerdere onderzoeken die tot vergelijkbare conclusies komen. Wetenschappelijke kennis wordt meestal sterker als verschillende onderzoeksgroepen in de loop van de tijd vergelijkbare resultaten behalen. Je kunt dit zoeken in de citaten in de inleiding en discussie van het artikel. Het kan ook helpen om te kijken hoe het onderzoek is uitgevoerd. Zeer kleine steekproeven, het ontbreken van controlegroepen of vage beschrijvingen van de methoden kunnen erop wijzen dat de resultaten met voorzichtigheid moeten worden geïnterpreteerd. Kijk naar de methoden en de ondertitels van de grafieken om inzicht te krijgen in deze onderwerpen. Tot slot is het de moeite waard om je af te vragen of het resultaat past in een groter geheel van onderzoeken. Een onderzoek dat overeenkomt met consistente bevindingen in veel artikelen weegt over het algemeen zwaarder dan een verrassend resultaat dat nog niet is bevestigd. Om dit te controleren moet je misschien een kijkje nemen in wetenschappelijke databases, zoals PubMed, Web of Science, of andere meer gebruikelijke databases in het vakgebied. Om deze reden vertrouwen wetenschappers zelden op een enkel artikel, maar eerder op de opeenstapeling van bewijs in de loop van de tijd.

Uiteindelijk is een wetenschappelijk artikel geen definitief antwoord. Het is een bijdrage aan een voortdurend gesprek over hoe de wereld werkt. Dus de volgende keer dat iemand zegt dat "de wetenschap zegt" of dat "een studie iets bewijst", is het misschien de moeite waard om even stil te staan. Eén artikel alleen beslecht zelden een debat. Wetenschappelijke artikelen op deze manier leren lezen is misschien wel de nuttigste stap om door het overweldigende landschap van moderne publicaties te navigeren.