Hoe lees je een onderzoek naar waterstofwater?

Wanneer een verkoper schrijft: "onderzoek toont aan dat waterstofwater oxidatieve stress vermindert" of "klinische onderzoeken bevestigen de voordelen", doet die zin veel werk dat niet is verdiend. Eén aangehaald artikel kan een goed opgezet gerandomiseerd onderzoek zijn, of een kleine pilot die de auteurs zelf als voorlopig hebben bestempeld, en dat verschil is belangrijker dan de bewering in de kop. In dit artikel lopen we aan de hand van vijf echte, momenteel geïndexeerde onderzoeken bij mensen een herhaalbare methode langs: kijk wie er is onderzocht, hoe de vergelijking geblindeerd was, welke hoeveelheid en duur daadwerkelijk zijn getest, of de vooraf vastgestelde onderzoeksvraag is beantwoord en wie het onderzoek heeft betaald. Geen van de vijf onderzoeken hieronder bewijst dat waterstofwater een bepaald resultaat oplevert; ze zijn hier opgenomen zodat je kunt oefenen met lezen zoals een zorgvuldige beoordelaar dat zou doen.

Hier volgt alvast een overzicht van die methode, voordat we de onderdelen stap voor stap bespreken:

• Controleer of de bron een onderzoek bij mensen is, een dier- of celkweekonderzoek, of een marketingsamenvatting daarvan, want verkopers halen die drie vaak door elkaar.
• Noteer hoeveel mensen het onderzoek hebben afgerond, niet alleen hoeveel eraan begonnen, omdat screening en uitval van invloed zijn op wat de resultaten daadwerkelijk weergeven.
• Kijk of de vergelijking geblindeerd was en wat voor placebo werd gebruikt, want een drankje is moeilijker geloofwaardig te vermommen dan een pil.
• Vergelijk de dosis en duur van het onderzoek met wat de bewering die ernaar verwijst suggereert, want een bevinding bij de ene hoeveelheid geldt niet automatisch ook voor een andere.
• Zoek de vooraf vastgestelde primaire uitkomstmaat van het onderzoek op en kijk of dat het cijfer was waarmee de samenvatting de aandacht trok.
• Lees de verklaring over financiering en belangenverstrengeling als context om mee te wegen, niet als automatische reden om de resultaten te accepteren of af te wijzen.

Wat geldt als "onderzoek" naar waterstofwater?

Een voetnoot met de tekst "onderzoek naar waterstofwater" kan naar bijna alles verwijzen: een celkweek die in een laboratorium aan een met waterstof verzadigde oplossing is blootgesteld, een onderzoek bij knaagdieren of een gerandomiseerd onderzoek waarbij mensen het water weken- of maandenlang daadwerkelijk hebben gedronken. Dit is geen onderling uitwisselbaar bewijs voor een bewering over wat er gebeurt wanneer iemand het product drinkt. De eerste stap is dus controleren of de verwijzing naar een onderzoek bij mensen leidt en de titel zorgvuldig lezen. Staat er "pilot" of "voorlopig" in de titel, dan is dat geen reden om het onderzoek af te wijzen; het is het eigen signaal van de auteurs dat de bevinding eerst in een groter, onafhankelijk onderzoek moet worden bevestigd voordat iemand haar als vaststaand beschouwt. De vijf gepubliceerde onderzoeken bij mensen die in dit artikel als voorbeelden dienen, zijn: een verouderingsonderzoek van zes maanden, een onderzoek naar premenstruele klachten over drie cycli, een onderzoek naar insulineresistentie van acht weken, een onderzoek van acht weken bij volwassenen met obesitas en een pilot van veertien dagen bij patiënten met langdurige COVID. Ze zijn allemaal momenteel geïndexeerd en volledig te lezen.

Steekproefgrootte: wat 32 deelnemers je wel en niet kunnen vertellen

In de vijf onderzoeken die hier worden besproken, varieert het aantal deelnemers van tweeëndertig tot vijfenzestig. Dat bereik is groot genoeg om een vergelijking tussen twee groepen te beschrijven, maar op zichzelf is het klein om conclusies over mensen in het algemeen te trekken. In de uitleg van het NCCIH over het lezen van een tijdschriftartikel worden de achterliggende statistieken helder verwoord: kleine steekproeven leveren vaker toevallig een resultaat op en kunnen tot niet-overtuigende bevindingen leiden, terwijl grotere steekproeven betrouwbaardere resultaten geven en de bredere bevolking beter vertegenwoordigen (bron: Een wetenschappelijk tijdschriftartikel begrijpen: de omvang van het onderzoek). Een klein onderzoek dat een effect vindt, is daarom niet automatisch "fout"; de bevinding is een kandidaat voor bevestiging, geen vaststaande conclusie, totdat een onafhankelijk, groter onderzoek haar herhaalt.

Het is ook de moeite waard om te controleren hoeveel mensen zijn gescreend en hoeveel er daadwerkelijk zijn geanalyseerd. In een van de vijf onderzoeken hier, een pilot bij patiënten met langdurige COVID, werden vijfenvijftig mensen gescreend en werden er na uitsluitingen tweeëndertig geanalyseerd, zestien per groep. Dat verschil verandert wat de uiteindelijke resultaten weergeven: ze gelden alleen voor de subgroep die aan de criteria voldeed en het protocol voltooide, niet voor iedereen die in principe in aanmerking had kunnen komen.

Placebo en blindering: waarom water moeilijk te vermommen is

In een gecontroleerd onderzoek wordt de behandeling vergeleken met een placebo of een groep die standaardzorg krijgt en verder zo veel mogelijk hetzelfde wordt gehouden, zodat elk verschil in de uitkomst aan de behandeling kan worden toegeschreven en niet aan een andere factor die de groepen van elkaar onderscheidt. Blindering, soms ook masking genoemd, is een van de belangrijkste middelen die onderzoekers gebruiken om die vergelijking eerlijk te houden: wanneer noch de deelnemer, noch degene die de uitkomsten beoordeelt weet wie in welke groep zit, kunnen de verwachtingen van geen van beide partijen van invloed zijn op de manier waarop de uitkomst wordt vastgelegd (bron: Opzet van het onderzoek, NCCIH; bron: Vooringenomenheid beperken, NCCIH). Het is echt moeilijk om vertekening goed te voorkomen, en een drankje is moeilijker geloofwaardig te vermommen dan een capsule: waterstofrijk water kan een lichte smaak of bruis hebben die gewoon controledrankwater niet heeft. Daarom is het belangrijk of een artikel beschrijft hoe de twee soorten water niet van elkaar te onderscheiden werden gemaakt.

Enkelblind tegenover dubbelblind, in de daadwerkelijke onderzoeken

"Dubbelblind" betekent dat noch de deelnemer, noch de onderzoeker die de uitkomst beoordeelt weet wie welk water heeft gekregen; "enkelblind" betekent dat slechts één kant hiervan niet op de hoogte is. De onderzoeken die hier worden besproken, omvatten beide varianten: het onderzoek naar insulineresistentie en het onderzoek bij volwassenen met obesitas waren dubbelblind, terwijl de pilot bij patiënten met langdurige COVID enkelblind was. Geen van beide opzetten maakt een resultaat op zichzelf ongeldig, maar bij een enkelblind onderzoek is er meer ruimte voor de verwachtingen van een onderzoeker om invloed te hebben op de beoordeling van een uitkomst als vermoeidheid. Dat is nog een reden om de bevinding van één onderzoek voorzichtig te wegen.

Dosis en duur: wat mensen daadwerkelijk dronken, en hoelang

In de vijf onderzoeken dronken deelnemers dagelijks ongeveer een halve liter tot twee liter waterstofrijk water, gedurende periodes van veertien dagen tot zes maanden. Een bewering die op een van deze hoeveelheden is gebaseerd, is niet automatisch van toepassing op een andere hoeveelheid of een andere periode. De bevinding over telomeren uit het verouderingsonderzoek kwam bijvoorbeeld voort uit zes maanden lang een halve liter per dag; dat is een heel andere blootstelling dan maximaal twee liter per dag gedurende drie menstruatiecycli in het onderzoek naar premenstruele klachten. Controleer welke dosis en duur daadwerkelijk tot een specifieke bevinding hebben geleid voordat je die relevant vindt voor jouw situatie; hetzelfde onderliggende idee dat bij een andere hoeveelheid of binnen een ander tijdsbestek is getest, is een andere vraag die het aangehaalde onderzoek niet heeft beantwoord. Dit is een leesgewoonte, geen doseeradvies: geen van de bovenstaande hoeveelheden is een aanbeveling.

Primaire uitkomstmaat tegenover het cijfer dat werd aangehaald

Voordat een onderzoek begint, stellen onderzoekers vooraf één hoofdvraag vast die het onderzoek moet beantwoorden: de primaire uitkomstmaat. Al het andere dat tijdens het onderzoek wordt gemeten, is secundair. Secundaire bevindingen komen statistisch gezien eerder toevallig naar voren, simpelweg omdat er meer van worden getest. Dit onderscheid is belangrijk omdat een samenvatting kan beginnen met het cijfer dat er het gunstigst uitziet, zelfs als dat niet was wat het onderzoek moest testen. Het multicenteronderzoek met dubbele blindering naar geëlektrolyseerd waterstofrijk water is een duidelijk voorbeeld: de vooraf vastgestelde primaire uitkomstmaat, de verandering in insulineresistentie gemeten met HOMA-IR, liet geen significant verschil tussen de groepen zien, terwijl een secundaire marker, lactaat in het bloed, in de interventiegroep significant daalde. Wie alleen een samenvatting leest waarin de lactaatbevinding wordt benadrukt, krijgt een misleidende indruk van wat het onderzoek opleverde voor de vraag die het moest beantwoorden. Zoals het NCCIH opmerkt, is de discussie in een artikel de interpretatie van de resultaten door de auteurs zelf; andere onderzoekers die naar dezelfde cijfers kijken, kunnen die redelijkerwijs anders lezen (bron: Discussie/conclusie, NCCIH).

Wie heeft het onderzoek betaald, en waarom dat een vraag is en geen oordeel

Medische tijdschriften verplichten auteurs om financiële en andere relaties bekend te maken die een belangenconflict kunnen vormen. Dat gebeurt doorgaans via een standaard, uniform formulier voor belangenverklaringen dat het publicerende tijdschrift controleert voordat het artikel wordt geaccepteerd (bron: Belangenverklaring, ICMJE). Die verklaring is context om mee te nemen in je algehele beoordeling van het artikel, geen oordeel dat je automatisch moet vellen. In het onderzoek van acht weken bij volwassenen met obesitas meldde een van de coauteurs dat diegene in dienst was van een leverancier van supplementen, terwijl de andere auteurs van het artikel verklaarden geen tegenstrijdige belangen te hebben. In het onderzoek naar premenstruele klachten en de pilot bij patiënten met langdurige COVID werd uitdrukkelijk verklaard dat er geen belangenconflicten waren. Een gemelde band duidelijk benoemen, naast de omvang en opzet van het onderzoek, is nuttiger dan die negeren of automatisch als diskwalificerend beschouwen. Wat je daadwerkelijk moet aanmerken, is een artikel zonder enige sectie over belangenverklaringen, omdat je bij een volledig ontbrekende verklaring op geen enkele manier kunt nagaan of er belangen zijn.

Een korte checklist voor het volgende onderzoek dat iemand je voorhoudt

De vijf vragen hieronder vatten de methode samen die in dit artikel is besproken, in de volgorde waarin je ze doorgaans het beste kunt stellen wanneer een bewering over waterstofwater naar een specifiek artikel verwijst.

• Hoeveel mensen deden mee, en hoeveel hebben het onderzoek daadwerkelijk afgerond en zijn geanalyseerd?
• Was het onderzoek geblindeerd, en wat voor placebo of vergelijkingsgroep werd gebruikt?
• Op welke hoeveelheid waterstofrijk water en welk tijdsbestek is de bevinding daadwerkelijk van toepassing?
• Bereikte de primaire uitkomstmaat, die het onderzoek moest testen, statistische significantie, of gaat het aangehaalde cijfer om een secundaire bevinding?
• Zijn financiering of belangenconflicten vermeld, en lijkt de verklaring volledig in plaats van simpelweg afwezig?

Door een verwijzing aan de hand van deze vijf vragen te beoordelen, maak je van een vaag "onderzoek toont aan" een specifiek oordeel: dit specifieke onderzoek, met deze omvang en opzet, waarin deze hoeveelheid gedurende deze periode is getest, vond dit resultaat voor de vraag die vooraf was vastgesteld. Dat is veel nuttiger dan wat de marketingtekst doorgaans biedt, en het werkt ook de andere kant op: een goed opgezet onderzoek met een duidelijk resultaat voor de primaire uitkomstmaat en een volledige verklaring verdient meer gewicht dan een vage verwijzing naar "onderzoek naar waterstofwater", ongeacht op welke conclusie ze uitkomen.

Als je na het afwegen van dit soort bewijs besluit waterstofwater te proberen, is de praktische vervolgvraag er een over metingen en niet over beloften: van welke apparaten is de uitvoer daadwerkelijk gecontroleerd door iemand anders dan de verkoper? Een onafhankelijk laboratoriumcertificeringsrapport voor de Hydrion Core- en Pulse-flessen is het soort controle door een derde partij waar je naar kunt zoeken, net zoals je de verklaring over belangen in een onderzoek controleert.

Onafhankelijk gemeten uitvoer vertelt je wat een apparaat produceert; op zichzelf voorspelt die geen van de uitkomsten die in de onderzoeken hierboven zijn besproken. Als je verschillende uitvoeringen wilt vergelijken voordat je een besluit neemt, zet de collectie waterstofwater de flessen, tabletten en kan naast elkaar. En als je vooral geïnteresseerd bent in hoe je bewijs beoordeelt, gaan drie verwante artikelen daar op verschillende manieren dieper op in: waarom onderzoeken naar waterstofwater doorgaans zo klein blijven, een uitgebreidere uiteenzetting van de doseringen en onderzoeksduren in de gepubliceerde literatuur en hoe je dezelfde kritische blik toepast op de eigen beweringen van een verkoper. In de samenvatting van de voordelen op basis van bewijs worden de conclusies waartoe dit soort onderzoeken tot nu toe zijn gekomen beoordeeld op hun bevindingen en niet op hun methode. En het artikel over mythes toetst specifieke populaire beweringen aan wat het onderzoek daadwerkelijk ondersteunt.