Virology Blog, 23 mei 2016
PLoS One
1160 Battery Street
Koshland Building East, Suite 100
San Francisco, CA 94111
Geachte redactieleden van PLoS One:
In 2012 publiceerde PLoS One “Adaptive Pacing, Cognitive Behaviour Therapy, Graded Exercise, and Specialist Medical Care for Chronic Fatigue Syndrome: A Cost-Effectiveness Analysis.” Dit was één paper uit een reeks van papers die aandacht hadden voor de resultaten van de PACE-studie – de grootste studie van behandelingen voor de ziekte, ook bekend als ME/cvs. Psycholoog James Coyne heeft verzocht om de data uit de studie gebaseerd op het openaccessbeleid van PLoS, een inspanning die wij ondersteunen.
Echter, zoals David Tuller van de Universiteit van Californië, Berkeley, documenteerde in een onderzoek naar PACE dat vorig jaar in oktober [2015] werd gepubliceerd op Virology Blog, leed de studie onder vele onverdedigbare fouten zoals patiënten en belangenbehartigers jarenlang hebben betoogd. Onder de bevindingen van Dr. Tuller: de hoofdconclusie van de PLoS One-paper – dat cognitieve gedragstherapie en graduele oefentherapie kostenefficiënte behandelingen zijn – is verkeerd, omdat dit gebaseerd is op een foutieve karakterisering van de gevoeligheidsanalyses van de studie. De PACE-auteurs hebben herhaaldelijk deze inaccurate claim van kostenefficiëntie aangehaald om hun voortdurende promotie van deze interventies te rechtvaardigen.
Maar de claim wordt niet ondersteund door het bewijs, en het is niet nodig om de studiedata te verkrijgen om deze conclusie te trekken. De claim is uitsluitend gebaseerd op de beslissing om de gratis zorg te waarderen die door familie en vrienden werd verstrekt alsof deze werden gecompenseerd op het niveau van een goedbetaalde gezondheidszorgwerker. Hier is wat Dr. Tuller vorig jaar in oktober [2015] schreef over de paper in PLoS One en de bevindingen ervan:
De publicatie in PLoS One betoogde dat de graduele oefentherapie en cognitieve gedragstherapie de meest kosteneffectieve behandelingen waren vanuit een maatschappelijk perspectief. Bij het komen tot deze conclusie taxeerden de onderzoekers de zogenaamde “informele zorg” – onbetaalde zorg die door familie en vrienden wordt geleverd – op de vervangende kosten van een thuiszorgmedewerker. Het statistische analyseplan van PACE (goedgekeurd in 2010 maar niet gepubliceerd tot 2013) bevatte twee aanvullende, goedkopere aannames. De eerste taxeerde informele zorg op een minimumloon, de tweede op geen enkele compensatie.
Het PLoS One -artikel zelf leverde deze twee aanvullende bevindingen niet aan, maar merkte alleen op dat “gevoeligheidsanalyses onthulden dat de resultaten robuust waren voor alternatieve hypothesen.”
Mensen die commentaar instuurden op de PLoS One- website , waaronder Tom Kindlon, betwistten de claim dat de resultaten “robuust” zouden zijn onder de alternatieve aannames voor informele zorg. In feite maakten zij duidelijk dat de goedkopere hypothesen de gerapporteerde maatschappelijke kosten-batenvoordelen van de cognitieve gedragstherapie en graduele oefentherapie zouden reduceren of volledig elimineren.
De hoofdauteur van de publicatie, Paul McCrone, gaf in een geposte reactie toe dat de commentatoren gelijk hadden over de impact die de goedkopere, alternatieve aannames zouden hebben op de uitkomsten. McCrone legde echter niet uit of noemde zelfs niet de klaarblijkelijke foutieve gevoeligheidsanalyses die hij in de paper had geciteerd, die de maatschappelijke kosten-batenvoordelen voor graduele oefentherapie en cognitieve gedragstherapie “robuust” hadden gevonden onder alle aannames. In plaats daarvan beetoogde hij dat de twee goedkopere benaderingen oneerlijk waren tegenover zorgverleners omdat families meer economische waardering verdienden voor hun werk.
“Naar onze mening heeft de tijd, die de gezinnen spenderen om te zorgen voor mensen met CVS/ME, een werkelijke waarde en dus is het controversieel om het een waarde van nul kosten te geven,” schreef McCrone. “Evenzo, om aan te nemen dat het alleen maar de waarde heeft van het minimumloon, is ook erg beperkend.”
In een daaropvolgend commentaar wijst Kindlon McCrone terecht en maakt daarbij duidelijk dat hij nog steeds niet de claim van de krant had uitgelegd die de gevoeligheidsanalyses lieten zien dat de bevindingen “robuust” waren voor alle aannames. Kindlon stelde ook dat de alternatieve, goedkopere aannames werden toegevoegd aan het statistische plan van PACE zelf.
“Onthoud dat het de onderzoekers zelf waren die de alternatieve aannames uitkozen,” schreef Kindlon. “Als het nu ‘controversieel’ is om informele zorg te taxeren op nul waarde, was het net zo ‘controversieel’ toen zij besloten om de gegevens op deze manier te analyseren, voordat er naar de gegevens was gekeken. Het heeft weinig zin om een statistisch plan te publiceren als er niet over hinderlijke resultaten wordt gerapporteerd en/of bevindingen voor hen verkeerd worden voorgesteld.”
Aangezien Dr. McCrone, de hoofdauteur, in zijn commentaren direct tegensprak wat de paper zelf claimde over dat gevoeligheidsanalyses de “robuustheid” van de bevindingen onder andere aannames hebben bevestigd, is het duidelijk niet noodzakelijk om de studiedata zorgvuldig te onderzoeken om te bevestigen dat deze centrale bevinding niet ondersteund kan worden. Dr. McCrone heeft niet gereageerd op e-mailverzoeken van Dr. Tuller om de discrepantie uit te leggen. En PLoS One, hoewel door Dr. Tuller vorig najaar op dit probleem geattendeerd, heeft blijkbaar geen stappen ondernomen om de verkeerde informatie over de gevoeligheidsanalyses te rectificeren die deze paper bevat.
PLoS One heeft een verplichting om Dr. McCrone te bevragen over de contradictie tussen de tekst van de paper en zijn daaropvolgende commentaren, zodat hij ofwel een redelijke verklaring kan geven, de werkelijke gevoeligheidsanalyses kan produceren waarbij hij “robuustheid” kan aantonen onder alle drie de aannames die beschreven zijn in het statistische analyseplan, ofwel de belangrijkste bevindingen van de paper corrigeren dat CGT en GET “kostenefficiënt” zijn ongeacht de manier waarop informele zorg wordt gewaardeerd. Moest hij nalaten dit te doen, dan heeft PLoS One zelf de plicht om de paper te corrigeren, onafhankelijk van de opstelling van de kwestie van toegang tot studiedata.
Wij zien uw snelle antwoord op deze zorgen graag tegemoet.
Hoogachtend,
Ronald W. Davis, PhD
Professor of Biochemistry and Genetics
Stanford University
Rebecca Goldin, Ph.D.
Professor of Mathematical Sciences
George Mason University
Bruce Levin, PhD
Professor of Biostatistics
Columbia University
Vincent R. Racaniello, PhD
Professor of Microbiology and Immunology
Columbia University
Arthur L. Reingold, MD
Professor of Epidemiology
University of California, Berkeley
© Virology Blog. Vertaling Meintje, redactie ME-gids.
Lees ook
- Trial by error: de verontrustende zaak van de PACE-studie over ME/CVS (1)
- Trial by error: de verontrustende zaak van de PACE-studie over ME/CVS (2)
- Trial by error: de verontrustende zaak van de PACE-studie over ME/CVS (3)
- Onderzoekers van de PACE-studie antwoorden David Tuller
- David Tuller reageert op de PACE-onderzoekers
- Petitie : Misleidende claims van PACE-studie moeten teruggetrokken worden
- Trial by error, vervolgd: heeft de PACE-studie echt een “strikt criterium” voor herstel toegepast?
- Trial by error, vervolg: Waarom is het “zusteronderzoek” van de PACE-studie “verdwenen” en vergeten?
- Overheid beveelt vrijgave van de gegevens van de PACE-studie
- Proffen schrijven open brief aan The Lancet en vragen herevaluatie van PACE-resultaten
- Open brief van Invest in ME over de PACE-studie aan de redacteur van The Lancet
- Trial by error, vervolgd: Het werk van het PACE-team voor verzekeringsmaatschappijen “houdt geen verband” met PACE. Echt waar?
- In het kielzog van het onderzoek van David Tuller, publiceren de PACE-onderzoekers een follow-upstudie
- ME Association: We betwisten het follow-uprapport van de PACE-studie
- Professor Jonathan Edwards: PACE-studie is “waardeloos”
- Oninterpreteerbaar: Fatale fouten in het PACE follow-uponderzoek van het chronisch vermoeidheidssyndroom
- Waarom de wetenschappelijke wereld het nodig heeft dat de PACE-gegevens worden vrijgegeven
- Reporter hekelt studie naar chronisch vermoeidheidssyndroom: ik stopte bij 14.000 woorden – genoeg was genoeg
- Een “moreel equivalent van oorlog” en de PACE-studie over chronisch vermoeidheidssyndroom
- Waarom ME-patiënten kritisch zijn over de PACE-studie
- Was onafhankelijke peerreview van de papers over de PACE-studie mogelijk?
- James Coyne over de “objectiviteit” van NHS Choices en het belachelijk maken van ME/CVS-patiënten
- Wat er voor nodig is voor Queen Mary om een verzoek om wetenschappelijke gegevens als “ergerlijk” te verklaren
- Update van mijn formeel verzoek voor het vrijgeven van de gegevens van de PACE-studie
- Formeel verzoek aan PLOS One om een Uitdrukking van Bezorgdheid uit te vaardigen voor de PACE-studie
- Waarom ik niet weet hoe PLOS zal reageren op de weigering van de auteurs om de data vrij te geven
- Antwoord van PLOS One op de bezorgdheid over de weigering van King’s College om de PACE-data te delen
- Proffen verzoeken om de gegevens van de PACE-studie
- King’s College London rekt tijd nog wat meer door weigering te herhalen om PACE-onderzoeksdata vrij te geven
- Herkennen wanneer het “beschermen van de privacy van patiënten” louter een excuus is voor het niet delen van de data
- Herzien van de economische analyse van de PACE-studie in PLoS One
- Een inkijk in de aanval op het delen van data
- Trial By Error, vervolgd: vragen voor Dr. White en zijn collega’s van de PACE-studie
- Niet-bekendgemaakte belangenconflicten in reviewprotocol van interventies voor medisch onverklaarde symptomen
- Trial by error, vervolgd: heeft de PACE-studie werkelijk bewezen dat graduele oefentherapie veilig is?
- Trial by error, vervolgd: meer nonsens van The Lancet Psychiatry
- We zijn tenminste niet ergerlijk
- Verdere inzichten in de oorlog tegen het delen van data
- Trial by error, vervolgd: een paar woorden over pesterijen
- Het heroverwegen van het beleid rond het onderzoek naar en de behandeling van ME/CVS
- Opnieuw een open brief aan de Lancet
- What About ME? Deel 1: ME-patiënten vragen patiëntenorganisaties kleur te bekennen t.a.v. PACE
- Ook België steunt in open brief de globale oproep om de PACE-data vrij te geven
- Lezing Dr. David Tuller en Prof. Frans Visser tijdens Nederlandse première Forgotten Plague
- Petitie met 12.000 handtekeningen aan The Lancet bezorgd om de PACE-studiedata vrij te geven
- Open brief Prof. Malcolm Hooper aan The Lancet
- Een half jaar gaat voorbij zonder de vrijgave van PACE-studiedata uit PLOS One
- PACE-Gate: de controverse over de grootste studie naar CGT en GET bij ME/cvs