Trial By Error: hoofdauteur nieuwe bias-richtlijn Cochrane was coauteur LP-studie

David Tuller, DrPH, Virology Blog, 31 augustus 2019

Jonathan Sterne, een professor medische statistiek en epidemiologie aan Bristol University, is de corresponderende auteur van Cochranes gereviseerde tool over “risico op bias*” [*vooringenomenheid in wetenschappelijke studies, n.v.d.r.], die BMJ online publiceerde op 28 augustus. Hoe goed of slecht deze revisie ook moge zijn, het feit dat Professor Sterne als eerste staat in een rij van meer dan twintig auteurs is echt wel een spijtige zaak.

(Toegevoegd: Het slechte aan deze revisie is, dat ze het mogelijk zal maken dat ongeblindeerde studies die voortgaan op zelfgerapporteerde uitkomsten, geëvalueerd worden alsof ze “laag risico” hebben op bias. In feite hebben studies met dergelijk ontwerp een hoog risico op bias. En toch zijn ze het favoriete soort studie van de leden van de ideologische CGT/GET-brigades. Meer daarover in een latere post.)

Volgens een zoekopdracht op PubMed schreef Professor Sterne mee aan 11 papers van zijn collega aan Bristol, Professor Esther Crawley. Ik heb gedocumenteerd dat bij ten minste twee van deze papers wetenschappelijke kernprincipes overtreden werden, nl. de studie over het Lightning Process, twee jaar geleden gepubliceerd door Archives of Disease in Childhood, en een studie uit 2011 in BMJ Open die zichzelf op misleidende gronden vrijstelde van ethische review. Geen van beide artikels zouden gepubliceerd zijn geweest als de vakbladen in kwestie hun peerreview voldoende grondig hadden uitgevoerd, waardoor ze de fatale fouten gevonden zouden hebben.

[Ik moet hierbij vermelden dat Professor Crawley mij publiekelijk heeft beschuldigd van laster, eerroof en gedrag waar politie-interventie voor nodig is. Het kantoor van de vicerector van Bristol heeft tenminste drie klachten ingediend tegen mij, bij de rector van Berkeley, maar heeft blijkbaar geen bewijs geleverd van wangedrag of onwaarheden. Ik merk op dat ik nog steeds een goede reputatie heb en academisch aangesteld ben aan Berkeleys Center of Global Public Health, en dat ik mijn onderzoek blijf voeren met de steun van mijn departement en academische collega’s.]

Tijdens de uitvoering en rapportage over de studie over het Lightning Process, rekruteerden Professor Crawley, Professor Sterne en hun coauteurs meer dan de helft van hun proefpersonen voordat de studie geregistreerd was, wisselden ze primaire en secundaire uitkomstmaten om nadat data over deze eerste deelnemers verzameld was, en vermeldden ze deze saillante details vervolgens niet in de gepubliceerde paper, zoals ik documenteerde kort nadat de studie werd gepubliceerd. Vorige maand postte Archives of Disease in Childhood, een BMJ-vakblad, een correctie/verduidelijking van meer dan 2800 woorden, samen met een lange noot van de redactie waarin men probeerde te rechtvaardigen dat men de voornaamste resultaten ging herpubliceren – in plaats van ze in te trekken.

Zo veegde het vakblad het wangedrag van het team uit Bristol onder de mat en zag het over het hoofd in welke mate Professor Crawley, Professor Sterne en hun coauteurs hun gerapporteerde bevindingen hadden beïnvloed via hun uitkomstverwisseling. Deze redactionele reactie schoot tekort, wat tot ontsteltenis leidde bij mensen die belang hechten aan onderzoeksintegriteit en het welzijn van kinderen. Dat is de reden waarom tientallen wetenschappers, academici en andere experts, waaronder verschillende van mijn collega’s aan Berkeley, hun handtekening zetten onder de recente open brief van Virology Blog aan Dr. Fiona Godlee, BMJ’s redactionele directeur. De brief noemde de beslissing tot herpublicatie van de oorspronkelijke bevindingen over het Lightning Process “wetenschappelijk en ethisch onverdedigbaar”.

In het geval van de studie over afwezigheid op school van BMJ Open, stelden de drie auteurs – waaronder Professor Crawley en Professor Sterne – de studie vrij van ethische review, op de valse grond dat ze in aanmerking zou komen als “dienstevaluatie”. ( Virology Blog documenteerde dit twee jaar geleden, dankzij een tip van een lezer.) Een dienstevaluatie is vrijgesteld van ethische review, en gaat voornamelijk voort op geanonimiseerde databases om een evaluatie te maken van de levering van specifieke diensten aan cliënten of patiënten. Het is algemeen aanvaard dat als een studie voorzien is van een hypothese, veralgemeenbare conclusies en/of niet-geanonimiseerde dataverzameling via interviews of andere methodes, ze aangemerkt moet worden als “onderzoek” en ze niet als “dienstevaluatie” vrijgesteld kan worden van ethische review .

Ervaren onderzoekers, waaronder Professor Sterne en Professor Crawley, zouden maar al te goed op de hoogte moeten zijn van dit onderscheid tussen “onderzoek” waarvoor ethische review vereist is, en een “dienstevaluatie”, die ervan is vrijgesteld. Aangezien de studie over afwezigheid op school voorzien was van een hypothese, veralgemeenbare conclusies en persoonlijke interviews uitgevoerd door Professor Crawley, voldeed ze niet aan eender welke standaardcriteria voor dienstevaluaties. Om die reden is het onbegrijpelijk waarom de auteurs, waaronder Professor Crawley en Professor Sterne, ervoor kozen om deze studie vrij te stellen van ethische review en het te publiceren als dienstevaluatie. (Het is ook onbegrijpelijk waarom redacteurs van BMJ Open dit hardnekkig blijven negeren, onjuiste dingen blijven beweren, twijfel blijven zaaien over mijn rapportering, en blijven wegkijken als ze geconfronteerd worden met de onbetwistbare feiten.)

Bristol University voert op dit moment een doorlichting uit van de studie over afwezigheid op school en een aantal andere studies die op een gelijkaardige manier als dienstevaluatie vrijgesteld werden van ethische review. Deze doorlichting werd gestart op basis van bedenkingen die ik voorlegde aan de Health Research Authority, een afdeling van de National Health Service. Ik hoop dat men mij binnenkort laat weten wat de resultaten zijn van deze doorlichting.

Het is een onomstreden feit dat studies met hypotheses, veralgemeenbare conclusies en persoonlijke interviews van meer dan 100 kinderen en/of hun familieleden op geen enkele redelijke manier gedefinieerd kunnen worden als dienstevaluatie met vrijstelling van ethische review. Maar wat ik de laatste paar jaren heb geleerd, is dat als de mensen die een doorlichting uitvoeren zélf nauw betrokken zijn bij de stelsels die verantwoordelijk zijn voor de problematische studie, de doorlichting vaak dient als middel om slecht gedrag goed te praten, toe te dekken of te rechtvaardigen, in plaats van te onthullen hoe het écht in elkaar zit.

Totdat Professor Sterne erkenning en uitleg geeft over zijn eigen rol in de uitvoering en rapportage van deze twee wansmakelijke studies, moeten we in geen geval notie nemen van zijn uitspraken over hoe je “risico op bias” moet evalueren. Dit is wat ik, om te beginnen, graag zou willen vragen:

Waarom zette Professor Sterne zijn naam onder de paper over het Lightning Process, waarin cruciale informatie over retrospectieve registratie en uitkomstenverwisseling in de publieke versie van de feiten werd verzwegen? Weet Professor Sterne dat prospectieve registratie en vooraf vastgestelde uitkomsten als essentieel worden beschouwd om “risico op bias” te beperken? Wat betreft de paper over afwezigheid op school: is Professor Sterne werkelijk van mening dat een studie met een hypothese, veralgemeenbare conclusies en persoonlijke interviews uitgevoerd door de hoofdonderzoeker, redelijkerwijs gedefinieerd kan worden als een “dienstevaluatie” en vrijgesteld mag worden van ethische review?

Dit zijn vragen die niet enkel ter zake doen voor Professor Sterne, maar ook voor Cochrane, BMJ en Professor Sternes vele coauteurs van deze herziening over “risico op bias”. Gezien zowel de studie over het Lightning Process, als de studie over afwezigheid op school krioelen van het soort methodologische en ethische onregelmatigheden die zelfs een eerstejaarsstudent epidemiologie eruit zou kunnen halen, begrijp ik niet hoe Professor Sterne zichzelf op dit moment op vlak van eender wat mag opstellen als een geloofwaardige autoriteit.

© David Tuller voor Virology Blog. Vertaling Abby, redactie Zuiderzon, ME-gids.

Trial By Error: meer over Cochranes nieuwe tool i.v.m. risico op bias

David Tuller, DrPH, Virology Blog, 4 september 2019

Zoals Virology Blog al rapporteerde (cf. supra), is de hoofdauteur van de gereviseerde versie van Cochranes tool i.v.m. risico op bias, die vorige week werd gepubliceerd in BMJ, al jarenlang een collega van Professor Esther Crawley aan Bristol University. In die hoedanigheid is hij coauteur van twee bekende studies die basisprincipes van wetenschappelijk onderzoek overtraden: de studie over het Lightning Process, twee jaar geleden gepubliceerd in Archives of Disease in Childhood, en de studie over afwezigheid op school, in 2011 gepubliceerd in BMJ Open.

Ik heb uitgebreid over de fouten in deze studies gerapporteerd, hier en hier, en in vele daaropvolgende posts. In de studie over het Lightning process rekruteerden de auteurs meer dan de helft van de proefpersonen voordat de studie geregistreerd was, wisselden ze primaire en secundaire uitkomstmaten om nadat data verzameld was van deze eerste deelnemers, en repten ze in de gepubliceerde paper met geen woord over deze saillante details. De uitkomstenwissel stelden Professor Crawley, Professor Sterne en hun collega’s ertoe in staat om positieve resultaten te rapporteren in plaats van nulresultaten, voor hun officiële maar gereviseerde primaire uitkomst.

In juli, na een controle die meer dan een jaar in beslag nam, publiceerde Archives of Disease in Childhood, een BMJ-vakblad, een “correctie” waarin de methodologische misstappen erkend werden. Maar toch liet het vakblad toe dat Professor Crawley, Professor Sterne en hun collega’s de vooringenomen bevindingen uit hun oorspronkelijke paper herpubliceerden.

Vorige week stuurde Virology Blog een open brief naar Dr. Fiona Godlee, redactioneel directeur van BMJ, als protest tegen deze onverdedigbare beslissing. De brief werd ondertekend door 55 wetenschappers, academici en clinici uit o.a. Harvard, Stanford, University College London, London School of Hygiene and Tropical Medicine, Berkeley, Columbia en Queen Mary University of London, en drukte ontzetting uit over de “wetenschappelijk en ethisch onverdedigbare” beslissingen van het vakblad. Sommige van de ondertekenaars hebben vervolgens zelf nog een oproep gedaan voor intrekking van de studie over het Lightning Process.

*****

Gezien de achtergrond, zal het wellicht niet verbazen dat de gereviseerde tool i.v.m. Risico op Bias [RoB] van Professor Sterne ervoor zorgt dat ongeblindeerde studies makkelijker het label “laag risico” op bias zullen krijgen, zoals de pientere mensen op het forum Science for ME opgemerkt hebben. Professor Sterne en zijn coauteurs zeggen dit zelf, in het onderdeel “discussie”.

Dit is wat ze schrijven:

“We verwachten dat de verfijningen die we hebben aangebracht in de RoB-tool ertoe zullen leiden dat meer studieresultaten geklasseerd zullen worden als laag risico op bias, omdat onze algoritmen sommige omstandigheden in kaart brengen als laag risico op bias, terwijl gebruikers van de vorige tool doorgaans zouden hebben geoordeeld dat die een onduidelijk (of zelfs hoog) risico op bias lopen. Dit potentiële verschil in beoordelingen in RoB 2, in vergelijking met het oorspronkelijke instrument, is met name het geval voor ongeblindeerde studies, waar het risico op bias i.v.m. toewijzing aan een interventie als gevolg van afwijkingen van geplande interventies laag kan zijn, terwijl veel gebruikers van het oorspronkelijke RoB-instrument een hoog risico op bias zouden toekennen aan het overeenkomstige domein. Wij zijn van mening dat een oordeel vellen over het lage risico op bias gemakkelijk haalbaar moet zijn voor een gerandomiseerde studie, wat een studieopzet is dat wetenschappelijk sterk en goed begrepen is en vaak goed in de praktijk wordt uitgevoerd.”

In deze paragraaf staan heel wat fouten in een kluwen aan zinnen dat moeilijk te ontrafelen is. Tijdens hun bespreking van risico op bias in studies met ongeblindeerde interventies, vermelden de auteurs enkel bias die kan voorkomen als er “afwijkingen zijn van de bedoelde interventies”. Terwijl het klopt dat zulke afwijkingen bias kunnen veroorzaken, is dat niet de enige bron van bias in die studies met ongeblindeerde interventies. Als in studies namelijk ongeblindeerde interventies gecombineerd worden met zelfgerapporteerde uitkomsten, dan zullen de zelfgerapporteerde uitkomsten waarschijnlijk beïnvloed worden door verwachtingen, hoop en andere aspecten van de relatie van de deelnemer met de toegewezen interventies en/of de verlener van de interventies, zelfs al wordt er niet afgeweken van de bedoelde of toegewezen interventies. De mogelijkheid of waarschijnlijkheid van dat soort bias is de reden waarom andere velden van de geneeskunde meestal geen richtlijnen of beleid ontwikkelen op basis van studies met dat specifieke opzet, nl. ongeblindeerde interventies die voortgaan op zelfgerapporteerde uitkomsten.

Daarenboven blijkt uit de uitspraken in het onderdeel bespreking van de gereviseerde tool i.v.m. Risico op Bias, dat de auteurs overtuigd lijken te zijn dat randomisering op zich een verzekering is voor “laag risico” op bias. Eén argument dat wordt aangehaald, is dat gerandomiseerde studies meestal “goed doorgevoerd” worden. Ik weet niet goed hoe ik moet reageren op deze foute gevolgtrekking. Het feit is dat sommige of de meeste gerandomiseerde studies “goed doorgevoerd” zijn, heeft volgens mij niks te maken met de vraag of één bepaalde gerandomiseerde studie – of die nu gaat over ME/cvs of eender welke andere ziekte of aandoening – ook “goed doorgevoerd” is en het label “laag risico” op bias verdient. Wat betreft “goed begrepen”… het is inderdaad goed begrepen dat gerandomiseerde studies die ongeblindeerde interventies combineren met zelfgerapporteerde uitkomsten, resultaten zullen voortbrengen die onbekende niveaus aan bias in zich houden.

Andere delen van deze gereviseerde tool i.v.m. Risico op Bias zijn ook zorgwekkend. De appendix verschaft gedetailleerde richtlijnen over hoe je de verschillende beslissingspunten moet interpreteren. Eén onderdeel gaat over of studiedata geanalyseerd werden “in overeenstemming met een vooraf gespecificeerd analyseplan dat voltooid werd voordat ongeblindeerde uitkomstdata beschikbaar waren voor analyse”. Volgens de richtlijnen zijn “wijzigingen aan analyseplannen die gemaakt werden voordat ongeblindeerde uitkomstdata beschikbaar waren, of die duidelijk los stonden van de resultaten (bv. te wijten aan defecte apparatuur die dataverzameling onmogelijk maakt) geen reden tot bezorgdheid over bias bij selectie van de gerapporteerde resultaten”.

Deze verwijding of uitbreiding van de betekenis van “vooraf gespecificeerd” is van belang. De gereviseerde tool i.v.m. Risico op Bias beschouwt “wijzigingen aan analyseplan” als “vooraf gespecificeerd” als ze zich voordeden op eender welk moment vóór het ontsleutelen van de uitkomstdata. Deze revisie is misschien gerechtvaardigd of tenminste aanvaardbaar voor studies die voortgaan op objectieve uitkomsten. Maar het negeert of ziet over het hoofd wat er gebeurt in studies met ongeblindeerde interventies die voortgaan op zelfgerapporteerde uitkomsten, zoals de studie over het Lightning Process en de PACE-studie. In deze gevallen waren de onderzoekers wellicht op de hoogte van uitkomsttrends lang voordat de blindering van de uitkomstdata werkelijk werd opgeheven. Wat Professor Sterne en zijn coauteurs ook beweren, wijzigingen aan de analyseplannen die gemaakt worden na de start van dergelijke studies, zouden echt wel alarmbellen moeten doen rinkelen omtrent bias door selectieve uitkomstrapportering.

We moeten hier ook bij opmerken dat veel onderzoek uit het biopsychosociale veld, waaronder onderzoek naar ME/cvs en de zogenaamde “somatisch onverklaarde lichamelijke symptomen” of SOLK, aan deze kenmerken voldoet. Dus deze revisie van de tool voor Risico op Bias zou een enorme impact kunnen hebben op Cochranereviews in deze domeinen. De revisie zal het reviewers zeker veel makkelijker maken om slechte wetenschap mee te rekenen met goede wetenschap, met een officiële stempel van “laag risico” op bias.

Het argument dat Professor Sterne en zijn coauteurs aanhalen, nl. dat wijzigingen die gemaakt worden voordat uitkomstdata ontsleuteld zijn eigenlijk beschouwd mogen worden als “vooraf gespecificeerd”, werd veelvuldig gebruikt door de PACE-auteurs om hun eigen wildgroei aan uitkomstverwisselingen goed te praten. Het argument werd verder ingezet door Lillebeth Larun, hoofdauteur van de in opspraak gekomen Cochranereview over lichaamsbeweging voor ME/cvs, in haar verdediging van de opgekrikte evaluatie van de PACE-studie. De misleidende onderbouwing van de gereviseerde tool komt ook Professor Sterne zelf goed uit, aangezien het mogelijk kan worden gebruikt om de uitkomstwissel door de vingers te zien in zijn eigen studie over het Lightning Process.

Is er dan niemand dit dit doorheeft? BMJ? Cochrane? Hallo???

© David Tuller voor Virology Blog. Vertaling Abby, redactie Zuiderzon, ME-gids.

Lees ook

• Trial by error: de verontrustende zaak van de PACE-studie over ME/CVS (1)
• Trial by error: de verontrustende zaak van de PACE-studie over ME/CVS (2)
• Trial by error: de verontrustende zaak van de PACE-studie over ME/CVS (3)
• Onderzoekers van de PACE-studie antwoorden David Tuller
• David Tuller reageert op de PACE-onderzoekers
• Petitie : Misleidende claims van PACE-studie moeten teruggetrokken worden
• Trial by error, vervolgd: heeft de PACE-studie echt een “strikt criterium” voor herstel toegepast?
• Trial by error, vervolg: Waarom is het “zusteronderzoek” van de PACE-studie “verdwenen” en vergeten?
• Overheid beveelt vrijgave van de gegevens van de PACE-studie
• Proffen schrijven open brief aan The Lancet en vragen herevaluatie van PACE-resultaten
• Open brief van Invest in ME over de PACE-studie aan de redacteur van The Lancet
• Trial by error, vervolgd: Het werk van het PACE-team voor verzekeringsmaatschappijen “houdt geen verband” met PACE. Echt waar?
• In het kielzog van het onderzoek van David Tuller, publiceren de PACE-onderzoekers een follow-upstudie
• ME Association: We betwisten het follow-uprapport van de PACE-studie
• Professor Jonathan Edwards: PACE-studie is “waardeloos”
• Oninterpreteerbaar: Fatale fouten in het PACE follow-uponderzoek van het chronisch vermoeidheidssyndroom
• Waarom de wetenschappelijke wereld het nodig heeft dat de PACE-gegevens worden vrijgegeven
• Reporter hekelt studie naar chronisch vermoeidheidssyndroom: ik stopte bij 14.000 woorden – genoeg was genoeg
• Een “moreel equivalent van oorlog” en de PACE-studie over chronisch vermoeidheidssyndroom
• Waarom ME-patiënten kritisch zijn over de PACE-studie
• Was onafhankelijke peerreview van de papers over de PACE-studie mogelijk?
• James Coyne over de “objectiviteit” van NHS Choices en het belachelijk maken van ME/CVS-patiënten
• Wat er voor nodig is voor Queen Mary om een verzoek om wetenschappelijke gegevens als “ergerlijk” te verklaren
• Update van mijn formeel verzoek voor het vrijgeven van de gegevens van de PACE-studie
• Formeel verzoek aan PLOS One om een Uitdrukking van Bezorgdheid uit te vaardigen voor de PACE-studie
• Waarom ik niet weet hoe PLOS zal reageren op de weigering van de auteurs om de data vrij te geven
• Antwoord van PLOS One op de bezorgdheid over de weigering van King’s College om de PACE-data te delen
• Proffen verzoeken om de gegevens van de PACE-studie
• King’s College London rekt tijd nog wat meer door weigering te herhalen om PACE-onderzoeksdata vrij te geven
• Herkennen wanneer het “beschermen van de privacy van patiënten” louter een excuus is voor het niet delen van de data
• Herzien van de economische analyse van de PACE-studie in PLoS One
• Een inkijk in de aanval op het delen van data
• Trial By Error, vervolgd: vragen voor Dr. White en zijn collega’s van de PACE-studie
• Niet-bekendgemaakte belangenconflicten in reviewprotocol van interventies voor medisch onverklaarde symptomen
• Trial by error, vervolgd: heeft de PACE-studie werkelijk bewezen dat graduele oefentherapie veilig is?
• Trial by error, vervolgd: meer nonsens van The Lancet Psychiatry
• We zijn tenminste niet ergerlijk
• Verdere inzichten in de oorlog tegen het delen van data
• Trial by error, vervolgd: een paar woorden over pesterijen
• Het heroverwegen van het beleid rond het onderzoek naar en de behandeling van ME/CVS
• Opnieuw een open brief aan de Lancet
• What About ME? Deel 1: ME-patiënten vragen patiëntenorganisaties kleur te bekennen t.a.v. PACE
• Ook België steunt in open brief de globale oproep om de PACE-data vrij te geven
• Lezing Dr. David Tuller en Prof. Frans Visser tijdens Nederlandse première Forgotten Plague
• Petitie met 12.000 handtekeningen aan The Lancet bezorgd om de PACE-studiedata vrij te geven
• Open brief Prof. Malcolm Hooper aan The Lancet
• Een half jaar gaat voorbij zonder de vrijgave van PACE-studiedata uit PLOS One
• PACE-Gate: de controverse over de grootste studie naar CGT en GET bij ME/cvs
• Proffen schrijven open brief aan PLoS One i.v.m. PACE-studie naar CGT/GET
• Correctie van PLoS verwijdert geanonimiseerde patiëntengegevens in studie naar CVS (& zet ze daarna terug)
• “Hun mond viel open van verbazing over de PACE-trial naar CGT en GET.”
• Rechtbank eist vrijgave van de gegevens van de PACE-studie naar CGT en GET voor ME/CVS
• Queen Mary University of London “bestudeert” de regelgeving om de PACE-data vrij te geven
• The Lancet struikelt opnieuw over de PACE-studie
• Trial by error, vervolgd: mijn vragen voor de hoofdredacteur van The Lancet, Richard Horton
• Vrijgave data PACE-team volgens originele protocol
• Verklaring QMUL: bekendmaking van de data van de PACE-studie onder de Wet op de Vrijheid van Informatie
• Persbericht. De vrijgave van de PACE-data is een fundamentele overwinning voor mensen met ME/cvs
• Stop studies naar graduele oefentherapie voor ME/CVS
• Prof. Van der Meer waarschuwt voor delen van data met “je vijanden”
• Geen “herstel” in de PACE-studie, blijkt uit nieuwe analyse
• Slechte wetenschap heeft miljoenen ME/cvs-patiënten misleid. Hier leest u hoe we terugvochten.
• Belangrijkste punten uit de analyse van de ruwe data voor “herstel” van de PACE-studie
• Bewijs voor aanbevolen behandelingen voor ME en CVS houdt geen stand
• Trial by error, vervolgd: de echte data van de PACE-studie
• Erger dan de ziekte
• De PACE-studie: waar “herstel” niet betekent dat je terug gezond bent
• Hoe de brief van Alem Matthees het mysterie van ME/cvs hielp oplossen
• Een open brief aan Psychological Medicine over “herstel” en de PACE-trial (Update)
• Opnieuw een open brief aan Psychological Medicine!
• De bal misslaan bij ME/cvs
• Trial by error, vervolgd: de nieuwe FITNET-studie voor kinderen
• Trial by error, vervolgd: een vervolgpost over FITNET-NHS
• Trial by error, vervolgd: de Nederlandse studies (opnieuw!), en een Esther Crawley-bonus
• Trial by error, vervolgd: mijn lasterlijk bloggen op Virology Blog
• Trial by error, vervolgd: een open brief aan het bestuur van het CFS/ME Research Collaborative (CMRC)
• Trial by error, vervolgd: CFS/ME Research Collaborative aan Virology Blog: “Rot op!”
• Trial by error, vervolgd: Het CMRC bevestigt volledige steun aan Lasterlijke Esther
• Trial by error, vervolgd: ME Research UK stapt uit het CFS/ME Research Collaborative
• Trial by error, vervolgd: mijn “scheur-het-aan-flarden”-toespraak bij Invest in ME
• David Tuller zamelt geld in voor Virology Blogs Trial by error: verslaggeving over PACE, ME/cvs en verwante onderwerpen
• Trial by error, vervolgd: mijn brief aan de University of Bristol
• Crowdfundingcampagne David Tuller in teken van ME: nog twee weken te gaan…
• David Tuller komt op voor ME: de laatste tien dagen van de campagne…
• Trial by error, vervolgd: is PACE een geval van wetenschappelijk wangedrag?
• Trial by error, vervolgd: de reis van Julie Rehmeyer “Through The Shadowlands”
• Trial by error, vervolgd: meer over graduele oefentherapie van Peter White en The Lancet
• Trial by error: De CDC schrappen cognitieve gedragstherapie (CGT) en graduele oefentherapie (GET) voor ME/cvs
• Trial by error: De NICE-richtlijnen, en meer over de CDC
• Trial by error: NICE weigert om namen van experts te onthullen
• Trial by error: NICE verwerpt mijn verzoek op basis van vrijheid van informatie
• De PACE-trial, of hoe een medisch schandaal tot stand kwam
• Waarop moet je letten in de Speciale Editie van het Journal of Health Psychology over de PACE-trial
• Deel 2: Waarop moet je letten in de Speciale Editie van het Journal of Health Psychology over de PACE-trial
• Trial by error: de wanhopige pogingen van het Science Media Center om PACE te verdedigen
• Trial by error: gepensioneerde PACE-onderzoeker Peter White en Swiss Re
• Trial by error: mijn e-mailuitwisseling met de directeur van NICE
• Trial by error: geen ethische review van de studie van Crawley over afwezigheid op school
• Trial by error: verzoek om meer details over de studie van Crawley over afwezigheid op school
• Trial by error: de rapporten van de “deskundigen ter zake” van NICE
• Trial by error: MEGA’s nieuwst mislukking
• Trial by error: NICE verwerpt huidige richtlijn, plant “volledige update”
• Trial by error: NIH geeft een subsidie van 2,1 miljoen dollar aan de Britse Biobank!
• Trial by error: nog een brief aan de directeur van NICE
• Trial by error: huidige NICE-richtlijn blijft, voorlopig toch
• Trial by error: de verrassende nieuwe gids voor beste praktijken van BMJ [voor ME/cvs]
• Trial by error: mijn korte ontmoeting met Professor Crawley
• Trial by error: Hé, Bristol! Waar is mijn ‘cease and desist’-brief*?
• Trial by error: de Crawley-kronieken (vervolg)
• Trial by error: mijn eenzijdige correspondentie met professor Crawley
• Trial by error: de niet-openbaar gemaakte uitkomstenverwisseling van de SMILE-studie
• SMILE-studie Lightning Process voor kinderen met CVS: Resultaten te mooi om waar te zijn?
• Trial by error: mijn vragen voor het Science Media Center
• Trial by error: de klacht van Bristol aan Berkeley
• David Tuller en de (s)PACEcake-eters
• Trial by error: de studie naar afwezigheid op school, tweede ronde
• Trial by error: COPE aan BMJ Open: meer details alstublieft!
• Trial by error: mijn halfjaaroverzicht
• Trial by error: de valse beweringen van professor Crawley op BuzzFeed
• Trial by error: een brief aan Archives of Disease in Childhood
• Trial by error: brief van CPET-experts aan het British Journal of Sports Medicine
• Trial by error: QMUL en FOI, Nature en Cochrane, het Pineapple Fund
• Trial by error: een brief aan BMJ Open
• Trial by error: onze gedachtenwisseling met BMJ Open
• Trial by error: mijn briefwisseling met het vakblad Archives of Diseases in Childhood
• Trial by error: nieuws over mijn plannen
• Trial by error: het nieuws van het CFS/ME Research Collaborative
• Trial by error: de Nederlandse review; mijn trip; Bristols stilzwijgen
• Trial by error: de stand van zaken in Australië en de nieuwe functie van professor Crawley
• Trial by error: ik meld me even vanuit Melbourne en Canberra…
• Trial by error: de volgende ronde met BMJ Open 26/3
• Trial by error: vragenronde met Schots Parlementslid Carol Monaghan 28/3
• Trial by error op Virology Blog: verslaggeving over ME/CVS. Crowdfundingscampagne voor David Tuller! 29/3
• Trial by error: mijn door Berkeley ondersteunde crowdfundingscampagne 2/4
• Trial by error: onze nieuwste tango met BMJ Open… 2/4
• Trial by error: een fantastisch stuk over ME/CVS op de Australische TV 4/4
• Trial by error: een post over Andrew Lloyd 4/4
• Trial by error: mijn Australische tour, vervolg 11/4
• Trial by error: twee podcastinterviews en “belangenconflicten” 16/4
• Trial by error, gastpost: crowdfunding David Tuller is geen belangenconflict 16/4
• Trial by error: Professor Michael Sharpes flater op de Australische Radio 18/4/18
• Trial by error: de steun die Andrew Lloyd in het verleden gaf aan PACE 24/4/18
• Trial by error: de winkeltasstudie en de vernieuwde website van de staat New York 24/4/18
• Trial by error: tot ziens Australië; en twee updates 25/4/18
• Trial by error: Vraag en antwoord met Leonard Jason met betrekking tot gevalsdefinities 2/5/18
• Trial by error: mijn bezoeken aan Alem Matthees 7/5/18
• Trial by error: Australiës online bijscholingsprogramma over GET/CGT 14/5/18
• Trial by error: meer over de CDC; Reader’s Digest; Newsbeat op BBC 23/5/18
• Trial by error: NICE neemt het Lightning Process in beschouwing 28/5/18
• Trial by error: mijn woordenwisseling met de hoofdonderzoekers van PACE, in NY Times in 2011 29/5/18
• Trial by error: BMJ “onderzoekt” nog steeds de paper over het Lightning Process 4/6/18
• Trial by error: mijn brief aan Parlementslid Monaghan over BMJ-studies 5/6/18
• Trial by error: een brief aan gezondheidsambtenaren over de lakse redactionele maatstaven van BMJ 6/6/18
• Trial By Error: mijn brief over de BMJ-studie aan het Science Media Centre 6/6/18
• Trial By Error: nog enkele brieven over BMJ’s gebrekkige pediatrische studies 11/6/18
• Trial By Error: een leerplan voor behandeling van CVS met CGT 13/6/18
• Trial by error: een brief aan NICE over het IAPT-programma 18/6/18
• Trial by error: Sir Simon trapt bal in eigen doel 18/6/18
• Trial by error: een open brief aan The Lancet, twee jaar later 19/6/18
• Trial by error: Professor Sharpes driftige opmerkingen – in wiens naam spreekt hij eigenlijk? 25/6/18
• Trial by error: mijn gesprek met professor Bishop 25/6/18
• Trial by error: Professor Sharpes briefing aan Monaghan vóór de hoorzitting 2/7/18
• Trial by error: mijn brief aan Fiona Godlee 2/7/18
• Trial by error: zijn alle experts in klinische studies fan van PACE? 9/7/18
• Trial by error: nog maar eens een oproep aan The Lancet, met meer handtekeningen 10/7/18
• Trial by error: wachten op Godlee 11/7/18
• Trial by error: mijn brief aan het Wetenschappelijk en Technisch Comité van het Parlement 11/7/18
• Trial by error: de inhoudsloze “noot van de redactie” bij de studie over het Lightning Process 16/7/18
• Trial by error: de update van CDC voor zorgverstrekkers 30/7/18
• Trial by error: Mayo blijft pleiten voor GET 6/8/18
• Trial by error: open brief aan The Lancet, versie 3.0 13/8/18
• Trial by error: de BPS-brigade trapt bal wéér in eigen doel 15/8/18
• Trial by error: meer Mayo alsjeblieft 20/8/18
• Trial by error: rekruteringsadvertentie voor FITNET-NHS maakt reclame voor “herstel” 20/8/18
• Trial by error: mijn brief aan Red Whale/GP Update 22/8/18
• Trial by error: nog een brief aan BMJ’s Dr Godlee 27/8/18
• Trial by error: Professor Edward brief aan Fiona Watt van MRC 28/8/18
• Trial by error: de Cochranecontroverse 3/9/18
• Trial by error: hoe staat het eigenlijk met de MAGENTA-studie? 17/9/18
• Trial by error: Bruce Levin over “hoe je een gerandomiseerde klinische studie NIET uitvoert” 18/9/18
• Trial by error: de open brief aan Netflix over Afflicted 24/9/18
• Over lichamelijke symptomen die afgewimpeld worden als “tussen de oren” 27/9/18
• Trial by error: de conferentie van de CFS/ME Research Collaborative 1/10/18
• Trial by error: mijn meest recente brief aan Archives of Disease in Childhood 8/10/18
• Trial by error: mijn eerste post over het IAPT-programma 10/10/18
• Trial by error: Per Fink in New York 16/10/18
• Trial by error: de zielige reactie van de Psychosomatische Conferentie 17/10/18
• ME/CVS is geen psychosomatische ziekte 18/10/18
• Mijn brief aan organisator van 4 ^e Psychosomatiekconferentie aan Columbia 19/10/18
• Trial by error: Cochrane trekt gebrekkige review over lichaamsbeweging in 19/10/18
• Een steunbetuiging aan Cochrane 23/10/18
• Trial by error: waar blijft die verontschuldiging, BMJ Open? 24/10/18
• Trial by error: drie jaar verder… 28/10/18
• Trial by error: wéér een brief over de studie over het Lightning Process 7/11/18
• Trial by error: een Australische uitwisseling met professor Sharpe 8/11/18
• Trial by error: hoe ontwijk je ethische review? 12/11/18
• Trial by error: enkele bedenkingen over NICE 19/11/18
• Trial by error: goed nieuws over Cochrane 3/12/18
• Trial by error: BMJ zag Bristols ethische vrijstellingen door de vingers 4/12/18
• Trial by error: een nieuwe zet van Cochrane 10/12/18
• Trial by error: het Noorse perspectief 12/12/18
• Trial by error: de nieuwe studie over interferon voor “CVS” 19/12/18
• Trial by error: Australisch ontwerprapport nodigt uit tot commentaar 24/12/18
• Trial by error: “Geen woorden, maar daden!”, zeggen patiënten tegen NIH 26/12/18
• Trial by error: mijn brief aan de seniorauteur van de studie over het Lightning Process 7/1/19
• Trial by error: verdere bedenkingen over de interferonstudie 7/1/19
• Trial by error: weer een Parlementair Debat voor Carol Monaghan 21/1/19
• Trial by error: mijn zesmaandelijks overzicht 22/1/19
• Trial by error: het werkgerelateerd advies van Action for ME 23/1/19
• Trial by error: Steve Brines verontrustende uitspraak in het parlementaire ME-debat 28/1/19
• Trial by error: mijn brief aan Professor Chew-Graham over METRIC 28/1/19
• Trial by error: Bristol onderzoekt Crawleypapers 31/1/19
• Trial by error: enkele bedenkingen over een aanstaand artikel 31/1/19
• Trial by error: de vragen van de verslaggever voor professor Racaniello 31/1/19
• Trial by error: wat meer over Bristols onderzoek 1/2/19
• Trial by error: een terugblik op de studie over de afwezigheid op school 3/2/19
• Trial by error: en nog een “repliek vooraf”… 5/2/19
• Trial by error: HRA-rapport praat PACE niet goed 6/2/19
• Trial by error: BMJ past PACE-artikel van vorige week aan 12/2/19
• Trial by error: mijn vragen aan de PACE-professoren 13/2/19
• Trial by error: Brieven aan Fiona Godlee en Nigel Hawkes 18/2/19
• Trial by error: Professor Sharpe vraagt om intrekking van artikels 18/2/19
• Trial by error: de kostprijs van SOLK 25/2/19
• Trial by error: wie heeft de documenten over de schoolstudie? 4/3/19
• Trial by error: stomme studies 6/3/19
• Trial by error: grote Amerikaanse zorgverzekeraar wijzigt koers! 11/3/19
• Trial by error: mijn brief aan professor Hotopf over Bristols schoolafwezigheidsstudie 18/3/19
• Trial by error: update van Cochrane en laatste brief van Caroline Struthers 20/2/19
• Trial by error: Cochranes rapport over Courtneys klacht 12/3/19
• Trial by error: mijn verslaggeving over ME/cvs en aanverwante controverses 27/3/19
• Trial by error: mijn brief aan Kate Kelland 18/3/19
• Trial by error: de zielige reactie van CDC aan Reuters 25/3/19
• Trial by error: meer over Kaiser Permanente 1/4/19
• Trial by error: april is crowfundingmaand aan Berkeley 1/4/19
• Trial by error: Amerikaanse Top voor ME/cvs-artsen 2/4/19
• Trial by error: crowdfunding, week 1 8/4/19
• Trial by error: mijn meest recente brief aan Bristol 9/4/19
• Trial by error: crowdfunding, week 2 en meer over Sharpe en Chalder 15/4/19µ
• Trial by error: update over Reuters 18/4/19
• Trial by error: ik kom even terug op het verhaal in Reuters 21/4/19
• Trial by error: crowdfunding, week 3: je donatie wordt verdubbeld 22/4/19
• Trial by error: Jennie Spotila over toespraak directeur NIH 23/4/19
• Trial by error: weer een brief aan de juridische dienst van Bristol 29/4/19
• Trial by error: mijn opvolgingsbrief aan Reuters 30/4/19
• Trial by error: mijn brief over SOLK aan British Journal of General Practice 6/5/19
• Trial by error: mijn gesprek met British Journal of Medical Practice 7/5/19
• Trial by error: ik schreef nog maar eens aan Bristol 13/5/19
• Trial by error: crowdfunding is ten einde! 14/5/19
• Trial by error: pleidooi aan Fiona Godlee over een bekend thema 16/5/19
• Trial by error: mijn opvolgbrief aan het British Journal of Medical Practice 20/5/19
• Trial by error: Lightning Process “doeltreffend”? Dat meen je toch niet? 20/5/19
• Trial By Error: mijn meest recente brief over de studie over het Lightning Process: update 22/5/19
• Trial by error: British Journal of Medical Practice stemt in met correctie over SOLK 29/5/19
• Trial by error: Professor Edwards schrijft naar Dr Godlee van BMJ over de LP-studie 3/6/19
• Trial By Error: tijd om de LP-studie in te trekken; Brief aan Archives of Disease in Childhood 3/6/19
• Trial By Error: een FOI-aanvraag aan Bristol over LP-studie 3/6/19
• Trial By Error: terugkijk op mijn vragen aan Science Media Centre over Bristols LP-studie 3/6/19
• Trial By Error: een tweede brief aan seniorauteur LP-studie 5/6/19
• Trial By Error: opvolging van mijn opvolgingsbrief aan Dr. Segal over citatie LP-studie 5/6/19
• Trial by error: hé BJGB, waar blijft die correctie over de kostprijs van SOLK? 10/6/19
• Trial by error: BJGP-correctie op komst; BMJ blijft ons hardnekkig negeren 11/6/19
• Trial by Error: een brief aan Bristol over mijn recente FOI-verzoek; plus update 12/6/19
• Trial By Error: weer een review die de LP-studie vernoemt, dus ik klim weer in mijn pen 24/6/19
• Trial By Error: een update over de pediatrische SOLK-review 26/6/19
• Trial By Error: FOI-antwoord uit Bristol over LP-studie; correctie in BJGP over SOLK /1/7/19
• Trial By Error: mijn brief aan Professor Chew-Graham over de kostprijs van SOLK 1/7/19
• Trial By Error: bedenkingen over SOLK en Bermingham; Brief aan Professor Payne 8/7/19
• Trial By Error: Mary Dimmock over de nieuwe bewijsreview van de CDC 10/7/19
• Trial By Error: ons contact met vakblad BMJ over “correctie” LP-studie 15/7/19
• Trial By Error: Britse klinieken gaan te laks om met schade door behandeling, zegt studie 16/7/19
• Trial By Error: nieuwe GET-onzin uit Australië 29/7/19
• Trial By Error: een slecht geïnformeerd artikel in The Guardian 13/8/19
• Trial By Error: mijn interview met de Australische Dr. Don Lewis 19/8/19
• Trial By Error: Joan McParlands getuigenis over het Lightning Process 21/8/19
• Trial By Error: BMJ’s gedrag is moreel failliet – open brief aan Dr. Godlee 28/8/19
• Trial By Error: oproep tot intrekking van de LP-studie 3/9/19
• Trial By Error: hoofdauteur nieuwe bias-richtlijn Cochrane was coauteur LP-studie 31/8/19
• Trial By Error: meer over Cochranes nieuwe tool i.v.m. risico op bias 4/9/19