Sloppy science met nauwelijks gecertificeerd medisch apparaat in Radboud UMC

kwaliteitscontrole afgewezen

In PLOS ONE, een internationaal, op open access gebaseerd online wetenschappelijk tijdschrift op het gebied van de biologie verscheen op 12 februari 2018 een artikel over het gebruik van een zogenaamd “smart all-in-one device” de CheckMe Pro van de Chinese firma Viatom. De titel was: “A smart all-in-one device to measure vital signs in admitted patients.” Veel vitale functies zou dit apparaat(88x56x13 mm),  kunnen meten. Ik schreef over dit apparaat op 23 januari 2017 al een kritisch artikel. In het nu verschenen artikel beschrijven medewerkers van het ReShape Center van het Radboud Universitair Medisch Centrum(RUMC) en clinici het gebruik van de CheckMe bij opgenomen patiënten met als doel ermee de nauwkeurigheid van zelfmetingen door patiënten te evalueren en te vergelijken met metingen door goed getrainde onderzoekers en door verpleegkundigen. Ondanks het zeer beperkt zijn van het onderzoek, gebreken en onnauwkeurigheden, weet men aan het eind er nog een positief oordeel over te geven. Daarenboven is er sprake van gebruik van een apparaat dat beslist onvoldoende gecertificeerd is voor het beoogde gebruik in een medische instelling.

Lees meer

Eindelijk verstandige woorden van een zorgbestuurder over eHealth

veilig-onveilig

De bestuursvoorzitter van het Deventer Ziekenhuis Gita Gallé laat in een interview met het magazine Zorgvisie weten dat naar haar verwachting de komende vijf jaar geen disruptieve doorbraak van eHealth te verwachten is. Volgens haar kan het misschien wel tien jaar duren. Ze constateert in ieder geval dat het tempo minder hoog is dan vaak gedacht wordt. Zij spreekt in het interview open over de positieve dingen die eHealth kan brengen en het enthousiasme van de dokters, maar is tegelijk heel reëel met de constatering dat lang niet alle eHealth-pilots een succes zijn. Zij stelt ook dat het inbedden van technologie in de ondersteunend processen veel tijd  kost. Het is de eerste keer dat ik een dergelijk geluid vanuit de leiding van een ziekenhuis hoor. eHealth, of te wel het gebruik van ICT om gezondheid en gezondheidszorg te ondersteunen of te verbeteren, is in het overgrote deel van de publicaties van hen die het voorstaan, iets wat vrijwel uitsluitend kritiekloos positief benaderd wordt. Grote omwentelingen, disrupties, verwacht men ervan. Toch vergeet men vaak, met het ministerie van VWS voorop, dat eHealth op zijn minst even effectief veilig moet zijn als bestaande technologie en moet kunnen werken in samenhang met de infrastructuur in praktijken, ziekenhuizen etc.  Die veiligheid en efficiency moet eerst bewezen zijn wil men er massaal gebruik van kunnen maken.

Lees meer

Relevantie van met data-analyse gevonden verbanden belangrijker dan vinden ervan

verbanden

Op de website www.icthealth.nl, een online magazine over zorg-ICT, verscheen op 13 februari 2018 een artikel met als titel “De data-analist als nieuwe collega van de dokter”. Daarin schetst gastauteur Pieter Veefkind, senior business analist healthcare van IT-dienstverlener Sogeti, een zusterbedrijf van het Franse Capgemini met een gloedvol betoog hoe de data-analist in de gezondheidszorg de collega van de dokter gaat worden. De arts geeft in zijn optiek opdracht aan de data-analist om verbanden op te sporen en bepaalt of hij de resultaten al dan niet adopteert. Het is een geluid dat je steeds meer hoort met als argument dat op die manier klinische trials vervangen zouden kunnen worden. Het probleem is echter dat met behulp van big-data, geanalyseerd door data-analisten best wel verbanden gevonden kunnen worden tussen bepaalde klachten, verschijnselen, onderzoeksgegevens, maar dat het helemaal de vraag is of die verbanden wel relevant zijn. Met data-analyse gevonden verbanden zullen dan ook altijd gevalideerd moeten worden door ander onderzoek, zoals gerandomiseerde klinische testen alvorens de arts er waarde aan kan hechten.

Lees meer

How to produce bullshit about diabetes detection with heartrate sensors on smartwatches

bullshit

De afgelopen paar dagen is er in de Amerikaanse media, die publiceren over de zegeningen van de “wearables”, zoals smartwatches en fitnesstrackers a la Fitbit, fors uitgepakt over het kunnen detecteren van diabetes met smartwatches. Ook Nederlandse media doken erop, zoals onder andere de website Smarthealth en de iCulture-website. De aanleiding is de presentatie van een onderzoeksgroep van de universiteit van San Francisco samen met de mensen achter de medische startup Cardiogram, (klik hier op de link Recent Claim) die de gelijknamige app maakt, op een congres van de Association for the Advancement of Artificial Intelligence (AAAI) in New Orleans van 2 tot 7 februari. Het onderzoek dat nog niet in vakliteratuur gepubliceerd is pretendeert met behulp van gebruik van hartfrequentie-data van smartwatches(Apple), geanalyseerd met een diep neuraal netwerk genaamd DeepHeart, diabetes mellitus met een accuratesse van 85 procent vast te stellen. Eerder publiceerden dezelfde mensen resultaten van onderzoek waarbij met dezelfde methodiek slaapapneu en hypertensie vastgesteld zouden kunnen worden. Dat onderzoek kon op zijn zachtst gezegd “sloppy science” genoemd worden, omdat de beschreven nauwkeurigheid op de keper beschouwd nogal fors tegenvalt en tot forse aantallen fout-positieven en fout-negatieven leidt. Ik publiceerde daar op 24 november 2017 over. 

Lees meer

Flink geschut in stelling pro sleepwet. Serieuze opmaat naar referendum

kanonnen

Bij het Oekraïne-referendum kon nog gezegd worden dat het toenmalige kabinet en de individuele bewindslieden, nogal laks en laconiek de gebeurtenissen tegemoet traden. Dat kan niet nu niet gezegd worden van het komende referendum over de zogenaamde sleepwet, dat tegelijk met de gemeenteraadverkiezingen op 21 maart 2018 gehouden zal gaan worden. Het grote geschut brengt men nu, anderhalve maand voor het referendum, duidelijk in stelling. Ook de inlichtingendiensten AIVD en MIVD laten zich niet onbetuigd. In een twee pagina’s groot interview in het NRC-Handelsblad(artikel achter betaalmuur) laten Rob Bertholee, directeur van de AIVD en commodore Onno Eichelsheim, die de leiding heeft bij de MIVD, weten dat voor hen de nieuwe Wet op de inlichtingen- en veiligheidsdiensten(Wiv) zeer belangrijk is. Deze wet wordt ook wel de sleepwet genoemd. Eerder had Bertholee zich al uitgebreid op de televisie laten interviewen in het programma College Tour. Na berichtgeving in de Volkskrant over een geslaagde inbraakoperatie bij Russische hackersgroep Cozy Bear haast minister-president Mark Rutte zich om in de pers een lans te breken voor de sleepwet.  Eerder had de minister van Binnenlandse zaken en Koninkrijkrelaties Kassa Ollongren, onder wie de Wiv ressorteert, laten weten dat zij zich actief wil mengen in het debat over de sleepwet.

Lees meer