Hudkreft apps ‘kan ikke være lettelse opp på for nøyaktige resultater’, studien finner

Smartphone programmer som er laget for å oppdage risiko for hudkreft er dårlig regulert og “ofte ikke være lettelse opp på for å produsere nøyaktige resultater”, ifølge en ny analyse.

Forskere basert i University of Birmingham Institutt for Anvendt helsefaglig Forskning, i samarbeid med Senter for kunnskapsbasert Dermatologi ved University of Nottingham, har analysert en serie av studier som er produsert for å evaluere nøyaktigheten av seks ulike apper.

Resultatene, som er publisert i BMJ, avslører et blandet bilde, med bare et lite antall studier som viser variable og upålitelig test korrektheten blant apps evaluert.

De fant apper kan forårsake skade ved unnlatelse av å identifisere potensielt dødelig hud kreft, eller fra over-undersøkelse av falske positive resultater, slik som å fjerne en ufarlig mole unødvendig.

Bly forsker, Dr Jac Dinnes, fra Institutt for Anvendt Health Research, sa: “Dette er en rask bevegelse feltet, og det er veldig skuffende at det ikke bedre kvalitet på tilgjengelig dokumentasjon til å vurdere effekten av disse programmene.

“Det er viktig at helsepersonell er oppmerksom på de gjeldende begrensninger både i teknologi og i sine vurderinger.”

I en lederartikkel på funnene for British Medical Journal, Jessica Morley, University of Oxford DataLab politiske leder, Dr. Ben Goldacre, DataLab direktør, og Luciano Floridi, professor i filosofi og etikk av informasjon ved University of Oxford, sa tillit i kunstig intelligens (AI) er avhengig av den “myten” av en objektiv algoritmen for å informere teknologi.

Men systemene for å generere og implementere bevis har ennå ikke møtt spesielle utfordringer, de har lagt til.

Studien så på ni ulike programmer og funnet bevis for korrektheten var “mangler”.

To av disse appene er for tiden tilgjengelig i STORBRITANNIA: SkinScan og SkinVision. Begge er godkjent og regulert som Klasse 1 medisinsk utstyr og har begge CE-merkene.

Studien fant SkinScan ble evaluert i en enkelt studie av 15 bilder med fem melanomer. Appen ikke identifisere noen av melanomer.

SkinVision ble evaluert i to studier. En studie av 108 føflekker, hvorav 35 var kreft eller forstadier til kreft, oppnådd en sensitivitet på 88% og en spesifisitet på 79%.

Det betyr at 12% av pasienter med kreft eller forstadier til kreft føflekker ville bli savnet, mens 21% av de ikke-problematisk føflekker ville være feilaktig identifisert som potensielt blir cancerous, BMJ studien fant.

Men begge appene er markedsført med påstander om de kan “oppdage hud kreft på et tidlig stadium” eller “spor føflekker over tid med sikte på å fange melanom på et tidligere stadium av sykdommen”, forskere lagt til.

Andre studier har tidligere funnet SkinVision synger “godt over” en GP i å oppdage hudkreft.

Trinnene til forbedring

Dr Dinnes sa: “Som teknologien fortsetter å utvikle seg, disse typer programmer er sannsynlig å tiltrekke seg å øke oppmerksomheten om hudkreft diagnose, så det er veldig viktig at de er skikkelig vurdert og regulert.”

Forskerne gjort en rekke anbefalinger for fremtidige studier av smarttelefon-apper:

Studier må være basert på klinisk relevant populasjon av smarttelefon-brukere som kan ha bekymringer om deres risiko for hudkreft
Alle hudlesjoner identifisert av smartphone-brukere må være inkludert – ikke bare de som er identifisert som problematiske
Klinisk oppfølging av godartede lesjoner må være inkludert i studien for å gi mer pålitelig og generalizable resultater

For å forbedre påliteligheten av AI apps lover, styring og kulturelle endringer er nødvendig, Morley, Goldacre og Floridi skrev.

Regulatorer er vant til å håndtere legemidler vil kreve ny kompetanse til å vurdere digitale teknologier og der det ikke blir vurdert det bør tydelig merkes til pasienter og politikere, de forklarte.

Mens klinikere, pasienter og oppdragsgivere må bli bedre informert om hvordan de skal evaluere en AI-appen, som vil bidra til å drive bedre innovasjon, de har lagt til.

Relaterte Innlegg

BCS offisielt åpnes CHIME med NORGE chapterApp hud kreft gjenkjenningsmuligheter ‘godt over det av GPs’Beyond huden: bruk av maskinlæring for å hindre 250,000 kreft deathsKey CES digital helse og velvære tech trender å se