Geprefereerde rapportage-items voor systematische beoordelingen en meta-analyses - Uitbreiding van kunstmatige intelligentie (PRISMA-AI)
Geprefereerde rapportage-items voor systematische beoordelingen en meta-analyses - Kunstmatig. Delphi-consensus
Studie Overzicht
Toestand
Conditie
Interventie / Behandeling
Gedetailleerde beschrijving
Met de vooruitgang in kunstmatige intelligentie (AI) in de afgelopen twee decennia is het enthousiasme en de acceptatie van deze technologie in de geneeskunde gestaag toegenomen. Maar ondanks de grotere acceptatie van AI in de geneeskunde, varieert de manier waarop dergelijke methodologieën en resultaten worden gerapporteerd sterk en kan de leesbaarheid van klinische onderzoeken waarbij AI wordt gebruikt een uitdaging zijn voor de algemene clinicus.
Systematische reviews van AI-toepassingen zijn een belangrijk gebied waarvoor specifieke begeleiding nodig is. Een doorlopende systematische review onder leiding van ons team heeft aangetoond dat het aantal systematische reviews over AI-toepassingen (met of zonder meta-analyse) in de loop van de tijd dramatisch toeneemt, maar dat de kwaliteit van de rapportage nog steeds slecht en heterogeen is, wat leidt tot inconsistenties in de rapportage van informatieve details tussen individuele onderzoeken. Bijgevolg kan het ontbreken van deze informatieve details problemen opleveren voor primair onderzoek en synthese en mogelijk het nut ervan beperken voor belanghebbenden die geïnteresseerd zijn in het implementeren van AI of het gebruiken van de informatie in systematische reviews.
De criteria zullen voortkomen uit de consensus onder multi-specialistische experts (in elk medisch specialisme) die al hebben gepubliceerd over AI-toepassingen in toonaangevende medische tijdschriften en de hoofdauteurs van PRISMA, STARD-AI, CONSORT-AI, SPIRIT-AI, TRIPOD- AI, PROBAST-AI, CLAIM-AI en DECIDE-AI om ervoor te zorgen dat de criteria wereldwijd toepasbaar zijn in alle disciplines en voor elk type studie waarbij de AI betrokken is.
De voorgestelde PRISMA-AI-uitbreidingscriteria zijn gericht op het standaardiseren van de rapportage van methoden en resultaten voor klinische onderzoeken met behulp van AI. Deze criteria weerspiegelen de meest relevante technische details die een datawetenschapper nodig heeft voor toekomstige reproduceerbaarheid, maar ze richten zich op het vermogen van de clinicus om de relevante resultaten van dergelijke onderzoeken kritisch te volgen en vast te stellen.
De resulterende PRISMA-AI-extensie zal
- belanghebbenden helpen die geïnteresseerd zijn in het implementeren van AI of het gebruik van AI-gerelateerde informatie in systematische reviews
- creëer een raamwerk voor reviewers die publicaties beoordelen,
- een hulpmiddel bieden voor het trainen van onderzoekers op het gebied van kunstmatige intelligentie SR-methodologie
- eindgebruikers van de SR, zoals artsen en beleidsmakers, helpen om de validiteit en toepasbaarheid van SR beter te beoordelen in hun besluitvormingsproces.
Het succes van de criteria zal blijken uit de manier waarop manuscripten worden geschreven, hoe peer reviewers ze beoordelen en ten slotte hoe het algemene lezerspubliek de gepubliceerde studies kan lezen en verwerken.
Studietype
Inschrijving (Verwacht)
Contacten en locaties
Studie Locaties
-
-
California
-
Los Angeles, California, Verenigde Staten, 90005
- University of Southern California
-
-
Deelname Criteria
Geschiktheidscriteria
Leeftijden die in aanmerking komen voor studie
Accepteert gezonde vrijwilligers
Geslachten die in aanmerking komen voor studie
Bemonsteringsmethode
Studie Bevolking
Beschrijving
Inclusiecriteria:
- experts in het gebruik van AI-technologie in de geneeskunde
- experts op het gebied van PRISMA
- toonaangevende auteurs van STARD-AI, CONSORT-AI, SPIRIT-AI, TRIPOD-AI, PROBAST-AI, CLAIM-AI en DECIDE-AI
Uitsluitingscriteria:
- Panelleden die zich niet aan alle rondes van het gewijzigde Delphi-proces konden committeren, worden uitgesloten
Studie plan
Hoe is de studie opgezet?
Ontwerpdetails
Cohorten en interventies
Groep / Cohort |
Interventie / Behandeling |
|---|---|
|
Delphi-paneel
Een team van experts in het gebruik van AI-technologie in de geneeskunde zal samen met experts in PRISMA, STARD-AI, CONSORT-AI, SPIRIT-AI, TRIPOD-AI, PROBAST-AI, CLAIM-AI en DECIDE-AI de PRISMA-AI evalueren richtlijnen voor het melden van extensies
|
Een uitnodigingsmail, inclusief een link naar de enquête, wordt naar het panel van experts in Ai in de gezondheidszorg gestuurd. De Delphi-vragenlijst wordt afgenomen via Welphi.com. In het eerste onderzoek schetsen panelleden de AI-rapportagestandaarden in systematische beoordelingen en identificeren ze objectief kritische aspecten van rapportagemethodologie en resultaten. Bij volgende enquêtes zal het expertpanel de gewijzigde criteria evalueren met behulp van een 1- tot 5-punts Likert-schaal met ruimte voor voorgestelde bewerkingen en opmerkingen. Er worden meerdere rondes gehouden totdat consensus is bereikt. Na elke ronde van Likert-antwoorden berekent het onderzoeksteam de overeenstemming en verdeling van de antwoorden. Likert-antwoorden worden gedichotomiseerd met positieve waarden die aangeven dat ze het eens zijn en neutrale of negatieve waarden die aangeven dat ze het er niet mee eens zijn. Voor de vragen die in de eerste ronde geen consensus bereiken van meer dan 80% of nadere toelichting behoeven, kunnen aanvullende enquêterondes worden uitgevoerd. |
Wat meet het onderzoek?
Primaire uitkomstmaten
Uitkomstmaat |
Maatregel Beschrijving |
Tijdsspanne |
|---|---|---|
|
Mate van overeenstemming
Tijdsspanne: 3 maanden
|
Het niveau van overeenstemming voor alle verklaringen die consensus bereiken van het expertpanel; consensus is vooraf gedefinieerd als ≥ 80% van het panel dat een bepaalde uitspraak beoordeelt
|
3 maanden
|
Medewerkers en onderzoekers
Onderzoekers
- Studie stoel: Giovanni Cacciamani, MD, University of Southern California
Publicaties en nuttige links
Algemene publicaties
- Ibrahim H, Liu X, Rivera SC, Moher D, Chan AW, Sydes MR, Calvert MJ, Denniston AK. Reporting guidelines for clinical trials of artificial intelligence interventions: the SPIRIT-AI and CONSORT-AI guidelines. Trials. 2021 Jan 6;22(1):11. doi: 10.1186/s13063-020-04951-6.
- Cruz Rivera S, Liu X, Chan AW, Denniston AK, Calvert MJ; SPIRIT-AI and CONSORT-AI Working Group. Guidelines for clinical trial protocols for interventions involving artificial intelligence: the SPIRIT-AI extension. Lancet Digit Health. 2020 Oct;2(10):e549-e560. doi: 10.1016/S2589-7500(20)30219-3. Epub 2020 Sep 9.
- Sounderajah V, Ashrafian H, Aggarwal R, De Fauw J, Denniston AK, Greaves F, Karthikesalingam A, King D, Liu X, Markar SR, McInnes MDF, Panch T, Pearson-Stuttard J, Ting DSW, Golub RM, Moher D, Bossuyt PM, Darzi A. Developing specific reporting guidelines for diagnostic accuracy studies assessing AI interventions: The STARD-AI Steering Group. Nat Med. 2020 Jun;26(6):807-808. doi: 10.1038/s41591-020-0941-1. No abstract available.
- Collins GS, Dhiman P, Andaur Navarro CL, Ma J, Hooft L, Reitsma JB, Logullo P, Beam AL, Peng L, Van Calster B, van Smeden M, Riley RD, Moons KG. Protocol for development of a reporting guideline (TRIPOD-AI) and risk of bias tool (PROBAST-AI) for diagnostic and prognostic prediction model studies based on artificial intelligence. BMJ Open. 2021 Jul 9;11(7):e048008. doi: 10.1136/bmjopen-2020-048008.
- Page MJ, McKenzie JE, Bossuyt PM, Boutron I, Hoffmann TC, Mulrow CD, Shamseer L, Tetzlaff JM, Akl EA, Brennan SE, Chou R, Glanville J, Grimshaw JM, Hrobjartsson A, Lalu MM, Li T, Loder EW, Mayo-Wilson E, McDonald S, McGuinness LA, Stewart LA, Thomas J, Tricco AC, Welch VA, Whiting P, Moher D. The PRISMA 2020 statement: an updated guideline for reporting systematic reviews. BMJ. 2021 Mar 29;372:n71. doi: 10.1136/bmj.n71.
Studie record data
Bestudeer belangrijke data
Studie start (Verwacht)
Primaire voltooiing (Verwacht)
Studie voltooiing (Verwacht)
Studieregistratiedata
Eerst ingediend
Eerst ingediend dat voldeed aan de QC-criteria
Eerst geplaatst (Werkelijk)
Updates van studierecords
Laatste update geplaatst (Werkelijk)
Laatste update ingediend die voldeed aan QC-criteria
Laatst geverifieerd
Meer informatie
Termen gerelateerd aan deze studie
Andere studie-ID-nummers
- UP-22-00370
Plan Individuele Deelnemersgegevens (IPD)
Bent u van plan om gegevens van individuele deelnemers (IPD) te delen?
Informatie over medicijnen en apparaten, studiedocumenten
Bestudeert een door de Amerikaanse FDA gereguleerd geneesmiddel
Bestudeert een door de Amerikaanse FDA gereguleerd apparaatproduct
Deze informatie is zonder wijzigingen rechtstreeks van de website clinicaltrials.gov gehaald. Als u verzoeken heeft om uw onderzoeksgegevens te wijzigen, te verwijderen of bij te werken, neem dan contact op met register@clinicaltrials.gov. Zodra er een wijziging wordt doorgevoerd op clinicaltrials.gov, wordt deze ook automatisch bijgewerkt op onze website .