- ICH GCP
- US Clinical Trials Registry
- Klinisk utprøving NCT07281066
LLM-yteevne i endodontisk diagnostikk
Evaluering av ChatGPT-4o, Gemini og Claude 3.7 i endodontisk diagnostikk: En prospektiv klinisk studie
Målet med denne prospektive observasjonsstudien er å evaluere evnen til tre store språkmodeller (ChatGPT-4o, Gemini Advanced og Claude 3.7) til å støtte diagnose- og behandlingsbeslutninger hos voksne pasienter med vanlige endodontiske tilstander.
Hovedspørsmålene studien ønsker å besvare er:
Kan LLM-er nøyaktig fastslå endodontisk diagnose når de får strukturert klinisk informasjon og periapikale røntgenbilder?
Kan LLM-er foreslå passende behandlingsplaner som kan sammenlignes med beslutninger tatt av endodontiske spesialister?
For å besvare disse spørsmålene vil forskere sammenligne diagnostisk og behandlingsmessig nøyaktighet hos tre AI-modeller ved å bruke en konsensusdiagnose fra endodontiske spesialister som referansestandard.
Deltakere vil:
Få rutinemessig endodontisk undersøkelse og periapikale røntgenbilder som en del av standard klinisk behandling.
Få sine anonymiserte kliniske historier og røntgenbilder lagt inn i de tre AI-modellene.
Ikke samhandle direkte med noe AI-system; alle evalueringer vil bli utført av forskningsteamet.
Denne studien har som mål å forstå hvordan store språkmodeller presterer under virkelige kliniske forhold og om disse systemene kan spille en støtterolle i endodontisk diagnostikk i fremtiden.
Studieoversikt
Status
Intervensjon / Behandling
Detaljert beskrivelse
Denne prospektive observasjonsstudien har som mål å evaluere den sanntidsdiagnostiske og behandlingsbeslutningsprestasjonen til tre store språkmodeller – ChatGPT-4o, Gemini Advanced og Claude 3.7 – i en endodontisk klinisk setting. Totalt 120 pasienter som ble undersøkt på endodontiklinikken, ble inkludert, og detaljerte medisinske/tannlegehistorier, kliniske funn og periapikale røntgenbilder ble samlet inn. Hver anonymisert sak ble deretter presentert for de tre LLM-ene ved hjelp av en standardisert forespørsel som ba om diagnosen og den passende behandlingsplanen.
Alle modellene ble brukt i sine standard flermodale konfigurasjoner uten å aktivere web-søkefunksjoner, tilleggsfunksjoner eller ekstern datahenting. Hvert spørsmål ble kun sendt inn én gang i isolerte chat-sesjoner for å forhindre minneoverføring. Svarene ble lagret ordrett og sammenlignet med referansediagnosene og behandlingsplanene etablert av et panel med endodontiske spesialister.
Denne studien ble designet for å etterligne virkelige kliniske forhold så nøyaktig som mulig, og gir en realistisk vurdering av hvordan disse systemene kan prestere når de brukes av klinikere i daglig praksis. Å forstå deres evner og begrensninger i autentiske kliniske scenarier er avgjørende, da det forventes at LLM-er vil spille en stadig viktigere rolle i fremtidig tannhelse, spesielt innen beslutningsstøtte, triage og pasientopplæring. Ved å identifisere hvor disse modellene presterer bra og hvor de faller kort, har denne forskningen som mål å bidra til trygg og effektiv klinisk integrasjon mens LLM-teknologiene fortsetter å utvikle seg.
Studietype
Registrering (Faktiske)
Kontakter og plasseringer
Studiesteder
-
-
Istanbul
-
Maltepe, Istanbul, Tyrkia (Türkiye), 34856
- Faculty of Dentistry, Marmara University
-
-
Deltakelseskriterier
Kvalifikasjonskriterier
Alder som er kvalifisert for studier
- Voksen
- Eldre voksen
Tar imot friske frivillige
Prøvetakingsmetode
Studiepopulasjon
Alle deltakerne hadde vanlige endodontiske tilstander som pulpitt, nekrose, primær eller sekundær apikal periodontitt, eller behov for rebehandling.
Etter å ha innhentet samtykke gjennomgikk hver pasient en strukturert papirbasert medisinsk og tannhelsehistorikkvurdering samt periapikal radiografisk undersøkelse.
Totalt 120 klinisk verifiserte endodontiske tilfeller ble inkludert.
Beskrivelse
Inklusjonskriterier:
- Voksne pasienter (≥18 år) som presenterer seg ved eller henvises til Endodontiklinikken.
Pasienter med en klinisk verifisert endodontisk tilstand som krever diagnostisering og behandlingsplanlegging.
Pasienter som samtykket til å delta og ga informert samtykke.
Pasienter hvor en fullstendig papirbasert medisinsk/tannhelsehistorikk og periapikal røntgen ble innhentet under det kliniske besøket.
Eksklusjonskriterier:
- Eksklusjonskriterier
Pasienter som avslo deltakelse eller ikke ga informert samtykke.
Barnepasienter (<18 år) henvist til Barne- og Ungdomstandpleieklinikken.
Pasienter som besøker klinikken med ikke-endodontiske plager (f.eks. alveolitt etter ekstraksjon, problemer med visdomstannsekstraksjon).
Tilfeller med ufullstendig klinisk informasjon eller manglende røntgenbilder.
Pasienter som ikke kan gjennomgå standard endodontiske undersøkelsesprosedyrer.
Studieplan
Hvordan er studiet utformet?
Designdetaljer
Kohorter og intervensjoner
Gruppe / Kohort |
Intervensjon / Behandling |
|---|---|
|
Endodontiske Pasienters Kohort
Denne kohorten inkluderer 120 påfølgende pasienter som presenterte seg på endodontiklinikken med klinisk verifiserte endodontiske tilstander.
Klinisk historikk og periapikale røntgenbilder ble samlet inn, og diagnostiske/behandlingsanbefalinger generert av AI-modeller ble sammenlignet med ekspertkonsensus.
|
Deltakernes anonymiserte kliniske informasjon, inkludert strukturert pasienthistorikk og periapikale røntgenbilder, ble brukt som inndata for tre store språkmodeller (ChatGPT-4o, Gemini Advanced, Claude 3.7).
Modellene ble bedt om å fastslå endodontisk diagnose og foreslå en passende behandlingsplan.
Ingen behandling, enhet eller medisin ble administrert til deltakerne.
Intervensjonen består utelukkende av AI-basert tolkning av eksisterende kliniske data.
|
Hva måler studien?
Primære resultatmål
Resultatmål |
Tiltaksbeskrivelse |
Tidsramme |
|---|---|---|
|
Klinikerens diagnostiske nøyaktighet basert på papirbasert historie og periapikal røntgen
Tidsramme: 7. juli–5. august
|
Vurdering av den diagnostiske beslutningen tatt av endodontiske klinikere etter gjennomgang av en papirbasert pasienthistorieform og et standardisert periapikalt røntgenbilde.
Nøyaktighet fastsettes ved å sammenligne klinikerens diagnose med konsensusdiagnosen etablert av tre uavhengige endodontiske spesialister.
Data vil bli samlet inn for alle 120 pasienter på tidspunktet for den første kliniske evalueringen.
|
7. juli–5. august
|
Sekundære resultatmål
Resultatmål |
Tiltaksbeskrivelse |
Tidsramme |
|---|---|---|
|
LLM-generert diagnostisering og behandlingsplanlegging ytelse
Tidsramme: august-september
|
Evaluering av diagnostiske og behandlingsanbefalinger generert av store språkmodeller (LLMs)-ChatGPT-4o, Gemini Advanced og Claude 3.7-etter å ha mottatt samme papirbaserte pasienthistorie og periapikal røntgen som ble gitt til klinikere.
LLM-svar vil bli sammenlignet med gullstandarden for spesialistkonsensus for både diagnose og behandlingsbeslutninger.
|
august-september
|
Samarbeidspartnere og etterforskere
Sponsor
Etterforskere
- Studieleder: ayşe karadayı, asst. prof., Marmara University Faculty of Dentistry
Publikasjoner og nyttige lenker
Generelle publikasjoner
- Abd-Alrazaq A, AlSaad R, Alhuwail D, Ahmed A, Healy PM, Latifi S, Aziz S, Damseh R, Alabed Alrazak S, Sheikh J. Large Language Models in Medical Education: Opportunities, Challenges, and Future Directions. JMIR Med Educ. 2023 Jun 1;9:e48291. doi: 10.2196/48291.
- Schwendicke F, Samek W, Krois J. Artificial Intelligence in Dentistry: Chances and Challenges. J Dent Res. 2020 Jul;99(7):769-774. doi: 10.1177/0022034520915714. Epub 2020 Apr 21.
Studierekorddatoer
Studer hoveddatoer
Studiestart (Faktiske)
Primær fullføring (Faktiske)
Studiet fullført (Faktiske)
Datoer for studieregistrering
Først innsendt
Først innsendt som oppfylte QC-kriteriene
Først lagt ut (Faktiske)
Oppdateringer av studieposter
Sist oppdatering lagt ut (Faktiske)
Siste oppdatering sendt inn som oppfylte QC-kriteriene
Sist bekreftet
Mer informasjon
Begreper knyttet til denne studien
Nøkkelord
Andre studie-ID-numre
- 2025-38
Plan for individuelle deltakerdata (IPD)
Planlegger du å dele individuelle deltakerdata (IPD)?
Legemiddel- og utstyrsinformasjon, studiedokumenter
Studerer et amerikansk FDA-regulert medikamentprodukt
Studerer et amerikansk FDA-regulert enhetsprodukt
Denne informasjonen ble hentet direkte fra nettstedet clinicaltrials.gov uten noen endringer. Hvis du har noen forespørsler om å endre, fjerne eller oppdatere studiedetaljene dine, vennligst kontakt register@clinicaltrials.gov. Så snart en endring er implementert på clinicaltrials.gov, vil denne også bli oppdatert automatisk på nettstedet vårt. .