Denne siden ble automatisk oversatt og nøyaktigheten av oversettelsen er ikke garantert. Vennligst referer til engelsk versjon for en kildetekst.

Generative AI-Based Evaluation of Clinical Thinking and Decision-Making in Medical Students

30. oktober 2026 oppdatert av: Danzhi Chen, Sir Run Run Shaw Hospital

Construction of an Intelligent Evaluation System for Clinical Thinking and Decision-making Ability of Medical Students Based on Generative Artificial Intelligence

The goal of this study is to develop and evaluate an intelligent system based on generative artificial intelligence (AI) for assessing clinical thinking and decision-making abilities in medical students.

The study will examine whether the AI-based evaluation system can provide reliable and valid assessments of medical students' performance in clinical scenarios. Participants will complete clinical case-based tasks designed to assess their clinical reasoning and decision-making abilities. Their responses will be evaluated using the AI-based system and compared with assessments made using established evaluation methods and/or expert ratings.

The findings of this study may help determine whether generative AI can be used as a practical tool for assessing clinical thinking and decision-making skills in medical education.

Studieoversikt

Status

Status

Indikerer gjeldende rekrutteringsstatus eller utvidet tilgangsstatus.
Fullført

Forhold

Forhold

Sykdommen, lidelsen, syndromet, sykdommen eller skaden som studeres. På ClinicalTrials.gov kan tilstander også inkludere andre helserelaterte problemer, som levetid, livskvalitet og helserisiko.

Intervensjon / Behandling

Intervensjon / Behandling

En prosess eller handling som er fokus for en klinisk studie. Intervensjoner inkluderer legemidler, medisinsk utstyr, prosedyrer, vaksiner og andre produkter som enten er undersøkende eller allerede er tilgjengelige. Intervensjoner kan også inkludere ikke-invasive tilnærminger, som utdanning eller modifisering av kosthold og trening.

Detaljert beskrivelse

This study aims to develop and evaluate a generative artificial intelligence-based system for assessing clinical thinking and decision-making abilities in medical students. Clinical reasoning and decision-making are core competencies in medical education, but conventional assessment methods often require substantial faculty time and may be influenced by differences among evaluators.

The study will develop an intelligent evaluation framework using generative artificial intelligence to analyze medical students' responses to clinical case-based tasks. The system will assess key aspects of clinical thinking and decision-making, such as information interpretation, diagnostic reasoning, selection of appropriate management strategies, and overall decision-making logic.

Medical students participating in the study will complete standardized clinical scenarios or case-based assessment tasks. Their performance will be evaluated using the artificial intelligence-based system and compared with evaluations made by qualified clinical experts and/or established assessment methods. The study will examine the reliability, validity, consistency, and feasibility of the artificial intelligence-based evaluation approach.

The purpose of this study is to determine whether generative artificial intelligence can serve as a reliable and practical tool for evaluating clinical thinking and decision-making abilities in medical education. The system is intended for educational assessment and is not designed to replace clinical diagnosis or treatment decisions.

Studietype

Studietype

Beskriver arten av en klinisk studie. Studietyper inkluderer intervensjonsstudier (også kalt kliniske studier), observasjonsstudier (inkludert pasientregistre) og utvidet tilgang.
Intervensjonell

Registrering (Faktiske)

Registrering

Antall deltakere i en klinisk studie. Den "forventede" påmeldingen er måltallet for deltakere som forskerne trenger for studien.
90

Fase

Fase

Stadiet av en klinisk studie som studerer et medikament eller biologisk produkt, basert på definisjoner utviklet av U.S. Food and Drug Administration (FDA). Fasen er basert på studiens målsetting, antall deltakere og andre egenskaper. Det er fem faser: Tidlig fase 1 (tidligere oppført som fase 0), fase 1, fase 2, fase 3 og fase 4. Ikke relevant brukes til å beskrive studier uten FDA-definerte faser, inkludert utprøving av enheter eller atferdsintervensjoner.
  • Ikke aktuelt

Kontakter og plasseringer

Denne delen inneholder kontaktinformasjon for de som utfører studien, og informasjon om hvor denne studien blir utført.

Studiesteder

  • Kina
    • Zhejiang
      • Hangzhou, Zhejiang, Kina, 310000
        • Sir Run Run Shaw Hospital, Zhejiang University School of Medicine

Deltakelseskriterier

Forskere ser etter personer som passer til en bestemt beskrivelse, kalt kvalifikasjonskriterier. Noen eksempler på disse kriteriene er en persons generelle helsetilstand eller tidligere behandlinger.

Kvalifikasjonskriterier

Kvalifikasjonskriterier

Nøkkelkravene som personer som ønsker å delta i en klinisk studie må oppfylle eller egenskapene de må ha. Kvalifikasjonskriterier består av både inklusjonskriterier (som kreves for at en person skal delta i studien) og eksklusjonskriterier (som hindrer en person i å delta). Typer kvalifikasjonskriterier inkluderer om en studie godtar friske frivillige, har alders- eller aldersgruppekrav, eller er begrenset av kjønn.

Alder som er kvalifisert for studier

18 år til 30 år (Voksen)

Tar imot friske frivillige

Nei

Kjønn som er kvalifisert for studier

Alle

Beskrivelse

Inclusion Criteria:

  • Aged 18 to 30 years.
  • Fourth- or fifth-year undergraduate students majoring in Clinical Medicine at Zhejiang University School of Medicine, or trainees who have completed at least one year of standardized residency training at Sir Run Run Shaw Hospital, Zhejiang University School of Medicine.
  • Have completed basic surgery courses and theoretical learning related to breast diseases.
  • Voluntarily agree to participate in the study and provide written informed consent.
  • Have adequate communication and comprehension abilities.

Exclusion Criteria:

  • Have previously participated in similar generative artificial intelligence (GAI)-based teaching intervention studies.
  • Are unable to complete the entire study because of rotation schedules or other conflicts.
  • Belong to vulnerable populations other than employees of the study institution or subordinates of the investigators, including individuals with mental illness, cognitive impairment, critical illness, pregnancy, or illiteracy.
  • Refuse or are unwilling to provide informed consent.

Studieplan

Denne delen gir detaljer om studieplanen, inkludert hvordan studien er utformet og hva studien måler.

Hvordan er studiet utformet?

Designdetaljer

  • Primært formål: Annen
  • Tildeling: Randomisert
  • Intervensjonsmodell: Parallell tildeling
  • Masking: Enkelt

Våpen og intervensjoner

Deltakergruppe / Arm

Deltakergruppe / Arm

En gruppe eller undergruppe av deltakere i en klinisk studie som mottar en spesifikk intervensjon/behandling, eller ingen intervensjon, i henhold til studiens protokoll.
Intervensjon / Behandling

Intervensjon / Behandling

En prosess eller handling som er fokus for en klinisk studie. Intervensjoner inkluderer legemidler, medisinsk utstyr, prosedyrer, vaksiner og andre produkter som enten er undersøkende eller allerede er tilgjengelige. Intervensjoner kan også inkludere ikke-invasive tilnærminger, som utdanning eller modifisering av kosthold og trening.
Aktiv komparator: Control Group: Traditional Teaching

the standardized surgical oncology teaching curriculum, utilizing standardized breast cancer teaching PowerPoint courseware.
Atferdsmessig: Traditional Teaching

Participants will receive standard traditional teaching, including routine classroom instruction, case-based learning, and teacher-guided discussion, without the use of the generative artificial intelligence-assisted learning component.
Eksperimentell: Intervention Group: Traditional Teaching Plus AI Assistance

the independently developed "Clinical Reasoning and Decision-Making Dialogue Evaluation System" on the basis of the same traditional teaching.
Atferdsmessig: Traditional Teaching

Participants will receive standard traditional teaching, including routine classroom instruction, case-based learning, and teacher-guided discussion, without the use of the generative artificial intelligence-assisted learning component.

Atferdsmessig: AI-Assisted Teaching

The intervention consists of traditional medical education supplemented with a generative artificial intelligence-based learning tool. The tool will support students in clinical case analysis, reasoning, and decision-making exercises. The control group will receive the same traditional teaching without access to the AI-assisted learning component.

Hva måler studien?

Primære resultatmål

Primære resultatmål

I en klinisk studies protokoll er det planlagte utfallsmålet som er det viktigste for å evaluere effekten av en intervensjon/behandling. De fleste kliniske studier har ett primært utfallsmål, men noen har mer enn ett.
Resultatmål
Tiltaksbeskrivelse
Tidsramme
Change in Clinical Reasoning Score on Objective Structured Clinical Examination (OSCE)
Tidsramme: Baseline to Week 4

The total score ranges from 0 to 100. A higher score indicates better clinical thinking and decision-making ability
Baseline to Week 4

Sekundære resultatmål

Sekundære resultatmål

I en klinisk studies protokoll, et planlagt utfallsmål som ikke er like viktig som det primære utfallsmålet for å evaluere effekten av en intervensjon, men som fortsatt er av interesse. De fleste kliniske studier har mer enn ett sekundært utfallsmål.
Resultatmål
Tiltaksbeskrivelse
Tidsramme
Intraclass Correlation Coefficient (ICC) Between GAI-Based and Expert Assessment Scores
Tidsramme: Baseline to Week 4

Both Generative AI (GAI) and human experts will evaluate the participants using the clinical Reasoning Assessment Rubric. The agreement between the GAI-based scores and expert assessment scores will be evaluated using the Intraclass Correlation Coefficient (ICC) . The coefficient ranges from 0 to 1, where higher values indicate better agreement.
Baseline to Week 4
Time to Complete the Assessment
Tidsramme: During the clinical thinking and decision-making assessment at Week 4 (completion time measured in minutes).

Assessment completion time is defined as the duration, measured in minutes, from the initiation of the clinical thinking and decision-making assessment to its final submission by the participant. The time will be automatically recorded by the evaluation platform. Each participant's assessment completion time will be measured during the assessment conducted at Week 4.
During the clinical thinking and decision-making assessment at Week 4 (completion time measured in minutes).
Participant Satisfaction Score on the GAI-Assisted Evaluation System
Tidsramme: Week 4

Participant satisfaction will be measured using a 5-point Likert scale (ranging from 1 = Very Dissatisfied to 5 = Very Satisfied). A higher score indicates higher satisfaction with the GAI-assisted evaluation system.
Week 4

Samarbeidspartnere og etterforskere

Det er her du vil finne personer og organisasjoner som er involvert i denne studien.

Sponsor

Sponsor

Organisasjonen eller personen som initierer studien og som har myndighet og kontroll over studien.
Sir Run Run Shaw Hospital

Studierekorddatoer

Disse datoene sporer fremdriften for innsending av studieposter og sammendragsresultater til ClinicalTrials.gov. Studieposter og rapporterte resultater gjennomgås av National Library of Medicine (NLM) for å sikre at de oppfyller spesifikke kvalitetskontrollstandarder før de legges ut på det offentlige nettstedet.

Studer hoveddatoer

Studiestart (Faktiske)

Studiestart

Den faktiske datoen da den første deltakeren ble registrert i en klinisk studie. Den "forventede" studiestartdatoen er datoen som forskerne tror vil være studiestartdatoen.
26. september 2025

Primær fullføring (Faktiske)

Primær fullføring

Datoen da den siste deltakeren i en klinisk studie ble undersøkt eller mottok en intervensjon for å samle inn endelige data for det primære utfallsmålet. Hvorvidt den kliniske studien ble avsluttet i henhold til protokollen eller ble avsluttet, påvirker ikke denne datoen. For kliniske studier med mer enn ett primært utfallsmål med ulike fullføringsdatoer, refererer dette begrepet til datoen da datainnsamlingen er fullført for alle de primære utfallsmålene. Den "forventede" primære fullføringsdatoen er datoen som forskerne tror vil være den primære fullføringsdatoen for studien.
25. desember 2025

Studiet fullført (Faktiske)

Studiet fullført

Datoen da den siste deltakeren i en klinisk studie ble undersøkt eller mottok en intervensjon/behandling for å samle inn endelige data for de primære utfallsmålene, sekundære utfallsmålene og uønskede hendelsene (det vil si siste deltakers siste besøk). Den "forventede" studiens fullføringsdato er datoen som forskerne tror vil være studiens fullføringsdato.
25. desember 2025

Datoer for studieregistrering

Først innsendt

Først innsendt

Datoen da studiesponsoren eller etterforskeren først sendte inn en studiepost til ClinicalTrials.gov. Det er vanligvis en forsinkelse på noen dager mellom første innsendte dato og postens tilgjengelighet på ClinicalTrials.gov (den første postedatoen).
9. oktober 2026

Først innsendt som oppfylte QC-kriteriene

Først innsendt som oppfylte QC-kriteriene

Datoen da studiesponsoren eller etterforskeren først sender inn en studiepost som er i samsvar med gjennomgangskriteriene for National Library of Medicine (NLM) kvalitetskontroll (QC). Sponsoren eller etterforskeren må kanskje revidere og sende inn en studiepost én eller flere ganger før NLMs kvalitetskontrollkriterier oppfylles. Det er sponsorens eller etterforskerens ansvar å sikre at studieposten er i samsvar med NLM QC-gjennomgangskriteriene.
30. oktober 2026

Først lagt ut (Faktiske)

Først lagt ut

Datoen da studieposten først var tilgjengelig på ClinicalTrials.gov etter at National Library of Medicine (NLM) kvalitetskontroll (QC) gjennomgang har konkludert. Det er vanligvis en forsinkelse på noen dager mellom datoen studiesponsoren eller etterforskeren sendte inn studieposten og den første postedatoen.
4. november 2026

Oppdateringer av studieposter

Sist oppdatering lagt ut (Faktiske)

Sist oppdatering lagt ut

Den siste datoen da endringer i en studiepost ble gjort tilgjengelig på ClinicalTrials.gov. Det kan være en forsinkelse mellom når endringene ble sendt til ClinicalTrials.gov av studiens sponsor eller etterforsker (datoen for siste innsending av oppdatering) og datoen for siste oppdatering.
4. november 2026

Siste oppdatering sendt inn som oppfylte QC-kriteriene

Siste oppdatering sendt inn som oppfylte QC-kriteriene

Den siste datoen da studiesponsoren eller etterforskeren sendte inn endringer i en studiepost som er i samsvar med gjennomgangskriteriene for National Library of Medicine (NLM) kvalitetskontroll (QC). Det er sponsorens eller etterforskerens ansvar å sikre at studieposten er i samsvar med NLM QC-gjennomgangskriteriene.
30. oktober 2026

Sist bekreftet

Sist bekreftet

Den siste datoen da studiesponsoren eller etterforskeren bekreftet at informasjonen om en klinisk studie på ClinicalTrials.gov var nøyaktig og oppdatert. Hvis en studie med rekrutteringsstatus for rekruttering; ikke rekrutterer ennå; eller aktiv, ikke rekruttering har ikke blitt bekreftet de siste 2 årene, studiens rekrutteringsstatus vises som ukjent.
1. oktober 2026

Mer informasjon

Begreper knyttet til denne studien

Nøkkelord

Andre studie-ID-numre

Andre studie-ID-numre

Identifikatorer eller ID-numre andre enn NCT-nummeret som er tildelt en klinisk studie av studiens sponsor, finansierere eller andre. Disse tallene kan inkludere unike identifikatorer fra andre prøveregistre og National Institutes of Health-stipendnumre.
  • Research 2025734

Plan for individuelle deltakerdata (IPD)

Planlegger du å dele individuelle deltakerdata (IPD)?

NEI

Legemiddel- og utstyrsinformasjon, studiedokumenter

Studerer et amerikansk FDA-regulert medikamentprodukt

Nei

Studerer et amerikansk FDA-regulert enhetsprodukt

Nei

Denne informasjonen ble hentet direkte fra nettstedet clinicaltrials.gov uten noen endringer. Hvis du har noen forespørsler om å endre, fjerne eller oppdatere studiedetaljene dine, vennligst kontakt register@clinicaltrials.gov. Så snart en endring er implementert på clinicaltrials.gov, vil denne også bli oppdatert automatisk på nettstedet vårt. .

Innstillinger for informasjonskapsler

Vi bruker informasjonskapsler for å sikre at vi gir deg den beste opplevelsen på nettstedet vårt. For mer informasjon, les nøye vår Retningslinjer for personvern og informasjonskapsler. ...>>>Du kan når som helst endre preferansene dine eller trekke tilbake samtykket ditt ved å slette informasjonskapslene fra nettstedet ditt eller datamaskinen som beskrevet i policyen. Godta det og velg dine preferanser ved å krysse av i de tilhørende rutene i delen "Administrer innstillinger" nedenfor. Les nøye gjennom servicevilkårene før du fortsetter å bruke noen del av dette nettstedet.
«Administrer innstillinger