- ICH GCP
- Register voor klinische proeven in de VS.
- Klinische proef NCT07250516
De diagnostische en triagecapaciteit van samenwerking tussen leken en grote taalmodellen in China
5 september 2026 bijgewerkt door: Zhang Min, Huazhong University of Science and Technology
De diagnostische en triagecapaciteit van samenwerking tussen leken en groot-taalmodel: een nationaal pretest-posttest gerandomiseerd gecontroleerd experiment in China
Het doel van deze gerandomiseerde gecontroleerde studie is om de rol van grote taalmodellen te evalueren bij het verbeteren van het vermogen van leken om zelf een diagnose te stellen en veelvoorkomende ziekten te triageren. De belangrijkste vragen die het probeert te beantwoorden zijn:<\/p>
- Helpt het gebruik van een LLM deelnemers om nauwkeurigere zelfdiagnoses en zorgbeslissingen te nemen voor veelvoorkomende aandoeningen, vergeleken met hun eerste inschatting zonder hulp?<\/li>
- Hoeveel beter is het wanneer mensen samenwerken met een LLM, vergeleken met het gebruik van een reguliere zoekmachine, alleen het LLM gebruiken, of hoe artsen zouden beslissen?
Onderzoekers zullen deelnemers die willekeurig zijn toegewezen aan ofwel de LLM-groep (met DeepSeek) of de zoekmachinegroep vergelijken om te zien of de LLM-ondersteunde aanpak leidt tot betere klinische beoordelingen.<\/li><\/ul>
Deelnemers zullen:<\/p>
- Een van de 48 korte, realistische gezondheidsschetsen lezen;<\/li>
- Een eerste inschatting maken over wat er mis zou kunnen zijn door maximaal drie mogelijke oorzaken op te sommen, gerangschikt van meest tot minst waarschijnlijk, en een zorgniveau kiezen: directe zorg zoeken, binnen één dag een arts raadplegen, binnen één week een arts raadplegen, of thuis behandelen zonder medische zorg.<\/li>
- Hun toegewezen tool (DeepSeek of een standaard zoekmachine) gebruiken om informatie op te zoeken en hun inschatting en zorgbeslissing bij te werken;<\/li>
- Hun uiteindelijke diagnose en zorgkeuze indienen na gebruik van de tool. Daarnaast evalueerde het onderzoeksteam de prestaties van vier andere AI-modellen (GPT-4o, GPT-o1, DeepSeek-v3 en DeepSeek-r1) en 33 ervaren huisartsen op dezelfde schetsen.<\/li><\/ul>
Studie Overzicht
Toestand
Voltooid
Studietype
Ingrijpend
Inschrijving (Werkelijk)
6360
Fase
- Niet toepasbaar
Contacten en locaties
In dit gedeelte vindt u de contactgegevens van degenen die het onderzoek uitvoeren en informatie over waar dit onderzoek wordt uitgevoerd.
Studie Locaties
-
-
Hubei
-
Wuhan, Hubei, China
- Tongji Medical College of Huazhong University of Science & Technology School of Medicine and Health Management
-
-
Deelname Criteria
Onderzoekers zoeken naar mensen die aan een bepaalde beschrijving voldoen, de zogenaamde geschiktheidscriteria. Enkele voorbeelden van deze criteria zijn iemands algemene gezondheidstoestand of eerdere behandelingen.
Geschiktheidscriteria
Leeftijden die in aanmerking komen voor studie
- Volwassen
- Oudere volwassene
Accepteert gezonde vrijwilligers
Nee
Beschrijving
Insluitingscriteria:
- Leeftijd 18 jaar of ouder
- Huidige inwoner van vasteland China
- Geschiedenis van hoogwaardige deelname aan online enquêtes op het Credamo-platform (historische enquête-acceptatiegraad ≥ 80% en persoonlijke kredietscore ≥ 70)
Uitsluitingscriteria:
- Onvolledige enquêtereacties
- Falen op ingebedde kwaliteitscontrole-items
- Onwaarschijnlijk korte voltooiingstijd (<180 seconden voor zoekmachinegroep; <360 seconden voor LLM-groep)
- Verstrekking van niet-diagnostische of irrelevante reacties (bijv. "onbekend", "weet niet")
- Consequent patroon van identieke reacties over alle items
Studie plan
Dit gedeelte bevat details van het studieplan, inclusief hoe de studie is opgezet en wat de studie meet.
Hoe is de studie opgezet?
Ontwerpdetails
- Primair doel: Onderzoek naar gezondheidsdiensten
- Toewijzing: Gerandomiseerd
- Interventioneel model: Parallelle opdracht
- Masker: Enkel
Wapens en interventies
Deelnemersgroep / Arm |
Interventie / Behandeling |
|---|---|
|
Experimenteel: leken-LLM geïntegreerde groep
Nadat ze eerst een klinische diagnose- en triagevraag hadden beantwoord zonder gebruik van hulpmiddelen, werd de deelnemers gevraagd om een groot taalmodel (Deepseek v3 of r1) te gebruiken om gezondheidsinformatie op te halen en vervolgens dezelfde vraag opnieuw te beantwoorden.
|
Deelnemers in deze groep gebruikten een groot taalmodel (DeepSeek) om medische informatie te zoeken met betrekking tot een klinische vignette nadat ze initiële diagnostische en triagebeslissingen hadden genomen.
Ze kregen de opdracht om vrij met het model te interacteren om inzichten te verzamelen en vervolgens hun diagnoses en triageaanbevelingen bij te werken.
De interventie simuleert het real-world gebruik van AI-tools voor persoonlijke gezondheidsbesluitvorming
|
|
Actieve vergelijker: leken-zoekmachinegroep
Na aanvankelijk een klinische diagnose- en triagevraag te hebben beantwoord zonder gebruik te maken van tools, werden de deelnemers verplicht om een zoekmachine te gebruiken om gezondheidsinformatie op te halen en vervolgens dezelfde vraag opnieuw te beantwoorden
|
Deelnemers in deze groep gebruikten reguliere internetzoekmachines (bijv. Baidu, Google, Bing) om informatie op te zoeken over de klinische vignetten nadat ze initiële diagnostische en triagebeslissingen hadden genomen.
Ze mochten vrij zoeken, maar het was niet toegestaan om een specifieke AI-chatbot of platform voor grote taalmodellen te gebruiken.
Deze groep vertegenwoordigt typisch zelfgestuurd online gezondheidsinformatiezoekgedrag.
|
Wat meet het onderzoek?
Primaire uitkomstmaten
Uitkomstmaat |
Maatregel Beschrijving |
Tijdsspanne |
|---|---|---|
|
Top-3 Diagnostische Nauwkeurigheid
Tijdsspanne: Direct na interventie (binnen dezelfde enquêtesessie)
|
Het primaire diagnostische resultaat werd gedefinieerd als het aandeel deelnemers dat de juiste diagnose in hun top drie differentiële diagnoses opnam na gebruik van het toegewezen hulpmiddel (LLM of zoekmachine).
De nauwkeurigheid werd beoordeeld voor elk van de 48 klinische vignetten en geaggregeerd over alle deelnemers in elke groep.
|
Direct na interventie (binnen dezelfde enquêtesessie)
|
|
Triagenauwkeurigheid (4-klasse exacte overeenkomst)
Tijdsspanne: Direct na de interventie (binnen dezelfde enquêtesessie)
|
De triage-nauwkeurigheid werd gedefinieerd als het aandeel deelnemers dat het juiste triageniveau selecteerde (acuut zorg, binnen één dag, binnen één week, of zelfzorg) dat overeenkwam met de referentiestandaard.
Er waren 12 vignetten per triagecategorie.
|
Direct na de interventie (binnen dezelfde enquêtesessie)
|
Secundaire uitkomstmaten
Uitkomstmaat |
Maatregel Beschrijving |
Tijdsspanne |
|---|---|---|
|
Top-1 Diagnostische Nauwkeurigheid
Tijdsspanne: Direct na interventie (binnen dezelfde enquêtesessie)
|
Het aandeel deelnemers dat de juiste diagnose als hun top (eerste) diagnose selecteerde na gebruik van het toegewezen hulpmiddel.
Dit meet de precisie van de uiteindelijke diagnostische beoordeling door leken.
|
Direct na interventie (binnen dezelfde enquêtesessie)
|
|
Triage Nauwkeurigheid (2-klasse binaire overeenkomst)
Tijdsspanne: Direct na interventie (binnen dezelfde enquêtesessie)
|
Direct na interventie (binnen dezelfde enquêtesessie)
|
Medewerkers en onderzoekers
Hier vindt u mensen en organisaties die betrokken zijn bij dit onderzoek.
Onderzoekers
- Hoofdonderzoeker: Chenxi Liu, Huazhong University of Science and Technology
Studie record data
Deze datums volgen de voortgang van het onderzoeksdossier en de samenvatting van de ingediende resultaten bij ClinicalTrials.gov. Studieverslagen en gerapporteerde resultaten worden beoordeeld door de National Library of Medicine (NLM) om er zeker van te zijn dat ze voldoen aan specifieke kwaliteitscontrolenormen voordat ze op de openbare website worden geplaatst.
Bestudeer belangrijke data
Studie start (Werkelijk)
27 april 2025
Primaire voltooiing (Werkelijk)
1 juli 2025
Studie voltooiing (Werkelijk)
1 juli 2025
Studieregistratiedata
Eerst ingediend
17 november 2025
Eerst ingediend dat voldeed aan de QC-criteria
25 november 2025
Eerst geplaatst (Werkelijk)
26 november 2025
Updates van studierecords
Laatste update geplaatst (Werkelijk)
10 september 2026
Laatste update ingediend die voldeed aan QC-criteria
5 september 2026
Laatst geverifieerd
1 oktober 2025
Meer informatie
Termen gerelateerd aan deze studie
Andere studie-ID-nummers
- JCYJ20240813115806009
Plan Individuele Deelnemersgegevens (IPD)
Bent u van plan om gegevens van individuele deelnemers (IPD) te delen?
JA
Beschrijving IPD-plan
According to the ethical agreements, individual participant data cannot be deposited in a public data repository and can be made available for research purposes upon request.
Researchers can request the de-identified data by submitting a data use agreement (DUA) to the Medical Ethics Committee of Tongji Medical College, Huazhong University of Science and Technology.
The DUA must state that the data will be used for research purposes only and that no attempt will be made to re-identify participants.
Upon approval of the request, the data will be made available.
The contact information is as follows: tongjilunli@vip.163.com
(email); +86-27-83691785 (fax); Office 12, 16th Floor, Teaching Building 2, School of Basic Medicine, Tongji Medical College, No. 13 Hangkong Road, Wuhan, Hubei Province, China (address).
Informatie over medicijnen en apparaten, studiedocumenten
Bestudeert een door de Amerikaanse FDA gereguleerd geneesmiddel
Nee
Bestudeert een door de Amerikaanse FDA gereguleerd apparaatproduct
Nee
Deze informatie is zonder wijzigingen rechtstreeks van de website clinicaltrials.gov gehaald. Als u verzoeken heeft om uw onderzoeksgegevens te wijzigen, te verwijderen of bij te werken, neem dan contact op met register@clinicaltrials.gov. Zodra er een wijziging wordt doorgevoerd op clinicaltrials.gov, wordt deze ook automatisch bijgewerkt op onze website .