Deze pagina is automatisch vertaald en de nauwkeurigheid van de vertaling kan niet worden gegarandeerd. Raadpleeg de Engelse versie voor een brontekst.

Door kunstmatige intelligentie aangedreven virtuele assistent voor noodtriage in de neurologie (AIDEN)

Fase 1-proef van de implementatie van een door kunstmatige intelligentie aangedreven virtuele assistent voor noodtriage in de neurologie

Deze studie onderzoekt het gebruik van een door AI aangedreven virtuele assistent voor het snel identificeren en afhandelen van neurologische noodsituaties, vooral op plaatsen met beperkte medische middelen. Het onderzoek was bedoeld om te controleren of deze AI-tool veilig en nauwkeurig genoeg is om door te gaan naar meer geavanceerde testfasen. In een eerste proef in zijn soort werd de virtuele assistent getest bij patiënten met urgente neurologische problemen. Neurologen beoordeelden eerst de aanbevelingen van de AI met behulp van klinische dossiers en beoordeelden vervolgens de prestaties ervan rechtstreeks bij patiënten. De bevindingen waren als volgt: neurologen waren het bijna altijd eens met de beslissingen van de AI, en de AI presteerde op elk getest aspect beter dan eerdere versies van Chat GPT. Patiënten en artsen vonden de AI zeer effectief en beoordeelden deze in de meeste gevallen als uitstekend of zeer goed. Dit suggereert dat de AI aanzienlijk kan verbeteren hoe snel en nauwkeurig neurologische noodsituaties worden afgehandeld, hoewel verdere tests nodig zijn voordat deze op grote schaal kan worden gebruikt.

Studie Overzicht

Gedetailleerde beschrijving

Achtergrond en doelstellingen: Neurologische noodsituaties vormen aanzienlijke uitdagingen in de medische zorg, vooral in landen met beperkte middelen. Kunstmatige intelligentie (AI), met name chatbots op het gebied van de gezondheidszorg, biedt een veelbelovende oplossing. Er is echter een rigoureuze validatie vereist om de veiligheid en nauwkeurigheid te garanderen. Het doel van ons werk is het evalueren van de diagnostische nauwkeurigheid en resolutie-effectiviteit van een AI-aangedreven virtuele assistent die is ontworpen voor de triage van neurologische pathologieën in noodgevallen, om de minimale veiligheidsstandaard te garanderen die de voortgang naar opeenvolgende validatietests mogelijk maakt.

Methoden: Deze fase 1-studie evalueert de prestaties van een door AI aangedreven virtuele assistent voor neurologische triage in noodgevallen. Er werden tien patiënten ouder dan 18 jaar met urgente neurologische pathologieën geselecteerd. In de eerste fase beoordeelden negen neurologen de veiligheid van de virtuele assistent aan de hand van hun klinische dossiers. In het tweede deel werd de nauwkeurigheid van de assistent bij gebruik door patiënten geëvalueerd. Ten slotte werden de prestaties vergeleken met Chat GPT 3.5 en 4.

Studietype

Ingrijpend

Inschrijving (Werkelijk)

10

Fase

  • Vroege fase 1

Contacten en locaties

In dit gedeelte vindt u de contactgegevens van degenen die het onderzoek uitvoeren en informatie over waar dit onderzoek wordt uitgevoerd.

Studie Locaties

Deelname Criteria

Onderzoekers zoeken naar mensen die aan een bepaalde beschrijving voldoen, de zogenaamde geschiktheidscriteria. Enkele voorbeelden van deze criteria zijn iemands algemene gezondheidstoestand of eerdere behandelingen.

Geschiktheidscriteria

Leeftijden die in aanmerking komen voor studie

  • Volwassen
  • Oudere volwassene

Accepteert gezonde vrijwilligers

Nee

Beschrijving

Inclusiecriteria:

  • Patiënten ouder dan 18 jaar die op de Eerste Hulp zijn vanwege een neurologisch noodgeval

Uitsluitingscriteria:

  • Zwangerschap

Studie plan

Dit gedeelte bevat details van het studieplan, inclusief hoe de studie is opgezet en wat de studie meet.

Hoe is de studie opgezet?

Ontwerpdetails

  • Primair doel: Diagnostisch
  • Toewijzing: Niet-gerandomiseerd
  • Interventioneel model: Opdracht voor een enkele groep
  • Masker: Geen (open label)

Wapens en interventies

Deelnemersgroep / Arm
Interventie / Behandeling
Experimenteel: Virtuele assistent
Patiënten beantwoorden met een virtuele assistent de vraag over hun recente bezoek aan de Eerste Hulp.
Fase 1 was gericht op veiligheid, waarbij alleen medische informatie uit klinische dossiers voor de virtuele assistent werd gebruikt. In fase 2, waarin de nauwkeurigheid werd geëvalueerd, hadden de deelnemers interactie met de postmedische stabilisatie van de virtuele assistent. Daarnaast verstrekten de deelnemers ook initiële symptoomdetails voor Chat-GPT-invoer. Negen neurologen gespecialiseerd in spoedeisende hulp namen deel aan het onderzoek. In fase 1 beoordeelden ze de prestaties van de virtuele assistent met behulp van klinische geschiedenisinformatie. In fase 2 analyseerden ze de resultaten van de interacties van deelnemers met de assistent en voerden ze een vergelijkende evaluatie van Chat-GPT uit. De virtuele assistent functioneerde als chatbot op WhatsApp en Telegram, gebruikte Spaans en bevatte geavanceerde algoritmen, beslissingsbomen en grote taalmodellen voor interactie. Ter vergelijking hebben we Chat-GPT-versies 3.5 en 4 gebruikt, waarbij we twee soorten prompts in natuurlijk Spaans gebruikten: één met klinische dossiergegevens en de andere gebaseerd op verhalen van deelnemers.
Actieve vergelijker: ChatGPT 3.5
Patiënten beantwoorden vragen met ChatGPT over hun recente bezoek aan de Eerste Hulp.
Fase 1 was gericht op veiligheid, waarbij alleen medische informatie uit klinische dossiers voor de virtuele assistent werd gebruikt. In fase 2, waarin de nauwkeurigheid werd geëvalueerd, hadden de deelnemers interactie met de postmedische stabilisatie van de virtuele assistent. Daarnaast verstrekten de deelnemers ook initiële symptoomdetails voor Chat-GPT-invoer. Negen neurologen gespecialiseerd in spoedeisende hulp namen deel aan het onderzoek. In fase 1 beoordeelden ze de prestaties van de virtuele assistent met behulp van klinische geschiedenisinformatie. In fase 2 analyseerden ze de resultaten van de interacties van deelnemers met de assistent en voerden ze een vergelijkende evaluatie van Chat-GPT uit. De virtuele assistent functioneerde als chatbot op WhatsApp en Telegram, gebruikte Spaans en bevatte geavanceerde algoritmen, beslissingsbomen en grote taalmodellen voor interactie. Ter vergelijking hebben we Chat-GPT-versies 3.5 en 4 gebruikt, waarbij we twee soorten prompts in natuurlijk Spaans gebruikten: één met klinische dossiergegevens en de andere gebaseerd op verhalen van deelnemers.
Actieve vergelijker: ChatGPT 4
Patiënten beantwoorden vragen met ChatGPT over hun recente bezoek aan de Eerste Hulp.
Fase 1 was gericht op veiligheid, waarbij alleen medische informatie uit klinische dossiers voor de virtuele assistent werd gebruikt. In fase 2, waarin de nauwkeurigheid werd geëvalueerd, hadden de deelnemers interactie met de postmedische stabilisatie van de virtuele assistent. Daarnaast verstrekten de deelnemers ook initiële symptoomdetails voor Chat-GPT-invoer. Negen neurologen gespecialiseerd in spoedeisende hulp namen deel aan het onderzoek. In fase 1 beoordeelden ze de prestaties van de virtuele assistent met behulp van klinische geschiedenisinformatie. In fase 2 analyseerden ze de resultaten van de interacties van deelnemers met de assistent en voerden ze een vergelijkende evaluatie van Chat-GPT uit. De virtuele assistent functioneerde als chatbot op WhatsApp en Telegram, gebruikte Spaans en bevatte geavanceerde algoritmen, beslissingsbomen en grote taalmodellen voor interactie. Ter vergelijking hebben we Chat-GPT-versies 3.5 en 4 gebruikt, waarbij we twee soorten prompts in natuurlijk Spaans gebruikten: één met klinische dossiergegevens en de andere gebaseerd op verhalen van deelnemers.

Wat meet het onderzoek?

Primaire uitkomstmaten

Uitkomstmaat
Maatregel Beschrijving
Tijdsspanne
Diagnostische prestaties
Tijdsspanne: De eerste interactie tussen deelnemers en de virtuele assistent vond plaats binnen minder dan een jaar na het evenement. Uitkomstmaten werden onmiddellijk na de interactie tussen patiënten en de virtuele assistent geëvalueerd.

Verwijst naar de nauwkeurigheid en effectiviteit van medische tests of diagnostische hulpmiddelen bij het correct identificeren van een ziekte of aandoening bij patiënten.

Syndromale diagnoseovereenkomst: evaluerende neurologen beschouwden een syndromale diagnose als accuraat wanneer AI-hulpmiddelen een aandoening konden identificeren op basis van een reeks algemeen naast elkaar bestaande tekenen en symptomen, in plaats van een specifieke ziekte te identificeren. Deze methode wordt toegepast wanneer de precieze ziekte die de symptomen veroorzaakt niet onmiddellijk identificeerbaar is, waardoor zorgverleners de symptomen van de patiënt effectief kunnen monitoren en behandelen.

Differentiële diagnoseovereenkomst: een differentiële diagnose werd als accuraat beschouwd wanneer de verschillen die door elk AI-hulpmiddel werden geboden, overeenkwamen met de verschillen die door de deelnemers werden gepresenteerd.

De gouden standaard voor de diagnose werd beschouwd als die welke op de afdeling spoedeisende hulp werd gegeven, onveranderd gedurende een periode van één maand.

De eerste interactie tussen deelnemers en de virtuele assistent vond plaats binnen minder dan een jaar na het evenement. Uitkomstmaten werden onmiddellijk na de interactie tussen patiënten en de virtuele assistent geëvalueerd.

Secundaire uitkomstmaten

Uitkomstmaat
Maatregel Beschrijving
Tijdsspanne
Passend medisch gedrag of advies
Tijdsspanne: De eerste interactie tussen deelnemers en de virtuele assistent vond plaats binnen minder dan een jaar na het evenement. Uitkomstmaten werden onmiddellijk na de interactie tussen patiënten en de virtuele assistent geëvalueerd.

De oplossing van de zaak werd geëvalueerd op basis van gepast medisch gedrag of aanbeveling, waarbij 1) urgentie werd gecategoriseerd als onmiddellijk, 2) op korte termijn (binnen 48 uur), 3) of niet-dringend.

De aanbevelingen van elke AI-tool werden beoordeeld op basis van informatie verzameld uit de klinische geschiedenis en de input van deelnemers.

De gouden standaard voor gepast medisch gedrag of advies werd beschouwd als die welke op de afdeling spoedeisende hulp werd gegeven, zonder veranderingen gedurende een periode van een maand.

De eerste interactie tussen deelnemers en de virtuele assistent vond plaats binnen minder dan een jaar na het evenement. Uitkomstmaten werden onmiddellijk na de interactie tussen patiënten en de virtuele assistent geëvalueerd.
Beoordeling van bruikbaarheid en tevredenheid
Tijdsspanne: De eerste interactie tussen deelnemers en de virtuele assistent vond plaats binnen minder dan een jaar na het evenement. Uitkomstmaten werden onmiddellijk na de interactie tussen patiënten en de virtuele assistent geëvalueerd.

De bruikbaarheid werd gemeten aan de hand van de tijd en het aantal vragen dat nodig was voor de uiteindelijke diagnose en oplossing, zowel door neurologen als door deelnemers. Voor Chat GPT hebben we de tijd geëvalueerd die nodig was om de reden van het consult op te stellen.

Er werd een tevredenheidsschaal van 1 tot 5 geïmplementeerd, waarbij 1 een negatieve ervaring aangeeft ("slecht", potentieel riskant voor de patiënt) en 5 zeer positief ("uitstekend", mogelijk beter dan niet-gespecialiseerde menselijke triage). Er werd ook een eenvoudige ja/nee-enquête uitgevoerd onder de deelnemers, waarbij werd gevraagd naar de begrijpelijkheid van de vragen van de assistent, de geschiktheid van verwijzing op basis van urgentie, en of zij van mening waren dat de assistent niet-gespecialiseerde triage kon vervangen of de aankomsttijd bij noodgevallen kon verkorten.

De eerste interactie tussen deelnemers en de virtuele assistent vond plaats binnen minder dan een jaar na het evenement. Uitkomstmaten werden onmiddellijk na de interactie tussen patiënten en de virtuele assistent geëvalueerd.

Medewerkers en onderzoekers

Hier vindt u mensen en organisaties die betrokken zijn bij dit onderzoek.

Medewerkers

Onderzoekers

  • Hoofdonderzoeker: Mauricio F Farez, MD MPH, Fundación para la Lucha contra las Enfermedades Neurológicas de la Infancia

Publicaties en nuttige links

De persoon die verantwoordelijk is voor het invoeren van informatie over het onderzoek stelt deze publicaties vrijwillig ter beschikking. Dit kan gaan over alles wat met het onderzoek te maken heeft.

Studie record data

Deze datums volgen de voortgang van het onderzoeksdossier en de samenvatting van de ingediende resultaten bij ClinicalTrials.gov. Studieverslagen en gerapporteerde resultaten worden beoordeeld door de National Library of Medicine (NLM) om er zeker van te zijn dat ze voldoen aan specifieke kwaliteitscontrolenormen voordat ze op de openbare website worden geplaatst.

Bestudeer belangrijke data

Studie start (Werkelijk)

1 oktober 2023

Primaire voltooiing (Werkelijk)

1 januari 2024

Studie voltooiing (Werkelijk)

1 januari 2024

Studieregistratiedata

Eerst ingediend

6 maart 2024

Eerst ingediend dat voldeed aan de QC-criteria

21 maart 2024

Eerst geplaatst (Werkelijk)

28 maart 2024

Updates van studierecords

Laatste update geplaatst (Werkelijk)

28 maart 2024

Laatste update ingediend die voldeed aan QC-criteria

21 maart 2024

Laatst geverifieerd

1 maart 2024

Meer informatie

Deze informatie is zonder wijzigingen rechtstreeks van de website clinicaltrials.gov gehaald. Als u verzoeken heeft om uw onderzoeksgegevens te wijzigen, te verwijderen of bij te werken, neem dan contact op met register@clinicaltrials.gov. Zodra er een wijziging wordt doorgevoerd op clinicaltrials.gov, wordt deze ook automatisch bijgewerkt op onze website .

Klinische onderzoeken op Virtuele assistent

3
Abonneren