Tato stránka byla automaticky přeložena a přesnost překladu není zaručena. Podívejte se prosím na anglická verze pro zdrojový text.

CITE: Clinical Inference Tethered to Evidence - a Retrieve-and-verify Layer for AI Care Plans (CITE)

16. července 2026 aktualizováno: Sanjay Basu, Waymark

A Randomized Controlled Trial of CITE (Clinical Inference Tethered to Evidence), an Evidence-Grounding Retrieve-and-Verify Layer That Flags Unsupported and Inappropriate Recommendations in AI-Generated Care Plans, Versus AI With Safety Guardrails Alone and Unassisted Care, in Medicaid Primary Care

This trial evaluates CITE, a retrieve-and-verify layer that audits an AI-generated care plan against a full-text evidence corpus and flags patient-specific codifiable safety hazards to the clinician. The co-primary outcomes are how accurately CITE flags these hazards (sensitivity and specificity versus blinded clinician adjudication) and its clinician alert burden and acceptance, compared with AI care plans using safety guardrails alone and with unassisted clinician care, in Medicaid primary care.

Přehled studie

Postavení

Postavení

Označuje aktuální stav náboru nebo stav rozšířeného přístupu.
Zatím nenabíráme

Podmínky

Podmínky

Nemoc, porucha, syndrom, nemoc nebo zranění, které je studováno. Na webu ClinicalTrials.gov mohou podmínky zahrnovat i další problémy související se zdravím, jako je délka života, kvalita života a zdravotní rizika.

Intervence / Léčba

Intervence / Léčba

Proces nebo akce, na které se klinická studie zaměřuje. Intervence zahrnují léky, zdravotnická zařízení, postupy, vakcíny a další produkty, které jsou buď zkoušené nebo již dostupné. Intervence mohou také zahrnovat neinvazivní přístupy, jako je edukace nebo úprava stravy a cvičení.

Detailní popis

Patients are randomized 1:1:1 to (1) unassisted clinician care; (2) AI-generated care plan with safety guardrails; (3) AI-generated care plan with safety guardrails plus CITE. CITE audits the finalized plan against a frozen, versioned evidence corpus and returns physician-facing flags for patient-specific codifiable safety hazards (a recommended drug contraindicated by this patient's diagnosis or laboratory value; a drug-allergy conflict; a dropped high-risk medication; a guideline-indicated therapy omitted for an active diagnosis; a stated quantity refuted by the corpus), each with a verbatim quote and citation; the clinician retains decision authority. Randomization uses a deterministic HMAC permuted-block scheme; outcome assessors are blinded to arm. The co-primary outcomes are (1) the diagnostic accuracy (sensitivity and specificity) of CITE against blinded clinician adjudication, and (2) clinician alert burden (flags per encounter) and acceptance, comparing the CITE arm with the guardrail arm; both are estimable at the enrolled sample size because they do not depend on a rare between-arm event. The unresolved codifiable-hazard rate by arm is reported as a descriptive secondary: codifiable hazards are infrequent, so the trial is not powered for a between-arm efficacy contrast on hazard reduction. A prior trial of a different mechanism (a generic deterministic rule-corpus that surfaced roughly 30 or more flags per encounter and was uninformative) was completed with null results and is registered separately; this trial evaluates a materially different, patient-specific intervention and set of outcomes. Determined exempt by WCG IRB (low risk). Analysis is pre-registered on OSF (https://doi.org/10.17605/OSF.IO/ENXCW).

Typ studie

Typ studie

Popisuje povahu klinické studie. Typy studií zahrnují intervenční studie (také nazývané klinické studie), observační studie (včetně registrů pacientů) a rozšířený přístup.
Intervenční

Zápis (Odhadovaný)

Zápis

Počet účastníků klinické studie. „Očekávaný“ zápis je cílový počet účastníků, které výzkumníci pro studii potřebují.
240

Fáze

Fáze

Fáze klinické studie studující lék nebo biologický produkt na základě definic vyvinutých americkým Úřadem pro kontrolu potravin a léčiv (FDA). Fáze je založena na cíli studie, počtu účastníků a dalších charakteristikách. Existuje pět fází: časná fáze 1 (dříve uváděná jako fáze 0), fáze 1, fáze 2, fáze 3 a fáze 4. Nepoužitelný se používá k popisu zkoušek bez fází definovaných FDA, včetně zkoušek zařízení nebo behaviorálních intervencí.
  • Nelze použít

Kritéria účasti

Výzkumníci hledají lidi, kteří odpovídají určitému popisu, kterému se říká kritéria způsobilosti. Některé příklady těchto kritérií jsou celkový zdravotní stav osoby nebo předchozí léčba.

Kritéria způsobilosti

Kritéria způsobilosti

Klíčové požadavky, které musí lidé, kteří se chtějí zúčastnit klinické studie, splňovat nebo vlastnosti, které musí mít. Kritéria způsobilosti se skládají jak z kritérií pro zařazení (která jsou vyžadována pro účast osoby ve studii), tak z kritérií vyloučení (která brání osobě v účasti). Typy kritérií způsobilosti zahrnují, zda studie přijímá zdravé dobrovolníky, má požadavky na věk nebo věkovou skupinu nebo je omezena pohlavím.

Věk způsobilý ke studiu

  • Dospělý
  • Starší dospělý

Přijímá zdravé dobrovolníky

Ne

Popis

INCLUSION CRITERIA:

  1. Age 18 years or older.
  2. Medicaid-enrolled and attributed to a participating Waymark primary care site.
  3. Primary care encounter that requires clinical reasoning (not administrative-only).
  4. English-language clinical documentation.

EXCLUSION CRITERIA:

  1. Age less than 18 years.
  2. Hospice or palliative-care-exclusive care plan.
  3. Administrative-only or pharmacy-only encounter that does not surface a clinical decision to the supervising clinician.
  4. Encounter where the supervising clinician is the principal investigator.
  5. Enrollment in a competing AI-safety study within the prior 90 days.

Studijní plán

Tato část poskytuje podrobnosti o studijním plánu, včetně toho, jak je studie navržena a co studie měří.

Jak je studie koncipována?

Detaily designu

  • Primární účel: Výzkum zdravotnických služeb
  • Přidělení: Randomizované
  • Intervenční model: Paralelní přiřazení
  • Maskování: Singl

Zbraně a zásahy

Skupina účastníků / Arm

Skupina účastníků / Arm

Skupina nebo podskupina účastníků klinické studie, která podle protokolu studie dostává konkrétní intervenci/léčbu nebo žádnou intervenci.
Intervence / Léčba

Intervence / Léčba

Proces nebo akce, na které se klinická studie zaměřuje. Intervence zahrnují léky, zdravotnická zařízení, postupy, vakcíny a další produkty, které jsou buď zkoušené nebo již dostupné. Intervence mohou také zahrnovat neinvazivní přístupy, jako je edukace nebo úprava stravy a cvičení.
Žádný zásah: Arm 1: Unassisted care
Clinician develops the care plan without AI assistance.
Aktivní komparátor: Arm 2: AI with safety guardrails
AI-generated care plan produced with a safety-guardrail system prompt; no CITE.
Jiný: AI care plan with safety guardrails
AI-generated care plan produced under a safety-guardrail system prompt.
Experimentální: Arm 3: AI with safety guardrails plus CITE
AI-generated care plan with safety guardrails, then passed through CITE, which flags unsupported/inappropriate recommendations with evidence citations for the clinician.
Jiný: AI care plan with safety guardrails
AI-generated care plan produced under a safety-guardrail system prompt.
Jiný: CITE evidence-grounding retrieve-and-verify layer
Reads the AI care-plan text and verifies each recommendation/claim against a full-text evidence corpus; returns physician-facing flags (commission/confabulation/unsupported/omission) with verbatim quotes and citations. Clinician retains decision authority.

Co je měření studie?

Primární výstupní opatření

Primární výstupní opatření

V protokolu klinické studie je plánovaná výsledná míra, která je nejdůležitější pro hodnocení účinku intervence/léčby. Většina klinických studií má jedno primární měřítko výsledku, ale některé mají více než jedno.
Měření výsledku
Popis opatření
Časové okno
Diagnostic accuracy of CITE against clinician adjudication
Časové okno: Day 1 (index primary care encounter)
Sensitivity and specificity (with positive and negative predictive values) of the CITE checker for clinically consequential codifiable safety hazards, using blinded clinician adjudication of the plan as the reference standard. Every plan contributes, so the estimate does not depend on a rare between-arm event. Exact-binomial 95% confidence intervals; reported overall and by hazard family.
Day 1 (index primary care encounter)
Clinician alert burden (flags surfaced per encounter)
Časové okno: Day 1 (index primary care encounter)
Number of safety flags surfaced to the clinician per encounter in the CITE arm versus the guardrail arm, with clinician acceptance rate. Co-primary usability outcome: a verifier that surfaces an unmanageable number of flags is not deployable regardless of sensitivity (the prior-trial mechanism surfaced a median of about 30 per encounter). Pre-registered acceptability ceiling: median CITE flags per encounter at or below three.
Day 1 (index primary care encounter)

Sekundární výstupní opatření

Sekundární výstupní opatření

V protokolu klinické studie jde o plánované měřítko výsledku, které není tak důležité jako primární měřítko výsledku pro hodnocení účinku intervence, ale je stále zajímavé. Většina klinických studií má více než jedno sekundární měřítko výsledku.
Měření výsledku
Popis opatření
Časové okno
Clinician action on CITE flags
Časové okno: Day 1 (index primary care encounter)
Proportion of CITE flags accepted vs overridden by the clinician, by flag type (commission, confabulation, unsupported, omission).
Day 1 (index primary care encounter)
Unresolved codifiable safety-hazard rate by arm (descriptive)
Časové okno: Day 1 (index primary care encounter)
Proportion of patient-specific codifiable-hazard checkpoints with an unresolved hazard in the finalized plan, by arm, with the Arm 3 minus Arm 2 difference and 95% confidence interval. Pre-specified as descriptive and hypothesis-generating: codifiable hazards are infrequent, so the trial is not powered for a between-arm efficacy contrast on this measure at the enrolled sample size.
Day 1 (index primary care encounter)
Correction of codifiable hazards within 30 days
Časové okno: Up to 30 days after the index encounter
Among checkpoints with a hazard in the finalized plan, the proportion acted on and corrected within 30 days (documented resolution, completed referral, or corrected order). Proximal clinical effectiveness measure.
Up to 30 days after the index encounter
Completed referrals within 30 days
Časové okno: Up to 30 days after the index encounter
Proportion of initiated referrals completed within 30 days.
Up to 30 days after the index encounter
Clinical safety composite (exploratory)
Časové okno: Day 1 (index primary care encounter)
Four-component clinical safety composite carried from the prior trial. Pre-specified as exploratory; underpowered at the planned sample size.
Day 1 (index primary care encounter)
30-day acute care utilization (exploratory)
Časové okno: Up to 30 days after the index encounter
Emergency department visits and hospitalizations within 30 days. Exploratory.
Up to 30 days after the index encounter

Spolupracovníci a vyšetřovatelé

Zde najdete lidi a organizace zapojené do této studie.

Sponzor

Sponzor

Organizace nebo osoba, která iniciuje studii a která má autoritu a kontrolu nad studií.
Waymark

Spolupracovníci

Spolupracovníci

Organizace jiná než zadavatel, která poskytuje podporu klinické studii. Tato podpora může zahrnovat činnosti související s financováním, návrhem, implementací, analýzou dat nebo podáváním zpráv.
University of California, San Francisco

Termíny studijních záznamů

Tato data sledují průběh záznamů studie a předkládání souhrnných výsledků na ClinicalTrials.gov. Záznamy ze studií a hlášené výsledky jsou před zveřejněním na veřejné webové stránce přezkoumány Národní lékařskou knihovnou (NLM), aby se ujistily, že splňují specifické standardy kontroly kvality.

Hlavní termíny studia

Začátek studia (Odhadovaný)

Začátek studia

Skutečné datum, kdy byl první účastník zařazen do klinické studie. „Očekávané“ datum zahájení studie je datum, o kterém si vědci myslí, že bude datem zahájení studie.
1. září 2026

Primární dokončení (Odhadovaný)

Primární dokončení

Datum, kdy byl poslední účastník klinické studie vyšetřen nebo obdržel intervenci ke sběru konečných dat pro primární měření výsledku. Zda byla klinická studie ukončena podle protokolu nebo byla ukončena, toto datum neovlivňuje. U klinických studií s více než jedním primárním výstupním měřením s různými daty dokončení se tento termín vztahuje k datu, kdy je dokončen sběr dat pro všechna primární výsledná měření. „Očekávané“ datum primárního dokončení je datum, o kterém si vědci myslí, že bude primárním datem dokončení studie.
1. června 2027

Dokončení studie (Odhadovaný)

Dokončení studie

Datum, kdy byl poslední účastník klinické studie vyšetřen nebo dostal intervenci/léčbu za účelem shromáždění konečných dat pro měření primárního výsledku, sekundárního měření výsledku a nežádoucí příhody (tj. poslední návštěva posledního účastníka). „Očekávané“ datum dokončení studie je datum, o kterém si vědci myslí, že bude datem dokončení studie.
1. září 2027

Termíny zápisu do studia

První předloženo

První předloženo

Datum, kdy zadavatel studie nebo zkoušející poprvé předložil záznam studie na ClinicalTrials.gov. Mezi prvním odeslaným datem a dostupností záznamu na ClinicalTrials.gov (první zveřejněné datum) je obvykle několik dní.
13. července 2026

První předloženo, které splnilo kritéria kontroly kvality

První předloženo, které splnilo kritéria kontroly kvality

Datum, kdy zadavatel studie nebo zkoušející poprvé předloží záznam studie, který je v souladu s kritérii kontroly kvality (QC) Národní lékařské knihovny (NLM). Sponzor nebo zkoušející může potřebovat revidovat a předložit záznam studie jednou nebo vícekrát, než budou splněna kritéria kontroly kontroly kvality NLM. Je odpovědností sponzora nebo zkoušejícího zajistit, aby byl záznam studie v souladu s kritérii kontroly kontroly kvality NLM.
16. července 2026

První zveřejněno (Aktuální)

První zveřejněno

Datum, kdy byl záznam studie poprvé k dispozici na webu ClinicalTrials.gov poté, co byla dokončena kontrola kontroly kvality (QC) National Library of Medicine (NLM). Mezi datem, kdy zadavatel studie nebo zkoušející předložil záznam studie, a prvním zveřejněným datem je typicky několik dní zpoždění.
22. července 2026

Aktualizace studijních záznamů

Poslední zveřejněná aktualizace (Aktuální)

Poslední zveřejněná aktualizace

Nejnovější datum, kdy byly změny záznamu studie zpřístupněny na ClinicalTrials.gov. Mezi okamžikem, kdy byly změny odeslány na ClinicalTrials.gov sponzorem nebo zkoušejícím studie (datum poslední předložení aktualizace), a datem zveřejnění poslední aktualizace může nastat zpoždění.
22. července 2026

Odeslaná poslední aktualizace, která splnila kritéria kontroly kvality

Odeslaná poslední aktualizace, která splnila kritéria kontroly kvality

Nejnovější datum, kdy zadavatel studie nebo zkoušející předložil změny záznamu studie, které jsou v souladu s kritérii kontroly kvality (QC) National Library of Medicine (NLM). Je odpovědností sponzora nebo zkoušejícího zajistit, aby byl záznam studie v souladu s kritérii kontroly kontroly kvality NLM.
16. července 2026

Naposledy ověřeno

Naposledy ověřeno

Nejnovější datum, kdy zadavatel studie nebo zkoušející potvrdil informace o klinické studii na webu ClinicalTrials.gov jako přesné a aktuální. Pokud jde o studii s náborovým statusem náboru; ještě nenabírá nábor; nebo aktivní, nebyl nábor potvrzen během posledních 2 let, status náboru studie je uveden jako neznámý.
1. července 2026

Více informací

Termíny související s touto studií

Další identifikační čísla studie

Další identifikační čísla studie

Identifikátory nebo ID čísla jiná než číslo NCT, které klinické studii přiděluje zadavatel studie, financující subjekty nebo jiní. Tato čísla mohou zahrnovat jedinečné identifikátory z jiných registrů studií a čísla grantů National Institutes of Health.
  • CITE-2026-02

Informace o lécích a zařízeních, studijní dokumenty

Studuje lékový produkt regulovaný americkým FDA

Ne

Studuje produkt zařízení regulovaný americkým úřadem FDA

Ne

produkt vyrobený a vyvážený z USA

Ne

Tyto informace byly beze změn načteny přímo z webu clinicaltrials.gov. Máte-li jakékoli požadavky na změnu, odstranění nebo aktualizaci podrobností studie, kontaktujte prosím register@clinicaltrials.gov. Jakmile bude změna implementována na clinicaltrials.gov, bude automaticky aktualizována i na našem webu .

Nastavení souborů cookie

Používáme cookies, abychom zajistili, že vám poskytneme nejlepší zážitek z našich webových stránek. Pro více informací si pečlivě přečtěte naše Zásady ochrany osobních údajů a cookies. ...>>>Svou preference můžete kdykoli změnit nebo svůj souhlas odvolat odstraněním cookies z vašeho webu nebo počítače, jak je popsáno v zásadách. Přijměte to a vyberte své předvolby zaškrtnutím příslušných polí v části „Správa nastavení“ níže. Než budete pokračovat v používání jakékoli části tohoto webu, pozorně si prosím přečtěte naše Podmínky služby.
«Spravovat nastavení