Uměle inteligencí generované vs. akademiky vyvinuté otázky typu "více pravdivých/nepravdivých" ve vzdělávání v anesteziologii

Tato jednocentrová prospektivní observační kohortní studie je navržena tak, aby vyhodnotila účinnost, spolehlivost a vzdělávací hodnotu umělou inteligencí (AI) generovaných otázek typu více pravda/nepravda (MTF) ve srovnání s otázkami vytvořenými zkušenými akademiky v anesteziologickém vzdělávání.

Studie bude provedena na Katedře anesteziologie a reanimace Univerzity zdravotnických věd v Kütahyi. Bude zahrnuto celkem 27 anesteziologických rezidentů, kteří budou rozděleni do dvou skupin podle úrovně vzdělávání: juniorky (≤2,5 roku vzdělávání) a seniorky (>2,5 roku vzdělávání).

Celkem bude vytvořeno 200 MTF otázek na základě standardizovaných anesteziologických vzdělávacích materiálů. Polovina otázek (n=100) bude připravena zkušenými akademiky, zatímco zbývající polovina (n=100) bude generována pomocí modelu umělé inteligence (systém založený na ChatGPT). Všechny otázky budou strukturovány podle předem stanovených kritérií, včetně úrovně obtížnosti (snadná, střední, obtížná), klinické relevance a vzdělávací vhodnosti.

Účastníci vyplní sady otázek v jedné sezení za standardizovaných podmínek. Každá správná odpověď bude hodnocena 1 bodem a nesprávné odpovědi 0 body. Celkové skóre testu bude vypočítáno pro každého účastníka.

Bude provedena analýza položek k vyhodnocení psychometrických vlastností otázek. Bude vypočítán index obtížnosti položky, index diskriminace položky a celková spolehlivost testu. Kromě toho bude hodnocena vnímaná kvalita otázek pomocí zpětné vazby od účastníků.

Statistická analýza bude provedena pomocí softwaru SPSS. Bude posouzeno rozdělení proměnných a budou použity příslušné parametrické nebo neparametrické testy. Budou provedena srovnání mezi skupinami (juniorky vs. seniorky) a mezi zdroji otázek (AI generované vs. akademiky vytvořené). Hodnota p <0,05 bude považována za statisticky významnou.

Studie nezahrnuje žádný klinický zásah, podávání léků ani invazivní proceduru. Účast je dobrovolná a od všech účastníků bude získán písemný informovaný souhlas. Všechna data budou shromažďována anonymně a použita výhradně pro výzkumné účely.

Očekává se, že výsledky této studie poskytnou vhled do potenciální role umělé inteligence v lékařském vzdělávání, zejména ve vývoji hodnoticích nástrojů, a mohou přispět k objektivnějším, standardizovanějším a efektivnějším metodám hodnocení v anesteziologickém vzdělávání.