Domande Vero/Falso Multiple Generate dall'Intelligenza Artificiale vs Sviluppate da Accademici nell'Educazione in Anestesiologia

Questo studio di coorte osservazionale prospettico a centro singolo è progettato per valutare l'efficacia, l'affidabilità e il valore educativo delle domande a scelta multipla vero/falso (MTF) generate dall'intelligenza artificiale (IA) rispetto a quelle sviluppate da accademici esperti nella formazione in anestesiologia.

Lo studio sarà condotto presso il Dipartimento di Anestesiologia e Rianimazione dell'Università di Scienze della Salute di Kütahya. Un totale di 27 specializzandi in anestesiologia sarà incluso e suddiviso in due gruppi in base al livello di formazione: specializzandi junior (≤2,5 anni di formazione) e specializzandi senior (>2,5 anni di formazione).

Un totale di 200 domande MTF sarà sviluppato sulla base di materiali didattici standardizzati di anestesiologia. La metà delle domande (n=100) sarà preparata da accademici esperti, mentre l'altra metà (n=100) sarà generata utilizzando un modello di intelligenza artificiale (sistema basato su ChatGPT). Tutte le domande saranno strutturate secondo criteri prestabiliti, tra cui livello di difficoltà (facile, moderato, difficile), rilevanza clinica e appropriatezza educativa.

I partecipanti completeranno i set di domande in una singola sessione in condizioni standardizzate. Ogni risposta corretta sarà valutata con 1 punto e le risposte errate con 0. I punteggi totali del test saranno calcolati per ciascun partecipante.

Sarà eseguita un'analisi degli item per valutare le proprietà psicometriche delle domande. Saranno calcolati l'indice di difficoltà dell'item, l'indice di discriminazione dell'item e l'affidabilità complessiva del test. Inoltre, la qualità percepita delle domande sarà valutata utilizzando il feedback dei partecipanti.

L'analisi statistica sarà condotta utilizzando il software SPSS. Sarà valutata la distribuzione delle variabili e saranno utilizzati di conseguenza test parametrici o non parametrici appropriati. Saranno effettuati confronti tra gruppi (specializzandi junior vs senior) e tra fonti delle domande (generate da IA vs sviluppate da accademici). Un valore p <0,05 sarà considerato statisticamente significativo.

Lo studio non coinvolge alcun intervento clinico, somministrazione di farmaci o procedura invasiva. La partecipazione è volontaria e sarà ottenuto il consenso informato scritto da tutti i partecipanti. Tutti i dati saranno raccolti in modo anonimo e utilizzati esclusivamente per scopi di ricerca.

I risultati di questo studio dovrebbero fornire informazioni sul potenziale ruolo dell'intelligenza artificiale nell'educazione medica, in particolare nello sviluppo di strumenti di valutazione, e potrebbero contribuire a metodi di valutazione più oggettivi, standardizzati ed efficienti nella formazione in anestesiologia.