URAISE: Hodnocení dovedností interpretace regionální anestezie ultrazvukem (URAISE)

Jedná se o prospektivní, multicentrickou studii vedoucí k identifikaci ověřeného, ​​spolehlivého a obhajitelného nástroje pro hodnocení interpretace obrazu regionální anestezie řízené ultrazvukem (UGRA).

Tato studie bude mít 5 fází:

Fáze 1 - identifikace nervového bloku:

Panel akademických odborníků v regionální anestezii přezkoumá publikované důkazy z mezinárodních směrnic UGRA. Určí, které nervové bloky UGRA jsou relevantní pro anestetickou praxi ve Spojeném království, a uvedou anatomické a klinické znalosti, které jsou relevantní pro provádění těchto nervových blokád.

Fáze 2 – generování obsahu a otázek:

Panel odborníků na regionální anestezii, uznávaný za jejich zapojení do regionálních anesteziologických společností a publikací, posoudí nervové bloky UGRA a příslušné anatomické struktury identifikované ve fázi 1. Anatomické struktury, které musí být identifikovány na ultrazvuku pro bezpečný a efektivní výkon těchto bloků, budou dohodnuty po panelové diskusi. Každá struktura bude rozdělena do následujících kategorií:

• Nezbytný
• Žádoucí
• Expert
• Irelevantní

Tyto informace budou shromažďovány primárními a spoluřešiteli za účelem vytvoření pilotního testu obsahu a otázek interpretace UGRA.

Fáze 3 – předběžné testování:

Pilotní test provedou místní vyšetřovatelé prostřednictvím počítačové aplikace 35–50 anestetikům a konzultantům, kteří budou přijati prostřednictvím e-mailu a letáků zaslaných do anesteziologických škol ve Spojeném království. Kohorty budou zahrnovat stejný počet školených osob a konzultantů s různou regionální anestezií a klinickými zkušenostmi. Pilotní test bude obsahovat krátké videoklipy a obrázky ultrazvukem řízené regionální anestezie s otázkami ve formátu konstruované odpovědi (CRQ) k identifikaci relevantních struktur, anatomie a klinických znalostí, které budou vyžadovat, aby účastník napsal odpovědi na otázky ve volném textu. Je důležité si uvědomit, že někteří účastníci budou obeznámeni s formátem CRQ, zatímco jiní mohou být obeznámeni lépe s jinými formami hodnotících otázek. Účastníci pilotního projektu proto dostanou před testem vzorové otázky a odpovědi, aby se seznámili s formátem otázek.

"Platnost tváře" testu (tj. zda měří to, co tvrdí) bude posouzeno tak, že účastníci budou požádáni, aby se vyjádřili ke snadnosti porozumění a identifikovali termíny, které se zdají být nejednoznačné. Účastníci budou moci komentovat v textovém poli za každou položku v dotazníku. Budou také požádáni, aby se vyjádřili k tomu, jak by zlepšili test a jakékoli relevantní anatomii nebo klinické znalosti, které v otázkách chybí. Formát testu bude upraven na základě připomínek.

"Index obtížnosti" pro každou položku bude vypočítán vydělením počtu správných odpovědí celkovým počtem odpovědí. Vyšší hodnota znamená, že na otázku se snáze odpovídá. Jakákoli položka s indexem obtížnosti < 50 % bude respondenty považována za příliš obtížnou na zodpovězení a bude zvážena její odstranění. To bude porovnáno s informacemi shromážděnými od panelu expertů o testovaných položkách (tj. zda je anatomická struktura zásadní, žádoucí, expertní nebo nerelevantní pro konkrétní ultrazvukem řízený nervový blok).

Pilotní studie bude použita ke zjištění, jak dobře odpovědi pro každou testovanou položku rozlišují mezi úrovní zkušeností účastníka s ultrazvukem ("konstrukční validita"). Rozdíly ve schopnostech interpretace ultrazvuku mezi studijními skupinami budou analyzovány pomocí statistického modelování. Položky, které dobře rozlišují, budou zachovány a ty, které diskriminují špatně, budou z hlavního testu odstraněny.

Spolehlivost testu se zlepší předložením položek pilotního testu v náhodném pořadí, aby se minimalizoval účinek snižující se výkonnosti kognitivní únavy na následující položky. Bude také zaznamenán průměrný čas, který účastníci potřebují k dokončení každé položky v pilotním testu, aby se řídila optimální délka závěrečného studijního testu. Je důležité vyvážit maximální počet testových položek a zároveň minimalizovat riziko kognitivní únavy a vypadnutí účastníka. Zatímco pilotní test bude nutně obsahovat více položek než závěrečný test, účastníci pilotního testu budou požádáni, aby se vyjádřili k bodu, ve kterém se cítili unaveni, aby navedli tuto rovnováhu. Pomůže také pochopit, zda úroveň zkušeností s regionální anestezií ovlivňuje únavnost.

Fáze 4 – testování platnosti obsahu:

Aby bylo zajištěno, že všechny položky v nástroji pro hodnocení obsahují obsah, který testuje doménu, kterou vyšetřovatelé zamýšlejí testovat, bude po pilotu upravený test předložen panelu 5 odborníků na regionální anestezii, kteří budou požádáni, aby ohodnotili vhodnost ultrazvukových snímků. a otázky k výkonu bloku. Bude to na 4bodové Likertově stupnici:

1. = rozhodně se nehodí
2. = pravděpodobně není vhodné
3. = pravděpodobně vhodné
4. = rozhodně vhodná „platnost obsahu“ (tj. rozsah, v jakém opatření spravedlivě reprezentuje určitou doménu) bude odvozena vydělením počtu expertů, kteří označili položku jako pravděpodobně vhodnou a rozhodně vhodnou (3 a 4 na škále) celkový počet odborníků. Budou vybrány položky, které dostatečně vysoké procento účastníků uzná za vhodné.

Fáze 5: psychometrické hlavní testování studie Nástroj pro závěrečné hodnocení bude podán stejnému počtu anesteziologů s různou zkušeností s regionální anestezií. Účastníci budou náborováni pomocí e-mailů a letáků zaslaných do anesteziologických škol ve Spojeném království. Každý účastník odpoví na řadu demografických otázek, včetně věku, pohlaví, rukou, stejně jako úrovně výcviku a praktických zkušeností v UGRA, aby zodpověděl nesrovnalosti v klinické expozici v různých fázích výcviku.

Zkouška se bude skládat z konstruovaných odpovědí (CRQs). Účastníci dostanou před testem vzorové otázky a odpovědi, aby se seznámili s formátem otázek. Konstrukční validita nástroje bude testována porovnáním skóre anesteziologů s jejich úrovní zkušeností v regionální anestezii. Úroveň zkušeností je zástupným výstupním měřítkem jejich odbornosti v ultrazvukem řízené regionální anestezii. Rozdíly ve schopnostech interpretace ultrazvuku mezi studijními skupinami budou analyzovány pomocí statistického modelování. Na konci hodnocení bude krátký dotazník ke zjištění, jak snadno pochopit a zda jsou ultrazvukové snímky vhodné pro podporu validity testu.

"Vnitřní spolehlivost" (tj. konzistence výsledků napříč položkami v testu) odpovědí bude hodnocena pomocí statistického modelování. Pro každého účastníka bude také použita metoda rozděleného testu k porovnání první poloviny hodnocení s druhou polovinou, aby byla zajištěna vnitřní konzistence jejich odpovědí na položky. Index obtížnosti vypočítaný pro položky v pilotní studii bude použit k zajištění vyváženého souboru testových položek z hlediska jejich obtížnosti v první a druhé polovině testu. Všechny položky budou povinné. Test bude spravovat místní vyšetřovatelé prostřednictvím webové aplikace. Bude mít automatický systém značení pro minimalizaci rozdílů mezi značkami. Bude také ručně kontrolována vyšetřovateli, kteří jsou zaslepeni vůči úrovni a identitě účastníka.

Vyšetřovatelé budou usilovat o nábor minimálně 250 účastníků, z nichž každému bude přiděleno účastnické číslo, aby byla zachována anonymita.

Výsledky budou analyzovány až po ukončení náboru.