ClientBot: Konverzační agent, který podporuje procvičování dovedností a zpětnou vazbu pro motivační rozhovory

Fáze 1. Rozhovory s 5 školiteli PRI posoudí aktuální cíle školení PRI, obsah a formát, ale také to, jak jsou školicí praktiky prováděny, včetně toho, jaké typy technologií se v současnosti používají k jakým účelům. Účastníci školitelů se poté seznámí s prototypovou platformou ClientBot, včetně možnosti ji používat, a budou požádáni, aby popsali, jak by mohli prototyp integrovat do svých stávajících školicích postupů. Školitelé budou hrát roli s výzkumníky, aby ilustrovali pracovní procesy, a sběr dat bude zahrnovat zvukové nahrávky rozhovorů a terénní poznámky. Účastníci školitelů budou také dotazováni na to, jak používají dovednosti MI a které jsou pro jejich typické účastníky školení nejrelevantnější a/nebo potřebují školení.

Fáze 1 bude zahrnovat také stážisty, kteří se zúčastnili školení PRI během předchozích 3 měsíců. Nedávní účastníci školení poskytnou informovaný pohled na platformu ClientBot ve vztahu k současným praktikám školení dovedností PRI, které zahrnují sešit zaměřený na dovednosti MI a hraní rolí. Sezení účastníků budou vedena online pomocí formátu použitelnosti založeného na rozhovorech. Výzkumní pracovníci stručně představí ClientBot jako počítačovou platformu pro nácvik dovedností a poté vyzvou účastníky, aby dokončili konkrétní úkoly pomocí protokolu „přemýšlejte nahlas“ (tj. poskytnou vlastní vyprávění, když plní každý úkol). Cílem laboratorní analýzy použitelnosti je ověřit, že software funguje tak, jak bylo zamýšleno v kontrolovaném prostředí. V rámci hodinového sezení budou mít účastníci možnost využít 2-3 moduly tréninku dovedností MI.

Fáze 2. PRI má každý rok rozsáhlý rozvrh osobních a online školení. Pro fázi 2 studie použitelnosti přijmeme 20 poradců, kteří se během předchozích 3 měsíců zúčastnili školení PRI. Po práci softwarového inženýrství na implementaci nástroje Phase I ClientBot do cloudové platformy Lyssn kompatibilní s HIPAA provedeme jednoramenovou dvoutýdenní terénní zkoušku mezi 20 nedávnými stážisty PRI, abychom lépe vyhodnotili pracovní tok uživatelů, interakci se systémem a obecné informace. použitelnost v komunitním prostředí AUD. Účastníci budou vyzváni, aby používali ClientBot po dobu 10 minut za pracovní den. Účastníci budou denně kontaktováni e-mailem výzkumnými pracovníky s dotazem na technickou spolehlivost (např. potíže s ovládáním nástroje), funkční spolehlivost (např. zkušenosti s používáním funkcí ClientBot) a zkušenosti s integrací systému do denního pracovního postupu. Použití ClientBot bude automaticky zaznamenáváno systémem, včetně: které moduly byly použity, kolikrát byly zdroje zpřístupněny a opakovány, čas strávený prohlížením úvodních materiálů, věrná zpětná vazba poskytnutá během procvičování dovedností a čas strávený kontrolou zpětné vazby generované NLP .

Po každém cvičení účastníci odpoví na krátký soubor likertových otázek na škále 0-10, včetně: Jak koherentní bylo vyprávění klienta a jeho odpovědi? Jak realistický byl tento simulovaný klient ve srovnání s klientem, kterého jste viděli? Jak velká část sezení s klientem byla zaměřena na užívání alkoholu? Jak přesná byla zpětná vazba o využití dovedností MI? Po absolvování všech praktických lekcí účastníci dokončí stupnici použitelnosti systému (SUS). K posouzení připravenosti k implementaci využijeme také opatření přijatelnosti intervenčního opatření (AIM), opatření vhodnosti intervence (IAM) a proveditelnost opatření intervence (FIM). Každé z nich jsou stručná, 5-položková opatření zaměřená na hlavní výsledky implementace se silnými psychometrickými vlastnostmi. Školenci vyhodnotí vnímanou přesnost zpětné vazby ClientBot, která bude také hodnocena prostřednictvím objektivního lidského kódování.

Fáze 3. Během fáze 3 členové výzkumu PRI identifikují 10–15 školení, ze kterých se mají rekrutovat (za předpokladu, že budeme schopni získat 50 % účastníků každého školení na základě předchozí míry účasti na výzkumu založeném na PRI). Jednotlivci, kteří se přihlásili na školení PRI, budou přijati do studie přibližně 6 týdnů před školením prostřednictvím e-mailové pozvánky. Zainteresovaní účastníci vyplní informovaný souhlas online a po souhlasu budou účastníci terapeuta randomizováni do podmínek ClientBot (CB) vs. trénink jako obvykle (TAU). Účastníci budou poté požádáni, aby dokončili počítačové hodnocení simulovaných rozhovorů s pacienty (CASPI), což je počítačově založené, standardizované hodnocení dovedností MI, které vysoce koreluje s objektivními měřítky věrnosti MI. Přijmeme a náhodně vybereme celkem 200 stážistů PRI pomocí jejich průběžného online školení. PRI vycvičí každý rok přibližně 1200 jedinců. Na základě naší pilotní studie předpokládáme 30% míru náboru, což by přineslo požadovanou velikost vzorku 200 za přibližně 6–8 měsíců. Účastníci výzkumu budou randomizováni k použití ClientBot ihned po školení PRI nebo školení jako obvykle (TAU), které nezahrnuje žádný zásah bezprostředně po školení. Před zásahem ClientBot účastníci v obou ramenech dokončí počítačové hodnocení simulovaných rozhovorů s pacienty (CASPI). CASPI představuje krátká klientská videa s výzvami k použití různých MI dovedností po každém videu, které jsou zaznamenány a poté hodnoceny pro věrnost MI. Účastníci v obou větvích dokončí následná hodnocení CASPI po období školení ClientBot. Po dvouměsíčním vymývacím období obdrží rameno ClientBot další následné CASPI. Obě ramena budou poté požádána, aby se zapojila do standardizovaných sezení pacientů, aby splnila své požadavky na školení PRI. Po dokončení sezení SP bude účastníkům v rameni TAU nabídnut tréninkový zásah ClientBot, po kterém bude následovat závěrečné CASPI. Poslední měsíce fáze 2 / Rok 2 se zaměří na analýzy dat a šíření poznatků prostřednictvím konferenčních prezentací a publikací.