ClientBot: agent konwersacyjny, który wspiera ćwiczenie umiejętności i informacje zwrotne na potrzeby rozmów motywacyjnych

Etap 1. Wywiady z 5 trenerami PRI pozwolą ocenić aktualne cele, treść i format szkolenia PRI, ale także sposób prowadzenia praktyk szkoleniowych, w tym jakie rodzaje technologii są obecnie wykorzystywane do jakich celów. Uczestnicy szkolenia zostaną następnie zapoznani z prototypową platformą ClientBot, w tym z możliwością korzystania z niej, i zostaną poproszeni o opisanie, w jaki sposób mogą zintegrować prototyp z istniejącymi praktykami szkoleniowymi. Trenerzy będą odgrywać role z badaczami, aby zilustrować procesy pracy, a gromadzenie danych będzie obejmować nagrania audio z wywiadów i notatki terenowe. Uczestnicy szkolenia zostaną również przepytani na temat wykorzystania przez nich umiejętności DM oraz na temat tego, które z nich są najbardziej odpowiednie i/lub wymagają szkolenia dla typowych uczestników szkolenia.

Etap 1 obejmie również stażystów, którzy uczestniczyli w szkoleniu PRI w ciągu ostatnich 3 miesięcy. Niedawni stażyści przedstawią zorientowaną perspektywę na platformie ClientBot w odniesieniu do obecnych praktyk szkolenia umiejętności PRI, które obejmują skoroszyt ukierunkowany na umiejętności MI i odgrywanie ról. Sesje z uczestnikami będą prowadzone online, przy użyciu formatu użyteczności opartego na wywiadach. Pracownicy naukowi przedstawią krótkie wprowadzenie do ClientBot jako komputerowej platformy do szkolenia umiejętności, a następnie poproszą uczestników o wykonanie określonych zadań przy użyciu protokołu „głośnego myślenia” (tj. przedstawienie własnej narracji podczas wykonywania każdego zadania). Celem laboratoryjnej analizy użyteczności jest sprawdzenie, czy oprogramowanie działa zgodnie z przeznaczeniem w kontrolowanych warunkach. W ramach godzinnej sesji uczestnicy będą mieli okazję skorzystać z 2-3 modułów treningu umiejętności MI.

Etap 2. PRI ma solidny harmonogram szkoleń osobistych i internetowych przez cały rok. Do drugiego etapu badania użyteczności zrekrutujemy 20 doradców, którzy uczestniczyli w szkoleniu PRI w ciągu ostatnich 3 miesięcy. Po pracach inżynierskich nad oprogramowaniem w celu wdrożenia narzędzia ClientBot fazy I na opartej na chmurze platformie Lyssn zgodnej z HIPAA, przeprowadzimy 2-tygodniową próbę terenową z jednym ramieniem wśród 20 ostatnich stażystów PRI, aby lepiej ocenić przepływ pracy użytkownika, interakcję z systemem i ogólne użyteczność w społeczności AUD. Uczestnicy będą zachęcani do używania ClientBota przez 10 minut dziennie. Pracownicy naukowi będą codziennie kontaktować się z uczestnikami za pośrednictwem poczty elektronicznej w celu uzyskania informacji na temat niezawodności technicznej (np. Wykorzystanie ClientBot zostanie automatycznie przechwycone przez system, w tym: które moduły były używane, ile razy uzyskano dostęp do zasobów i powtórzono je, czas spędzony na przeglądaniu materiałów wprowadzających, wierność informacji zwrotnych przekazywanych podczas ćwiczeń umiejętności oraz czas spędzony na przeglądaniu informacji zwrotnych generowanych przez NLP .

Po każdej sesji treningowej uczestnicy odpowiedzą na krótki zestaw pytań Likerta w skali od 0 do 10, w tym: Jak spójna była narracja i odpowiedzi klienta? Jak realistyczny był ten symulowany klient w porównaniu z klientem, którego widziałeś? Jak duża część sesji klienta koncentrowała się na spożywaniu alkoholu? Jak dokładne były informacje zwrotne na temat wykorzystania umiejętności DM? Po ukończeniu wszystkich sesji praktycznych uczestnicy wypełnią skalę użyteczności systemu (SUS). Aby zmierzyć gotowość do wdrożenia, wykorzystamy również Miary Akceptowalności Interwencji (AIM), Miary Odpowiedniości Interwencji (IAM) oraz Miary Wykonalności Interwencji (FIM). Każdy z nich to krótkie, 5-punktowe mierniki ukierunkowane na kluczowe wyniki wdrożenia o silnych właściwościach psychometrycznych. Stażyści ocenią postrzeganą dokładność opinii ClientBot, która zostanie również oceniona za pomocą obiektywnego kodowania ludzkiego.

Etap 3. Podczas Etapu 3 członkowie badania PRI zidentyfikują 10-15 szkoleń, z których będą mogli przeprowadzić rekrutację (zakładając, że będziemy w stanie zrekrutować 50% uczestników każdego szkolenia, w oparciu o wcześniejsze wskaźniki uczestnictwa w badaniach opartych na PRI). Osoby, które zapisały się na szkolenie PRI, zostaną zrekrutowane do badania na około 6 tygodni przed szkoleniem za pośrednictwem zaproszenia e-mail. Zainteresowani uczestnicy wypełnią świadomą zgodę online, a po wyrażeniu zgody uczestnicy terapeuci zostaną losowo przydzieleni do warunków ClientBot (CB) i zwykłych treningów (TAU). Następnie uczestnicy zostaną poproszeni o wypełnienie komputerowej oceny symulowanych wywiadów z pacjentami (CASPI), komputerowej, wystandaryzowanej oceny umiejętności DM, która jest wysoce skorelowana z obiektywnymi pomiarami wierności DM. Zrekrutujemy i wylosujemy w sumie 200 stażystów PRI, korzystając z ich ciągłego szkolenia online. PRI szkoli około 1200 osób rocznie. Na podstawie naszego badania pilotażowego przewidujemy 30% wskaźnik rekrutacji, co dałoby wymaganą wielkość próby 200 w ciągu około 6-8 miesięcy. Uczestnicy badania zostaną losowo przydzieleni do korzystania z ClientBot bezpośrednio po szkoleniu PRI lub szkolenia jak zwykle (TAU), które nie obejmuje żadnej interwencji bezpośrednio po szkoleniu. Przed interwencją ClientBota uczestnicy w obu ramionach przejdą komputerową ocenę symulowanych wywiadów z pacjentami (CASPI). CASPI przedstawia klientowi krótkie filmy z zachętami do korzystania z różnych umiejętności MI po każdym filmie, które są nagrywane, a następnie oceniane pod kątem wierności MI. Uczestnicy w obu ramionach przeprowadzą dalsze oceny CASPI po okresie szkolenia ClientBot. Po 2-miesięcznym okresie wymywania ramię ClientBot otrzyma dodatkowy CASPI. Obie grupy zostaną następnie poproszone o udział w standardowych sesjach z pacjentami w celu spełnienia wymagań szkoleniowych PRI. Po zakończeniu sesji SP uczestnikom ramienia TAU zostanie zaoferowana interwencja szkoleniowa ClientBot, po której nastąpi końcowe CASPI. Ostatnie miesiące fazy 2 / roku 2 będą koncentrować się na analizie danych i rozpowszechnianiu wyników poprzez prezentacje konferencyjne i publikacje.