Rapportkort og tilbakemeldinger for PCCE (RCF: PCCE)
Effekten av personlig tilpassede rapportkort og nedenfra og opp-innramming på PCCE-ytelse og holdninger
Som en del av UCLA Healths forpliktelse til å utvikle et integrert helsesystem bygget på et grunnlag av legeledet, teambasert primærhelse, implementerte Department of Medicine (DOM) en prestasjonsbasert insentivplan kalt Primary Care Clinical Excellence (PCCE) Incentivplan.
UCLA Health DOM Quality-teamet leder implementeringen og evalueringen av denne insentivplanen på tvers av UCLA Health primærhelsenettverk, med det primære målet å umiddelbart produsere forbedringer i kvaliteten på primærhelsetjenesten. For å strengt måle de mest effektive måtene å utforme og kommunisere informasjon om kvalitetsforbedringsprogrammet (QI), har DOM Quality-teamet inngått samarbeid med UCLA Anderson School of Management.
Å forstå faktorene som motiverer leger til å levere primæromsorg av høy kvalitet vil gi sentral innsikt i vellykket implementering av prestasjonsbaserte programmer over hele landet.
Studieoversikt
Status
Detaljert beskrivelse
Etterforskerne vil bruke en kommunikasjonsstrategi som utnytter atferdsprinsipper for å motivere tilbydere til å forbedre seg på alle fire av de evaluerte domenene til PCCE-programmet: klinisk kvalitet, profesjonell deltakelse, pasienterfaring og risikokoding.
Etterforskerne vil implementere en tre-arms eksperimentell kommunikasjonskampanje som inkluderer kvartalsvise e-poster og kvartalsvise undersøkelsesmeldinger. Kommunikasjonsstrategiene vil bruke teorier om motivasjon og atferdsendring for å forbedre legens ytelse i programmet og holdninger til programmet. Spesielt vil etterforskerne teste de uavhengige og felles effektene av å kommunisere med leger (a) personlig tilbakemelding på ytelsen og (b) "samskapingen" av programmet (dvs. dele hvordan tilbakemeldinger fra legen informerte programdesignet).
Etterforskerne vil tilfeldig tildele kvalifiserte leger til en av de tre eksperimentelle armene, stratifisert etter generell baseline ytelse (den totale prosentandelen tildelt i PCCE-programmet for april, mai, juni 2023 kvartal), spesialitet (basert på klassifisering som voksen eller voksen/ Peds), og kontrakt (basert på klassifisering som DOM eller PCN (CPN/EIMG)).
Etterforskerne vil vurdere om arm 3 skiller seg fra arm 1 når det gjelder tiltakene som er oppført i avsnittet Resultatmål. Hvis denne sammenligningen er statistisk signifikant, vil etterforskerne deretter sammenligne arm 3 vs. 2 og arm 2 vs. 1.
Analyseplan
- Legekvartal-nivå lineære regresjonsmodeller med heteroskedastisk-konsistente robuste standardfeil, gruppert på legenivå.
- Det primære modellbegrepet vil være indikatorvariabler for armer som pasienter tildeles.
Kontrollvariabler:
- Grunnverdier for utfallsmålet: Etterforskerne vil kontrollere for grunnmålene for resultatene, basert på ytelse fra juli til september 2023 og undersøkelsessvar i april og juli 2023, hvis tilgjengelig.
- Legens grunnleggende subjektiv forståelse av PCCE-programmet fra juli 2023-undersøkelsen, med fire elementer som spurte i hvilken grad leger forsto hvordan deres poengsum i hvert domene av programmet ble beregnet.
- Legekarakteristikker: selvrapportert kjønn, rase og alder, pluss år ved UCLA Health og klinikk fra administrative data
- Manglende kovariatverdier vil bli håndtert ved å inkludere "ukjente" indikatorvariabler, sammen med gjennomsnittlig imputering for kontinuerlige kovariater.
Utforskende analyser vil undersøke heterogene behandlingseffekter ved følgende egenskaper:
- Lege grunnlinjeytelse i PCCE-programmet (evaluert basert på ytelse i juli, august og september 2023)
- Legens grunnlinje oppfattet ledelsesstøtte rapportert i juli 2023-undersøkelsen
- Legens basislinjeprogramrelaterte holdninger (byrå, verdi i PCCE-programmet) rapportert i april 2023-undersøkelsen
- Legens grunnleggende subjektiv forståelse av PCCE-programmet fra juli 2023-undersøkelsen
- Objektiv valens av tilbakemeldingen levert i det første e-postrapportkortet, målt ved 1) antall beregninger innenfor hvert domene som legen forbedret seg for i forhold til forrige kvartal, 2) antall beregninger innenfor hvert domene som legen møtte for eller overskredet referansen, og 3) gjennomsnittlig avstand fra referansen på tvers av beregningene innenfor hvert domene
- Tilfeldig oppdrag for å gi tilbakemelding på rapportkortdesignet i en undersøkelse utført før intervensjonslanseringen, i juli 2023
- Legens kjønn
- Lege år i praksis
Etterforskerne vil undersøke legers programrelaterte holdninger og oppfatninger som foreslåtte mekanismer for intervensjonene. Disse vil bli målt med 20 elementer som danner tre underskalaer om prosessuell rettferdighet, antecedenter til ens intensjoner om å lykkes, og opplevd verdi av tilbakemeldingen. Etterforskerne vil undersøke denne mekanismen samlet og etter individuelle underskalaer, som definert nedenfor.
- Prosedyrerettferdighet i PCCE-programmets struktur og implementering: Leger vil bli undersøkt angående strukturell rettferdighet (8 elementer) og informativ rettferdighet i programmet (5 elementer).
- Forløp for intensjoner om å lykkes i programmet: Leger vil bli undersøkt angående deres oppfattede handlefrihet (atferdskontroll) over deres prestasjoner i PCCE-programmet (1 element), deres oppfattede verdi av PCCE-programmet (2 elementer) og deres subjektive normer om støtten og suksessen til kollegene deres i programmet (2 elementer).
- Opplevd verdi av ytelses-tilbakemeldingen: Leger vil bli undersøkt om nytten av den kvartalsvise ytelses-tilbakemeldingen i kontekstualiseringen av deres målforfølgelsesinnsats (2 elementer).
- Etterforskerne vil undersøke legers generelle holdninger på arbeidsplassen som tilleggsresultater. Disse vil bli målt som et 4-elements spørreskjema om tillit til UCLA Health-ledelse (1 element), opplevd lederstøtte (1 element), jobbtilfredshet (1 element) og utbrenthet (1 element). Etterforskerne vil analysere disse holdningene samlet og per enkelt element.
- Robusthetskontroller vil bli utført uten kovariater, og ved bruk av logistiske regresjonsmodeller i stedet for lineære regresjonsmodeller for avhengige variabler som måles som binære indikatorer.
Studietype
Registrering (Faktiske)
Fase
- Ikke aktuelt
Kontakter og plasseringer
Studiesteder
-
-
California
-
Los Angeles, California, Forente stater, 90095
- UCLA Health Department of Medicine, Quality Office
-
-
Deltakelseskriterier
Kvalifikasjonskriterier
Alder som er kvalifisert for studier
- Voksen
- Eldre voksen
Tar imot friske frivillige
Beskrivelse
Inklusjonskriterier:
- Primærleger i UCLA Health Department of Medicine Primary Care Network som er kvalifisert for PCCE Incentive-programmet fra 1. oktober 2023.
- Leger med klinisk heltidsansattnivå (FTE) på ≥ 40 % per 1. oktober 2023
- Leger med panelstørrelse >50 pasienter per 1. oktober 2023
Ekskluderingskriterier:
- Leger klassifisert som pediatri vil bli ekskludert fra dataanalyse gitt de strukturelle forskjellene i retningslinjer for helsevedlikehold for barn.
- Leger klassifisert som Urgent Care vil bli ekskludert fra dataanalyse gitt de strukturelle forskjellene i ytelsesevalueringen. De er alle i arm 1.
- Leger som deltar i utformingen av dette eksperimentet vil bli ekskludert fra analysen.
Studieplan
Hvordan er studiet utformet?
Designdetaljer
- Primært formål: Helsetjenesteforskning
- Tildeling: Randomisert
- Intervensjonsmodell: Parallell tildeling
- Masking: Enkelt
Våpen og intervensjoner
Deltakergruppe / Arm |
Intervensjon / Behandling |
|---|---|
|
Eksperimentell: Arm 3: Personlig rapportkort + innramming fra bunnen og opp
Kvartalsvis e-postkommunikasjon som i arm 2. Bottom-up intervensjon: Den kvartalsvise e-postkommunikasjonen vil også beskrive måtene PCCE-programmet og dets funksjoner ble informert på av tilbakemeldinger og anbefalinger fra lege. Kvartalsundersøkelse: Den kvartalsvise undersøkelsen vil inneholde informasjon om hvordan PCCE-programmet og dets funksjoner ble informert av tilbakemeldinger og anbefalinger fra legen. Leger vil svare på de samme spørsmålene om legenes holdninger og tro som i arm 1 og 2. |
Denne personlig tilpassede informasjonen om legeprestasjoner erstatter standard kommunikasjons-e-post for å gi personlig tilbakemelding til leger.
Nedenfra og opp-innramming legges til i den personlige kommunikasjons-e-posten for å gi innsikt i hvordan PCCE-programmet ble informert av tilbakemeldinger fra legen. Nedenfra og opp-rammeverket legges til undersøkelseskommunikasjonen for å gi innsikt i hvordan PCCE-programmet ble informert av tilbakemeldinger fra lege. |
|
Placebo komparator: Arm 1: Standard kommunikasjonsarm
Kvartalsvis e-postkommunikasjon: Kvartalsvis standardkommunikasjon via e-post som gir en lenke til leger for å sjekke deres PCCE-programytelse i forrige kvartal, og en lenke for å få tilgang til PCCE-dashbordet. E-posten vil også inneholde en lenke til ressurser. Fra og med e-postkommunikasjonen i februar 2024 vil det sendes en påminnelse på e-post to uker etter den første e-posten med samme innhold. Kvartalsundersøkelse: Kvartalsvis standard kommunikasjon via spørreundersøkelse med spørsmål om leges holdninger og tro. |
Dette er en standard kvartalsvis e-postkommunikasjon uten personlig tilpassede resultatmålinger.
|
|
Eksperimentell: Arm 2: Personlig rapportkort
Kvartalsvis e-postkommunikasjon: Kvartalsvis personlig kommunikasjon via e-post som gir individualiserte ytelsesmålinger til leger for PCCE-programmet fra forrige kvartal. Alle lenkene i Arm 1-e-postene vil bli inkludert i Arm 2-e-postene. Fra og med e-postkommunikasjonen i februar 2024 vil det sendes en påminnelse på e-post to uker etter den første e-posten med samme innhold. Kvartalsundersøkelse: Kvartalsvis standardkommunikasjon via spørreundersøkelse med de samme spørsmålene om legenes holdninger og tro som i arm 1. |
Denne personlig tilpassede informasjonen om legeprestasjoner erstatter standard kommunikasjons-e-post for å gi personlig tilbakemelding til leger.
|
Hva måler studien?
Primære resultatmål
Resultatmål |
Tiltaksbeskrivelse |
Tidsramme |
|---|---|---|
|
Legeatferd: Grad av engasjement med ressurser i første e-post
Tidsramme: 1 uke
|
Hvorvidt leger klikker seg gjennom for å få tilgang til "PCCE Resources and Improvement Strategies", som en lenke er gitt via e-poster med kvartalsrapporter.
Tidsrammen er en uke etter at den første e-posten ble sendt, som en binær indikator.
|
1 uke
|
Sekundære resultatmål
Resultatmål |
Tiltaksbeskrivelse |
Tidsramme |
|---|---|---|
|
Domenespesifikk og samlet PCCE-ytelse
Tidsramme: 9 måneder
|
Standardiserte z-poeng for beregningene for hvert domene i PCCE-programmet vil bli gjennomsnittet etter insentivprogramvektene for å måle domenespesifikk ytelse på legekvartalsnivå.
Etterforskerne vil analysere ytelsen i hvert domene separat.
For å analysere effekten av en intervensjon på aggregert ytelse, vil data fra legekvartal-domenenivå bli analysert i regresjoner vektet av programdomenevektene for legers tilknytning.
Dette vil bli undersøkt fra januar til september 2024.
Hvis det er en betydelig effekt, vil etterforskerne undersøke om effekten vedvarer gjennom juni 2025.
Hvis det ikke er noen positiv signifikant effekt av en intervensjon, vil etterforskerne undersøke effekten av intervensjonen på "poengene" som leger mottar, siden leger kan fokusere på å møte terskler for å tjene poeng (i stedet for å forbedre absolutt ytelse).
|
9 måneder
|
|
Lege Arbeidsplass holdninger
Tidsramme: 12 måneder
|
Målt med 4 elementer om: 1) tillit til UCLA Health-ledelse (skala målt fra 1-7, med høyere verdier som indikerer høyere tillit), 2) opplevd lederstøtte (skala målt fra 1-5, med høyere verdier som indikerer høyere støtte), jobbtilfredshet (skala målt fra 1-7, med høyere verdier som indikerer mer tilfredshet), og utbrenthet (skala målt fra 1-5, med høyere verdier som indikerer mer utbrenthet).
|
12 måneder
|
|
Legeprogramrelaterte holdninger og oppfatninger
Tidsramme: 12 måneder
|
Målt med 11 elementer som danner tre underskalaer om oppfattet rettferdighet, antecedenter til ens intensjoner om å lykkes, og opplevd verdi av tilbakemeldingen.
Alle elementer vil bli målt på en skala fra 1-7, der høyere skårer indikerer et bedre resultat.
|
12 måneder
|
|
Frekvens for samlet ressursengasjement
Tidsramme: 12 måneder
|
Klikk-gjennom-atferd for å få tilgang til "PCCE-ressurser og forbedringsstrategier" som en binær indikator vil bli undersøkt på legekvartalsnivå.
I november 2023 da det bare var én e-postkommunikasjon, vil klikkadferd bli vurdert i én uke etter at denne e-posten ble sendt.
Fra februar 2024 ble det sendt en e-postpåminnelse to uker etter den første e-posten, så klikkadferd vil bli vurdert i tiden mellom sendedatoen for den første kvartalsvise e-posten til en uke etter sendedatoen for påminnelsese-posten, pr. fjerdedel.
|
12 måneder
|
|
Frekvens for statsborgerskapsatferd
Tidsramme: 2 uker
|
Legens vilje i en undersøkelse til å velge å utføre en organisatorisk medborgerskapsatferd, som en binær indikator for om leger meldte seg på.
|
2 uker
|
Samarbeidspartnere og etterforskere
Etterforskere
- Hovedetterforsker: Richard Leuchter, MD, UCLA Health
Publikasjoner og nyttige lenker
Generelle publikasjoner
- Ajzen, I. (1991). The theory of planned behavior. Organizational Behavior and Human Decision Processes, 50(2), 179-211.
- Colquitt JA. On the dimensionality of organizational justice: a construct validation of a measure. J Appl Psychol. 2001 Jun;86(3):386-400. doi: 10.1037/0021-9010.86.3.386.
- Konovsky, M. A. (2000). Understanding procedural justice and its impact on business organizations. Journal of Management, 26(3), 489-511. https://doi.org/10.1016/S0149-2063(00)00042-8
- Leventhal, H. (1980). Toward a comprehensive theory of emotion. In Advances in experimental social psychology (Vol. 13, pp. 139-207). Elsevier.
- Shapiro, D. L., Buttner, E. H., & Barry, B. (1994). Explanations: What factors enhance their perceived adequacy? Organizational Behavior and Human Decision Processes, 58(3), 346-368.
- Thibault, J., & Walker, L. (1975). Procedural justice: A social psychological analysis. Hillsdale, NJ: Lawrence Elbaum Associates.
- Bies, R. J., & Moag, J. S. 1986. Interactional justice; Communication criteria of fairness. In R. J. Lewicki, B. H. Sheppard, & B. H. Bazerman (Eds.), Research on negotiation in organizations, Vol. 1: 43-55. Greenwich, CT: JAI Press.
Studierekorddatoer
Studer hoveddatoer
Studiestart (Faktiske)
Primær fullføring (Faktiske)
Studiet fullført (Faktiske)
Datoer for studieregistrering
Først innsendt
Først innsendt som oppfylte QC-kriteriene
Først lagt ut (Faktiske)
Oppdateringer av studieposter
Sist oppdatering lagt ut (Faktiske)
Siste oppdatering sendt inn som oppfylte QC-kriteriene
Sist bekreftet
Mer informasjon
Begreper knyttet til denne studien
Nøkkelord
Andre studie-ID-numre
- PCCE202324
Plan for individuelle deltakerdata (IPD)
Planlegger du å dele individuelle deltakerdata (IPD)?
IPD-planbeskrivelse
Legemiddel- og utstyrsinformasjon, studiedokumenter
Studerer et amerikansk FDA-regulert medikamentprodukt
Studerer et amerikansk FDA-regulert enhetsprodukt
Denne informasjonen ble hentet direkte fra nettstedet clinicaltrials.gov uten noen endringer. Hvis du har noen forespørsler om å endre, fjerne eller oppdatere studiedetaljene dine, vennligst kontakt register@clinicaltrials.gov. Så snart en endring er implementert på clinicaltrials.gov, vil denne også bli oppdatert automatisk på nettstedet vårt. .