Zeugnisse und Feedback für PCCE (RCF: PCCE)

Die Forscher werden eine Kommunikationsstrategie verwenden, die Verhaltensprinzipien nutzt, um Anbieter zu motivieren, sich in allen vier evaluierten Bereichen des PCCE-Programms zu verbessern: klinische Qualität, professionelle Beteiligung, Patientenerfahrung und Risikokodierung.

Die Ermittler werden eine dreiteilige experimentelle Kommunikationskampagne durchführen, die vierteljährliche E-Mails und vierteljährliche Umfragenachrichten umfasst. Die Kommunikationsstrategien nutzen Motivations- und Verhaltensänderungstheorien, um die Leistung des Arztes im Programm und die Einstellung gegenüber dem Programm zu verbessern. Insbesondere werden die Forscher die unabhängigen und gemeinsamen Auswirkungen der Kommunikation mit Ärzten testen (a) personalisiertes Leistungsfeedback und (b) die „gemeinsame Erstellung“ des Programms (d. h. die Weitergabe, wie das Feedback der Ärzte das Programmdesign beeinflusst hat).

Die Prüfer weisen geeignete Ärzte nach dem Zufallsprinzip einem der drei Versuchsarme zu, geschichtet nach der Gesamtausgangsleistung (der Gesamtprozentsatz, der im PCCE-Programm für das Quartal April, Mai, Juni 2023 zugewiesen wurde), Fachgebiet (basierend auf der Klassifizierung als Erwachsener oder Erwachsener/ Peds) und Vertrag (basierend auf der Klassifizierung als DOM oder PCN (CPN/EIMG)).

Die Ermittler werden bewerten, ob sich Arm 3 in Bezug auf die im Abschnitt „Ergebnismessungen“ aufgeführten Maßnahmen von Arm 1 unterscheidet. Wenn dieser Vergleich statistisch signifikant ist, vergleichen die Forscher als nächstes Arm 3 mit 2 und Arm 2 mit 1.

Analyseplan

• Lineare Regressionsmodelle auf Arztviertelebene mit heteroskedastisch-konsistenten robusten Standardfehlern, geclustert auf Arztebene.
• Der primäre Modellbegriff sind Indikatorvariablen für die Arme, denen Patienten zugeordnet sind.

• Kontrollvariablen:

  • Basiswerte des Ergebnismaßes: Die Prüfer werden die Basismaße der Ergebnisse kontrollieren, basierend auf der Leistung von Juli bis September 2023 und den Umfrageantworten im April und Juli 2023, sofern verfügbar.
  • Subjektives Basisverständnis des Arztes für das PCCE-Programm aus der Umfrage vom Juli 2023, mit vier Items, in denen gefragt wurde, inwieweit Ärzte verstanden haben, wie ihre Punktzahl in den einzelnen Bereichen des Programms berechnet wurde.
  • Merkmale des Arztes: selbst angegebenes Geschlecht, Rasse und Alter, plus Jahre bei UCLA Health und Klinik aus Verwaltungsdaten
  • Fehlende Kovariatenwerte werden durch die Einbeziehung „unbekannter“ Indikatorvariablen sowie durch Mittelwertimputation für kontinuierliche Kovariaten behoben.

• Explorative Analysen werden heterogene Behandlungseffekte anhand der folgenden Merkmale untersuchen:

  • Basisleistung des Arztes im PCCE-Programm (bewertet auf Grundlage der Leistung im Juli, August und September 2023)
  • Die in der Umfrage vom Juli 2023 angegebene Basislinie der vom Arzt wahrgenommenen Führungsunterstützung
  • Grundlegende programmbezogene Einstellungen von Ärzten (Agentur, Wert im PCCE-Programm), berichtet in der Umfrage vom April 2023
  • Subjektives Basisverständnis des Arztes zum PCCE-Programm aus der Umfrage vom Juli 2023
  • Objektive Wertigkeit des in der ersten E-Mail-Berichtskarte übermittelten Feedbacks, gemessen an 1) der Anzahl der Kennzahlen innerhalb jedes Bereichs, bei denen sich der Arzt im Vergleich zum Vorquartal verbessert hat, 2) der Anzahl der Kennzahlen innerhalb jedes Bereichs, bei denen der Arzt erreicht hat, oder übertraf den Benchmark und 3) den durchschnittlichen Abstand vom Benchmark über die Metriken innerhalb jeder Domäne hinweg
  • Zufällige Zuweisung zur Bereitstellung von Feedback zum Zeugnisdesign in einer Umfrage, die vor Beginn der Intervention im Juli 2023 durchgeführt wurde
  • Geschlecht des Arztes
  • Jahre als Arzt in der Praxis

• Die Forscher werden die programmbezogenen Einstellungen und Wahrnehmungen der Ärzte als vorgeschlagene Mechanismen der Interventionen untersuchen. Diese werden anhand von 20 Items gemessen, die drei Unterskalen über Verfahrensgerechtigkeit, Voraussetzungen für die eigenen Erfolgsabsichten und den wahrgenommenen Wert des Feedbacks bilden. Die Forscher werden diesen Mechanismus insgesamt und anhand einzelner Unterskalen untersuchen, wie unten definiert.

  • Verfahrensgerechtigkeit in der Struktur und Umsetzung des PCCE-Programms: Ärzte werden hinsichtlich der strukturellen Gerechtigkeit (8 Punkte) und der Informationsgerechtigkeit des Programms (5 Punkte) befragt.
  • Voraussetzungen für die Absicht, im Programm erfolgreich zu sein: Ärzte werden hinsichtlich ihrer wahrgenommenen Handlungsfähigkeit (Verhaltenskontrolle) über ihre Leistung im PCCE-Programm (1 Punkt), ihrem wahrgenommenen Wert des PCCE-Programms (2 Punkte) und ihren subjektiven Normen befragt über die Unterstützung und den Erfolg ihrer Kollegen im Programm (2 Punkte).
  • Wahrgenommener Wert des Leistungsfeedbacks: Ärzte werden zum Nutzen des vierteljährlichen Leistungsfeedbacks bei der Kontextualisierung ihrer Zielverfolgungsbemühungen befragt (2 Punkte).
• Als zusätzliche Ergebnisse werden die Ermittler die allgemeine Einstellung der Ärzte am Arbeitsplatz untersuchen. Diese werden als 4-Punkte-Fragebogen zum Vertrauen in die Führung von UCLA Health (1 Punkt), zur wahrgenommenen Unterstützung der Führung (1 Punkt), zur Arbeitszufriedenheit (1 Punkt) und zum Burnout (1 Punkt) gemessen. Die Ermittler werden diese Einstellungen insgesamt und nach einzelnen Elementen analysieren.
• Robustheitsprüfungen werden ohne Kovariaten und unter Verwendung logistischer Regressionsmodelle anstelle linearer Regressionsmodelle für abhängige Variablen durchgeführt, die als binäre Indikatoren gemessen werden.