Validierungsstudien zur Bewertung der diagnostischen Genauigkeit einer Softwareanwendung zur Erkennung und Überwachung von Aufmerksamkeitsdefiziten im Delirium

Die Forscher entwickelten zuvor einen neuen neuropsychologischen Test zur objektiven Messung der Unaufmerksamkeit im Delirium, der auf einem speziell angefertigten computergestützten Gerät (Delbox) implementiert wurde. Basierend auf demselben Test wurde nun eine prototypische Softwareanwendung (DelApp) für Smartphones entwickelt.

Die DelApp hat viele Vorteile gegenüber bestehenden Tests, darunter Objektivität, automatisches Scoring und Benutzerfreundlichkeit. Studien mit 30 Krankenhauspatienten zeigten eine sehr vergleichbare Leistung zwischen Delbox und DelApp. Weitere Proof-of-Principle-Single-Rater-Studien mit der DelApp bei mehr als 200 Krankenhauspatienten haben zusätzliche Beweise für die gute Leistung der DelApp geliefert.

Obwohl es starke positive Ergebnisse aus Pilotstudien mit Prüfärzten gibt, sind jetzt größere formelle Studien mit verblindeten Ratern und repräsentativeren Patientenproben erforderlich.

Die vorgeschlagene Studie ist Teil eines größeren Arbeitsprogramms, das vom Medical Research Council (Zuschusswert 1,01 Mio. £) zur Optimierung und klinischen Validierung der DelApp finanziert wird und aus drei Phasen besteht: Phase A – Optimierung der DelApp und Machbarkeitstests (REC Nr. 15/SC00/19); Phase B – Fall-Kontroll-Studien bei ausgewählten Patienten; und Phase C – Validierungsstudien an nicht ausgewählten Patienten. Letztendlich zielen die Forscher darauf ab, ein Softwareprodukt zu entwickeln, das vollständig lizenziert und für Gesundheitsorganisationen kommerziell verfügbar ist.

Die vorgeschlagenen Phase-B-Studien werden an stationären Patienten auf Allgemein- und Akutstationen sowie auf der Intensivstation durchgeführt. Die Ziele dieser Studien sind (a) die diagnostische Leistung der DelApp in einzelnen Patientengruppen zu bewerten und optimale Cut-Points zu informieren (Phase B); und (b) um die diagnostische Leistung der DelApp bei unselektierten Patienten zu bewerten (Phase C). Die Studien werden auch zu einem besseren Verständnis der Natur der dem Delir zugrunde liegenden neuropsychologischen Defizite beitragen. Am Ende dieser Studien kann die DelApp abhängig von den Studienergebnissen modifiziert werden. Die Ermittler wählen die Stimuli und Subtests aus, die das beste Gleichgewicht zwischen Sensitivität und Spezifität bieten.

Es werden zwei Fall-Kontroll-Studien durchgeführt, an denen Patienten aus Allgemein- und Akutstationen (Studie B.1) und Intensivstationen (Studie B.2) rekrutiert werden. Jede Studie wird an zwei Standorten durchgeführt, nämlich dem Royal Infirmary of Edinburgh (RIE) und dem Glasgow Royal Infirmary (GRI). Die Leistung des DelApp (Index-Test) im Vergleich zur Referenzstandard-Diagnose wird unabhängig voneinander von zwei geschulten Bewertern mit einem Bewerterpaar an jedem Standort bewertet. Wie in unseren früheren Fall-Kontroll-Studien werden praktische Stichproben verwendet, bei denen Kliniker gebeten werden, Patienten in den Zielgruppen zu identifizieren.

Krankenhauspatienten werden gebeten, eine Reihe von Tests an ihrem Krankenbett durchzuführen. Diese Tests werden den Patienten nur einmal verabreicht. Die Patienten werden am selben Tag von zwei verschiedenen Forschern besucht, mit einer Pause von etwa 15-60 Minuten zwischen den Untersuchungsbesuchen, vorausgesetzt, dass die Zustimmung beim ersten Besuch erteilt wird. Der erste Besuch umfasst die Beurteilung der Urteilsfähigkeit und (bei denjenigen, von denen angenommen wird, dass sie einwilligungsfähig sind) die Einholung einer informierten Einwilligung sowie die Beurteilung des Deliriums (Referenztests) und der Kognition. Der zweite Besuch beinhaltet die DelApp-Bewertung (Index-Test). Daher werden der Indextest und die Referenztests von unabhängigen Ratgebern durchgeführt. Wenn der Patient nicht in der Lage ist, die Einwilligung für sich selbst zu erteilen, wird eine stellvertretende Einwilligung eingeholt, und wenn sie erteilt wird, finden die gleichen Besuche wie oben statt.

Die formalen Validierungsstudien der Phase C haben ein ähnliches Design wie die Fall-Kontroll-Studien. Der Hauptunterschied besteht darin, dass in GRI und RIE unselektierte Stichproben von Patienten aus allgemein- und akutmedizinischen Stationen (Studie C.1) und der Intensivstation (Studie C.2) rekrutiert werden.

Eine Untergruppe von Patienten in den Studien C.1 und C.2 (N=60 zusammen) wird zusammen mit dem Referenzstandard bis zu 4 Wiederholungsbewertungen (im Abstand von mindestens einem Tag) unterzogen, um die Leistung der DelApp bei der Nachverfolgung von Veränderungen zu untersuchen in der kognitiven Funktion.

In den Längsschnittbeurteilungen werden die Forscher Patienten, die zum Zeitpunkt der Rekrutierung einwilligungsfähig sind, fragen, ob sie in nachfolgende Beurteilungen einwilligen, selbst wenn der Patient zum Zeitpunkt dieser nachfolgenden Beurteilungen nicht urteilsfähig ist. Bei den anschließenden Beurteilungen wird jedoch sorgfältig geprüft, ob der Patient mit der Fortsetzung der Studienteilnahme einverstanden ist. Bei Patienten, die anfänglich nicht urteilsfähig sind und durch die Zustimmung eines gesetzlichen Vertreters aufgenommen wurden und die sich seriellen Bewertungen unterziehen, holen die Forscher zu Beginn jeder neuen Testsitzung die informierte Zustimmung der Patienten ein. Wenn der Patient nach der abschließenden Beurteilung wieder urteilsfähig wird, holen die Prüfärzte nach Möglichkeit die rückwirkende Zustimmung des Patienten ein.