Sammenligning av en helautomatisk programvare med standardmetoder for fartøyanalyse (PRAEVA-2-LP)

Studien PRAEVA-2-LP er realisert på universitetssykehuset i Leipzig. Behandlingen av aortaaneurismer er i dag basert på ulike indikatorer (diametre, lengder, vinkler, volum av arteriene) målt på CT-bilder. Flere indikatorer er tidkrevende og kompliserte å måle. De krever opplæring og øvelse. Nurea utvikler en programvare for automatisk måling av disse indikatorene, PRAEVAorta® 2, for å lette og hjelpe legen i hans kliniske rutine.

Hensikten med denne studien er å sammenligne analysen realisert av programvaren PRAEVAorta® 2 med analysen realisert av helsepersonell på retrospektive CT-bilder.

Kontrasterte og ikke-kontrasterte, pre- eller post-operative CT-skanninger fra 50 pasienter vil bli analysert.

Vi gjør følgende antakelse: 90 % av pasientene viser 90 % tilstrekkelighet til helsepersonellanalysen

Denne studien er komparativ, retrospektiv, ikke-intervensjonell og monosentrisk. Vi sammenligner SaMD-målingene med målinger utført ved bruk av standardmetoden av helsepersonell. Studien analyserer retrospektive pseudonymiserte CT-skanninger og leverer aggregerte data. Studien vil bli realisert på en gruppe på 50 forsøkspersoner, som er liten nok til å ha ett undersøkelsessted. Forsøkspersonene vil være deres eget vitne. Denne strategien lar oss minimere kostnadene og risikoen ved studien uten å kompromittere undersøkelsen. Denne undersøkelsen sendes til den lokale etiske komiteen for godkjenning i henhold til paragraf 15 i Professional Code of the Saxon State Medical Association (Berufsordnung - BO) av 24. juni 1998.

Studien realisert på den første versjonen av det medisinske utstyret PRAEVAorta® har vist en andel på 93 % av pasientene med mål beregnet av programvaren i samsvar med målene som er realisert etter standard analysemetode (forhold ≥ 90 %). Fordi den nye versjonen av programvaren PRAEVAorta®2 er forbedret, forventer vi å observere samme andel.

Pasientnummerberegning:

Hypotesene er følgende:

H0: Andelen pasienter med absolutt gjennomsnittlig avvik > 5 mm er 90 % H1: Andelen pasienter med absolutt gjennomsnittlig avvik ≤ 5 mm er strengt tatt over 90 % For denne statistiske analysen er variablene kvantitative: aortamålinger. Vi tar for oss her andelen pasienter per undergruppe som har mindre eller større enn 90 %.

Sammenligning av to proporsjoner: en teoretisk andel med en observert andel Den teoretiske andelen ϕ0 er 90 % Den observerte andelen ϕ er 93 % (den observerte andelen i studien av PRAEVAorta® 1) Derfor er antallet pasienter som trengs, med en α-risiko på 5 % og en β-risiko på 0,9 % er 32 i ensidig n=([1,96(φ0(1-φ0))^0,5 +u2β(φ(1-φ))^0,5]^2 )/([φ0-φ]^2)=32 Av sikkerhetsgrunner og for å forutse ethvert problem velger vi å inkludere omtrent 10 % flere fag. For å være sikker på at datamengden er tilstrekkelig for CE-merking legger vi til ytterligere 15 %. Derfor er det totale antallet pasienter 50.

De innsamlede dataene kommer fra en database bygget av sykehuset spesielt for retrospektiv undersøkelse. Pasientsamtykket er allerede innhentet ved opprettelsen av databasen som fritar oss fra å samle det inn igjen.

De innsamlede dataene er kjønn, fødselsdatoen til pasienten, skanningsprodusenten, den kontrastforsterkede CT-skanningen, datoen for realiseringen av CT-skanningen, indikatorene, helsepersonell stoler på resultatene av analysen realisert av programvaren .

Bildeanalyse Pseudonymiserte bilder i DICOM-format vil bli analysert. Pre- og post-operasjon CT-bilder i tynne skiver vil bli analysert.

Fremgangsmåte som skal følges:

1. Validering av inkluderings- og eksklusjonskriterier
2. Innsamling av demografiske data og skannerreferanser
3. CT-skanninger (i DICOM-format) samling
4. Først randomisering av fagenes rekkefølge
5. Fastsettelse av tiltakene av legen med standardmetoden
6. Andre randomisering av forsøkspersonenes rekkefølge
7. Programvareanalyse av bildene med PRAEVAorta® 2 og Physician trust opinion I trinn 7 vil leger måtte indikere om de, basert på rapporten generert av PRAEVAorta® 2, stoler på programvaretiltakene eller ikke, for å validere klinisk sikkerhet .

Sammenligningen av data vil bli gjort under den statistiske analysen.

Dataene vil bli samlet inn i en EDC / e-CRF. Programvaren tillater autentisering, kontoadministrasjon med flere nivåer av tilgang til de forskjellige delene og dataene. Utvekslinger er sikret og data lagres på en Health Data Host-akkreditert server. Det blir jevnlig tatt backup.

Utøveren fyller ut et skjema/rapport ved måling av indikatorene og programvaren PRAEVAorta® 2 returnerer en pdf-rapport. Dataene som samles inn i EDC vil bli sammenlignet med dataene i disse to rapportene og i sykehusstudiedatabasen.

Mesteparten av overvåking vil bli realisert på fjernkontroll. Et overvåkingsbesøk vil bli realisert midt i tiden. En datagjennomgang og validering vil bli realisert før databaselåsing. Data vil da bli validert av PI og dataansvarlig.

Dataledelse:

Data som samles inn er pseudonymisert for å sikre konfidensialitet og medisinsk hemmelighet og registrert i e-CRF.

Demografiske data samt skanninger er tilgjengelig i sykehusets database, satt opp spesifikt for retrospektive datastudier. Tiltak realisert på CT-skanningene registreres på elektronisk rapport, for begge målemetodene. Dataene fra disse rapportene og fra databasen rapporteres i e-CRF. Analyserte CT-skanninger lastes også opp i e-CRF.

Data kan ikke registreres i programvaren før emnets inkludering er validert.

Data som legges inn i programvaren må dobbeltsjekkes for å begrense feil.

Datavalidering:

Dette kravet oppnås gjennom kildedataverifisering, prosessen der informasjonen rapportert på e-CRF av etterforskeren sammenlignes med de originale medisinske journalene for å sikre at den er fullstendig og nøyaktig under overvåkingsbesøk og avsluttende besøk.

I tillegg er et system med dynamiske konsistenssjekker implementert i e-CRF for rask datavalidering når det er aktuelt.

Gjennom kildedatavalideringsprosessen skal monitoren bekrefte nøyaktig transkripsjon av data fra kildefiler til CRF og at CRF inneholder all relevant informasjon om pasientens deltakelse i den kliniske studien.

Overvåking av besøksprosessen

Prosess:

Det første overvåkingsbesøket vil bli gjennomført etter at trinn 4 i prosedyren er fullført, for å gjennomgå første del av data. Resten vil bli gjennomgått i nærbesøk.

Overvåkingssamtale og konferanse vil bli realisert på slutten av hvert trinn, og når det er nødvendig. Overvåkingsbesøket vil gjennomgå alle ansvarsområder som er oppført ovenfor. Etter hvert overvåkingsbesøk / samtale vil en overvåkingsrapport sendes til QI.

Følgende aktiviteter kan finne sted under hvert overvåkingsbesøk:

Følgende deltakerdata vil være kildedata verifisert for den angitte prosentandelen av deltakerne som er registrert i studien og alle forekomster rapportert siden siste overvåkingsbesøk:

100 % av kvalifikasjonskriteriene 100 % av deltakende CRF-er

Eventuelle oppdateringer og/eller revisjoner av følgende studiedokumenter siden siste overvåkingsbesøk vil også bli vurdert:

Opplæringsdokumentasjon/-poster og oppgavedelegeringsloggoppdateringer Forskriftsdokumentasjon inkludert Health Canada-godkjenning/endringer

Følgende aktiviteter kan utføres ved hvert overvåkingsbesøk:

Prøvehovedfil

• Sørg for at viktige dokumentfiler er komplette og oppdaterte.

Etterforsker og personellansvar på stedet

• Sørg for at oppgavedelegeringsloggen er fullstendig og signert.
• Kontroller at QI og personell på stedet følger protokollen og utfører studien i henhold til regulatoriske krav, prosedyrer og NF ISO 14155:2020.
• Bekreft at studieaktiviteter utføres av QI eller har blitt delegert til personell kvalifisert med passende utdanning og opplæring.
• Gi og dokumenter nødvendig opplæring for QI og personell på stedet, for eksempel opplæring i NF ISO 14155:2020, prosedyrer, protokoll, e-CRF...

CRF-gjennomgang / Verifikasjon av kildedokumentasjon. Bekreft følgende:

• Nøyaktig, fullstendig og aktuell kildedokumentasjon opprettholdes.
• Deltakernes kvalifikasjoner gjennomgått og signert av QI/Sub-Investigator.
• Alle prosedyrer skissert i protokollen ble fullført.
• Protokollavvik dokumentert og rapportert i henhold til protokollen.
• Alt frafall av påmeldte emner registreres i kildedokumentasjonen og på CRF.
• QI har gjennomgått, signert og datert alle nødvendige e-CRF-sider i tide
• Dataoppføringer på e-CRF-sidene sammenfaller med kildedokumentasjonen, og merker eventuelle feil, utelatelser eller avvik ved å sende forespørsler i e-CRF-systemet og revidere andre punkttegn.
• Gi nettstedets ansatte kopier av datakorrigeringsskjemaer.
• Bekreft at tidligere utestående dataforespørsler er løst, signert og datert av QI eller utpekt.

Device Deficiency (DD)

• Verifiser alle nylig rapporterte DD-er mot kildedokumentasjon.
• Følg opp tidligere rapporterte DD-er
• Bekreft at alle DD-er er rapportert til sponsoren
• Identifiser eventuelle urapporterte DD-er i kildedokumentasjonen.
• Gjennomgå DDs rapporteringsprosedyrer, etter behov.

Protokollavvik

• Kontroller at alle protokollavvik er dokumentert på riktig måte i hver deltakers forskningsjournal og på det aktuelle protokollavviksskjemaet.
• Sørg for at nettstedet har rapportert alle protokollavvik til den etiske komiteen, som definert av EUs retningslinjer og/eller prosedyrer
• Ta opp eventuelle protokollavvik med stedets personell under overvåkingsbesøket og identifiser måter å forhindre gjentakelse av lignende problemer.

Generell

• Bekreft at alle data kan verifiseres mot kildedokumentasjon.
• Bekreft at ingen transkripsjonsfeil er gjort.
• Sørg for at rettelser er utstilt, datert og initialisert (ingen slettinger eller "whiteouts").

Besøkskonklusjon

Ved avslutningen av besøket vil monitoren møte QI- og stedsforskningspersonalet for å gjennomgå besøksfunn og svare på spørsmål. Monitoren vil som et minimum diskutere følgende emner:

• Påmeldingsfremgang.
• Studiegjennomføring og dokumentasjon av studievirksomhet.
• Avvik.
• Planlegging av neste overvåkingsbesøk når det er aktuelt

Statistikk:

Aggregerte data analysert som behandlet og per undergruppe. Deskriptiv analyse

• Pearsons koeffisientkorrelasjon
• Absolutt gjennomsnittlig avvik per mål
• Globalt gjennomsnitt og standardavvik per måleendepunkt
• Forhold for et mål
• Maksimal aortadiameterforhold
• Beregningsanalysetid Varigheten av den halvautomatiske segmenteringen manuelt korrigert av de 2 kirurgene ble rapportert og sammenlignet med den helautomatiske metoden.
• Detekterbar og ikke-detekterbar feilrate for sikkerhetsevaluering
• Beregning av falsk positiv, falsk negativ, sensibilitet, spesifisitet, positive prediktive verdier, negative prediktive verdier og likelihood ratio (LR+ og LR-).

Inferensiell analyse Mål: å sammenligne en observert andel p1 med en teoretisk andel p0 p1: andel tilstrekkelige data p0: teoretisk andel: 90 %

En ensidig høyretest vil bli realisert for å evaluere sammenligningen

Evalueringskriterier:

Hovedkriterier:

• 90 % av pasientene har 90 % av tilstrekkeligheten.

Sekundære kriterier:

Evaluering av målingene og segmenteringene:

• Gjennomsnittlig avvik skal være ≤ 5 mm
• Pearson-korrelasjonen skal være ≥ 90 %

Vurdering av risiko:

• Uventede risikoer bør ikke være kritiske. Evaluering av sikkerheten
• Den detekterbare feilraten skal være ≥ 95 %
• Den ikke-detekterbare feilraten skal være ≤ 5 % Evaluering av PRAEVAorta® Web
• Ingen kritisk feil Ingen kritiske uventede risikoer