Cette page a été traduite automatiquement et l'exactitude de la traduction n'est pas garantie. Veuillez vous référer au version anglaise pour un texte source.

Large Language Model-Assisted cTNM Annotation From Chinese PSMA PET/CT Reports (PSMA-LLM-cTNM)

20 juillet 2026 mis à jour par: Qi Lin, MD, First Affiliated Hospital of Wenzhou Medical University

Large Language Model-Assisted Imaging cTNM Staging Annotation and Uncertainty Recognition for Prostate Cancer Based on Chinese PSMA PET/CT Reports

This observational study will develop and validate a large language model-assisted workflow for imaging cTNM staging annotation and uncertainty recognition in prostate cancer using Chinese PSMA PET/CT report texts generated during routine clinical care. The study will use de-identified report texts and necessary baseline clinical information only. No additional imaging examination, blood test, treatment, or follow-up visit will be assigned for this study.

The main objective is to evaluate whether a locally or institutionally controlled large language model can identify report-derived imaging cT, cN, and cM categories, extract supporting evidence from the original report, and recognize uncertainty expressions. Model performance will be assessed using an internal independent validation set, external validation reports from two collaborating hospitals, and a prospective validation set of 100 consecutive routine PSMA PET/CT reports. A human-AI comparison will also be performed using physicians from urology and imaging-related specialties with different seniority levels.

Aperçu de l'étude

Statut

Statut

Indique le statut de recrutement actuel ou le statut d'accès étendu.
Recrutement

Les conditions

Les conditions

La maladie, le trouble, le syndrome, la maladie ou la blessure à l'étude. Sur ClinicalTrials.gov, les conditions peuvent également inclure d'autres problèmes liés à la santé, tels que la durée de vie, la qualité de vie et les risques pour la santé.

Intervention / Traitement

Intervention / Traitement

Processus ou action faisant l'objet d'une étude clinique. Les interventions comprennent les médicaments, les dispositifs médicaux, les procédures, les vaccins et d'autres produits expérimentaux ou déjà disponibles. Les interventions peuvent également inclure des approches non invasives, telles que l'éducation ou la modification du régime alimentaire et de l'exercice.

Description détaillée

This is a multicenter observational diagnostic accuracy validation study based on Chinese PSMA PET/CT report texts from patients with prostate cancer or suspected prostate cancer. The study is not designed to evaluate a drug, device, surgical procedure, or imaging intervention. PSMA PET/CT examinations will be performed as part of routine clinical care, and the study will only analyze de-identified report texts and necessary baseline information after the reports have been finalized.

The study consists of retrospective and prospective components. Retrospectively, approximately 4,000 PSMA PET/CT reports from the First Affiliated Hospital of Wenzhou Medical University will be systematically annotated to construct a research database. An internal independent validation set of 300 reports, not used for model development or prompt optimization, will be used to evaluate the performance of the large language model. The reference standard for this 300-report validation set will be established by two experienced urologists through joint annotation, with adjudication by a nuclear medicine expert when needed. External validation will be performed using 110 de-identified reports from the First Affiliated Hospital of Ningbo University and 102 de-identified reports from Liuzhou People's Hospital. In addition, after ethics approval, 100 consecutive routine PSMA PET/CT reports from the First Affiliated Hospital of Wenzhou Medical University will be prospectively included to evaluate the accuracy and operational stability of the frozen model and prompt versions.

The large language model workflow will be deployed locally or in an institutionally controlled environment. The model will be instructed to generate structured JSON outputs, including cT_report, cN_report, cM_report, cT_uncertain, cN_uncertain, cM_uncertain, evidence_T, evidence_N, and evidence_M. The target task is report-derived imaging cTNM staging annotation, not pathological TNM staging or overall AJCC stage grouping. The model output will be used only for research evaluation and methodological analysis and will not be used for clinical diagnosis, treatment decision-making, or patient notification.

A human-AI comparison will be conducted on the 300-report internal validation set. Eight human evaluators from urology and imaging-related specialties, including trainees, residents, attending physicians, and associate chief physicians, will independently annotate the reports before and after learning the annotation manual. Annotation time will be recorded for each round. The performance of human evaluators and the large language model will be compared against the expert consensus reference standard.

The main outcome will be the accuracy of the large language model in identifying cT, cN, and cM categories from Chinese PSMA PET/CT reports. Secondary outcomes will include precision, recall, F1-score, macro-F1, micro-F1, complete cTNM triplet matching rate, uncertainty recognition performance, evidence extraction quality, human-AI comparison results, annotation time, external validation performance, prospective validation performance, and error type distribution. Error analysis will focus on local tumor extent, regional versus non-regional lymph node boundaries, bone and visceral metastasis recognition, equivocal wording, treatment-related context, benign or inflammatory alternatives, and lesions not attributable to prostate cancer.

Type d'étude

Type d'étude

Décrit la nature d'une étude clinique. Les types d'études comprennent les études interventionnelles (également appelées essais cliniques), les études observationnelles (y compris les registres de patients) et l'accès élargi.
Observationnel

Inscription (Estimé)

Inscription

Le nombre de participants à une étude clinique. L'inscription "prévue" est le nombre cible de participants dont les chercheurs ont besoin pour l'étude.
4600

Contacts et emplacements

Cette section fournit les coordonnées de ceux qui mènent l'étude et des informations sur le lieu où cette étude est menée.

Coordonnées de l'étude

Coordonnées de l'étude

Le nom et les coordonnées de la personne qui peut répondre aux questions d'inscription à une étude clinique. Chaque lieu où l'étude est menée peut également avoir un contact spécifique, qui peut être mieux à même de répondre à ces questions.

Sauvegarde des contacts de l'étude

Lieux d'étude

  • Chine
    • Zhejiang
      • Wenzhou, Zhejiang, Chine
        • Recrutement
        • The First Affiliated Hospital of Wenzhou Medical University
        • Contact:
        • Contact:

Critères de participation

Les chercheurs recherchent des personnes qui correspondent à une certaine description, appelée critères d'éligibilité. Certains exemples de ces critères sont l'état de santé général d'une personne ou des traitements antérieurs.

Critère d'éligibilité

Critère d'éligibilité

Les principales exigences que doivent remplir les personnes qui souhaitent participer à une étude clinique ou les caractéristiques qu'elles doivent avoir. Les critères d'éligibilité comprennent à la fois des critères d'inclusion (qui sont requis pour qu'une personne participe à l'étude) et des critères d'exclusion (qui empêchent une personne de participer). Les types de critères d'éligibilité incluent si une étude accepte des volontaires sains, a des exigences d'âge ou de groupe d'âge, ou est limitée par le sexe.

Âges éligibles pour étudier

  • Adulte
  • Adulte plus âgé

Accepte les volontaires sains

Non

Méthode d'échantillonnage

Échantillon non probabiliste

Population étudiée

The study population consists of male patients aged 18 years or older with clinically diagnosed, pathologically diagnosed, or clinically suspected prostate cancer who underwent PSMA PET/CT as part of routine clinical care. The study will include de-identified Chinese PSMA PET/CT report texts from the First Affiliated Hospital of Wenzhou Medical University, the First Affiliated Hospital of Ningbo University, and Liuzhou People's Hospital, as well as a prospective set of 100 consecutive routine PSMA PET/CT reports from the First Affiliated Hospital of Wenzhou Medical University.

La description

Inclusion Criteria:

  1. Male patients aged 18 years or older.
  2. Patients with clinically diagnosed, pathologically diagnosed, or clinically suspected prostate cancer.
  3. Patients who underwent PSMA PET/CT for initial staging, recurrence assessment, treatment response evaluation, metastatic assessment, or other clinical purposes during routine care.
  4. Complete or basically complete Chinese PSMA PET/CT report text is available, including imaging findings and/or diagnostic impression.
  5. The report text contains information that can be used to evaluate at least one target field, such as local prostate lesion, regional lymph nodes, non-regional lymph nodes, bone metastasis, visceral metastasis, or uncertainty expressions.
  6. The research data can be de-identified and replaced by a study identification number before analysis.

Exclusion Criteria:

  1. PSMA PET/CT reports unrelated to prostate cancer, or reports clearly irrelevant to the research task.
  2. Reports with severely missing, unreadable, or unavailable main text, imaging findings, or diagnostic impression.
  3. Reports that cannot be adequately de-identified or contain residual direct personal identifiers that cannot be safely removed.
  4. Duplicate records, repeated exports of the same examination, or records for which the unique report version cannot be confirmed.
  5. Reports judged by the research team to be of insufficient quality for manual annotation, model evaluation, or statistical analysis.

Plan d'étude

Cette section fournit des détails sur le plan d'étude, y compris la façon dont l'étude est conçue et ce que l'étude mesure.

Comment l'étude est-elle conçue ?

Détails de conception

Cohortes et interventions

Groupe / Cohorte

Groupe / Cohorte

Groupe ou sous-groupe de participants à une étude observationnelle dont les résultats biomédicaux ou sanitaires sont évalués.
Intervention / Traitement

Intervention / Traitement

Processus ou action faisant l'objet d'une étude clinique. Les interventions comprennent les médicaments, les dispositifs médicaux, les procédures, les vaccins et d'autres produits expérimentaux ou déjà disponibles. Les interventions peuvent également inclure des approches non invasives, telles que l'éducation ou la modification du régime alimentaire et de l'exercice.
PSMA PET/CT Report Text Validation Cohort
Patients with prostate cancer or suspected prostate cancer who underwent PSMA PET/CT as part of routine clinical care. De-identified Chinese PSMA PET/CT report texts and necessary baseline information will be used for manual annotation, large language model-assisted imaging cTNM staging annotation, uncertainty recognition, internal validation, external validation, prospective validation, and human-AI comparison. No additional examination, treatment, or follow-up will be assigned for this study.
Autre: Large Language Model-Assisted Report Annotation
A locally or institutionally controlled large language model workflow will analyze de-identified Chinese PSMA PET/CT report texts and generate structured outputs for report-derived imaging cTNM staging annotation, uncertainty recognition, and supporting evidence extraction. This workflow is used only for research evaluation and methodological analysis. It will not assign any examination, treatment, medication, procedure, or follow-up to participants, and it will not guide clinical diagnosis or treatment decisions.

Que mesure l'étude ?

Principaux critères de jugement

Principaux critères de jugement

Dans le protocole d'une étude clinique, la mesure de résultat prévue qui est la plus importante pour évaluer l'effet d'une intervention/d'un traitement. La plupart des études cliniques ont un critère de jugement principal, mais certaines en ont plus d'un.
Mesure des résultats
Description de la mesure
Délai
Accuracy of LLM-Assisted Imaging cTNM Staging Annotation
Délai: After freezing the model and prompt versions, through completion of internal, external, and prospective validation, up to 18 months
The primary outcome is the accuracy of the large language model in identifying report-derived imaging cT, cN, and cM categories from de-identified Chinese PSMA PET/CT report texts. The LLM-generated cT_report, cN_report, and cM_report will be compared with the expert consensus reference standard. Accuracy, precision, recall, F1-score, macro-F1, micro-F1, complete cTNM triplet matching rate, and confusion matrices will be calculated in the internal 300-report validation set, external validation sets, and prospective 100-report validation set.
After freezing the model and prompt versions, through completion of internal, external, and prospective validation, up to 18 months

Mesures de résultats secondaires

Mesures de résultats secondaires

Dans le protocole d'une étude clinique, mesure de résultat planifiée qui n'est pas aussi importante que la mesure de résultat principale pour évaluer l'effet d'une intervention, mais qui reste intéressante. La plupart des études cliniques ont plus d'un critère de jugement secondaire.
Mesure des résultats
Description de la mesure
Délai
Component-Level Accuracy of LLM-Based Uncertainty Recognition
Délai: After freezing the model and prompt versions, through completion of all validation analyses, up to 18 months.

This outcome measures the component-level accuracy of the large language model in recognizing uncertainty labels for report-derived imaging cTNM staging. The LLM-generated cT_uncertain, cN_uncertain, and cM_uncertain labels will be compared with the expert consensus reference standard. Accuracy will be calculated as the number of correctly classified uncertainty labels divided by the total number of component-level uncertainty labels across all reports. The three uncertainty components will be aggregated into one percentage value.

中文对应
After freezing the model and prompt versions, through completion of all validation analyses, up to 18 months.
Complete cTNM Triplet Matching Rate for Human Evaluators and the LLM
Délai: During pre-training and post-training human annotation rounds and LLM batch inference, up to 18 months.
This outcome measures the proportion of reports for which the complete report-derived imaging cTNM triplet assigned by human evaluators and by the large language model exactly matches the expert consensus reference standard. A report will be counted as correct only when all three components, cT_report, cN_report, and cM_report, are correct. The result will be reported as the percentage of reports with complete cTNM triplet agreement. Results will be summarized separately for pre-training human annotation, post-training human annotation, and LLM batch inference.
During pre-training and post-training human annotation rounds and LLM batch inference, up to 18 months.
Annotation Time per Report for Human Evaluators and the LLM
Délai: During pre-training and post-training human annotation rounds and LLM batch inference, up to 18 months.
This outcome measures the mean time required to complete report-derived imaging cTNM annotation per report. For human evaluators, annotation time will be recorded during the annotation rounds and divided by the number of annotated reports. For the LLM workflow, batch inference time will be divided by the number of processed reports. Results will be reported separately for pre-training human annotation, post-training human annotation, and LLM batch inference.
During pre-training and post-training human annotation rounds and LLM batch inference, up to 18 months.

Collaborateurs et enquêteurs

C'est ici que vous trouverez les personnes et les organisations impliquées dans cette étude.

Parrainer

Parrainer

L'organisation ou la personne qui lance l'étude et qui a autorité et contrôle sur l'étude.
First Affiliated Hospital of Wenzhou Medical University

Dates d'enregistrement des études

Ces dates suivent la progression des dossiers d'étude et des soumissions de résultats sommaires à ClinicalTrials.gov. Les dossiers d'étude et les résultats rapportés sont examinés par la Bibliothèque nationale de médecine (NLM) pour s'assurer qu'ils répondent à des normes de contrôle de qualité spécifiques avant d'être publiés sur le site Web public.

Dates principales de l'étude

Début de l'étude (Réel)

Début de l'étude

La date réelle à laquelle le premier participant a été inscrit à une étude clinique. La date de début "prévue" de l'étude est la date qui, selon les chercheurs, sera la date de début de l'étude.
17 juin 2026

Achèvement primaire (Estimé)

Achèvement primaire

La date à laquelle le dernier participant à une étude clinique a été examiné ou a reçu une intervention pour recueillir les données finales pour le critère de jugement principal. Que l'étude clinique se soit terminée conformément au protocole ou qu'elle ait été terminée n'affecte pas cette date. Pour les études cliniques avec plus d'un critère de jugement principal avec des dates d'achèvement différentes, ce terme fait référence à la date à laquelle la collecte de données est terminée pour tous les critères de jugement principaux. La date d'achèvement primaire "prévue" est la date qui, selon les chercheurs, sera la date d'achèvement primaire de l'étude.
30 juin 2027

Achèvement de l'étude (Estimé)

Achèvement de l'étude

La date à laquelle le dernier participant à une étude clinique a été examiné ou a reçu une intervention/un traitement pour recueillir les données finales pour les mesures de résultats primaires, les mesures de résultats secondaires et les événements indésirables (c'est-à-dire la dernière visite du dernier participant). La date d'achèvement de l'étude "prévue" est la date qui, selon les chercheurs, sera la date d'achèvement de l'étude.
31 décembre 2027

Dates d'inscription aux études

Première soumission

Première soumission

La date à laquelle le promoteur de l'étude ou l'investigateur a soumis pour la première fois un dossier d'étude à ClinicalTrials.gov. Il y a généralement un délai de quelques jours entre la première date de soumission et la disponibilité du dossier sur ClinicalTrials.gov (la première date publiée).
30 juin 2026

Première soumission répondant aux critères de contrôle qualité

Première soumission répondant aux critères de contrôle qualité

La date à laquelle le promoteur de l'étude ou l'investigateur soumet pour la première fois un dossier d'étude conforme aux critères d'examen du contrôle qualité (CQ) de la National Library of Medicine (NLM). Le promoteur ou l'investigateur peut avoir besoin de réviser et de soumettre un dossier d'étude une ou plusieurs fois avant que les critères d'examen du CQ du NLM soient remplis. Il incombe au promoteur ou à l'investigateur de s'assurer que le dossier de l'étude est conforme aux critères d'examen du NLM QC.
15 juillet 2026

Première publication (Réel)

Première publication

La date à laquelle le dossier d'étude a été disponible pour la première fois sur ClinicalTrials.gov après la fin de l'examen du contrôle qualité (CQ) de la National Library of Medicine (NLM). Il y a généralement un délai de quelques jours entre la date à laquelle le promoteur de l'étude ou l'investigateur a soumis le dossier de l'étude et la première date de publication.
16 juillet 2026

Mises à jour des dossiers d'étude

Dernière mise à jour publiée (Réel)

Dernière mise à jour publiée

La date la plus récente à laquelle les modifications apportées à un dossier d'étude ont été mises à disposition sur ClinicalTrials.gov. Il peut y avoir un délai entre le moment où les modifications ont été soumises à ClinicalTrials.gov par le promoteur ou l'investigateur de l'étude (la date de soumission de la dernière mise à jour) et la date de publication de la dernière mise à jour.
21 juillet 2026

Dernière mise à jour soumise répondant aux critères de contrôle qualité

Dernière mise à jour soumise répondant aux critères de contrôle qualité

La date la plus récente à laquelle le promoteur de l'étude ou l'investigateur a soumis des modifications à un dossier d'étude qui sont conformes aux critères d'examen du contrôle qualité (CQ) de la National Library of Medicine (NLM). Il incombe au promoteur ou à l'investigateur de s'assurer que le dossier de l'étude est conforme aux critères d'examen du NLM QC.
20 juillet 2026

Dernière vérification

Dernière vérification

La date la plus récente à laquelle le promoteur de l'étude ou l'investigateur a confirmé que les informations sur une étude clinique sur ClinicalTrials.gov étaient exactes et à jour. Si une étude avec un statut de recrutement de recrutement ; pas encore de recrutement ; ou actif, aucun recrutement n'a été confirmé au cours des 2 dernières années, le statut de recrutement de l'étude est indiqué comme inconnu.
1 juillet 2026

Plus d'information

Termes liés à cette étude

Mots clés

Termes MeSH pertinents supplémentaires

Autres numéros d'identification d'étude

Autres numéros d'identification d'étude

Identifiants ou numéros d'identification autres que le numéro NCT qui sont attribués à une étude clinique par le sponsor de l'étude, les bailleurs de fonds ou autres. Ces numéros peuvent inclure des identifiants uniques d'autres registres d'essais et des numéros de subvention des National Institutes of Health.
  • KY2026-278

Plan pour les données individuelles des participants (IPD)

Prévoyez-vous de partager les données individuelles des participants (DPI) ?

NON

Description du régime IPD

Individual participant-level data will not be shared. The study data consist of de-identified Chinese PSMA PET/CT report texts and necessary baseline clinical information generated during routine clinical care. Although direct identifiers will be removed, the free-text report data may still carry a potential risk of re-identification. Therefore, individual-level raw data will not be made publicly available. Study findings will be reported in aggregate form. De-identified summary data or analysis methods may be made available upon reasonable request and with approval from the ethics committee and the institutional data governance authority, when applicable.

Informations sur les médicaments et les dispositifs, documents d'étude

Étudie un produit pharmaceutique réglementé par la FDA américaine

Non

Étudie un produit d'appareil réglementé par la FDA américaine

Non

Ces informations ont été extraites directement du site Web clinicaltrials.gov sans aucune modification. Si vous avez des demandes de modification, de suppression ou de mise à jour des détails de votre étude, veuillez contacter register@clinicaltrials.gov. Dès qu'un changement est mis en œuvre sur clinicaltrials.gov, il sera également mis à jour automatiquement sur notre site Web .

Paramètres des cookies

Nous utilisons des cookies pour nous assurer de vous offrir la meilleure expérience sur notre site Web. Pour plus de détails, lisez attentivement notre Politique de confidentialité et de cookies. ...>>>Vous pouvez modifier vos préférences ou retirer votre consentement à tout moment en supprimant les cookies de votre site Web ou de votre ordinateur comme décrit dans la politique. Veuillez l'accepter et choisir vos préférences en cochant les cases correspondantes dans la section "Gérer les paramètres" ci-dessous. Veuillez lire attentivement nos Conditions d'utilisation avant de continuer à utiliser une partie de ce site Web.
«Gérer les paramètres