Веб-инструмент для улучшения оценки отчетности (COBPeer)
Оценка онлайн-инструмента (COBPeer), предназначенного для младших рецензентов для оценки отчетности по рандомизированным контролируемым испытаниям
Процесс рецензирования является краеугольным камнем публикации биомедицинских исследований. Несмотря на то, что это важно, оценка полноты отчетности и идентификация переключенных результатов не выполняются должным образом. Кроме того, эти задачи не предполагают высокого уровня знаний и могут выполняться младшими исследователями.
Чтобы оценить полноту отчетности и выявленные измененные результаты, младшие рецензенты могут использовать простой онлайн-инструмент (COBPeer), основанный на контрольном списке CONSORT (Консолидированные стандарты отчетности испытаний) 2010 г. и публикации Elaboration and Explanation для отчетности по РКИ в параллельных группах. . Инструмент будет содержать маркеры, раскрывающие значение каждого элемента контрольного списка. Цель этого исследования заключается в том, чтобы сравнить точность младших рецензентов, использующих этот инструмент, с точностью обычных рецензентов при оценке полноты отчетов и переключении основных результатов в отчетах о РКИ.
Обзор исследования
Подробное описание
ПРЕДПОСЫЛКИ: Контекст Неадекватная отчетность является частой причиной напрасной траты исследований. Чтобы решить эту проблему, в 1996 году было разработано заявление CONSORT, основанный на фактических данных минимальный набор рекомендаций для отчетности по РКИ. С тех пор эти рекомендации были обновлены в 2001 году и совсем недавно в 2010 году. Многие журналы поддерживают заявление CONSORT. Некоторые журналы рекомендуют авторам следовать рекомендациям CONSORT, а некоторые редакторы обеспечивают соблюдение рекомендаций CONSORT, требуя от авторов предоставить контрольный список либо на этапе подачи, либо на этапе принятия. Тем не менее, неадекватная отчетность остается.
ГИПОТЕЗА: Чтобы оценить полноту отчетности, младшие рецензенты могут использовать простой онлайн-инструмент, основанный на контрольном списке CONSORT 2010 и публикации Elaboration and Explanation для отчетности по RCT в параллельных группах.
ЗАДАЧА: 1) Разработать онлайн-инструмент и учебный модуль, предназначенный для младших рецензентов для а) оценки полноты отчетности по ключевым элементам и б) определения переключения первичных результатов в отчетах о РКИ. 2) Сравните работу младших рецензентов, использующих этот инструмент, с обычным процессом рецензирования при выявлении неадекватных отчетов и переключении основных результатов в отчетах о РКИ.
ДИЗАЙН ИССЛЕДОВАНИЯ: рандомизированное контролируемое исследование в соотношении 1:1 с двумя параллельными группами. Участники будут приглашены к участию по приглашению.
ПРИЕМЛЕМОСТЬ: правомочными участниками являются младшие рецензенты. Младшие рецензенты определяются как исследователи на ранней стадии: магистранты, аспиранты, резиденты, участвующие в клинических исследованиях во время учебы, и клиницисты, которые никогда не рецензировали рукопись.
ВМЕШАТЕЛЬСТВО: инструмент экспертной оценки будет основан на 10 пунктах заявления CONSORT. Этот инструмент напоминает рецензенту об элементе CONSORT, о котором необходимо сообщить, объяснив его серией вопросов. Учебный модуль объяснит каждый элемент, подлежащий оценке, с примерами, за которыми следует серия упражнений из опубликованных отрывков из рандомизированных испытаний.
MANUSSCRIPT SELECTION: выборка рандомизированных контролируемых испытаний, опубликованных в Annals of Emergency Medicine, British Medical Journal, British Medical Journal Open и BioMed Central medical series.
ОЦЕНКА МЛАДШИМИ ЭКСПЕРТАМИ: младший рецензент, принявший участие и успешно прошедший обучение, должен будет оценить 1 статью из выбранной рандомизированной выборки.
ОЦЕНКА ОБЫЧНЫХ РЕЗУЛЬТАТОВ: оценка обычными рецензентами будет получена путем анализа комментариев рецензентов, которые доступны в Интернете или получены от издателя.
ЗОЛОТОЙ СТАНДАРТ: коллеги-исследователи, являющиеся экспертами в проведении систематических обзоров, будут оценивать каждую статью независимо от других оценок. Разногласия будут разрешаться путем консенсуса.
ОСНОВНОЙ РЕЗУЛЬТАТ: среднее количество элементов, точно классифицированных в рукописи.
ВТОРИЧНЫЕ РЕЗУЛЬТАТЫ: среднее количество элементов, точно классифицированных в рукописи для 10 элементов CONSORT; чувствительность, специфичность и отношение правдоподобия для обнаружения пункта как адекватно сообщенного и для определения переключения в первичном(ых) результате(ах).
ОБЪЕМ ВЫБОРКИ: 120 рукописей и 120 молодых рецензентов.
Тип исследования
Регистрация (Действительный)
Фаза
- Непригодный
Контакты и местонахождение
Места учебы
-
-
-
Paris, Франция, 75004
- Hotel Dieu, 1, place du parvis de notre dame
-
-
Критерии участия
Критерии приемлемости
Возраст, подходящий для обучения
Принимает здоровых добровольцев
Полы, имеющие право на обучение
Описание
Критерии включения:
- магистранты,
- аспиранты,
- резиденты, участвующие в клинических исследованиях во время учебы,
- клиницисты, которые никогда не рецензировали рукопись
Критерий исключения:
- никто
Учебный план
Как устроено исследование?
Детали дизайна
- Основная цель: ДРУГОЙ
- Распределение: НЕСЛУЧАЙНО
- Интервенционная модель: ПАРАЛЛЕЛЬ
- Маскировка: ОДИНОКИЙ
Оружие и интервенции
Группа участников / Армия |
Вмешательство/лечение |
|---|---|
|
NO_INTERVENTION: ОБЫЧНЫЙ ЭКСПЕРТНЫЙ РЕЦЕНТ
Два исследователя прочитают все отчеты о рецензировании и комментарии редакторов для первого раунда.
Исследователи определят, выражали ли рецензенты и/или редакторы некоторую обеспокоенность по поводу полноты отчетности по 10 рассмотренным пунктам CONSORT и определили ли переключение между первичными результатами между рукописью и регистром.
Оценка всех отчетов о рецензировании и комментариев редакторов для каждой рукописи будет объединена (т. е. элемент будет оценен как не полностью опубликованный, если хотя бы один рецензент оценил его как таковой).
2 исследователя будут слепы к оценке золотого стандарта.
|
|
|
ЭКСПЕРИМЕНТАЛЬНАЯ: COBPeer
Младшие рецензенты будут приглашены для участия в онлайн-курсе по рецензированию (COBPeer).
|
В конце онлайн-обучения они могут принять участие в исследовании и, таким образом, рецензировать 1 рукопись, случайно выбранную из нашей выборки, с помощью нашего инструмента (COBPeer).
|
|
NO_INTERVENTION: ЗОЛОТОЙ СТАНДАРТ
Пары систематических рецензентов будут независимо извлекать данные из подходящих отчетов.
Рецензенты, участвующие в извлечении данных, должны иметь опыт проведения систематических обзоров и оценивать полноту отчетов с точки зрения систематического рецензента.
У них не будет доступа к инструменту, чтобы избежать влияния инструмента.
Систематические рецензенты также систематически сравнивают первичные исходы, указанные в рукописи, и первичные исходы, указанные в реестре, и документируют любые расхождения.
|
Что измеряет исследование?
Первичные показатели результатов
Мера результата |
Мера Описание |
Временное ограничение |
|---|---|---|
|
среднее количество элементов, точно классифицированных в рукописи
Временное ограничение: через завершение обучения, в среднем 6 месяцев
|
Каждый элемент будет классифицироваться как «адекватно сообщенный» (да/нет)
|
через завершение обучения, в среднем 6 месяцев
|
Вторичные показатели результатов
Мера результата |
Мера Описание |
Временное ограничение |
|---|---|---|
|
среднее количество элементов, точно классифицированных в рукописи для 10 элементов CONSORT
Временное ограничение: через завершение обучения, в среднем 6 месяцев
|
Каждый элемент будет классифицироваться как «адекватно сообщенный» (да/нет)
|
через завершение обучения, в среднем 6 месяцев
|
|
чувствительность, специфичность и отношение правдоподобия для обнаружения пункта как адекватно сообщенного и для определения переключения в первичном(ых) результате(ах).
Временное ограничение: через завершение обучения, в среднем 6 месяцев
|
тест на парную пропорцию
|
через завершение обучения, в среднем 6 месяцев
|
Соавторы и исследователи
Публикации и полезные ссылки
Общие публикации
- Chauvin A, Ravaud P, Moher D, Schriger D, Hopewell S, Shanahan D, Alam S, Baron G, Regnaux JP, Crequit P, Martinez V, Riveros C, Le Cleach L, Recchioni A, Altman DG, Boutron I. Accuracy in detecting inadequate research reporting by early career peer reviewers using an online CONSORT-based peer-review tool (COBPeer) versus the usual peer-review process: a cross-sectional diagnostic study. BMC Med. 2019 Nov 19;17(1):205. doi: 10.1186/s12916-019-1436-0.
- Chauvin A, Moher D, Altman D, Schriger DL, Alam S, Hopewell S, Shanahan DR, Recchioni A, Ravaud P, Boutron I. A protocol of a cross-sectional study evaluating an online tool for early career peer reviewers assessing reports of randomised controlled trials. BMJ Open. 2017 Sep 15;7(9):e017462. doi: 10.1136/bmjopen-2017-017462.
Даты записи исследования
Изучение основных дат
Начало исследования (ДЕЙСТВИТЕЛЬНЫЙ)
Первичное завершение (ДЕЙСТВИТЕЛЬНЫЙ)
Завершение исследования (ДЕЙСТВИТЕЛЬНЫЙ)
Даты регистрации исследования
Первый отправленный
Впервые представлено, что соответствует критериям контроля качества
Первый опубликованный (ДЕЙСТВИТЕЛЬНЫЙ)
Обновления учебных записей
Последнее опубликованное обновление (ДЕЙСТВИТЕЛЬНЫЙ)
Последнее отправленное обновление, отвечающее критериям контроля качества
Последняя проверка
Дополнительная информация
Термины, связанные с этим исследованием
Другие идентификационные номера исследования
- AC001
Планирование данных отдельных участников (IPD)
Планируете делиться данными об отдельных участниках (IPD)?
Информация о лекарствах и устройствах, исследовательские документы
Изучает лекарственный продукт, регулируемый FDA США.
Изучает продукт устройства, регулируемый Управлением по санитарному надзору за качеством пищевых продуктов и медикаментов США.
Эта информация была получена непосредственно с веб-сайта clinicaltrials.gov без каких-либо изменений. Если у вас есть запросы на изменение, удаление или обновление сведений об исследовании, обращайтесь по адресу register@clinicaltrials.gov. Как только изменение будет реализовано на clinicaltrials.gov, оно будет автоматически обновлено и на нашем веб-сайте. .