Усилия по прослушиванию у пользователей кохлеарных имплантатов

Общие методы:

Тестирование распознавания речи. Основная экспериментальная задача — прослушивание речи в свободном пространстве в звукоизолированной кабине. Традиционное распознавание речи состоит из прослушивания и повторения предложений, и эти исследования будут варьироваться по этой общей теме с модификациями, отвечающими конкретным целям проекта. Например, некоторые стимулы повторяются дважды перед вербальной реакцией, а некоторые представляют собой вопросы и ответы, а не повествовательные предложения. Мы разработали стимулы специально для каждого эксперимента, всегда избегая эмоционально вызывающих стимулов, поскольку они могут оказать сильное влияние на расширение зрачков.

Разборчивость: мы будем отслеживать процент правильных оценок для целых предложений и слов в каждом предложении. Мы также отслеживаем положение ошибок во время предложения (например. первое слово, последнее слово), и может ли ответ участника быть осмысленным высказыванием, или ему не хватает какого-либо связного смысла, поскольку этот фактор оказывает такое большое влияние на усилие слушания.

Мы проверим восприятие слушателями с нормальным слухом (NH или TH типичного слуха) как обычной речи, так и вокодированной речи, что позволит нам отдельно изучить влияние ухудшения сигнала отдельно от хронического опыта проблем со слухом.

Пупиллометрия: во время тестов на распознавание речи изменения размера зрачков участников будут отслеживаться с помощью айтрекера Eyelink, расположенного на расстоянии 50 см от глаз. Фазическое расширение зрачков связано с ориентирами времени эксперимента, интерпретируемыми как изменения в усилиях по прослушиванию, на основании многочисленных опубликованных исследований. Неслуховые задачи: мы будем использовать индекс нагрузки НАСА (TLX), чтобы оценить субъективный опыт участника по пяти измерениям усилий во время прослушивания. задания. Мы проведем тест скорости обработки сравнения шаблонов NIH Toolbox. Мы изучим способность участников подавлять ненужную информацию, используя модифицированный фланкер, разработанный Се и др. (2017), в котором сравниваются подавление помех, подавление правил и подавление реакции, используя тщательно структурированные последовательности фланкера, где правила ответов меняются в стратегические моменты во время тестирования. Мы также реализуем задачу локального и глобального переключения внимания, используя подход, описанный Перистери и др. (2020).

Эксперимент 1А: Мы проверим способность прилагать дополнительные усилия в исследовании, в котором слушатель заранее знает, будет ли предстоящий стимул легче или труднее понять. Каждое испытание начинается с сообщения «легко» или «сложно», отображаемого в виде текста на экране. После четырехсекундной задержки, позволяющей ученикам вернуться к исходному состоянию, предложение воспроизводится. Расширение зрачков отслеживается на протяжении всего испытания, при этом исследуются важные различия между текстовым сигналом и началом речи, отражающие мгновенную подготовку слушателя к дополнительным усилиям. Важно отметить, что легкие и трудные испытания случайным образом смешиваются, а не блокируются, так что вызванное усилие отражает сиюминутную подготовку, а не долгосрочную установку.

Эксперимент 2А: Это задание имитирует неправильное восприятие слова во время предложения с возможностью услышать повтор предложения, чтобы прояснить это слово. В каждом испытании предложение воспроизводится дважды. В первом представлении предложение либо полностью не повреждено (нормальное), либо одно слово заменено шумом. Предложения построены таким образом, что слово имеет важное значение для значения предложения, но не может быть восстановлено по контексту. Во втором представлении предложение всегда остается целым, что позволяет восстановить пропущенное слово.

Эксперимент 2Б: Это задание имитирует ситуацию, когда слушатель не прилагает усилий до тех пор, пока не поступит соответствующая информация. Участники выполнят стандартное задание на повторение предложения, но с двумя разными типами ответов: они либо повторят полное предложение, либо повторят только последнее слово.

Эксперимент 3А: Оценка ответов на вопросы. В каждом испытании участник слышит вопрос (Q) и ответ (A), произнесенные разными говорящими, как в разговорной диаде. Участнику предлагается ответить «да» (ответ был правильным) или «нет» (ответ был неправильным). Ответ может быть как правильным, неправильным, так и совершенно неожиданным (ерунда), случайным образом варьирующимся от испытания к испытанию. Бессмысленные ответы заставляют задуматься о восприятии, поскольку они настолько неожиданны.

Эксперимент 3Б: Он похож на эксперимент 3А, но вместо совершенно неожиданных ответов слушатель услышит ответ, связанный с вопросом, что потребует переоценки того, правильно ли был услышан вопрос. Например: «Какого цвета баскетбольный мяч? Раунд» заставил бы слушателя на мгновение усомниться в правильности понимания вопроса.

Эксперимент 3C: Этот эксперимент имитирует замешательство, возникающее из-за того, что вы слышите акцент на неправильном слове. В каждом испытании участники слышат последовательность вопросов, а затем полный ответ с акцентом на одном слове. В ответе либо имеется соответствующий акцент на слове, которое непосредственно отвечает на вопрос, либо неожиданный акцент на несущественном слове, которое уже было в вопросе.

Эксперимент 3D: зависимость от усилий после предложения будет изучена в поведенческом исследовании, в котором слушатели слышат непрерывный поток предложений и могут вручную регулировать скорость речи (управляется с помощью алгоритма PSOLA с синхронным перекрытием и добавлением высоты тона в Praat) до тех пор, пока они не достигнут в комфортном темпе.