Виртуальная реальность у людей с мышечной дистрофией Дюшенна

Кафедра электронных систем Политехнической школы Университета Сан-Паулу (Бразилия) разработала программное обеспечение, которое накладывает виртуальные объекты на изображения реального мира, снятые веб-камерой.

Задача синхронизации совпадения может иметь либо виртуальный, либо реальный интерфейс. Для реального интерфейса использовалась клавиатура. Для виртуального интерфейса веб-камера зафиксировала маркер на столе рядом с клавиатурой компьютера. Изображения загружались в компьютер и анализировались онлайн. С помощью специально разработанного программного обеспечения определялось, закрывает ли рука участника маркер, который затем возвращался в виртуальную среду. Задача определения времени совпадения была основана на таймере ожидания Bassin. Для этого 10 3D-кубов одновременно отображались в вертикальной колонке на мониторе. Кубики включались (т. е. менялись с белого на зеленый) и выключались последовательно (сверху вниз) до тех пор, пока не был достигнут целевой куб (т. е. десятый куб). Задача участника состояла в том, чтобы либо нажать пробел на клавиатуре (т. более абстрактная задача жеста без физического контакта, представленная на рисунках 1C и 1D), то есть перекрытие маркера в тот момент, когда целевой куб становится зеленым.

Участники выполняли задание индивидуально в тихой комнате, в присутствии только экзаменатора, который давал инструкции. Компьютер поставили на стол. Участники сидели в инвалидной коляске, которая была приспособлена в соответствии с индивидуальными потребностями.

Экзаменатор устно объяснил задачу и провел три демонстрации того, как выполнять задачи на синхронизацию совпадений. Участникам было предложено поместить предпочтительную руку (то есть менее затронутую руку) на отметку сбоку от цели (местоположение настраивалось индивидуально, но варьировалось от 2 до 4 см от цели). Как только первый верхний кубик включался, человек должен был двигать рукой, чтобы либо коснуться целевой клавиши на клавиатуре, либо сделать ударный жест перед веб-камерой, точно в момент, совпадающий с включением нижнего целевого куба. Различные звуки были предоставлены в качестве обратной связи либо при попадании, либо при промахе во время сбора, удержания и передачи, при этом диапазон ошибки составлял от -200 до 200 мс.

Участники с DMD и TD были случайным образом разделены на две подгруппы: (a) группа задач по нажатию кнопки (BPT) - в этой группе на этапе сбора данных участники должны были нажать кнопку пробела на клавиатуре, чтобы выполнить задание на совпадение времени (более реальный интерфейс). ) и (b) группа задач жестов (GT) - в этой группе на этапе сбора данных участники должны пересечь виртуальную цель, созданную веб-камерой, чтобы выполнить задачу синхронизации совпадения, вместо того, чтобы нажимать кнопку компьютера (более виртуальный интерфейс).

Для всех заданий (нажатие кнопки и жест) во время фазы приобретения все группы начали выполнять 20 попыток задания времени совпадения, а через пять минут без контакта с заданием они выполнили еще пять повторений для фазы удержания (оба фазы с более медленной скоростью - с включением и выключением света с интервалом 400 мс), в итоге выполнили пять повторений для двух разных фаз передачи: первая передача выполнялась с более быстрой скоростью - 300 мс интервала освещения (передача со скоростью увеличение - ТСИ). Второй перенос выполнялся с заданием на смену (перенос с обменом окружения - TEE) между группами путем выполнения 5 попыток фазы переноса в другом интерфейсе. Это означает, что группа, которая выполнила фазу сбора данных в задаче «нажатие кнопки», выполнила передачу в задаче «жест» и наоборот.