人工内耳ユーザーの傾聴の取り組み

一般的な方法:

音声認識テスト: 主な実験タスクは、防音ブース内のフリーフィールドで音声を聞くことです。 従来の音声認識は、文章を聞いて繰り返すことで構成されており、これらの研究は、その一般的なテーマに基づいて、プロジェクトの特定の目的に合わせて修正を加えて変化します。 たとえば、一部の刺激は口頭で反応する前に 2 回繰り返され、一部は平叙文ではなく質問と回答になります。 私たちは各実験に合わせて特別に刺激を開発しましたが、感情を刺激する刺激は瞳孔の拡張に大きな影響を与える可能性があるため、常に避けています。

明瞭度: 文全体と各文内の単語の正解率スコアを追跡します。 また、文中の間違いの位置も追跡します (例: 最初の単語、最後の単語）、参加者の応答がおそらく賢明な発話であるかどうか、または一貫した意味を欠いているかどうか、この要素は聞く努力に大きな影響を与えるためです。

私たちは、正常な聴覚 (NH または TH 典型的聴覚) のリスナーの通常の音声とボコード音声の両方の知覚をテストします。これにより、慢性的な難聴の経験とは別に、信号劣化の影響を個別に検査できるようになります。

瞳孔測定: 音声認識テスト中、参加者の瞳孔サイズの変化は、目から 50 cm 離れたところに設置された Eyelink アイ トラッカーによって監視されます。 位相瞳孔散大は、多数の発表された研究に基づいて、リスニング努力の変化として解釈される実験タイミングランドマークと関連付けられています 非聴覚タスク: NASA タスク負荷指数 (TLX) を管理して、リスニング中の努力の 5 つの側面に関する参加者の主観的経験を測定しますタスク。 NIH Toolboxパターン比較処理速度テストを実施します。 Xieらによって開発された修正フランカーを使用して、無関係な情報を抑制する参加者の能力を調査します。 (2017) では、テスト中の戦略的な瞬間に反応のルールが変化するフランカーの慎重に構造化されたシーケンスを使用して、干渉の抑制、ルールの抑制、および反応の抑制を比較しています。 また、Peristeri らによって説明されたアプローチを使用して、ローカルとグローバルの注意切り替えタスクを実装します。 （2020年）。

実験 1A: 今後の刺激が理解しやすいか理解しにくいかをリスナーが事前に知っている研究で、追加の努力を準備する能力をテストします。 各トライアルは、画面上のテキストで表示される「簡単」または「難しい」の合図から始まります。 生徒をベースラインに戻すための 4 秒の遅延の後、文が再生されます。 瞳孔散大は試行全体を通じて追跡され、テキスト信号と音声の開始の間の決定的な違いが検査され、聞き手の追加の努力の瞬間的な準備が反映されます。 重要なのは、簡単な試練と難しい試練がブロックされるのではなくランダムに混合されているため、引き起こされる努力は長期的な性質ではなく瞬間的な準備を明確に反映しているということです。

実験 2A: このタスクは、文中の単語の誤認識をシミュレートし、その単語を明確にするために文の繰り返しを聞く機会を与えます。 各試行では、文が 2 回再生されます。 最初のプレゼンテーションでは、文は完全にそのまま（正常）であるか、単一の単語がノイズに置き換えられています。 文は、その単語が文の意味に不可欠であるが、文脈からは復元できないように構成されています。 2 番目のプレゼンテーションでは、文は常に完全にそのままの状態であり、欠落した単語を復元できます。

実験 2B: このタスクは、関連情報が到着するまでリスナーが努力を控える状況をシミュレートします。 参加者は標準的な文反復タスクを完了しますが、2 種類の異なる応答があります。文全体を繰り返すか、最後の単語のみを繰り返すかのいずれかです。

実験 3A: 質問に対する答えを判断する。 各試行では、対話型ダイアドの場合と同様に、参加者は異なる話者が話す質問 (Q) と答え (A) を聞きます。 参加者は、「はい」(答えは正解) または「いいえ」(答えは不正解) で答えるように求められます。答えは正解、不正解、または完全に予想外 (ナンセンス) のいずれかであり、試行ごとにランダムに変化します。 ナンセンスな答えは、あまりにも予期せぬものであるため、その認識をもう一度推測する瞬間を招きます。

実験 3B: これは実験 3A と似ていますが、まったく予想外の答えが返されるのではなく、質問に関連した答えが聞き手に伝わり、質問が正しく聞こえたかどうかの再評価を促します。 たとえば、「バスケットボールは何色ですか?」 「ラウンド」と聞くと、聞き手は質問が正しく理解されたかどうかを一瞬疑ってしまうでしょう。

実験 3C: この実験は、間違った単語を強調して聞くことによる混乱をシミュレートします。 各試行では、参加者は一連の質問を聞いた後、単一の単語に重点を置いた全文の回答を聞きます。 回答には、質問に直接答える単語が適切に強調されているか、すでに質問に含まれていた重要でない単語が予期せず強調されています。

実験 3D: 聞き手が文章の連続ストリームを聞き、到着するまで音声速度を手動で調整できる (Praat のピッチ同期オーバーラップ加算 PSOLA アルゴリズムを使用して操作される) という行動研究で、文章後の努力への依存度が検査されます。快適なペースで。