感情的韻律または情緒的韻律は、感情を伝える言語使用のさまざまな非言語的側面である。[1]これには、ピッチ、音量、音色、発話速度、休止の変化を通じて伝えられる、発話中の個人の声のトーンが含まれる。これは意味情報から分離することができ、言語内容(例:皮肉)と相互作用する。[2]
会話における感情的な韻律は、顔の表情よりもわずかに認識または解読されにくいが、正確さは感情によって異なる。怒りと悲しみは最も認識されやすく、次いで恐怖と幸福、嫌悪感は最も認識されにくい。[3] [より良い情報源が必要]
声の感情表現
研究によると、恐怖、喜び、怒りなどの感情は悲しみなどの感情よりも高い頻度で表現されることがわかっています。 [4]
- 怒り: 怒りは「怒り」と「激しい怒り」の2種類に分けられます。中立的な発声と比較すると、怒りは低いピッチ、高い強度、発声全体にわたるより多くのエネルギー(500 Hz)、より高い第一フォルマント(最初に発せられる音)および発声開始時(発声の開始)のより速いアタック時間で生成されます。対照的に、「激しい怒り」はより高く、より多様なピッチ、さらに大きなエネルギー(2000 Hz)で生成されます。[5]
- 嫌悪感:中立的な発話と比較すると、嫌悪感は怒りに似た、より低く下向きのピッチ、エネルギー(500 Hz)、より低い第一フォルマント、速いアタックタイムで生成されます。変化が少なく、持続時間が短いことも嫌悪感の特徴です。[5]
- 恐怖:恐怖は「パニック」と「不安」の2種類に分けられます。中立的な発話と比較すると、恐怖の感情はピッチが高く、変化が少なく、エネルギーが低く、発話速度が速く、休止が多くなります。[5]
- 悲しみ:平常な発話と比較すると、悲しい感情はより高いピッチ、より低い強度だがより多くの声のエネルギー(2000Hz)、より多くの休止を伴うより長い持続時間、およびより低い第一フォルマントで生成されます。[5]
声の感情の認識
スピーチにおける感情のデコードには、音響的特徴の決定、これらの特徴と意味のあるつながりの作成、確立されたつながりに関連して音響パターンの処理という3つの段階があります。処理段階では、基本的な感情的知識とのつながりが、関連付けに固有のメモリネットワークに個別に保存されます。これらの関連付けは、将来遭遇する感情表現のベースラインを形成するために使用できます。スピーチの感情的な意味は、イベントの状況、重要性、その他の周辺の詳細が分析された後に、暗黙的かつ自動的に登録されます。[6]
平均して、聞き手は、偶然よりもかなり高い確率で、意図された感情を知覚することができます(偶然=約10%)。[5]しかし、エラー率も高いです。これは、聞き手が特定の声からの感情推論をより正確に行い、ある感情を他の感情よりもよく知覚するという観察によるところが大きいです。[4]怒りと悲しみの声の表現は最も容易に知覚され、恐怖と幸福は中程度にしか知覚されず、嫌悪感は知覚されにくいです。[3] [自費出版ソース? ]
声の感情と脳
言語は、言語的チャネルと音声的チャネルの 2 つの要素に分けることができます。言語的チャネルは、話者が選択した言葉によって構成される意味内容です。言語的チャネルでは、話者の言葉の意味内容が文の意味を決定します。ただし、文の話し方によって意味が変わる場合があり、それが音声的チャネルです。この言語チャネルは、話者が感じた感情を伝え、聞き手である私たちに意図された意味をよりよく理解させます。このチャネルのニュアンスは、イントネーション、強度、韻律の組み合わせによって表現されます。通常、これらのチャネルは同じ感情を伝えますが、異なる場合もあります。皮肉とアイロニーは、この不一致なスタイルに基づく 2 つのユーモア形式です。[7]
言語と音声(韻律)の要素を統合する神経学的プロセスは比較的明らかではありません。ただし、言語内容と音声は脳の異なる半球で処理されると考えられています。統語情報と意味情報で構成される言語内容は、左半球で処理されます。統語情報は主に脳の前頭葉と側頭葉の一部で処理されるのに対し、意味情報は主に前頭葉のより小さな部分が組み込まれた側頭葉で処理されます。対照的に、韻律は主に言語内容と同じ経路で右半球で処理されます。機能的磁気共鳴画像(fMRI)装置を使用した神経画像研究は、この半球の側方化と側頭前頭葉の活性化をさらに裏付けています。ただし、いくつかの研究では、韻律知覚は右半球にのみ側方化されているわけではなく、より両側性である可能性があるという証拠を示しています。大脳基底核が韻律の知覚にも重要な役割を果たしている可能性があるという証拠もいくつかある。[7]
感情認識の障害
右脳の損傷によって生じる韻律表現および理解の障害は、失語症として知られています。失語症はさまざまな形で現れ、さまざまな精神疾患や病気で起こります。失語症は脳卒中やアルコール乱用によっても引き起こされます。失語症の種類には、運動性(発声の抑揚を生み出せない)、表出性(運動機能ではなく脳の機能障害が原因である)、受容性(感情的な発話を解読できない)があります。[8]
年齢を重ねるにつれて、感情の声による表現を認識することがますます困難になることがわかっています。高齢者は、若い成人よりも、特に悲しみや怒りの声による感情の表現をラベル付けすることがやや困難ですが、声による感情とそれに対応する顔の表情を統合することがはるかに困難です。この困難さの考えられる説明は、2つの感情の源を組み合わせるには、脳の感情領域のより大きな活性化が必要であり、成人では感情領域の音量と活動が低下することです。別の考えられる説明は、聴覚障害が声による表現の聞き間違いにつながっている可能性があるということです。高周波の聴覚障害は、特に男性で50歳前後から発生し始めることが知られています。[9]
脳の右半球は韻律と関連しているため、右半球に損傷のある患者は、感情を伝えるために発話パターンを変えることが困難です。そのため、発話が単調に聞こえることがあります。さらに、右半球に損傷のある人は、抑揚のある文章で感情を識別する能力に障害があることが研究でわかっています。
統語的および感情的韻律の両方を解読することが困難なことは、自閉症スペクトラム障害および統合失調症の患者にも見られ、「患者は社会的スキルや社会的認知を含む多数の機能領域で欠陥を抱えている。これらの社会的障害は、正常な社会的交流に不可欠な社会的合図を知覚、理解、予測、および反応することが困難であることから成り立っている」。これは、統合失調症における感情的韻律に関するHoekertらの2017年の研究など、複数の研究で判明しており、この研究では、病気と感情的韻律の相関関係を完全に確認するには、さらなる研究が必要であることが示された。しかし、統合失調症の患者は、非感情的韻律を解読することには問題がない。[10]
非言語的感情韻律
幸福、悲しみ、怒り、嫌悪などの感情状態は、非言語的発話行為の音響構造のみに基づいて判断できます。これらの行為は、うなり声、ため息、感嘆などです。これらの非言語的行為は普遍的であり、異なる言語の話者からでも同じ仮定を引き出すという考えを支持する研究がいくつかあります。
さらに、非言語的発声では、発話とは異なる方法で感情を表現できることが証明されています。Laukka らは次のように述べています。「発話では、言語情報を伝達するために、調音器官 (唇、舌、喉頭など) の非常に正確で協調的な動きが必要ですが、非言語的発声は言語コードに制約されないため、そのような正確な調音は必要ありません。このため、非言語的発声は、韻律的表現よりも多くの音響特性でより広い範囲を示すことができます。」
彼らの研究では、俳優たちは言葉を使わずにさまざまな感情を声に出して表現するよう指示された。この研究では、聞き手は偶然よりも広範囲の肯定的および否定的な感情を識別できることが示された。しかし、罪悪感や誇りなどの感情はそれほど容易に認識されなかった。[11]
2015 年に Verena Kersken、Klaus Zuberbühler、Juan-Carlos Gomez が行った研究では、乳児の非言語的発声を大人に聞かせ、大人が乳児の発声を助けを求める、物を指差す、または出来事を示すものと区別できるかどうかを調べました。乳児は、何に対して泣いているかによって、泣き声に異なる韻律的要素を示します。また、肯定的および否定的な感情状態に対する爆発的な表現も異なります。この情報の解読能力は、文化を超えて適用可能であり、乳児に関する大人の経験レベルとは無関係であると判断されました。
性差
男性と女性は、言語の使い方も理解の仕方も異なります。発話の速度、ピッチの範囲、発話の持続時間、ピッチの傾きに違いがあることが知られています (Fitzsimmons 他)。たとえば、「スペクトル記号と韻律記号の関係に関する研究では、肯定的および疑問的イントネーションで文章を発話する男性と女性では、ピッチと持続時間の依存性が異なることが確認されました。発話のテンポ、ピッチの範囲、ピッチの傾きは男女で異なります」(Nesic 他)。その一例として、女性はより速く話し、語尾を長くし、文末でピッチを上げる傾向があることが挙げられます。
女性と男性は、感情的な韻律を神経学的に処理する方法も異なります。fMRI 研究では、感情的なフレーズの意味や様態を処理する際に、男性は女性被験者よりも多くの皮質領域で強い活性化を示しました。様態タスクでは、男性は両側の中側頭回でより強い活性化を示しました。女性の場合、有意な領域は右後小脳葉のみでした。この研究の男性被験者は前頭前野でより強い活性化を示し、平均して女性被験者よりも長い応答時間を要しました。この結果は、男性は話者の行為や意図について意識的に推論する必要があるが、女性はこれを無意識的に行う可能性があることを意味すると解釈されました。したがって、男性は「意味処理段階よりも高い段階で」言語意味論と感情的意図を統合する必要があったのです。[12]
考慮事項
感情の音声表現に関する研究のほとんどは、合成音声やプロの俳優による感情表現を用いて研究されてきました。自発的で「自然な」音声サンプルを用いた研究はほとんど行われていません。これらの人工音声サンプルは自然な音声に近いと考えられてきましたが、特に俳優による表現は感情的な音声表現のステレオタイプの影響を受け、リスナーの認識を歪めるような音声の特徴が強調される可能性があります。もう 1 つの考慮事項は、リスナーの個々の認識です。研究は通常、応答の平均を取りますが、個人差を詳細に調査したものはほとんどありません。これにより、感情の音声表現に対するより深い洞察が得られる可能性があります。[5]
参照
参考文献
- ^ Leentjens, AF; Wielaert, SM; van Harskamp, F; Wilmink, FW (1998). 「統合失調症患者における感情韻律の障害:横断的研究」Journal of Neurology, Neurosurgery, and Psychiatry . 64 (3): 375– 378. doi : 10.1136/jnnp.64.3.375 . PMC 2169997 . PMID 9527153.
- ^ Esteve-Gibert, Núria; Guellaï, Bahia (2018). 「聴覚と視覚領域における韻律:発達的観点」. Frontiers in Psychology . 9 :338. doi : 10.3389/fpsyg.2018.00338 . ISSN 1664-1078. PMC 5868325. PMID 29615944 .
- ^ ab 「The Social and Emotional Voice」(PDF) 。 2014年2月3日時点のオリジナル(PDF)よりアーカイブ。 2012年3月29日閲覧。
- ^ ab Bachorowski, Jo-Anne (1999). 「声の表現と感情の知覚」. Current Directions in Psychological Science . 8 (2): 53– 57. doi :10.1111/1467-8721.00013. S2CID 18785659.
- ^ abcdef Sauter, Disa A.; Eisner, Frank; Calder, Andrew J.; Scott, Sophie K. (2010). 「感情の非言語的音声表現における知覚的手がかり」.季刊実験心理学ジャーナル. 63 (11): 2251– 2272. doi :10.1080/17470211003721642. PMC 4178283. PMID 20437296 .
- ^ Pell, Marc D.; Kotz, Sonja A. (2011). 「音声感情認識の時間経過について」. PLoS ONE . 6 (11): e27256. Bibcode :2011PLoSO...627256P. doi : 10.1371/journal.pone.0027256 . PMC 3210149. PMID 22087275 .
- ^ ab Berckmoes, Celine; Guy Vingerhoets (2004). 「感情的音声処理の神経基盤」. Current Directions in Psychological Science . 13 (5): 182– 185. doi :10.1111/j.0963-7214.2004.00303.x. S2CID 143618738.
- ^ Gorelick PB、Ross ED (1987 年5 月)。「無聾語: 右脳における感情言語の組織化に関する機能的・解剖学的証拠」。神経学、神経外科、精神医学ジャーナル。50 (5): 553– 560。doi :10.1136 / jnnp.50.5.553。PMC 1031966。PMID 2438386 。
- ^ Ryan, Melissa; Murray, Janice; Ruffman, Ted (2010). 「加齢と感情の知覚: 声による感情の処理と顔による感情の処理」.実験的加齢研究. 36 (1): 1– 22. doi :10.1080/03610730903418372. PMID 20054724. S2CID 205555217.
- ^ Hoekert, LM (2009). 「統合失調症における感情韻律の認識と表現の障害:レビューとメタ分析」(PDF)。言われていることを超えて:感情韻律。
- ^ Laukka P、Elfenbein HA、Söder N、Nordström H、Althoff J、Chui W、Iraki FK、Rockstuhl T、Thingujam NS (2013 年 7 月)。「ポジティブおよびネガティブな非言語的感情発声の異文化デコード」 。Frontiers in Psychology。4 : 353。doi : 10.3389 / fpsyg.2013.00353。PMC 3728469。PMID 23914178。
- ^ Fitzsimons M、 Sheahan N、Staunton H (2001年7月)。「ジェンダーと韻律の音響的次元の統合:臨床研究への影響」。脳 と言語。78 (1): 94– 108。doi :10.1006/brln.2000.2448。PMID 11412018。S2CID 45581597。
