JP6433650B2 - 気分誘導装置および気分誘導プログラムならびにコンピュータの動作方法 - Google Patents
気分誘導装置および気分誘導プログラムならびにコンピュータの動作方法 Download PDFInfo
- Publication number
- JP6433650B2 JP6433650B2 JP2013237109A JP2013237109A JP6433650B2 JP 6433650 B2 JP6433650 B2 JP 6433650B2 JP 2013237109 A JP2013237109 A JP 2013237109A JP 2013237109 A JP2013237109 A JP 2013237109A JP 6433650 B2 JP6433650 B2 JP 6433650B2
- Authority
- JP
- Japan
- Prior art keywords
- mood
- voice
- speaker
- subject
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Toys (AREA)
Description
そこで、本発明においては、認知症患者や健常者等の対象者の気分を誘導することが可能な気分誘導装置および気分誘導プログラムならびにコンピュータの動作方法を提供することを目的とする。
図1において、本発明の実施の形態における気分誘導装置1は、音声を入力する音声入力手段としてのマイク2と、音声を出力する音声出力手段としてのスピーカ3と、各種演算処理を行う処理手段としてのコンピュータ4とを有する。なお、本実施形態においては、マイク2は発話者の音声のみを入力可能なように指向性マイクを用いる。同様に、スピーカ3は気分を誘導したい対象者のみに音声を聴かせることができるように超指向性スピーカを用いるが、指向性スピーカを用いることも可能である。
図2は試験に用いた気分誘導装置の構成を示すブロック図である。
図2に示す気分誘導装置10は、音声を入力する音声入力手段として2つのマイク11,12と、音声を出力する音声出力手段としてのスピーカ13と、マイク11により入力された音声を、誘導したい気分の感情的プロソディを含む音声に変換する処理手段としてのパーソナルコンピュータ(PC)14とを備える。なお、実験ではスピーカ13に代えてヘッドフォンを使用した。
イクのステレオ信号から差分信号を生成してセンターキャンセルを行った後、F0推定を行う。
本実験の主目的は、上記気分誘導装置10を利用することで、気分に変化をもたらせるかどうかということである。また、副目的は、長調または短調の和声による、誘導される気分の違いを調べることである。なお、本実験では、実験協力者を憂鬱な気分に誘導してから音楽を提示する。
〔3−1〕音楽フレーズ
本実験では、長調の和声と短調の和声を用いた気分誘導の比較を行った。そのため、両和声による音楽フレーズの性質は、ある程度共通している必要があった。そこで、本実験では、Bach,J.S.が作曲した「無伴奏ヴァイオリンのためのパルティータ第2番BWV 1004」の最終楽章を原曲に、Busoni,F.がピアノ用に編曲した「シャコンヌ」から、長調、短調の両箇所の2つの音楽フレーズを取り出して使用した。
評価の協力者は、18〜20歳の工学系の大学生である。全132名のうち、61名は先に短調の和声を聴取して評価し、次に長調の和声を聴取して評価した。残りの71名は先に長調、後に短調を聴取した。評価項目は音楽の感情的性格を評価するためのAVSM(谷口高士:音楽作品の感情価測定尺度の作成および多面的感情状態尺度との関連の検討,心理学研究,Vol.65,pp.463−470(1995))の全24項目を、「高揚」尺度から高揚と抑鬱を表す各1項目と、「親和」「強さ」「軽さ」「荘重」の4尺度から各1項目の6項目で1セットになるように並べ、全4セットを評価に用いた。各項目は、全くあてはまらない(1)、ややあてはまらない(2)、どちらともいえない(3)、ややあてはまる(4)、よくあてはまる(5)の5段階で評価された。
長調、短調の各和声を聴取して評価した24項目について、t検定を行った。その結果、表1に示すように、16項目について有意な差異が認められた。この中で、「沈んだ」「哀れな」「暗い」は、短調の和声の平均が4以上で、長調の和声の平均が3以下であり、2つの和声のフレーズの印象が対照的であると評価された。よって、この2つのフレーズは、本実験の目的に適しているといえる。
実験協力者は、まず鬱な気分で創作された詩を朗読し、自分の気分について評価した。次に気分誘導装置10を使って、再度、同じ詩を朗読し、その後にまた気分について評価した。PC14では、〔3〕の予備実験で評価した2種類の和声のフレーズを使った。2度の気分に関する評価の差分が、長調または短調によって差異が出るかどうかを調べた。
実験協力者は、21〜24歳の工学系の大学生と大学院生の12名である。そのうち女子学生は2名である。図5に実験手順を示した。協力者の詩に対する理解を早めることを目的に、図6に示したように、「性格表現用語(青木孝悦:性格表現用語の心理−辞典的研究−455語の選択,分類および望ましさの評定,心理学研究,Vol.42,No.1,pp.1−13(1971))」の中から、「暗さ、うちとけないこと、神経質」のカテゴリーに分類された28語を並べた。
12名の協力者は自分の気分について、MMSの40の質問項目に4段階で2度回答した。1回目はどの群も気分誘導装置10を使わずに朗読しているため、条件は同じである。40の各質問において「各条件の中央値がすべて等しい」という帰無仮説を検定する、クラスカル・ウォリス検定(森 敏昭,吉田寿夫:心理学のためのデータ解析テクニ
カルブック,北大路書房(1990))を行った。その結果、「自信がない」は、p=0.08であったが、他の質問項目はp>0.1で帰無仮説は棄却されなかった。
以上のように、朗読している発声を長調または短調の和声に変換して、リアルタイムに発声している本人に聞かせる実験を行った。使用した音楽の3条件間の差異を検定したところ、条件によって、朗読後の気分(mood)に違いが出ることがわかった。さらに、多重比較の結果から、「陽気な」は、短調と長調の間で気分に有意な差異が認められた。特に、発声が長調の和声に変化されることで、「陽気な」気分が強くなることも示された。「悲観した」は、1回目と2回目の気分の結果の差分により、長調と短調の間で有意な差異が認められた。2回目の結果の生データと1回目と2回目の結果の差分データとでは、検定結果に違いが出たが、「陽気な」に関しては、共通した結果が認められた。被験者を増やすことで、これらの揺らぎは解消されていくと考えられる。
2,11,12 マイク
3,13 スピーカ
4 コンピュータ
5 電動雲台
6 カメラ
14 PC
15 ボコーダ
16 オーディオインタフェース
17 MIDIインタフェース
Claims (8)
- 発話者の音声を入力する音声入力手段と、
前記音声入力手段により入力された発話者の音声を、誘導したい気分を表現する感情的プロソディを含む音声にリアルタイムに変換する処理手段と、
前記処理手段により変換された音声を、気分を誘導したい対象者に対してリアルタイムで出力する音声出力手段と
を有する気分誘導装置。 - 前記発話者と前記対象者とは同一人である請求項1記載の気分誘導装置。
- 前記発話者と前記対象者とは同一人でない請求項1記載の気分誘導装置。
- 前記処理手段は、前記発話者の音声を、前記対象者の過去の発話のデータベースから抽出された、前記対象者が誘導したい気分になっていたときの発話に含まれていた感情的プロソディを含む音声に変換するものである請求項1から3のいずれか1項に記載の気分誘導装置。
- 前記処理手段は、前記発話者の音声を、誘導したい気分に応じて事前に設定された音量、音高および音質に変換するものである請求項1から3のいずれか1項に記載の気分誘導装置。
- 前記処理手段は、前記発話者の音声を、誘導したい気分に応じて事前に設定された音量、音高および音質を入出力とする関数に従い変換するものである請求項1から3のいずれか1項に記載の気分誘導装置。
- 音声を入力する音声入力手段と、音声を出力する音声出力手段とが接続されたコンピュータを、
前記音声入力手段により入力された発話者の音声を、誘導したい気分を表現する感情的プロソディを含む音声にリアルタイムに変換し、この変換された音声を前記音声出力手段から気分を誘導したい対象者に対してリアルタイムで出力する手段として機能させるための気分誘導プログラム。 - コンピュータが、音声入力手段により入力された発話者の音声を、誘導したい気分を表現する感情的プロソディを含む音声にリアルタイムに変換すること、
コンピュータが、この変換された音声を、気分を誘導したい対象者に対してリアルタイムで出力すること
を含むコンピュータの動作方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013237109A JP6433650B2 (ja) | 2013-11-15 | 2013-11-15 | 気分誘導装置および気分誘導プログラムならびにコンピュータの動作方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013237109A JP6433650B2 (ja) | 2013-11-15 | 2013-11-15 | 気分誘導装置および気分誘導プログラムならびにコンピュータの動作方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015096140A JP2015096140A (ja) | 2015-05-21 |
JP6433650B2 true JP6433650B2 (ja) | 2018-12-05 |
Family
ID=53373757
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013237109A Active JP6433650B2 (ja) | 2013-11-15 | 2013-11-15 | 気分誘導装置および気分誘導プログラムならびにコンピュータの動作方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6433650B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110556092A (zh) * | 2018-05-15 | 2019-12-10 | 中兴通讯股份有限公司 | 语音的合成方法及装置、存储介质、电子装置 |
CN110598611B (zh) * | 2019-08-30 | 2023-06-09 | 深圳智慧林网络科技有限公司 | 看护系统、基于看护系统的病人看护方法和可读存储介质 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07244496A (ja) * | 1994-03-07 | 1995-09-19 | N T T Data Tsushin Kk | テキスト朗読装置 |
US6336092B1 (en) * | 1997-04-28 | 2002-01-01 | Ivl Technologies Ltd | Targeted vocal transformation |
US20030208243A1 (en) * | 2002-05-01 | 2003-11-06 | Cobble Daniel L. | Inflectional therapy for mental depression and anxiety |
JP5329020B2 (ja) * | 2002-10-09 | 2013-10-30 | イースト カロライナ ユニバーシティ | 周波数変換したフィードバックを使用して非吃音性の病状を治療するための方法および装置 |
JP4166134B2 (ja) * | 2003-09-17 | 2008-10-15 | 富士通株式会社 | 乳児あやし支援処理方法、および乳児あやし支援処理システム用データ管理装置 |
JP2006227589A (ja) * | 2005-01-20 | 2006-08-31 | Matsushita Electric Ind Co Ltd | 音声合成装置および音声合成方法 |
JP4914295B2 (ja) * | 2007-06-21 | 2012-04-11 | パナソニック株式会社 | 力み音声検出装置 |
JP4876207B2 (ja) * | 2010-06-11 | 2012-02-15 | 国立大学法人 名古屋工業大学 | 認知機能障害危険度算出装置、認知機能障害危険度算出システム、及びプログラム |
GB201109731D0 (en) * | 2011-06-10 | 2011-07-27 | System Ltd X | Method and system for analysing audio tracks |
JP5830364B2 (ja) * | 2011-12-01 | 2015-12-09 | 日本放送協会 | 韻律変換装置およびそのプログラム |
JP2014123072A (ja) * | 2012-12-21 | 2014-07-03 | Nec Corp | 音声合成システム及び音声合成方法 |
-
2013
- 2013-11-15 JP JP2013237109A patent/JP6433650B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2015096140A (ja) | 2015-05-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Curtis et al. | The minor third communicates sadness in speech, mirroring its use in music. | |
CN105247609B (zh) | 利用言语合成对话语进行响应的方法及装置 | |
Bhatara et al. | Perception of emotional expression in musical performance. | |
Breitenstein et al. | The contribution of speech rate and pitch variation to the perception of vocal emotions in a German and an American sample | |
Scherer | Expression of emotion in voice and music | |
Guzman et al. | Immediate acoustic effects of straw phonation exercises in subjects with dysphonic voices | |
Drahota et al. | The vocal communication of different kinds of smile | |
Dromey et al. | The effects of emotional expression on vibrato | |
Coutinho et al. | Singing and emotion | |
Huang et al. | Affective Voice Interaction and Artificial Intelligence: A research study on the acoustic features of gender and the emotional states of the PAD model | |
Patel et al. | Vocal behavior | |
MacIntyre et al. | Pushing the envelope: Evaluating speech rhythm with different envelope extraction techniques | |
JP6433650B2 (ja) | 気分誘導装置および気分誘導プログラムならびにコンピュータの動作方法 | |
Juslin et al. | Speech emotion analysis | |
CN108922505B (zh) | 信息处理方法及装置 | |
Pfleiderer | Vocal pop pleasures. Theoretical, analytical and empirical approaches to voice and singing in popular music | |
Gafni et al. | “Softened” Voice Quality in Poetry Reading: An Acoustic Study | |
Rychlowska et al. | Not only decibels: Exploring human judgments of laughter intensity | |
Kleinberger et al. | Speech companions: Evaluating the effects of musically modulated auditory feedback on the voice | |
Raghu et al. | A Perspective Study on Speech Emotion Recognition: Databases, Features and Classification Models. | |
Beaudoin | Dashon Burton's song sermon: corporeal liveness and the solemnizing breath | |
Franzoni et al. | Producing artificial male voices with maternal features for relaxation | |
Agarwal et al. | Emotion recognition and conversion based on segmentation of speech in Hindi language | |
Bradford | Vocal resonance: Optimising source-filter interactions in voice training | |
Takeuchi et al. | Hands-free wearable electrolarynx using linear predictive coding residual waves and listening evaluation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20161102 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170809 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20171003 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171120 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180508 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180607 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181023 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181107 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6433650 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |