JP2021110781A - 感情解析装置、感情解析方法、及び感情解析プログラム - Google Patents
感情解析装置、感情解析方法、及び感情解析プログラム Download PDFInfo
- Publication number
- JP2021110781A JP2021110781A JP2020001087A JP2020001087A JP2021110781A JP 2021110781 A JP2021110781 A JP 2021110781A JP 2020001087 A JP2020001087 A JP 2020001087A JP 2020001087 A JP2020001087 A JP 2020001087A JP 2021110781 A JP2021110781 A JP 2021110781A
- Authority
- JP
- Japan
- Prior art keywords
- voice
- emotion
- user
- emotion analysis
- voice data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000008451 emotion Effects 0.000 title claims abstract description 82
- 238000004458 analytical method Methods 0.000 title claims abstract description 27
- 238000011156 evaluation Methods 0.000 claims description 29
- 238000011002 quantification Methods 0.000 claims description 9
- 230000002996 emotional effect Effects 0.000 claims description 7
- 230000007704 transition Effects 0.000 claims description 7
- 230000008859 change Effects 0.000 claims description 3
- 238000013139 quantization Methods 0.000 abstract 1
- 238000004891 communication Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 10
- 238000000034 method Methods 0.000 description 10
- 230000008569 process Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 101100480512 Caenorhabditis elegans tag-51 gene Proteins 0.000 description 2
- 101100480513 Caenorhabditis elegans tag-52 gene Proteins 0.000 description 2
- 101100480514 Caenorhabditis elegans tag-53 gene Proteins 0.000 description 2
- 238000013178 mathematical model Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 101100148933 Caenorhabditis elegans sdhb-1 gene Proteins 0.000 description 1
- 206010012374 Depressed mood Diseases 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
Images
Landscapes
- Reverberation, Karaoke And Other Acoustics (AREA)
Abstract
Description
本発明の感情解析装置は、
歌唱するユーザの音声から音声データを取得する音声取得部と、
前記音声データを所定期間毎に区分し、前記所定期間における前記音声の特徴量に基づいて、前記ユーザの感情を定量化する感情解析部と、
前記定量化の結果を表示装置に表示させる表示制御部と、
を備える。
前記音声の特徴量が、前記音声に含まれる音の高さ、前記音の強さ、歌唱した語の抑揚、及び前記語の発話の速さのうち少なくとも一つ、または、前記少なくとも一つの変化量であってもよい。
一つの楽曲に係る前記音声データを構成する複数の前記所定期間の夫々における感情の定量化の結果から、一つの楽曲毎の感情の状態または前記状態の遷移を求め、前記一つの
楽曲毎の感情を評価してもよい。
前記感情が、喜び、平常、悲しみ、怒り、及び元気度のうち少なくとも一つであり、前記評価が前記一つの楽曲において定量化された前記感情の大小関係であってもよい。
歌唱するユーザの音声から音声データを取得するステップと、
前記音声データを所定期間毎に区分し、前記所定期間における前記音声の特徴量に基づいて、前記ユーザの感情を定量化するステップと、
前記定量化の結果を表示装置に表示させるステップと、
をコンピュータが実行する。
歌唱するユーザの音声から音声データを取得するステップと、
前記音声データを所定期間毎に区分し、前記所定期間における前記音声の特徴量に基づいて、前記ユーザの感情を定量化するステップと、
前記定量化の結果を表示装置に表示させるステップと、
をコンピュータに実行させる。
図1は、本実施形態に係るカラオケ演奏システム1の構成を示す図である。図1に示すように、カラオケ演奏システム1は、カラオケ演奏装置10と、リモートコントローラ20と、楽曲サーバ30とを有する。
させることにより、演奏を行う。
図2は、カラオケ演奏装置(感情解析装置)10が実行する感情解析方法の一例を示す図である。カラオケ演奏装置10は、ユーザが指定した楽曲の楽曲データを楽曲サーバ30から受信し、演奏を開始した場合に、図2の処理を開始する。
示装置122へ表示させる。図3は、所定期間毎に求めた感情の評価結果の表示例を示す図である。
感情を解析するため、予め種々の音声データを再生して、これを聞いた人が、どのような感情を表しているかを評価する。例えば、怒っていると感じる、冷静(平常)だと感じる、悲しんでいると感じる、喜んでいると感じる、元気だと感じる等、各音声データがどのような感情を表しているかを評価し、各音声データに喜び、平常、悲しみ、怒り、又は元気等のタグを付け、これらタグ付けした音声データをリファレンスデータとして記憶部102に記憶しておく。
めた評価結果を示し、評価57は、前記状態の遷移から求めた評価結果を示す。
10 :カラオケ演奏装置
20 :リモートコントローラ
30 :楽曲サーバ
51 :タグ
52 :タグ
53 :タグ
54 :タグ
55 :グラフ
101 :制御部
102 :記憶部
103 :入出力部
104 :通信部
111 :演奏制御部
112 :音声取得部
113 :感情解析部
114 :表示制御部
121 :マイク
122 :表示装置
123 :スピーカ
Claims (6)
- 歌唱するユーザの音声から音声データを取得する音声取得部と、
前記音声データを所定期間毎に区分し、前記所定期間における前記音声の特徴量に基づいて、前記ユーザの感情を定量化する感情解析部と、
前記定量化の結果を表示装置に表示させる表示制御部と、
を備えた感情解析装置。 - 前記音声の特徴量が、前記音声に含まれる音の高さ、前記音の強さ、歌唱した語の抑揚、及び前記語の発話の速さのうち少なくとも一つ、または、前記少なくとも一つの変化量である請求項1に記載の感情解析装置。
- 一つの楽曲に係る前記音声データを構成する複数の前記所定期間の夫々における感情の定量化の結果から、一つの楽曲毎の感情の状態または前記状態の遷移を求め、前記一つの楽曲毎の感情を評価する請求項1又は2に記載の感情解析装置。
- 前記感情が、喜び、平常、悲しみ、怒り、及び元気度のうち少なくとも一つであり、前記評価が前記一つの楽曲において定量化された前記感情の大小関係である請求項3に記載の感情解析装置。
- 歌唱するユーザの音声から音声データを取得するステップと、
前記音声データを所定期間毎に区分し、前記所定期間における前記音声の特徴量に基づいて、前記ユーザの感情を定量化するステップと、
前記定量化の結果を表示装置に表示させるステップと、
をコンピュータが実行する感情解析方法。 - 歌唱するユーザの音声から音声データを取得するステップと、
前記音声データを所定期間毎に区分し、前記所定期間における前記音声の特徴量に基づいて、前記ユーザの感情を定量化するステップと、
前記定量化の結果を表示装置に表示させるステップと、
をコンピュータが実行する感情解析プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020001087A JP7402396B2 (ja) | 2020-01-07 | 2020-01-07 | 感情解析装置、感情解析方法、及び感情解析プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020001087A JP7402396B2 (ja) | 2020-01-07 | 2020-01-07 | 感情解析装置、感情解析方法、及び感情解析プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021110781A true JP2021110781A (ja) | 2021-08-02 |
JP7402396B2 JP7402396B2 (ja) | 2023-12-21 |
Family
ID=77059765
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020001087A Active JP7402396B2 (ja) | 2020-01-07 | 2020-01-07 | 感情解析装置、感情解析方法、及び感情解析プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7402396B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP4331484A1 (en) | 2022-08-31 | 2024-03-06 | ASICS Corporation | Mental/physical state evaluation system and mental/physical state evaluation method |
DE112022003382T5 (de) | 2021-07-02 | 2024-04-18 | Denso Corporation | Scheibenwischerblatt |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4851447B2 (ja) | 2005-06-09 | 2012-01-11 | 株式会社エイ・ジー・アイ | ピッチ周波数を検出する音声解析装置、音声解析方法、および音声解析プログラム |
JP2016057570A (ja) | 2014-09-12 | 2016-04-21 | ヤマハ株式会社 | 音響解析装置 |
JP6954780B2 (ja) | 2017-07-31 | 2021-10-27 | 株式会社第一興商 | カラオケ装置 |
-
2020
- 2020-01-07 JP JP2020001087A patent/JP7402396B2/ja active Active
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE112022003382T5 (de) | 2021-07-02 | 2024-04-18 | Denso Corporation | Scheibenwischerblatt |
EP4331484A1 (en) | 2022-08-31 | 2024-03-06 | ASICS Corporation | Mental/physical state evaluation system and mental/physical state evaluation method |
Also Published As
Publication number | Publication date |
---|---|
JP7402396B2 (ja) | 2023-12-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101014994A (zh) | 内容生成设备和内容生成方法 | |
JP2002007014A (ja) | 情報処理装置及び該情報処理装置を備えた楽器 | |
US20140278433A1 (en) | Voice synthesis device, voice synthesis method, and recording medium having a voice synthesis program stored thereon | |
JP2007256617A (ja) | 楽曲練習装置および楽曲練習システム | |
JP2008026622A (ja) | 評価装置 | |
US11271993B2 (en) | Streaming music categorization using rhythm, texture and pitch | |
JP7402396B2 (ja) | 感情解析装置、感情解析方法、及び感情解析プログラム | |
CN111477210A (zh) | 语音合成方法和装置 | |
Delgado et al. | A state of the art on computational music performance | |
Timperman et al. | Verbalization and musical memory in string players | |
Paul et al. | Machine learning approach of speech emotions recognition using feature fusion technique | |
Lei et al. | Deep learning dual neural networks in the construction of learning models for online courses in piano education | |
Ranjan et al. | Using a bi-directional lstm model with attention mechanism trained on midi data for generating unique music | |
Knees et al. | Giantsteps-progress towards developing intelligent and collaborative interfaces for music production and performance | |
JP2007225916A (ja) | オーサリング装置、オーサリング方法およびプログラム | |
JP6954780B2 (ja) | カラオケ装置 | |
JP5402141B2 (ja) | メロディ作成装置、メロディ作成プログラムおよびメロディ作成方法 | |
Ingram et al. | Digital data collection and analysis | |
JP4279274B2 (ja) | 携帯端末装置および楽曲情報表示方法 | |
de Vries et al. | “You Can Do It!”—Crowdsourcing Motivational Speech and Text Messages | |
Yu et al. | Performance scoring of singing voice | |
Yang | Structure analysis of beijing opera arias | |
JP2008250066A (ja) | 音声データ処理システム、音声データ処理方法、及びプログラム | |
Hastuti et al. | Virtual Player of Melodic Abstraction Instruments for Automatic Gamelan Orchestra | |
Kwon | Voice-driven sound effect manipulation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230106 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230815 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231003 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20231019 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231025 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20231019 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7402396 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |