JP2018010261A - 情報処理装置、情報処理方法および情報処理プログラム - Google Patents
情報処理装置、情報処理方法および情報処理プログラム Download PDFInfo
- Publication number
- JP2018010261A JP2018010261A JP2016140863A JP2016140863A JP2018010261A JP 2018010261 A JP2018010261 A JP 2018010261A JP 2016140863 A JP2016140863 A JP 2016140863A JP 2016140863 A JP2016140863 A JP 2016140863A JP 2018010261 A JP2018010261 A JP 2018010261A
- Authority
- JP
- Japan
- Prior art keywords
- music
- data
- user
- head
- acquired
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims description 39
- 238000003672 processing method Methods 0.000 title claims description 11
- 230000017531 blood circulation Effects 0.000 claims abstract description 94
- 230000008859 change Effects 0.000 claims abstract description 69
- 238000004891 communication Methods 0.000 claims description 36
- 238000011156 evaluation Methods 0.000 claims description 36
- 238000000034 method Methods 0.000 claims description 34
- 238000012545 processing Methods 0.000 claims description 27
- 238000005259 measurement Methods 0.000 claims description 19
- 230000036651 mood Effects 0.000 claims description 4
- 230000008929 regeneration Effects 0.000 claims 4
- 238000011069 regeneration method Methods 0.000 claims 4
- 230000001360 synchronised effect Effects 0.000 claims 2
- 230000007177 brain activity Effects 0.000 abstract description 11
- 210000001061 forehead Anatomy 0.000 description 33
- 210000003128 head Anatomy 0.000 description 32
- 230000008569 process Effects 0.000 description 26
- 210000004556 brain Anatomy 0.000 description 23
- 239000000463 material Substances 0.000 description 20
- 230000029058 respiratory gaseous exchange Effects 0.000 description 12
- 230000006870 function Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 9
- 239000000758 substrate Substances 0.000 description 8
- 230000000694 effects Effects 0.000 description 7
- 230000033001 locomotion Effects 0.000 description 7
- 230000036391 respiratory frequency Effects 0.000 description 6
- 210000003710 cerebral cortex Anatomy 0.000 description 5
- 230000036541 health Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 238000004590 computer program Methods 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 230000008344 brain blood flow Effects 0.000 description 3
- 230000035565 breathing frequency Effects 0.000 description 3
- 206010012289 Dementia Diseases 0.000 description 2
- 230000003727 cerebral blood flow Effects 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 210000001652 frontal lobe Anatomy 0.000 description 2
- JEIPFZHSYJVQDO-UHFFFAOYSA-N iron(III) oxide Inorganic materials O=[Fe]O[Fe]=O JEIPFZHSYJVQDO-UHFFFAOYSA-N 0.000 description 2
- 230000031700 light absorption Effects 0.000 description 2
- 239000011347 resin Substances 0.000 description 2
- 229920005989 resin Polymers 0.000 description 2
- 238000002834 transmittance Methods 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- JOYRKODLDBILNP-UHFFFAOYSA-N Ethyl urethane Chemical compound CCOC(N)=O JOYRKODLDBILNP-UHFFFAOYSA-N 0.000 description 1
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 238000010521 absorption reaction Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 210000004369 blood Anatomy 0.000 description 1
- 230000003925 brain function Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000004087 circulation Effects 0.000 description 1
- 230000003920 cognitive function Effects 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 230000006996 mental state Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000003557 neuropsychological effect Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Images
Landscapes
- Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
- User Interface Of Digital Computer (AREA)
- Telephonic Communication Services (AREA)
Abstract
【課題】ユーザの歌唱中の脳活動に基づく評価を行うことができる情報処理装置を提供する。【解決手段】情報処理装置を、楽曲を再生する再生部と、再生される楽曲とともに歌唱する利用者の頭部の血流状態の変化を計測する頭部装着装置から血流状態の変化に関するデータを取得するデータ取得部と、楽曲の再生終了時に取得したデータを所定の形式で表示する表示部とを備える情報処理装置とする。【選択図】図１
Description
本発明は、情報処理装置、情報処理方法および情報処理プログラムに関する。
従来から、高齢者の介護予防や健康増進を目的とするレクリエーションを提供する機器が実用に供されている（特許文献１）。当該機器を使用する目的として、認知症の改善が挙げられる。また、当該機器にはカラオケ装置が搭載されているものもあり、ユーザが歌唱時に発した声に基づく歌唱の評価結果とユーザの神経心理検査の結果とから、ユーザが次に歌唱するユーザが選択した楽曲が提供される。さらに、被験者が発する声から心的状態を判断する技術も提案されている（特許文献２）。
一般に、人間の脳の血の巡りが良くなること（血流量が多くなること、血流の状態が変化すること）、すなわち脳活動が活発になることが、健康のために重要であるとされている。例えば、健康の維持と脳活動とは密接な関係があると考えられる。しかしながら、上記の従来技術を用いても、歌唱中のユーザの脳活動に基づく評価を基にユーザの健康の維持あるいは改善を図ることについての提案はなされてこなかった。
本発明は、ユーザの歌唱中の脳活動に基づく評価を行うことができる情報処理装置を提供することを目的とする。
本発明の一側面は、以下の情報処理装置によって例示される。本情報処理装置は、楽曲を再生する再生部と、再生される楽曲とともに歌唱する利用者の頭部の血流状態の変化を計測する頭部装着装置から血流状態の変化に関するデータを取得するデータ取得部と、楽曲の再生終了時に取得したデータを所定の形式で表示する表示部とを備える。
本発明の第２の側面は、コンピュータが、楽曲を再生し、再生される楽曲とともに歌唱する利用者の頭部の血流状態の変化を計測する頭部装着装置から血流状態の変化に関するデータを取得し、楽曲の再生終了時に取得したデータを所定の形式で表示することを実行する情報処理方法として例示できる。
また、本発明の第３の側面は、コンピュータに、楽曲を再生すると、再生される楽曲とともに歌唱する利用者の頭部の血流状態の変化を計測する頭部装着装置から血流状態の変化に関するデータを取得するステップと、楽曲の再生終了時に取得したデータを所定の形式で表示するステップを実行させる情報処理プログラムとして例示できる。
本発明によれば、ユーザの歌唱中の脳活動に基づく評価を行うことができる情報処理装置を提供することができる。
以下、図面を参照して一実施形態に係る計測システムについて説明する。図１は、本発明の一実施形態に係る計測システムの概略構成を例示する図である。本計測システムは、利用者の頭部から血流量の変化を示す計測データ（検出値ともいう）を検出し、利用者の脳の活動状態を示す脳活動情報を取得する。なお、血流量が血流状態の一例に相当する。図１に示すように、本計測システムは、頭部装着装置１と利用者端末２とカラオケ装置３を有する。頭部装着装置１は、情報処理の側面としては、制御部１１と、無線通信部１３と、一対のセンサ１１５、１２５とを有する。制御部１１は、頭部装着装置１の計測と通信を制御する。制御部１１は、例えば、ＣＰＵ（Central Processing Unit）、あるいは
ＤＳＰ（Digital Signal Processor）等のプロセッサとメモリとを有し、メモリ上に実行可能に展開されたコンピュータプログラム、ファームウェア等により処理を実行する。ただし、制御部１１は、無線通信部１３とセンサ１１５、１２５を起動し、各構成要素との連携処理を実行する専用のハードウェア回路、ＦＰＧＡ（Field Programmable Gate Array）等であってもよい。また、制御部１１は、ＣＰＵ、ＤＳＰ、専用のハードウェア回路
等が混在したものであってもよい。
ＤＳＰ（Digital Signal Processor）等のプロセッサとメモリとを有し、メモリ上に実行可能に展開されたコンピュータプログラム、ファームウェア等により処理を実行する。ただし、制御部１１は、無線通信部１３とセンサ１１５、１２５を起動し、各構成要素との連携処理を実行する専用のハードウェア回路、ＦＰＧＡ（Field Programmable Gate Array）等であってもよい。また、制御部１１は、ＣＰＵ、ＤＳＰ、専用のハードウェア回路
等が混在したものであってもよい。
無線通信部１３は、所定のインターフェースによって、制御部１１およびセンサ１１５、１２５と接続される。ただし、無線通信部１３は、制御部１１を介して、センサ１１５、１２５からデータを取得する構成であってもよい。無線通信部１３は、ネットワークＮ１を介して、利用者端末２と通信する。ネットワークＮ１は、例えば、Bluetooth（登録
商標）、無線ＬＡＮ（Local Area Network）、ZigBee等の規格に従ったネットワークである。ただし、本計測システムにおいて、無線通信部１３の無線インターフェースの規格に限定がある訳ではない。また、ネットワークＮ１は有線ネットワークでもよい。
商標）、無線ＬＡＮ（Local Area Network）、ZigBee等の規格に従ったネットワークである。ただし、本計測システムにおいて、無線通信部１３の無線インターフェースの規格に限定がある訳ではない。また、ネットワークＮ１は有線ネットワークでもよい。
また、本計測システムにおいて、無線通信部１３に代えて、あるいは、無線通信部１３とともに有線で通信を行う通信部を設けてもよい。すなわち、頭部装着装置１と利用者端末２とが有線通信のインターフェースで接続されてもよい。この場合の有線通信のインターフェースに限定がある訳ではなく、計測システムの用途に応じてＵＳＢ（Universal Serial Bus）、PCI Express等の各種インターフェースを使用することができる。
センサ１１５、１２５は、いずれも近赤外光を頭部に照射し、大脳皮質付近で一部吸収されて散乱された近赤外光を受光し、電気信号に変換する。大脳皮質は、例えば、脳の活動状態に応じて、血流量が変化し、その変化に起因して、大脳皮質付近での近赤外光の吸収特性、あるいは、散乱特性が変化する。センサ１１５、１２５は、このような大脳皮質
付近の血流の状態に応じた近赤外光吸収率の変化あるいは透過率の変化により光量が変化する近赤外光を電気信号に変換して出力する。
付近の血流の状態に応じた近赤外光吸収率の変化あるいは透過率の変化により光量が変化する近赤外光を電気信号に変換して出力する。
本計測システムでは、センサ１１５、１２５は、０．１秒などの所定の時間間隔で近赤外光の照射および受光した近赤外光の電気信号への変換を行う。これにより、頭部装着装置１を装着したユーザの脳内の血流量の変化に関するデータが当該時間間隔で得られる。さらに、センサ１１５、１２５は、一方が右前額部の血流量の変化に関するデータを出力し、他方が左前額部の血流量の変化に関するデータを出力する。
また、センサ１１５、１２５は、例えば、近赤外光を照射する近赤外光光源と、近赤外光を受光する受光部を含む。近赤外光光源は、例えば、ＬＥＤ（Light Emitting Diodes
）、赤外光ランプ等である。また、受光部は、フォトダイオード、フォトトランジスタ等の光電素子と、増幅器と、ＡＤ（Analog Digital）コンバータとを含む。なお、近赤外光光源と受光部とが対にして設けられなくてもよい。例えば、１つの近赤外光光源に対して、複数の受光部を設けてもよい。
）、赤外光ランプ等である。また、受光部は、フォトダイオード、フォトトランジスタ等の光電素子と、増幅器と、ＡＤ（Analog Digital）コンバータとを含む。なお、近赤外光光源と受光部とが対にして設けられなくてもよい。例えば、１つの近赤外光光源に対して、複数の受光部を設けてもよい。
利用者端末２は、例えば、スマートフォン、携帯電話、携帯情報端末、ＰＨＳ（Personal Handyphone System）、可搬型パーソナルコンピュータ等である。ただし、アプリケーションの機能によっては、利用者端末２は、据え置き型のデスクトップパーソナルコンピュータ、テレビジョン受信機、ゲーム機、健康管理専用の端末、マッサージ器、車載器等であってもよい。
利用者端末２は、頭部装着装置１から、利用者の大脳皮質付近での近赤外光の吸収率または透過率の変化データを取得し、利用者の脳の活動状態に関連する様々な情報処理を含むサービスを提供する。
利用者端末２は、ＣＰＵ２１と、メモリ２２と、無線通信部２３と、表示部２４と、操作部２５と、出力部２６とを有する。ＣＰＵ２１は、メモリ２２に実行可能に展開されたコンピュータプログラムにより、利用者端末２としての処理を実行する。利用者端末２としての処理とは、例えば、上記利用者の脳の活動状態に関連する様々な情報処理を含むサービスである。
メモリ２２は、ＣＰＵ２１で実行されるコンピュータプログラム、あるいは、ＣＰＵ２１が処理するデータを記憶する。メモリ２２は、揮発性メモリと不揮発性メモリを含んでよい。無線通信部２３は、頭部装着装置１の無線通信部１３と同様である。また、利用者端末２は、無線通信部２３に代えて、あるいは、無線通信部２３とともに有線で通信を行う通信部を有してもよい。
無線通信部２３は、ネットワークＮ２を介して、カラオケ装置３と通信する。ネットワークＮ２は、ネットワークＮ１と同様、例えば、Bluetooth（登録商標）、無線ＬＡＮ（Local Area Network）、ZigBee（登録商標）等の規格に従ったネットワークである。ただ
し、本計測システムにおいて、無線通信部２３の無線インターフェースの規格に限定がある訳ではない。また、ネットワークＮ２は有線ネットワークでもよい。
し、本計測システムにおいて、無線通信部２３の無線インターフェースの規格に限定がある訳ではない。また、ネットワークＮ２は有線ネットワークでもよい。
表示部２４は、例えば、液晶ディスプレイ、ＥＬ（Electro-Luminescence）パネル等であり、ＣＰＵ２１からの出力情報を表示する。操作部２５は、例えば、押しボタン、タッチパネル等であり、利用者の操作を受け付ける。出力部２６は、例えば、振動を出力するバイブレータ、音響あるいは音声を出力するスピーカ等である。
カラオケ装置３は、例えばＭＩＤＩ形式の音楽生成データを処理するタイプの音楽再生
装置である。カラオケ装置３が情報処理装置の一例に相当する。カラオケ装置３は、ＣＰＵ３１、メモリ３２、無線通信部３３、表示部３４、入力部３５を有する。ＣＰＵ３１は、メモリ３２に実行可能に展開されたコンピュータプログラムにより、カラオケ装置３としての処理を実行する。カラオケ装置３としての処理とは、楽曲の再生、再生する楽曲に関する情報の表示、楽曲の歌唱に対する評価、評価の表示などが挙げられる。
装置である。カラオケ装置３が情報処理装置の一例に相当する。カラオケ装置３は、ＣＰＵ３１、メモリ３２、無線通信部３３、表示部３４、入力部３５を有する。ＣＰＵ３１は、メモリ３２に実行可能に展開されたコンピュータプログラムにより、カラオケ装置３としての処理を実行する。カラオケ装置３としての処理とは、楽曲の再生、再生する楽曲に関する情報の表示、楽曲の歌唱に対する評価、評価の表示などが挙げられる。
メモリ３２には、カラオケ装置３において再生可能な楽曲のデータが記憶されている。ＣＰＵ３１は、ユーザのカラオケ装置３の操作に従ってメモリ３２から楽曲のデータを取得して当該楽曲を再生する。無線通信部３３は、ネットワークＮ２を介して、利用者端末２と通信する。また、表示部３４は、再生する楽曲の歌詞や画像、楽曲の歌唱に対する評価などを表示する。入力部３５には、カラオケ装置３が再生する楽曲を歌唱するユーザの声が入力される。ここで、楽曲を歌唱するとは、カラオケ装置３によって再生される曲および歌詞に合わせて歌うことを含む。入力部３５としてはマイクなどが例示される。カラオケ装置３は、入力部３５に入力されるユーザの声から楽曲の歌唱に対する評価を行う。
図２は、頭部装着装置１を下後方から見た外観を例示する斜視図である。図３は、頭部装着装置１を上方から見た平面図である。また、図４は、頭部装着装置１を前方から見た正面図である。ただし、図３、図４では、図２に例示する固定用部材１０１が省略されている。ここで、下後方とは、利用者が頭部装着装置１を装着したときの利用者の背後かつ、利用者の頭部を下から見上げる位置をいう。また、前方とは、例えば、利用者が頭部装着装置１を装着したときの利用者（装着者）の前方をいう。さらに、上方とは、例えば、利用者の上方をいう。なお、以下、頭部装着装置１を装着した利用者に向かって右側に位置する頭部装着装置１の部分を右側部分、あるいは右側という。また、頭部装着装置１を装着した利用者に向かって左側に位置する頭部装着装置１の部分を左側部分、あるいは左側という。また、利用者に接触する頭部装着装置１の面を裏面という。裏面の反対面を表面という。表面は、利用者が頭部装着装置１を装着したときに、利用者の周囲から見える面である。
図２に例示するように、頭部装着装置１は、鉢巻き状に利用者の頭部に巻き付けて装着し、固定用部材１０１を締めつけることで利用者の頭部に固定される構造を有する。そのため、頭部装着装置１は、人の頭部よりやや大きい空間で湾曲するベルト状の基材１００と、基材１００の両端に固定される固定用部材１０１を有する。固定部材１０１は、基材１００の両端から延伸する線材１１０、１２０と、線材１１０、１２０を対にして引き込んで固定する留め具を有する。基材１００は、利用者の頭部表面から離れた外側面を形成する。すなわち、頭部装着装置１は、頭部から離れた外側面に形状を保つ部材である基材１００を配する構造となっている。基材１００は例えば樹脂製である。ただし、基材１００の材質に限定がある訳ではない。
なお、本実施の形態において、固定用部材１０１の構造、形状、材質に限定がある訳ではない。例えば、図２では、固定部材１０１は、線材１１０、１２０を有するが、線材の代わりに帯状の部材を用いてもよい。また、留め具はどのような構造のものでもよい。
図２のように、頭部装着装置１の基材１００の右側端部に電池ボックス１０２が設けられている。電池ボックス１０２は、扁平な略六面体であり、表面の面積と裏面の面積がいずれも４つの側面の面積よりも大きくなっている。電池ボックス１０２の裏面には、図示しない溝が設けられている。この溝には、基材１００の右側端部から延伸する線材１２０の途中部分がはめ込まれている。したがって、電池ボックス１０２は、基材１００の右側端部で固定されるとともに、線材１２０が溝にはめ込まれることで、頭部装着装置１に固定される。
頭部装着装置１の基材１００の表側両端近傍には、丸みを帯びた２つのハウジング１１１、１２１が設けられている。ハウジング１１１、１２１には、信号処理回路、および通信回路を有する制御基板等が収納される。図４のように、頭部装着装置１を正面から見ると、頭部装着装置１の両脇に２つのハウジング１１１、１２１が位置して見える。
図４のように、基材１００の表側正面付近には、３つのマーカ１１３、１０３、１２３が、マーカ１０３を中心にして左右対称に、基材１００の下縁に沿った位置に直線上に設けられている。マーカ１１３、１０３、１２３は、利用者端末２によって撮影されたときに画像上で、マーカ１１３、１０３、１２３の位置が識別できる構造のものであればどのような構造でもよい。
基材１００の表側正面付近で、マーカ１１３、１２３の上部には、帯状の開口１１４、１２４が形成され、開口１１４、１２４にはそれぞれ、つまみ１１２、１２２が挿入されている。つまみ１１２、１２２は、基材１００の裏面に沿って設けられる図示しない、左右のスライダとそれぞれ連結されている。一方、図２に例示するように、基材１００の裏面では、センサ１１５、１２５がスライダに固定されている。したがって、基材１００に対して、つまみ１１２、あるいは、つまみ１２２を帯状の開口１１４、あるいは、開口１２４に沿って相対移動することで、裏面側でセンサ１１５、あるいは１２５をそれぞれ移動することが可能である。さらに、つまみ１１２、１２２と同軸でねじが形成されており、センサの位置は、ねじ式にて固定することができる。
図４では、つまみは背の低い円筒形状であるが、つまみの形状に限定がある訳ではない。また、図４では、帯状の開口１１４、開口１２４の長手方向に沿って目盛りが刻まれている。目盛りは、中心位置が分かるように、中心位置の目盛りと中心位置以外の目盛りが異なる形状となっている。図４では、中心位置の目盛りは、開口１１４、１２４に頂点を向けた三角形の形状であり、一方、中心位置以外の目盛りは、円形状、あるいは点状で形成されている。目盛りの形成の仕方は、マーカ１１３、１０３、１２３の形成の仕方と同様であるが、特に限定がある訳でない。
図２に例示するように、センサ１１５、１２５は、平板に、３つの窓部を設けた形状となっている。センサ１１５、１２５それぞれの１つの窓部には、近赤外光光源として近ＬＥＤが設けられている。また、センサ１１５、１２５それぞれの残り２つの窓部には、受光部として、フォトダイオードあるいはフォトトランジスタが設けられている。なお、センサ１１５、１２５の受光部の数がそれぞれ２個に限定される訳ではない。例えば、受光部はセンサ１１５、１２５にそれぞれ１個ずつ設けてもよいし、３個以上設けてもよい。
また、基材１００の上下の縁には、遮光部１０４、１０５が設けられる。したがって、センサ１１５、１２５は、基材１００の裏面で、上下の縁の遮光部１０４、１０５に挟まれた空間に設置されている。そして、遮光部１０４、１０５は、頭部装着装置１の裏面で額と触れる部分で緩衝材としても作用する。遮光部１０４、１０５の材質に限定がある訳ではないが、利用者の頭部に接触するために、軽く柔らかい部材が望ましい。遮光部１０４、１０５は、例えば、ウレタン等の樹脂、ゴム等である。
さらに、基材１００の裏面では、電池ボックス１０２、センサ１１５、１２５、ハウジング１１１、１２１内の基板を接続する配線が敷設されている。ただし、基材１００の裏面のセンサ１１５、１２５が設けられた部分以外は、カバー１０６で被覆されている。カバー１０６は、頭部側に接触する頭部装着装置１の裏面側で、基板・配線等が直接利用者の皮膚に触れないようする遮蔽版として作用する。したがって、配線は、基材１００とカバー１０６との間の空間に敷設されている。
（動作例）
図５に、本実施形態において、カラオケ装置３において実行される処理のフローチャートの一例を示す。カラオケ装置３のＣＰＵ３１は、電源がオンになると本フローチャートの処理を実行する。なお、カラオケ装置３において本フローチャートの処理が実行される前に、カラオケ装置３が再生する楽曲を歌唱するユーザは、頭部装着装置１を頭部に装着し、センサ１１５、１２５とユーザの頭部との相対的な位置決めを完了しているものとする。
図５に、本実施形態において、カラオケ装置３において実行される処理のフローチャートの一例を示す。カラオケ装置３のＣＰＵ３１は、電源がオンになると本フローチャートの処理を実行する。なお、カラオケ装置３において本フローチャートの処理が実行される前に、カラオケ装置３が再生する楽曲を歌唱するユーザは、頭部装着装置１を頭部に装着し、センサ１１５、１２５とユーザの頭部との相対的な位置決めを完了しているものとする。
ＯＰ１０１では、ＣＰＵ３１は、再生部として機能し、ユーザがカラオケ装置３を操作して指定された楽曲の再生を開始する。ＣＰＵ３１は、楽曲の再生開始を、無線通信部３３からネットワークＮ２を介して利用者端末２に通知する。利用者端末２のＣＰＵ２１は、カラオケ装置３から再生開始の通知を受信すると、再生開始を無線通信部２３からネットワークＮ１を介して頭部装着装置１に通知する。頭部装着装置１の制御部１１は、利用者端末２から再生開始の通知を受信すると、センサ１１５、１２５の動作を開始する（ＯＰ１０２）。また、ユーザは、マイクなどを用いてカラオケ装置３が再生する楽曲に合わせて歌唱し、ユーザの声は入力部３５を介してカラオケ装置３に入力される。ＣＰＵ３１は、受付部として機能し、ユーザの声の入力を受け付ける。ＣＰＵ３１は、入力されるユーザの声の音量の時間変化のデータをメモリ３２に記憶する。
制御部１１は、センサ１１５、１２５によって所定の時間間隔で計測される脳の血流量のデータを無線通信部１３からネットワークＮ１および利用者端末２を介してカラオケ装置３に送信する。制御部１１は、センサ１１５、１２５から血流量のデータが生成されるたびにデータをカラオケ装置３に送信する。カラオケ装置３のＣＰＵ３１は、取得部として機能し、脳の血流量のデータを受信し、受信したデータをメモリ３２に記憶する。
ＯＰ１０３では、ＣＰＵ３１は、ＯＰ１０１において開始した楽曲の再生を完了する。さらに、ＣＰＵ３１は、楽曲の再生完了を、無線通信部３３からネットワークＮ２を介して利用者端末２に通知する。利用者端末２のＣＰＵ２１は、カラオケ装置３から再生完了の通知を受信すると、再生完了を無線通支部２３からネットワークＮ１を介して頭部装着装置１に通知する。頭部装着装置１の制御部１１は、利用者端末２から再生完了の通知を受信すると、センサ１１５、１２５の動作およびセンサ１１５、１２５によって計測される脳の血流量変化のデータの送信を終了する。ＯＰ１０１、ＯＰ１０２の処理によって、ユーザがカラオケ装置３によって再生される楽曲を歌唱しているときの脳内の血流量の変化が所定の時間間隔で頭部装着装置１によって計測される。頭部装着装置１は、計測したデータを出力し、楽曲の頭出しから終了までの期間の血流データを利用者端末２が区切って保存してもよい。
ＯＰ１０４では、ＣＰＵ３１は、メモリ３２に記憶したユーザの脳の血流量の変化のデータの解析処理を実行する。図６に、ＯＰ１０４において実行される処理のフローチャートの一例を示す。ＣＰＵ３１は、メモリ３２に記憶されているデータを用いて、図６に示す各処理を実行する。ＯＰ１０４の処理によって、右前額部と左前額部それぞれの血流量の変化のデータからさまざまな値を算出することで、ユーザが楽曲を歌唱しているときの脳の状態に対する多面的な評価に役立てることができる。なお、ＯＰ１０４の処理によって得られる各データが、頭部装着装置１から取得された時系列データを所定の手順で加工したデータの一例に相当する。
ＯＰ２０１では、ＣＰＵ３１は、脳の血流量の変化の絶対値の積分値を算出する。図７は、脳の血流量の時間変化の一例を模式的に示すグラフである。図７には、頭部装着装置１のセンサ１１５、１２５から出力される脳の血流量の変化のうち、右前額部と左前額部のいずれか一方の変化のグラフの例を示す。すなわち、本実施形態では、センサ１１５、
１２５から、右前額部と左前額部のそれぞれについて図７に示す血流量の変化のデータが得られる。ＣＰＵ３１は、右前額部と左前額部のそれぞれの血流量の変化のデータにおいて、所定の時間帯における絶対値の積分値を算出する。
１２５から、右前額部と左前額部のそれぞれについて図７に示す血流量の変化のデータが得られる。ＣＰＵ３１は、右前額部と左前額部のそれぞれの血流量の変化のデータにおいて、所定の時間帯における絶対値の積分値を算出する。
ここで、所定の時間帯の一例として、カラオケ装置３によって再生される楽曲中の盛り上がりの部分、いわゆるサビと呼ばれる部分の時間帯が挙げられる。他に、所定の時間帯としては、再生開始から歌い出しまでの時間帯でもよいし、間奏部分の時間帯でもよい。さらに、楽曲の特定の時間帯ではなく、楽曲全体を所定の時間帯とみなしてもよい。このように、所定の時間帯は任意に決めることができる。図７の場合、ＣＰＵ３１は、時間Ｔ１からＴ２までの時間帯を上記の所定の時間帯として、この時間帯における絶対値の積分値（図中、斜線部の面積）を算出する。
さらに、ＯＰ２０１では、ＣＰＵ３１は、同じ時間帯における右前額部と左前額部それぞれの血流量の変化の絶対値の積分値の差も求める。ＣＰＵ３１は、算出した積分値やその差の値をメモリ３２に記憶する。次いで、ＣＰＵ３１は処理をＯＰ２０２に進める。
ＯＰ２０２では、ＣＰＵ３１は、右前額部と左前額部のそれぞれの血流量の変化のデータにおいて、所定の時間帯における血流量の変動幅を算出する。図７の場合、ＣＰＵ３１は、時間Ｔ１からＴ２までの時間帯を上記の所定の時間帯として、この時間帯における血流量の変動幅（図中、Ｖ２−Ｖ１の値）を算出する。さらに、ＣＰＵ３１は、同じ時間帯における右前額部と左前額部それぞれの血流量の変化の変動幅の差も求める。ＣＰＵ３１は、算出した変動幅やその差の値をメモリ３２に記憶する。次いで、ＣＰＵ３１は処理をＯＰ２０３に進める。
ＯＰ２０３では、ＣＰＵ３１は、右前額部と左前額部のそれぞれの血流量の変化のデータにおいて、所定の時間帯における血流量の変化の情報エントロピーを算出する。なお、情報エントロピーは、シャノンの平均情報量と呼ばれるものであり、周知のものであるため、ここでは詳細な説明は省略する。血流量の変化の情報エントロピーは、脳血流の変化が緩やかか激しいかを示す１つの指標として用いることができる。さらに、ＣＰＵ３１は、同じ時間帯における右前額部と左前額部それぞれの血流量の変化の情報エントロピーの差も求める。ＣＰＵ３１は、算出した情報エントロピーやその差の値をメモリ３２に記憶する。次いで、ＣＰＵ３１は処理をＯＰ２０４に進める。
ＯＰ２０４では、ＣＰＵ３１は、右前額部と左前額部のそれぞれの血流量の変化のデータにおいて、所定の時間帯における血流量の変化の呼吸周波数帯域のパワーを算出する。ここで、血流量の変化からユーザの呼吸周波数の変動域（帯域）がわかることが知られている。血流量の変化と呼吸周波数の変動域との関係は周知であるため、ここでは詳細な説明は省略する。そして、呼吸周波数帯域のパワーとは、呼吸周波数の変動域の幅を意味する。呼吸周波数帯域のパワーは、ユーザの歌唱中における息継ぎのタイミングや呼吸の深さを示す１つの指標として用いることができる。さらに、ＣＰＵ３１は、同じ時間帯における右前額部と左前額部それぞれの血流量の変化における呼吸周波数帯域のパワーの差も求める。ＣＰＵ３１は、算出した呼吸周波数帯域のパワーやその差の値をメモリ３２に記憶する。次いで、ＣＰＵ３１は処理をＯＰ２０５に進める。
ＯＰ２０５では、ＣＰＵ３１は、右前額部と左前額部のそれぞれの血流量の変化のデータにおいて、体動の発生率を算出する。図８に、頭部装着装置１のセンサ１１５、１２５から出力される脳の血流量の変化のうち、右前額部と左前額部のいずれか一方の変化のグラフの例を示す。図８に示すグラフでは、時間Ｔ３からＴ４までの時間帯と時間Ｔ５からＴ６までの時間帯において、血流量が落ち込んでいる。このように血流量が一時的に急峻に落ち込む又は上昇する場合に、ユーザの体動が発生したとみなすことができる。そして
、血流量の変化のデータにおける体動の発生率は、ユーザが歌唱に集中できたか否かを示す１つの指標として、あるいは逆の意味では体を動かす程に楽しんで歌っていたことを示す１つの指標として用いることができる。さらに、ＣＰＵ３１は、同じ時間帯における右前額部と左前額部それぞれの血流量の変化における体動の発生率の差も求める。ＣＰＵ３１は、算出した体動の発生率やその差の値をメモリ３２に記憶する。次いで、ＣＰＵ３１は処理をＯＰ２０６に進める。
、血流量の変化のデータにおける体動の発生率は、ユーザが歌唱に集中できたか否かを示す１つの指標として、あるいは逆の意味では体を動かす程に楽しんで歌っていたことを示す１つの指標として用いることができる。さらに、ＣＰＵ３１は、同じ時間帯における右前額部と左前額部それぞれの血流量の変化における体動の発生率の差も求める。ＣＰＵ３１は、算出した体動の発生率やその差の値をメモリ３２に記憶する。次いで、ＣＰＵ３１は処理をＯＰ２０６に進める。
ＯＰ２０６では、ＣＰＵ３１は、右前額部と左前額部のそれぞれの血流量の変化のデータにおいて、心拍数の変動幅を算出する。心拍数が高いほど血流量は多くなることが知られている。ＣＰＵ３１は、所定の時間帯における血流量の値から心拍数の値を算出する。そして、ＣＰＵ３１は、当該時間帯における心拍数の最大値および最小値から心拍数の変動幅を算出する。ＣＰＵ３１は、算出した心拍数の変動幅の値をメモリ３２に記憶する。次いで、ＣＰＵ３１は処理をＯＰ２０７に進める。
ＯＰ２０７では、ＣＰＵ３１は、ＯＰ２０６において算出した心拍数の値から心拍数の変動の情報エントロピーを算出する。なお、情報エントロピーは、ＯＰ２０３と同様であるためここでは詳細な説明は省略する。心拍数の変動の情報エントロピーは、ユーザが落ち着いて歌唱することができたか否かを示す１つの指標として用いることができる。ＣＰＵ３１は、算出した心拍数の変動の情報エントロピーの値をメモリ３２に記憶する。次いで、ＣＰＵ３１は処理をＯＰ２０８に進める。
ＯＰ２０８では、ＣＰＵ３１は、ＯＰ２０１〜ＯＰ２０７で算出した各値とメモリ３２に記憶したユーザの声の音量の時間変化のデータから、平均相関係数あるいは時間窓相関係数の時間変化のデータを生成する。ここで、平均相関係数および時間窓相関係数は周知であるため、詳細な説明は省略する。本実施形態では、これら平均相関係数および時間窓相関係数を算出することにより、ユーザがカラオケ装置３を使用して歌唱するときの声の音量と脳の血流量との相関関係を示すデータを得ることができる。ＣＰＵ３１は、ＯＰ２０８の処理を終了すると、処理をＯＰ１０５に進める。
ＯＰ１０５では、ＣＰＵ３１は、評価部として機能し、ＯＰ２０１〜ＯＰ２０８の処理によって得られるデータからユーザの歌唱の評価に関する情報を生成する。例えば、カラオケ装置３のメモリ３２に、ＯＰ２０１〜ＯＰ２０８で算出される各値の組合せと楽曲との対応付けを示すデータを記憶しておく。そして、ＣＰＵ３１は、推奨部として機能し、ＯＰ２０１〜ＯＰ２０８の処理によって得られた各値の組合せとメモリ３２に記憶されている値の組合せを比較し、互いの値の一致の度合いが所定の高さである場合に、メモリ３２に記憶されている値の組合せと対応付けられている楽曲を次の再生曲として表示部３４に表示する。これにより、カラオケ装置３によれば、ユーザの歌唱中の脳活動に基づく楽曲をリコメンドすることができる。図９にカラオケ装置３の表示部３４に表示されるリコメンド対象の楽曲に関するメッセージの一例を示す。図９に示すように、カラオケ装置３の表示部３４には、ユーザにリコメンドする楽曲の情報やユーザの歌唱に対する評価のメッセージなどを表示することができる。
ＯＰ１０５では、上記の楽曲のリコメンドの他に、以下の処理を行うこともできる。図１０に示すように、カラオケ装置３の表示部３４には、ユーザが楽曲を歌唱しているときに取得された血流量の変化（実測値）を示すグラフＬ１と、当該楽曲を歌唱する場合の血流量の目標値を示すグラフＬ２と、当該楽曲と同一の楽曲を歌唱する歌唱者からサンプルとして取得された血流量の変化を示すグラフＬ３が表示される。一例として、グラフＬ２により示される目標値は、いわゆる健康な人の脳の血流量を示すものであり、当該楽曲を歌唱する複数の歌唱者から取得した血流量の変化における移動平均や重み付けなどによって求められる値である。なお、目標値は、ユーザ自身が同じ歌を歌ったときに取得した数
回の血流量の変化を移動平均や重み付けなどによって求められる値であってもよい。また、グラフＬ３により示されるサンプルの血流量は、サンプルとして取得された血流量のうち最大の血流量（最高値）を示すものである。この他にも、同一の楽曲を歌唱する他のユーザの血流量との比較結果や過去に同一ユーザが同一の楽曲を歌唱した際に取得された血流量との比較結果が表示部３４に表示されてもよい。
回の血流量の変化を移動平均や重み付けなどによって求められる値であってもよい。また、グラフＬ３により示されるサンプルの血流量は、サンプルとして取得された血流量のうち最大の血流量（最高値）を示すものである。この他にも、同一の楽曲を歌唱する他のユーザの血流量との比較結果や過去に同一ユーザが同一の楽曲を歌唱した際に取得された血流量との比較結果が表示部３４に表示されてもよい。
また、例えば、あらかじめ、カラオケ装置３のメモリ３２に、カラオケ装置３において再生される楽曲をプロの歌手が歌唱した場合の脳の血流量の時間変化のデータや当該データに対してＯＰ２０１〜ＯＰ２０８の処理を実行したときに得られるデータが記憶されているとする。そして、ＣＰＵ３１は、ユーザが歌唱したときにＯＰ２０１〜ＯＰ２０８の処理によって得られるデータとメモリ３２に記憶されているプロの歌手が歌唱した場合のデータとの比較から、ユーザの歌唱に対する評価に関する情報を表示部３４に表示する。例えば、ＣＰＵ３１は、楽曲中のサビの部分ではプロの歌手の脳の方がより活動していることを伝えるメッセージなどを表示部３４に表示する。これにより、カラオケ装置３によれば、よりプロの歌手に近い歌唱ができるようにユーザを支援する情報を提供することができる。
また、ＣＰＵ３１は、ＯＰ２０１〜ＯＰ２０８の処理によって得られるデータから、歌唱中の脳活動の活発さを示す評価値を生成して表示部３４に表示する。例えば、あらかじめ、カラオケ装置３のメモリ３２に、ＯＰ２０１〜ＯＰ２０８の処理によって算出される値から所定の指数を算出するための数式や値などのデータが記憶されているとする。ここで、所定の指数とは、ユーザが歌唱をどれだけ楽しんだかを示すことを目的として定められる値である。ＣＰＵ３１は、ＯＰ２０１〜ＯＰ２０８の処理によって得られるデータとメモリ３２に記憶されているデータとを用いて所定の指数を算出し、算出した指数を表示部３４に表示する。これにより、カラオケ装置３によれば、ユーザの脳活動の観点からユーザが楽曲の歌唱をどれだけ楽しんだかを示す情報を提供することができる。
また、ＣＰＵ３１は、ＯＰ２０４において算出した呼吸周波数帯域のパワーからユーザの歌唱中の呼吸の変化や息継ぎの回数およびタイミングなどを特定し、特定した呼吸に対する評価を生成して表示部３４に表示する。例えば、あらかじめ、カラオケ装置３のメモリ３２に、各楽曲に対して最適とみなされる呼吸に関するデータが記憶されているとする。ＣＰＵ３１は、ＯＰ２０４において得られるユーザの歌唱中の呼吸に関するデータと、メモリ３２に記憶されている呼吸に関するデータとを比較し、比較結果を表示部３４に表示する。例えば、ＣＰＵ３１は、比較の結果、ユーザの歌唱中の呼吸の変化が激しいと特定した場合は、落ち着いて歌唱するようアドバイスするメッセージを表示部３４に表示する。これにより、カラオケ装置３によれば、より上手に歌唱するための息継ぎや呼吸に関するアドバイスをユーザに提供することができる。
脳の前頭葉が担う実行機能（注意、集中、判断、計画、行動などの脳機能を調節する高次認知機能）が、ストレッチ運動などのいわゆる軽い運動でも向上するというエビデンスが存在する。カラオケ装置３によれば、ユーザの脳活動に適切な楽曲や歌唱のアドバイスなどが提供される。したがって、ユーザがカラオケ装置３を使用して継続的に歌を歌唱することで、ユーザの前頭葉の活動が活発になり、いわゆる認知症の予防につながる効果が期待される。
以上が本実施形態に関する説明であるが、上記の計測システムの構成は、上記の実施形態に限定されるものではなく、本発明の技術的思想と同一性を失わない範囲内において種々の変更が可能である。以下に上記の楽曲のリコメンドの処理の変形例について説明する。図１１に、カラオケ装置３のＣＰＵ３１が実行する処理のフローチャートの例を示す。なお、以下の説明において、上記の実施形態と同一の処理については同一の符号を付し、
詳細な説明は省略する。
詳細な説明は省略する。
本変形例では、ユーザ以外の歌唱者がカラオケ装置３によって再生される楽曲を歌唱したときに、当該楽曲の識別情報と頭部装着装置１から取得された血流量の変化のデータ（ＯＰ２０１〜ＯＰ２０８の処理によって得られるデータを含む）とを対応付けたデータベースがカラオケ装置３のメモリ３２上に作成されていると想定する。なお、当該データベースは、例えばネットワーク上のクラウドなど、カラオケ装置３の外部に設けられたデータベースとしてもよい。
ＣＰＵ３１は、上記と同様にＯＰ１０１〜ＯＰ１０４の処理を実行する。そして、ＣＰＵ３１は、ＯＰ１０４の処理を終了すると、処理をＯＰ３０５の処理を実行する。ＯＰ３０５では、歌唱した楽曲についてユーザからの評価を受け付ける。この評価としては、歌唱した後の現在の気分や心理状態（気持ちよい、気持ち悪い、明るくなれた、暗くなった、など）を示す評価が例示される。ユーザからの評価は、ユーザが利用者端末２を操作することで受け付けてもよいし、ユーザがカラオケ装置３を操作することで受け付けてもよい。次いで、ＣＰＵ３１は、処理をＯＰ３０６に進める。
ＯＰ３０６では、ＣＰＵ３１は、ＯＰ３０５において受け付けた評価が所定の基準以上であるか否かを判定する。ここで所定の基準とは、ＯＰ３０５において受け付けた評価が、例えばユーザが当該楽曲を歌唱するのが好きであることを示す基準である。ＣＰＵ３１は、評価が所定の基準以上である場合は（ＯＰ３０６：Ｙｅｓ）、処理をＯＰ３０７に進める。一方、ＣＰＵ３１は、評価が所定の基準未満である場合は（ＯＰ３０６：Ｎｏ）、本フローチャートの処理を終了する。
ＯＰ３０７では、ＣＰＵ３１は、メモリ３２に作成された上記のデータベースを参照し、ＯＰ２０１〜ＯＰ２０８によって得られるデータの組合せと類似するとみなせるデータを特定する。ここで、ＣＰＵ３１は、データの類似を、頭部装着装置１から取得された時系列データを所定の手順で加工したデータによって判断すればよい。ＣＰＵ３１は、例えば、時系列データを移動平均して高周波成分を除去したデータ、図６で求めた積分値、血流の変動幅、情報エントロピー、呼吸周波数帯域のパワー、体動の発生率、心拍数の変動幅、心拍数の変動の情報エントロピー、平均相関係数、時間窓相関係数の少なくとも１つを基に、データの類似を判断すればよい。
そして、ＣＰＵ３１は、特定したデータが示す楽曲の識別情報を取得する。次いで、ＣＰＵ３１は、処理をＯＰ３０８に進める。ＯＰ３０８では、ＣＰＵ３１は、ＯＰ３０７で取得した識別情報から楽曲を特定し、特定した楽曲をユーザにリコメンドする。例えば、ＣＰＵ３１は、図９に示すように特定した楽曲をリコメンドするメッセージをカラオケ装置３の表示部３４に表示してもよいし、当該メッセージを利用者端末２の表示部２４に表示させてもよい。
したがって、本変形例によれば、ユーザが楽曲を歌唱したときに気分や心理状態が良くなった場合に、歌唱すると同じように脳の血流量が変化するとみなせる別の楽曲を特定してユーザにリコメンドすることができる。
さらに他の変形例として、例えば、上記では、ＯＰ１０５のユーザの歌唱の評価に関する情報がカラオケ装置３の表示部３４に表示されるが、ＣＰＵ３１が通信部として機能して当該情報を利用者端末２に送信し、当該情報が利用者端末２の表示部２４に表示されてもよい。また、ＯＰ１０５のユーザの歌唱の評価に関する情報がメモリ３２に記憶され、任意のタイミングでユーザの履歴情報としてカラオケ装置３の表示部３４あるいは利用者端末２の表示部２４されてもよい。さらに、カラオケ装置３がＣＰＵ３１とメモリ３２で
演算していた歌唱の評価に関する情報を、利用者端末２のＣＰＵ２１とメモリ２２を用いて演算し、この結果を表示部２４に表示するようにしてもよい。
演算していた歌唱の評価に関する情報を、利用者端末２のＣＰＵ２１とメモリ２２を用いて演算し、この結果を表示部２４に表示するようにしてもよい。
また、ユーザが頭部装着装置１を装着して頭部装着装置１のユーザの頭部に対する位置決めが完了したときに、カラオケ装置３による楽曲の再生および頭部装着装置１のセンサ１１５、１２５の動作を開始してもよい。一例として、ユーザがカラオケ装置３を操作して再生する楽曲を決定したときに、ユーザに頭部装着装置１の装着を促すメッセージがカラオケ装置３の表示部３４に表示される。そして、ユーザが頭部装着装置１を装着すると、そのことが利用者端末２を経由してカラオケ装置３に通知され、カラオケ装置３は当該通知を受信すると楽曲の再生を開始する。このように、ＣＰＵ３１が同期部として機能し、ユーザが頭部装着装置１を装着するとカラオケ装置３の楽曲の再生が自動的に開始されてもよい。
また、上記では、カラオケ装置３および利用者端末２が別体である場合を想定しているが、上記のカラオケ装置３および利用者端末２の機能を備える家庭用テレビとしても、上記の発明を実現することができる。あるいは、カラオケ装置３および／または利用者端末２の機能を備える専用の機器を周知の家庭用テレビと接続するように構成してもよい。そして、上記の頭部装着装置１のセンサ１１５、１２５によって取得される血流量のデータが当該家庭用テレビに送信されるようにすればよい。
また、上記では、カラオケ装置３による楽曲の再生が完了した後に、上記のＯＰ２０１〜ＯＰ２０８の処理によって得られるデータの解析結果が表示部３４に表示されるが、カラオケ装置３による楽曲の再生中に、それまでのユーザの歌唱について得られる脳の血流量のデータに対して上記の解析結果が実行されて評価情報が表示部３４に表示されてもよい。例えば、現在から３０秒前などの所定時間内に得られる脳の血流量のデータに対する評価が表示部３４に表示されることで、ユーザの歌唱中に、もっと落ち着いて歌うよう促すメッセージやもっと声を出して歌うよう促すメッセージなど、ユーザの歌唱に役立つ情報をフィードバックすることができる。
また、上記では、カラオケ装置３を使用して歌唱するユーザは１人である場合を想定したが、複数人のユーザが歌唱した場合でも上記の発明を適用することができる。この場合、各ユーザが頭部装着装置１を装着し、カラオケ装置３が各頭部装着装置１から出力される脳の血流量のデータを各ユーザと対応付けて記憶する。
また、上記では、カラオケ装置３のメモリ３２に楽曲のデータが記憶されているが、カラオケ装置３は、いわゆる通信カラオケのように、外部からインターネットやテレビ放送網などを利用して楽曲のデータを受信してもよい。また、カラオケ装置３の表示部３４には、再生中の楽曲の歌詞や画像などの歌情報とともに上記の処理によって得られる脳の血流量のデータに対する評価に関する情報を表示してもよい。
１ 頭部装着装置
２ 利用者端末
３ カラオケ装置
２１、３１ ＣＰＵ
３２ メモリ
３３ 無線通信部
３４ 表示部
３５ 入力部
２ 利用者端末
３ カラオケ装置
２１、３１ ＣＰＵ
３２ メモリ
３３ 無線通信部
３４ 表示部
３５ 入力部
Claims (24)
- 楽曲を再生する再生部と、
前記再生される楽曲とともに歌唱する利用者の頭部の血流状態の変化を計測する頭部装着装置から前記血流状態の変化に関するデータを取得するデータ取得部と、
前記楽曲の再生終了時に前記取得したデータを所定の形式で表示する表示部と
を備える情報処理装置。 - 前記所定の形式は、前記取得したデータと前記取得したデータの目標値との比較、前記取得したデータと前記楽曲と同一の楽曲を歌唱する歌唱者から取得された取得済みサンプルの統計値との比較、前記取得したデータと前記楽曲と同一の楽曲を歌唱する他の利用者の頭部の血流状態の変化に関するデータとの比較、および前記取得したデータと前記楽曲と同一の楽曲を歌唱する前記利用者から過去に取得した取得済みデータとの比較の少なくとも１つを含む請求項１に記載の情報処理装置。
- 前記利用者が使用する端末と通信を行う通信部をさらに備え、
前記通信部は、前記取得したデータを前記所定の形式で表示するためのデータを前記端末に送信する
請求項１または請求項２に記載の情報処理装置。 - 前記頭部装着装置による前記利用者の頭部の血流状態の変化の計測の開始および終了と、前記再生される楽曲の再生の開始および終了とを同期させる同期部をさらに備える、請求項１から３のいずれか１項に記載の情報処理装置。
- 楽曲を再生する再生部と、
前記再生される楽曲とともに歌唱する利用者の頭部の血流状態の変化を計測する頭部装着装置から前記血流状態の変化に関する第１のデータを取得するデータ取得部と、
前記利用者または前記利用者以外の歌唱者が過去に歌唱したときに前記頭部装着装置から取得された第２のデータと前記第２のデータの取得時に再生された楽曲の識別情報とを対応付けて記憶するデータベースにアクセスするデータベースアクセス部と、
前記楽曲の再生終了時に前記利用者の気分または心理状態を含む前記利用者からの評価を受け付ける評価受付部と、
前記受け付けた評価が所定の基準以上の場合に、前記第２のデータのうち前記第１のデータに類似するデータと対応付けて記憶された楽曲の識別情報を前記データベースから取得する識別情報取得部と、
前記識別情報によって特定される楽曲の再生を推奨する推奨部と
を備える情報処理装置。 - 前記第１のデータおよび前記第２のデータは、前記楽曲の開始から終了までの間に前記頭部装着装置から取得された時系列データを所定の手順で加工したデータである、請求項５に記載の情報処理装置。
- 前記利用者が使用する端末と通信を行う通信部をさらに備え、
前記通信部は、前記識別情報によって特定される楽曲の再生を推奨するためのデータを前記端末に送信する
請求項５または請求項６に記載の情報処理装置。 - 前記頭部装着装置による前記利用者の頭部の血流状態の変化の計測の開始および終了と、前記再生される楽曲の再生の開始および終了とを同期させる同期部をさらに備える、請求項５から７のいずれか１項に記載の情報処理装置。
- コンピュータが、
楽曲を再生し、
前記再生される楽曲とともに歌唱する利用者の頭部の血流状態の変化を計測する頭部装着装置から前記血流状態の変化に関するデータを取得し、
前記楽曲の再生終了時に前記取得したデータを所定の形式で表示する
ことを実行する情報処理方法。 - 前記所定の形式は、前記取得したデータと前記取得したデータの目標値との比較、前記取得したデータと前記楽曲と同一の楽曲を歌唱する歌唱者から取得された取得済みサンプルの統計値との比較、前記取得したデータと前記楽曲と同一の楽曲を歌唱する他の利用者の頭部の血流状態の変化に関するデータとの比較、および前記取得したデータと前記楽曲と同一の楽曲を歌唱する前記利用者から過去に取得した取得済みデータとの比較の少なくとも１つを含む請求項９に記載の情報処理方法。
- 前記コンピュータがさらに、
前記取得したデータを前記所定の形式で表示するためのデータを前記利用者が使用する端末に送信する
請求項９または請求項１０に記載の情報処理方法。 - 前記コンピュータがさらに、
前記頭部装着装置による前記利用者の頭部の血流状態の変化の計測の開始および終了と、前記再生される楽曲の再生の開始および終了とを同期させる
請求項９から１１のいずれか１項に記載の情報処理方法。 - コンピュータが、
楽曲を再生し、
前記再生される楽曲とともに歌唱する利用者の頭部の血流状態の変化を計測する頭部装着装置から前記血流状態の変化に関する第１のデータを取得し、
前記利用者または前記利用者以外の歌唱者が過去に歌唱したときに前記頭部装着装置から取得された第２のデータと前記第２のデータの取得時に再生された楽曲の識別情報とを対応付けて記憶するデータベースにアクセスし、
前記楽曲の再生終了時に前記利用者の気分または心理状態を含む前記利用者からの評価を受け付け、
前記受け付けた評価が所定の基準以上の場合に、前記第２のデータのうち前記第１のデータに類似するデータと対応付けて記憶された楽曲の識別情報を前記データベースから取得し、
前記識別情報によって特定される楽曲の再生を推奨する
ことを実行する情報処理方法。 - 前記第１のデータおよび前記第２のデータは、前記楽曲の開始から終了までの間に前記頭部装着装置から取得された時系列データを所定の手順で加工したデータである、請求項１３に記載の情報処理方法。
- 前記コンピュータがさらに、
前記識別情報によって特定される楽曲の再生を推奨するためのデータを前記利用者が使用する端末に送信する
請求項１３または請求項１４に記載の情報処理方法。 - 前記コンピュータがさらに、
前記頭部装着装置による前記利用者の頭部の血流状態の変化の計測の開始および終了と、前記再生される楽曲の再生の開始および終了とを同期させる
請求項１３から１５のいずれか１項に記載の情報処理方法。 - コンピュータに、
楽曲を再生すると、前記再生される楽曲とともに歌唱する利用者の頭部の血流状態の変化を計測する頭部装着装置から前記血流状態の変化に関するデータを取得するステップと、
前記楽曲の再生終了時に前記取得したデータを所定の形式で表示するステップ
を実行させるための情報処理プログラム。 - 前記所定の形式は、前記取得したデータと前記取得したデータの目標値との比較、前記取得したデータと前記楽曲と同一の楽曲を歌唱する歌唱者から取得された取得済みサンプルの統計値との比較、前記取得したデータと前記楽曲と同一の楽曲を歌唱する他の利用者の頭部の血流状態の変化に関するデータとの比較、および前記取得したデータと前記楽曲と同一の楽曲を歌唱する前記利用者から過去に取得した取得済みデータとの比較の少なくとも１つを含む請求項１７に記載の情報処理プログラム。
- 前記コンピュータにさらに、
前記取得したデータを前記所定の形式で表示するためのデータを前記利用者が使用する端末に送信するステップ
を実行させるための請求項１７または請求項１８に記載の情報処理プログラム。 - 前記コンピュータにさらに、
前記頭部装着装置による前記利用者の頭部の血流状態の変化の計測の開始および終了と、前記再生される楽曲の再生の開始および終了とを同期させるステップ
を実行させるための請求項１７から１９のいずれか１項に記載の情報処理プログラム。 - コンピュータに、
楽曲を再生すると、前記再生される楽曲とともに歌唱する利用者の頭部の血流状態の変化を計測する頭部装着装置から前記血流状態の変化に関する第１のデータを取得するステップと、
前記利用者または前記利用者以外の歌唱者が過去に歌唱したときに前記頭部装着装置から取得された第２のデータと前記第２のデータの取得時に再生された楽曲の識別情報とを対応付けて記憶するデータベースにアクセスするステップと、
前記楽曲の再生終了時に前記利用者の気分または心理状態を含む前記利用者からの評価を受け付けるステップと、
前記受け付けた評価が所定の基準以上の場合に、前記第２のデータのうち前記第１のデータに類似するデータと対応付けて記憶された楽曲の識別情報を前記データベースから取得するステップと、
前記識別情報によって特定される楽曲の再生を推奨するステップ
を実行させるための情報処理プログラム。 - 前記第１のデータおよび前記第２のデータは、前記楽曲の開始から終了までの間に前記頭部装着装置から取得された時系列データを所定の手順で加工したデータである、請求項２１に記載の情報処理プログラム。
- 前記コンピュータにさらに、
前記識別情報によって特定される楽曲の再生を推奨するためのデータを前記利用者が使用する端末に送信するステップ
を実行させるための請求項２１または請求項２２に記載の情報処理プログラム。 - 前記コンピュータにさらに、
前記頭部装着装置による前記利用者の頭部の血流状態の変化の計測の開始および終了と、前記再生される楽曲の再生の開始および終了とを同期させるステップ
を実行させるための請求項２１から２３のいずれか１項に記載の情報処理プログラム。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016140863A JP6801858B2 (ja) | 2016-07-15 | 2016-07-15 | 情報処理装置、情報処理方法および情報処理プログラム |
| CN201710575417.4A CN107622802A (zh) | 2016-07-15 | 2017-07-14 | 信息处理装置、信息处理方法及计算机可读记录介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016140863A JP6801858B2 (ja) | 2016-07-15 | 2016-07-15 | 情報処理装置、情報処理方法および情報処理プログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2018010261A true JP2018010261A (ja) | 2018-01-18 |
| JP6801858B2 JP6801858B2 (ja) | 2020-12-16 |
Family
ID=60995586
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016140863A Active JP6801858B2 (ja) | 2016-07-15 | 2016-07-15 | 情報処理装置、情報処理方法および情報処理プログラム |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP6801858B2 (ja) |
| CN (1) | CN107622802A (ja) |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008532587A (ja) * | 2005-02-22 | 2008-08-21 | ヘルス−スマート リミテッド | 生理学的及び心理学的／生理学的モニタリングのための方法及びシステム並びにその使用 |
| WO2015177908A1 (ja) * | 2014-05-22 | 2015-11-26 | 株式会社日立製作所 | 訓練システム |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005134599A (ja) * | 2003-10-30 | 2005-05-26 | Daiichikosho Co Ltd | バイタル検知機能を有したカラオケシステム |
| CN101467875B (zh) * | 2007-12-28 | 2012-10-10 | 周常安 | 耳戴式生理反馈装置 |
-
2016
- 2016-07-15 JP JP2016140863A patent/JP6801858B2/ja active Active
-
2017
- 2017-07-14 CN CN201710575417.4A patent/CN107622802A/zh not_active Withdrawn
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008532587A (ja) * | 2005-02-22 | 2008-08-21 | ヘルス−スマート リミテッド | 生理学的及び心理学的／生理学的モニタリングのための方法及びシステム並びにその使用 |
| WO2015177908A1 (ja) * | 2014-05-22 | 2015-11-26 | 株式会社日立製作所 | 訓練システム |
Non-Patent Citations (1)
| Title |
|---|
| 齊藤 忠彦: "歌唱表現におけるカラオケ使用時の大脳皮質前頭部・側頭部の活動の特徴", 音楽教育学, vol. 第41巻第1号, JPN6020028938, 2011, pages 1 - 10, ISSN: 0004320554 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN107622802A (zh) | 2018-01-23 |
| JP6801858B2 (ja) | 2020-12-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6654715B2 (ja) | 情報処理システムおよび情報処理装置 | |
| US11786163B2 (en) | System and method for associating music with brain-state data | |
| US20190387998A1 (en) | System and method for associating music with brain-state data | |
| US10512428B2 (en) | System and method for facilitating sleep stage transitions | |
| US11202882B2 (en) | System and method for facilitating wakefulness | |
| JP2020072800A (ja) | 情報処理システム、情報処理装置、情報処理プログラム、および、情報処理方法 | |
| US11185281B2 (en) | System and method for delivering sensory stimulation to a user based on a sleep architecture model | |
| EP2950867B1 (en) | Brain-wave based closed-loop sensory stimulation to induce sleep | |
| US10939866B2 (en) | System and method for determining sleep onset latency | |
| US20180220901A1 (en) | Methods of controlling biometric parameters via musical audio | |
| CN106999697B (zh) | 用于增加小睡的恢复性值的系统和方法 | |
| CN101969841A (zh) | 修改对象的心理生理状态 | |
| TW201546616A (zh) | 情緒調控系統及其調控方法 | |
| JP2022002802A (ja) | 呼吸センサ、呼吸検出装置、生体情報処理装置、生体情報処理方法、コンピュータプログラム及びマインドフルネス支援装置 | |
| KR101964463B1 (ko) | 스마트 단말 연동 음파 및 진동형 바이노럴 비트를 이용한 수면유도 매트 장치 | |
| O'Neill et al. | Sleep mode: Mobile apps and the optimisation of sleep-wake rhythms | |
| KR20150137453A (ko) | 뇌파를 이용한 제어 방법 및 휴대 장치 | |
| JP7018640B2 (ja) | 情報処理装置、情報処理方法および情報処理プログラム | |
| JP2005198828A (ja) | 生体情報解析装置、生体情報解析方法、制御プログラムおよび記録媒体 | |
| JP6801858B2 (ja) | 情報処理装置、情報処理方法および情報処理プログラム | |
| Rocha et al. | Rate of infant carrying impacts infant spontaneous motor tempo | |
| JP2018161246A (ja) | 情報処理装置、情報処理方法および情報処理プログラム | |
| KR20180101927A (ko) | 넥밴드 타입 헬스케어 웨어러블 장치 및 그 방법 | |
| KR20240042475A (ko) | 수면 유도 장치 및 그것의 동작방법 | |
| CN111110216A (zh) | 智能终端 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190711 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20190711 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20190711 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200717 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200811 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201009 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201020 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201118 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6801858 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |