JP6531567B2 - Karaoke apparatus and program for karaoke - Google Patents

Karaoke apparatus and program for karaoke Download PDF

Info

Publication number
JP6531567B2
JP6531567B2 JP2015169858A JP2015169858A JP6531567B2 JP 6531567 B2 JP6531567 B2 JP 6531567B2 JP 2015169858 A JP2015169858 A JP 2015169858A JP 2015169858 A JP2015169858 A JP 2015169858A JP 6531567 B2 JP6531567 B2 JP 6531567B2
Authority
JP
Japan
Prior art keywords
information
singing
user
evaluation
song
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015169858A
Other languages
Japanese (ja)
Other versions
JP2017045018A (en
Inventor
翔平 永井
翔平 永井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Brother Industries Ltd
Original Assignee
Brother Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Brother Industries Ltd filed Critical Brother Industries Ltd
Priority to JP2015169858A priority Critical patent/JP6531567B2/en
Publication of JP2017045018A publication Critical patent/JP2017045018A/en
Application granted granted Critical
Publication of JP6531567B2 publication Critical patent/JP6531567B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Reverberation, Karaoke And Other Acoustics (AREA)

Description

本発明は、伴奏に合わせて歌唱を楽しむためのカラオケ装置、及び、情報処理装置で実行されるカラオケ用プログラムに関する。特に、ユーザーの歌唱を評価することのできるカラオケ装置、及び、カラオケ用プログラムに関する。   The present invention relates to a karaoke apparatus for enjoying singing along with accompaniment, and a karaoke program executed by an information processing apparatus. In particular, the present invention relates to a karaoke apparatus capable of evaluating a user's singing, and a karaoke program.

従来、楽曲の演奏に合わせて歌唱を楽しむカラオケが行われている。カラオケは、友人、知人等が集まる社交の場で楽しまれることが多い。ところで、このような社交の場でカラオケを行うこと、すなわち、他人の前で歌唱することに慣れた人と、不慣れな人がいる。カラオケに慣れた人は、緊張することなく他人の前で歌唱を行うことができる人といえる。一方、不慣れな人は、他人の前で歌唱すると緊張することで本来の実力を発揮できない場合がある。   In the past, karaoke has been performed to enjoy singing along with the performance of music. Karaoke is often enjoyed in social places where friends and acquaintances gather. By the way, there are people who are used to performing karaoke in such social places, that is, people who are used to singing in front of others and people who are not used to it. People who are used to karaoke can be said to be able to sing in front of others without getting nervous. On the other hand, unfamiliar people may not be able to exert their true ability by being nervous when singing in front of others.

特許文献1には、カラオケマイクに人体の振動を検出する振動検出手段を設け、振動検出手段により検出した検出信号から人体固有振動に相当する周波数成分を濾過し、濾過して得られた抽出信号を基準値と比較することで緊張度を判定するカラオケシステムが開示されている。また、特許文献1のカラオケシステムには、判定した緊張度を数値データでモニタに表示して歌唱中のユーザーに通知すること、あるいは、会員毎の記録として緊張度を記録しておくことも開示されている。   In Patent Document 1, a vibration detection means for detecting the vibration of a human body is provided in a karaoke microphone, and an extraction signal obtained by filtering and filtering a frequency component corresponding to human body natural vibration from a detection signal detected by the vibration detection means A karaoke system is disclosed that determines the degree of tension by comparing the value with a reference value. In addition, the karaoke system of Patent Document 1 also discloses displaying the determined degree of tension as numerical data on a monitor and notifying the user while singing, or recording the degree of tension as a record for each member. It is done.

特開2007−225993号公報Unexamined-Japanese-Patent No. 2007-225993

カラオケ装置には、歌唱を採点することで歌唱評価を行う機能を有するものがある。このような歌唱評価機能を使用することで、ユーザーの歌唱能力を客観的に判断することが可能である。前述したようにカラオケに慣れた人は、自己の実力を十分に発揮することができるものの、不慣れな人は緊張も伴い実力を発揮できないことが考えられる。そのような場合、不慣れな人の歌唱評価は自己の実力よりも低くなってしまうことが予想される。低い歌唱評価を突きつけられたユーザーは、人前で歌唱することに対して更に消極的になると共に、再度、歌唱する機会には更に緊張を伴う悪循環に陥ることが考えられる。   Some karaoke devices have a function of performing song evaluation by scoring songs. By using such a song evaluation function, it is possible to objectively judge the user's singing ability. As mentioned above, people who are used to karaoke can fully demonstrate their abilities, but untrained people may be unable to exert their abilities with tension. In such a case, it is expected that the singing evaluation of an unfamiliar person will be lower than his or her ability. Users who are hit by low song ratings are likely to be more reluctant to sing in front of the public and to fall into a vicious circle of tensions again at the opportunity to sing.

本発明は、このような事情を鑑みたものであって、緊張して歌唱するユーザーの歌唱評価が低い評価となってしまうことを抑制することを目的とするものである。   The present invention has been made in view of such circumstances, and it is an object of the present invention to suppress that the evaluation of singing by a user who sings nervously becomes a low evaluation.

本発明は、このような課題を解決することを目的とするものであって、以下の構成を採用したことを特徴としている。
楽曲に対応する演奏情報に基づいて演奏を行う演奏処理と、
前記演奏処理期間中に歌唱するユーザーの緊張状態を検出する検出処理と、
マイクロホンから入力される歌唱音声と、演奏される演奏情報に基づいて歌唱評価情報を算出する歌唱評価処理と、
前記検出処理で検出した緊張状態が高い場合、評価が高くなるように歌唱評価情報を補正する補正処理と、
前記補正処理で補正された歌唱評価情報を通知する通知処理と、を実行することを特徴とする。
The present invention is intended to solve such problems, and is characterized in that the following configuration is adopted.
Performance processing for performing a performance based on performance information corresponding to the music;
A detection process for detecting a tension state of a user singing during the performance process period;
Singing evaluation processing that calculates singing evaluation information based on singing voice input from a microphone and performance information to be played;
A correction process for correcting song evaluation information so that the evaluation becomes high when the tension state detected in the detection process is high;
Performing notification processing for notifying the song evaluation information corrected by the correction processing.

さらに本発明に係るカラオケ装置において、
前記検出処理は、ユーザーの歌唱音声に基づいて緊張状態を検出することを特徴とする。
Furthermore, in the karaoke apparatus according to the present invention,
The detection processing is characterized in that a tension state is detected based on a singing voice of the user.

さらに本発明に係るカラオケ装置は、
1の楽曲の演奏時間中、歌唱音声が所定の状態である時間長に基づいて緊張状態を判検出することを特徴とする。
Furthermore, the karaoke apparatus according to the present invention is
The present invention is characterized in that the tension state is detected based on the length of time in which the singing voice is in a predetermined state during the playing time of the first music.

さらに本発明に係るカラオケ装置は、
前記検出処理で検出した緊張状態の度合いに応じて、歌唱評価情報の補正度合いを変更することを特徴とする。
Furthermore, the karaoke apparatus according to the present invention is
The correction degree of the song evaluation information is changed according to the degree of the tension state detected in the detection process.

また本発明に係るカラオケ用プログラムは、
演奏情報に基づいて演奏を行う演奏処理と、
前記演奏処理期間中に歌唱するユーザーの緊張状態を検出する検出処理と、
マイクロホンから入力される歌唱音声と、演奏される演奏情報に基づいて歌唱評価情報を算出する歌唱評価処理と、
前記検出処理で検出した緊張状態が高い場合、評価が高くなるように歌唱評価情報を補正する補正処理と、
前記補正処理された歌唱評価情報を通知する通知処理と、を情報処理装置に実行させることを特徴とする。
The karaoke program according to the present invention is
Performance processing that plays based on performance information,
A detection process for detecting a tension state of a user singing during the performance process period;
Singing evaluation processing that calculates singing evaluation information based on singing voice input from a microphone and performance information to be played;
A correction process for correcting song evaluation information so that the evaluation becomes high when the tension state detected in the detection process is high;
The information processing apparatus is caused to execute notification processing of notifying the song evaluation information subjected to the correction processing.

本発明に係るカラオケ装置、カラオケ用プログラムによれば、緊張して歌唱するユーザーの歌唱評価が低い評価となってしまうことを抑制することが可能となる。緊張して歌唱するユーザーに対しても評価を低くしないことで、歌唱することに自信を持たせ、カラオケに対する好感度の向上を図り、ひいてはカラオケ人口の拡大を図ることが可能となる。   According to the karaoke apparatus and the program for karaoke according to the present invention, it is possible to suppress that the evaluation of singing by the user who sings nervously becomes a low evaluation. By not lowering the evaluation also for users who are nervous and sing, it is possible to give confidence in singing, to improve the positivity for karaoke, and thus to expand the karaoke population.

さらに本発明は、ユーザーの歌唱音声に基づいて緊張状態を検出することを特徴としている。このような構成によれば、緊張による震えを検出する手段をマイクロホンに設ける等、新たな構成を付加する必要がなく、既存の構成を使用して緊張状態を検出することが可能となる。   Furthermore, the present invention is characterized in that the tension state is detected based on the user's singing voice. According to such a configuration, there is no need to add a new configuration, such as providing a means for detecting tremor due to tension in the microphone, and it becomes possible to detect a tension state using an existing configuration.

さらに本発明は、1の楽曲の演奏中、歌唱音声が所定の状態である時間長に基づいて緊張状態を判検出することとしている。このような構成によれば、所定状態である時間長を計時することで、簡易に緊張状態を判定することが可能となる。さらに、1の楽曲の歌唱期間に対する歌唱音声が所定状態にある時間の割合で緊張状態を判定することとしてもよい。このような構成によれば、緊張状態の精度向上を図ることが可能であり、緊張度を容易に算出することも可能となる。   Furthermore, according to the present invention, the tension state is determined and detected based on the length of time in which the singing voice is in the predetermined state during the performance of one music piece. According to such a configuration, it is possible to easily determine the tension state by counting the time length which is the predetermined state. Furthermore, the tension state may be determined at a ratio of time during which the singing voice is in a predetermined state with respect to the singing period of one music piece. According to such a configuration, it is possible to improve the accuracy of the tension state, and it is also possible to easily calculate the degree of tension.

さらに本発明は、検出した緊張状態の度合いに応じて、歌唱評価情報の補正度合いを変更することとしている。このような構成によれば、重度の緊張状態の場合には大幅に歌唱評価を高くし、また、軽度の緊張状態の場合には小幅に歌唱評価を高くすることで、緊張状態を差し引いた適切な歌唱評価を通知することが可能となる。   Furthermore, according to the present invention, the degree of correction of the song evaluation information is changed in accordance with the detected degree of tension. According to such a configuration, in the case of a severe tension state, the singing evaluation is increased significantly, and in the case of a mild tension state, the tension evaluation is appropriately reduced by raising the singing evaluation slightly. It becomes possible to notify a good song evaluation.

本実施形態のカラオケシステムの構成を示す図The figure which shows the structure of the karaoke system of this embodiment 本実施形態の楽曲確認画面を示す図The figure which shows the music confirmation screen of this embodiment 本実施形態の(A)予約情報、(B)楽曲情報のデータ構成を示す図The figure which shows the data structure of (A) reservation information of this embodiment, and (B) music information. 本実施形態の楽曲再生処理(その1)を示すフロー図Flow chart showing music reproduction processing (part 1) of the present embodiment 本実施形態の楽曲再生処理(その2)を示すフロー図Flow chart showing music reproduction processing (part 2) of the present embodiment 本実施形態の処理Aを示すフロー図Flow chart showing processing A of the present embodiment 本実施形態の処理Bを示すフロー図Flow chart showing processing B of the present embodiment 本実施形態の処理Cを示すフロー図Flow chart showing processing C of the present embodiment ビブラートと緊張による声の震えの特徴を説明するための図Diagram to explain the characteristics of voice tremor due to vibrato and tension 本実施形態の歌唱評価結果通知画面を示す図The figure which shows the song evaluation result notification screen of this embodiment

図1は、本発明の実施形態に係るカラオケシステムの構成を示す図である。本実施形態におけるカラオケシステムは、カラオケ装置2(コマンダ)と、リモコン装置1を含んで構成されている。なお、図1に示す例では、1台のカラオケ装置2に対して、リモコン装置1aとリモコン装置1b、2台のリモコン装置1が使用されている例である。これらリモコン装置1a、1bの構成は同一であるため、リモコン装置1として説明を行う。カラオケ装置2とリモコン装置1は、LAN100及びアクセスポイント110を利用してネットワークを形成するように接続されている。   FIG. 1 is a diagram showing the configuration of a karaoke system according to an embodiment of the present invention. The karaoke system in the present embodiment is configured to include a karaoke device 2 (commander) and a remote control device 1. In the example shown in FIG. 1, the remote control device 1 a, the remote control device 1 b, and the two remote control devices 1 are used for one karaoke device 2. Since the configurations of the remote control devices 1a and 1b are the same, the remote control device 1 will be described. The karaoke device 2 and the remote control device 1 are connected to form a network using the LAN 100 and the access point 110.

カラオケボックスなどの店舗に設置されるカラオケ装置2は、楽曲を演奏するための演奏部として音響制御部25を備えている。また、カラオケ装置2は、ユーザーからの各種入力を受け付ける操作部21を備える。カラオケ装置2は、操作部21からの入力を解釈してCPU30に伝達する操作処理部22を備える。また、カラオケ装置2は、各種情報を記憶する記憶部としてのハードディスク32を備える。カラオケ装置2は、LAN100に接続してネットワークに加入する通信手段としてのLAN通信部24を備えている。   The karaoke apparatus 2 installed in a store such as a karaoke box includes a sound control unit 25 as a playing unit for playing music. Moreover, the karaoke apparatus 2 is provided with the operation part 21 which receives the various input from a user. The karaoke apparatus 2 includes an operation processing unit 22 that interprets an input from the operation unit 21 and transmits the interpretation to the CPU 30. Moreover, the karaoke apparatus 2 is equipped with the hard disk 32 as a memory | storage part which memorize | stores various information. The karaoke apparatus 2 includes a LAN communication unit 24 as a communication unit that connects to the LAN 100 and joins the network.

また、カラオケ装置2は、モニタ41に対して歌詞映像、背景映像を表示させる映像再生手段を備える。この映像再生手段は、映像情報に基づいて映像を再生する映像再生部29、再生する映像を一時的に蓄積するビデオRAM28、再生された映像に対する歌詞テロップの重畳、映像効果を付与する映像制御部31を備えて構成される。   In addition, the karaoke apparatus 2 includes video reproduction means for displaying a lyric image and a background image on the monitor 41. The video reproduction means includes a video reproduction unit 29 for reproducing a video based on the video information, a video RAM 28 for temporarily storing the video to be reproduced, a superimposing of a lyric telop on the reproduced video, and a video control unit for giving a video effect. 31 is configured.

さらに、このカラオケ装置2では、外部に接続されるモニタ41以外に、タッチパネルモニタ33に対して各種情報を表示することを可能としている。タッチパネルモニタ33は映像制御部31から入力された映像情報を表示する表示部35と、タッチ入力された位置を操作処理部22に出力するタッチパネル34が重畳されて構成されている。このタッチパネルモニタ33は、カラオケ装置2の操作部、あるいは、リモコン装置1のタッチパネルモニタ11などと同様、入力部として機能する。ユーザーは、タッチパネルモニタ33にて楽曲を選択することで、直接カラオケ装置2に予約をさせるなど、カラオケ装置2に対する各種操作を行うことが可能である。   Furthermore, in the karaoke apparatus 2, in addition to the monitor 41 connected to the outside, various types of information can be displayed on the touch panel monitor 33. The touch panel monitor 33 is configured by superimposing a display unit 35 for displaying the video information input from the video control unit 31 and a touch panel 34 for outputting the position of the touch input to the operation processing unit 22. The touch panel monitor 33 functions as an input unit, similarly to the operation unit of the karaoke apparatus 2 or the touch panel monitor 11 of the remote control device 1 or the like. The user can perform various operations on the karaoke apparatus 2 such as making the karaoke apparatus 2 directly make a reservation or the like by selecting music on the touch panel monitor 33.

さらに、カラオケ装置2は、各構成を統括して制御するためのCPU30、各種プログラムを実行するにあたって必要となる情報を一時記憶するためのメモリ27を備えて構成される。CPU30、メモリ27は、カラオケ装置2において各種処理を実行する制御部を構成する。   Furthermore, the karaoke apparatus 2 is configured to include a CPU 30 for integrally controlling each component and a memory 27 for temporarily storing information necessary for executing various programs. The CPU 30 and the memory 27 constitute a control unit that executes various processes in the karaoke apparatus 2.

このような構成にてカラオケ装置2は、各種処理を実行することとなるが、カラオケ装置2の主な機能として、楽曲予約処理、楽曲再生処理を実行可能としている。楽曲予約処理は、ユーザーからの指定に基づいて楽曲を指定、予約するための処理である。楽曲予約処理では、リモコン装置1、あるいは、カラオケ装置2のユーザーインターフェイスを使用して指定された予約情報をメモリ27中の予約テーブルに登録する。楽曲再生処理は、予約された楽曲を再生させる処理であって、楽曲演奏処理と歌詞再生処理とが同期して実行される処理である。   With such a configuration, the karaoke apparatus 2 executes various processes, but as main functions of the karaoke apparatus 2, it is possible to execute music reservation processing and music reproduction processing. The music reservation process is a process for designating and reserving a music based on a specification from a user. In the music reservation process, reservation information designated using the user interface of the remote control device 1 or the karaoke device 2 is registered in a reservation table in the memory 27. The music reproduction process is a process for reproducing a reserved music, and is a process in which the music performance process and the lyrics reproduction process are performed in synchronization.

楽曲演奏処理は、楽曲情報に含まれる演奏情報に基づき、音響制御部25に演奏を実行させる処理である。音響制御部25にて演奏された楽曲は、マイクロホン44a、44bから入力される歌唱音声と一緒にスピーカ42から放音される。歌詞再生処理は、楽曲情報に含まれる歌詞情報をモニタ41に表示させることで歌唱補助を行う処理である。この歌詞再生処理で表示される歌詞に、背景映像を重畳させて表示させる背景映像表示処理を実行することとしてもよい。   The music performance process is a process for causing the sound control unit 25 to perform a performance based on the performance information included in the music information. The music played by the sound control unit 25 is emitted from the speaker 42 together with the singing voice input from the microphones 44a and 44b. The lyric reproduction process is a process of performing song assistance by displaying the lyric information included in the music information on the monitor 41. It is also possible to execute background image display processing in which a background image is superimposed and displayed on the lyrics displayed in the lyrics reproduction processing.

一方、リモコン装置1は、歌唱する楽曲を選択する選曲処理を実行可能とし、予約情報等、カラオケ装置2に対して各種指示を送信可能としている。また、リモコン装置1は、カラオケ装置2あるいはインターネット上に接続されたサーバ装置5から各種情報を受信し、ユーザーに対して各種情報を提供することも可能である。本実施形態では、ユーザーから各種指示を受け付けるユーザーインターフェイスとして、操作部17と、タッチパネルモニタ11を備えている。タッチパネルモニタ11は、表示部11aとタッチパネル11bを有して構成され、表示部11aに各種インターフェイスを表示するとともに、ユーザーからのタッチ入力を受付可能としている。   On the other hand, the remote control device 1 can execute a music selection process for selecting a song to be sung, and can transmit various instructions to the karaoke device 2 such as reservation information. Further, the remote control device 1 can also receive various information from the karaoke device 2 or the server device 5 connected to the Internet, and can provide various information to the user. In the present embodiment, the operation unit 17 and the touch panel monitor 11 are provided as user interfaces for receiving various instructions from the user. The touch panel monitor 11 includes a display unit 11a and a touch panel 11b. The touch panel monitor 11 displays various interfaces on the display unit 11a and can receive touch input from a user.

さらにリモコン装置1は、楽曲検索に必要とされるデータベース、各種プログラム、並びに、プログラム実行に伴って発生する各種情報を記憶する記憶部として、メモリ14、そして、これら構成を統括して制御するためのリモコン側制御部を備えて構成される。リモコン側制御部には、CPU15、タッチパネルモニタ11に対して表示する映像を形成する映像制御部13、表示する映像情報を一時的に蓄えるビデオRAM12、タッチパネルモニタ11あるいは操作部17からの入力を解釈してCPU15に伝える操作処理部18が含まれている。   Further, the remote control device 1 controls the memory 14 and these components as a storage unit for storing a database required for music retrieval, various programs, and various information generated with the execution of the programs. The remote control side control unit of In the remote control side control unit, the CPU 15, the video control unit 13 for forming a video to be displayed on the touch panel monitor 11, the video RAM 12 for temporarily storing the video information to be displayed, and the input from the touch panel monitor 11 or the operation unit 17 And an operation processing unit 18 for transmitting the information to the CPU 15.

また、リモコン装置1は、無線LAN通信部16によって、アクセスポイント110と無線接続されることで、LAN100によって構成されるネットワークに接続される。なお、各リモコン装置1は、特定のカラオケ装置2に対して事前に対応付けされている。リモコン装置1から出力される各種命令は、対応付けされたカラオケ装置2にて受信されることとなる。   Further, the remote control device 1 is connected to the network configured by the LAN 100 by being wirelessly connected to the access point 110 by the wireless LAN communication unit 16. Each remote control device 1 is associated in advance with a specific karaoke device 2. Various commands output from the remote control device 1 are received by the associated karaoke device 2.

このようなリモコン装置1の構成により、ユーザーからの各種入力をタッチパネルモニタ11、あるいは、操作部17から受付けるとともに、映像情報をタッチパネルモニタ11の表示により各種情報を提供することで、カラオケ装置2に対して楽曲予約などの各種指示を行うことが可能とされている。   With such a configuration of the remote control device 1, the karaoke device 2 can receive various inputs from the user from the touch panel monitor 11 or the operation unit 17 and provide video information by displaying the touch panel monitor 11 to the karaoke device 2. On the other hand, it is possible to give various instructions such as music reservation.

図2には、本実施形態の楽曲確認画面が示されている。本実施形態のカラオケシステムは、複数のユーザーが同時にログインして使用することが可能である。ユーザーはログインすることで、自己のユーザー情報を使用した各種サービスを受けることが可能である。ユーザーが受けることのできるサービスとしては、ユーザーが登録したお気に入り楽曲、履歴、お気に入りアーティスト(歌手)を使用した楽曲検索、あるいは、ユーザーの属性に応じた楽曲の推奨等がある。図2に示す楽曲確認画面の上方には、カラオケシステムにログインしているユーザーに関する情報が表示されている。ログインユーザー欄103には、カラオケシステムにログインしているユーザーの分身像103a〜103e(本実施形態では顔部分)が表示される。またログインユーザー欄103中、右端に背景がハイライト(白色)で示されるユーザーは、アクティブユーザー103e(この例ではAさん)であって、アクティブユーザー103eに対するサービス、すなわち、アクティブユーザー103eのユーザー情報を利用したサービスが実行されている状態となっている。アクティブユーザーの切り替えは、ユーザー切り替えボタン101を操作することで行うことが可能である。また、ユーザー登録していないユーザーは、ゲストボタン102を操作することで、ゲストユーザーとしてカラオケシステムを使用することが可能である。   The music confirmation screen of this embodiment is shown in FIG. The karaoke system of this embodiment can be used by a plurality of users logging in simultaneously. By logging in, users can receive various services using their own user information. As services that the user can receive, there are favorite music registered by the user, history, music search using favorite artist (singer), or recommendation of music according to the attribute of the user. In the upper part of the music confirmation screen shown in FIG. 2, information on the user who has logged in to the karaoke system is displayed. In the login user column 103, partial images 103a to 103e (a face portion in the present embodiment) of users who are logged in to the karaoke system are displayed. The user whose background is highlighted (white) at the right end of the login user column 103 is the active user 103e (in this example, Mr. A), and the service for the active user 103e, that is, the user information of the active user 103e. The service using is being executed. The switching of the active user can be performed by operating the user switching button 101. Also, a user who is not registered as a user can use the karaoke system as a guest user by operating the guest button 102.

アクティブユーザーとして楽曲を選択した場合、この楽曲確認画面にて、予約を行う楽曲に間違いがないか、楽曲名、歌手名、歌い出し等の詳細を表示してユーザーに確認させる。本実施形態の楽曲確認画面には、音程設定欄105が設けられている。音程設定欄105は、演奏する際、ユーザーが歌唱しやすいように音高調整を行うための設定欄であり、音程設定欄105の右下に表示されている変更ボタンを操作することで、音程設定用の子画面(図示せず)が表示され、予約する楽曲に対して音程設定値を設定することが可能である。   When a song is selected as the active user, the user confirms the details such as the song name, the singer's name, and the singing out on the song confirmation screen to see if the song to be reserved is correct. A pitch setting field 105 is provided on the music confirmation screen of the present embodiment. The pitch setting section 105 is a setting section for adjusting the pitch so that the user can easily sing when playing, and by operating the change button displayed at the lower right of the pitch setting section 105, the pitch setting section 105 is used. A subscreen (not shown) for setting is displayed, and it is possible to set a pitch setting value for the music piece to be reserved.

楽曲確認画面において、歌唱する楽曲であることを確認したユーザーは、予約ボタン106を操作することで、楽曲の予約を確定させる。リモコン装置1を使用して楽曲を予約した場合、リモコン装置1からカラオケ装置2に予約情報が送信される。図3(A)は、予約情報のデータ構成を示した図である。予約情報は、予約した楽曲を識別するための楽曲ID、予約を行ったユーザー(アクティブユーザー)を識別するためのユーザーID、楽曲確認画面の音程設定欄105を使用して変更した音程設置値が含まれている。カラオケ装置2は、カラオケ装置2のメモリ27で管理する予約テーブルに、受信した予約情報を順次記憶して、楽曲再生処理を実行する。   On the music confirmation screen, the user who confirms that the music to be sung, operates the reservation button 106 to confirm the music reservation. When music is reserved using remote control device 1, the remote control device 1 transmits reservation information to karaoke apparatus 2. FIG. 3A shows a data structure of reservation information. The reservation information includes the music ID for identifying the reserved music, the user ID for identifying the user who made the reservation (active user), and the pitch setting value changed using the pitch setting field 105 of the music confirmation screen. include. The karaoke apparatus 2 sequentially stores the received reservation information in the reservation table managed by the memory 27 of the karaoke apparatus 2 and executes the music reproduction process.

図4、図5は、本実施形態の楽曲再生処理を示すフロー図である。図4、図5中の丸で囲んだ「1」は両フロー間の接続を示している。カラオケ装置2は、予約テーブルのチェックを行い(S101)、次に再生すべき再生の楽曲があると判定した場合(S102:Yes)、楽曲IDに対応する楽曲情報を読み出して演奏を開始する(S103)。   FIG. 4 and FIG. 5 are flowcharts showing the music reproduction process of this embodiment. Circles “1” in FIGS. 4 and 5 indicate the connection between the two flows. The karaoke apparatus 2 checks the reservation table (S101), and when it is determined that there is a music to be reproduced next (S102: Yes), the music information corresponding to the music ID is read and the performance is started ( S103).

図3(B)は、楽曲情報のデータ構成を示した図である。楽曲情報は、楽曲情報に関連する各種情報であるメタ情報と、演奏や歌詞の表示といった各種処理を実行するための実情報を有している。メタ情報には、楽曲情報を識別するための楽曲ID、曲名、歌手名、作詞者名、作曲者名、歌唱区間情報を有している。歌唱区間情報は、演奏情報の時間進行に対応した情報であって、ユーザーが歌唱すべき区間(歌唱区間)を識別可能とする情報である。本実施形態では、楽曲を再生する際、この歌唱区間情報を使用して、歌唱区間において歌唱された歌唱音声から歌唱評価を行うための特徴量を抽出している。   FIG. 3B is a diagram showing a data configuration of music information. The music information includes meta information, which is various information related to the music information, and actual information for executing various processes such as performance and display of lyrics. The meta information includes a song ID for identifying song information, a song name, a singer name, a lyricist name, a composer name, and singing section information. The singing section information is information corresponding to the time progression of the performance information, and is information that enables the user to identify a section (singing section) to be sung. In the present embodiment, at the time of reproducing the music, this singing section information is used to extract a feature amount for performing a singing evaluation from the singing voice sung in the singing section.

楽曲情報の実情報には、演奏情報、歌詞情報、基準音高情報が含まれている。演奏情報は、MIDI規格に基づいて電子楽器用の制御情報、あるいは、実際の演奏を録音した圧縮音声情報等を含んで構成された、カラオケの伴奏音を演奏するための情報である。歌詞情報は、歌唱補助のため、演奏情報に同期して表示される情報であり、演奏に同期して表示された歌詞の色替えを行うように構成してもよい。基準音高情報は、歌唱する旋律を規定した情報であって、本実施形態では、歌唱評価処理(採点)に使用される。この基準音高情報は、演奏情報に含めて構成することも可能である。   The actual information of the music information includes performance information, lyric information, and reference pitch information. The performance information is information for playing the accompaniment sound of karaoke, which includes control information for an electronic musical instrument based on the MIDI standard, or compressed audio information obtained by recording an actual performance. The lyric information is information that is displayed in synchronization with the performance information for song assistance, and may be configured to change the color of the displayed lyrics in synchronization with the performance. The reference pitch information is information that defines a melody to be sung, and is used in the song evaluation process (scoring) in the present embodiment. The reference pitch information may be included in the performance information.

楽曲情報中の演奏情報に基づいて演奏が開始される(S103)と、歌唱評価を行うため、マイクロホン44a、44bから入力される歌唱音声の特徴量の抽出が実行される。本実施形態では、楽曲再生中、歌唱区間についてのみ歌唱音声の特徴量を抽出することで、歌唱とは関係の無い音声や雑音を排除し、歌唱評価の精度向上を図っている。   When the performance is started based on the performance information in the music information (S103), extraction of the feature amount of the singing voice input from the microphones 44a and 44b is performed in order to evaluate the singing. In this embodiment, during reproduction of the music, by extracting the feature amount of the singing voice only for the singing section, voice and noise unrelated to singing are eliminated, and the accuracy of the singing evaluation is improved.

まず、現在演奏時刻tの初期化(S104)、及び、歌唱音声の特徴量となる基本周波数f0の取得個数nの初期化(S105)を実行する。演奏時間が所定時間(この例では、10m秒)経過する毎(S106:Yes)に、現在演奏時刻tをインクリメントする(S107)。そして、現在演奏時刻tを楽曲情報の歌唱区間情報と対比して、現在演奏時刻tが歌唱区間か否かを判定する(S108)、現在演奏時刻tが歌唱区間である場合(S108:Yes)、マイクロホン44a、44bから入力される歌唱音声を分析し、基本周波数f0を抽出し、現在演奏時刻tに対応付けてメモリ27内のバッファに格納する(S109)。その際、基本周波数f0の取得個数nをインクリメントする(S110)。一方、現在演奏時刻tが歌唱区間でない場合(S108:No)には、基本周波数f0をバッファに格納せずに次の現在演奏時刻まで待つ。   First, initialization of the current performance time t (S104) and initialization of the acquired number n of the fundamental frequency f0, which is the feature of the singing voice, are performed (S105). The current playing time t is incremented (S107) every time the playing time has elapsed (S106: Yes) after a predetermined time (10 ms in this example) has elapsed. Then, the current performance time t is compared with the singing section information of the music information to determine whether the current performance time t is a singing section (S108). If the current performance time t is a singing section (S108: Yes) The singing voices input from the microphones 44a and 44b are analyzed, the fundamental frequency f0 is extracted, and is stored in the buffer in the memory 27 in association with the current performance time t (S109). At this time, the number n of acquired fundamental frequencies f0 is incremented (S110). On the other hand, when the current performance time t is not the singing section (S108: No), the basic frequency f0 is not stored in the buffer and the next current performance time is waited.

S106〜S110の処理を、楽曲の演奏が終了する(S111:Yes)まで繰り返し実行することで、楽曲の歌唱区間について、現在演奏時刻tと基本周波数f0を対応付けた歌唱の特徴量がバッファに格納される。楽曲の演奏が終了する(S111:Yes)と、バッファに格納した歌唱の特徴量に基づく歌唱評価が実行される。まず、本実施形態において歌唱評価の特徴量となる基本周波数f0の取得個数nが所定の個数Lよりも大きいか否かが判定される(S112)。この判定は、歌唱評価に必要最低限となる基本周波数f0が取得されているか否かを確認するための処理である。楽曲の再生が途中で中断された場合、少ない個数の特徴量で歌唱評価が行われることで、良好な歌唱評価となる場合がある。本実施形態では、このような仕様を利用した不正が行われることを防止している。歌唱の特徴量(基本周波数f0の取得個数)がLよりも少ない場合(S112:No)、カラオケ装置2は、モニタ41に歌唱評価を行うことができなかった旨を通知する(S118)。   By repeatedly executing the processing of S106 to S110 until the performance of the music ends (S111: Yes), the feature amount of the singing in which the current performance time t and the fundamental frequency f0 correspond to each other is stored in the buffer for the singing section of the music Stored. When the performance of the music is finished (S111: Yes), song evaluation based on the feature amount of the song stored in the buffer is performed. First, in the present embodiment, it is determined whether or not the acquired number n of the fundamental frequency f0, which is a feature amount of song evaluation, is larger than a predetermined number L (S112). This determination is a process for confirming whether or not the fundamental frequency f0 which is the minimum necessary for song evaluation is acquired. When the reproduction of music is interrupted halfway, singing evaluation may be performed with a small number of feature amounts, which may result in good singing evaluation. In the present embodiment, it is prevented that the fraud is performed using such a specification. When the feature amount of the song (the number of acquired fundamental frequencies f0) is smaller than L (S112: No), the karaoke apparatus 2 notifies the monitor 41 that the song evaluation could not be performed (S118).

一方、歌唱の特徴量(基本周波数f0の取得個数)がLよりも多い場合(S112:Yes)、カラオケ装置2に設定されているモードの検出を行う(S113)。本実施形態のカラオケ装置2は、通常の歌唱評価を行う標準モードと、歌唱するユーザーの緊張を配慮する緊張配慮モードに切り替えることが可能である。モードの切り替えは、カラオケ装置2のタッチパネルモニタ33や、リモコン装置1のタッチパネルモニタ11等の入力手段を使用して行うことが可能である。この緊張配慮モードでは、歌唱するユーザーの緊張状態が高い場合、歌唱評価が高くなるように補正が行われる。緊張配慮モードを使用することで、人前で歌唱することが不慣れなユーザーに対して、緊張に配慮した良好な歌唱評価を提示することを可能としている。   On the other hand, when the feature amount of the song (the number of acquired fundamental frequencies f0) is larger than L (S112: Yes), the mode set in the karaoke apparatus 2 is detected (S113). The karaoke apparatus 2 of the present embodiment can be switched to a standard mode in which normal song evaluation is performed and a tension consideration mode in which the tension of the user who sings is considered. The mode can be switched using input means such as the touch panel monitor 33 of the karaoke apparatus 2 or the touch panel monitor 11 of the remote control device 1. In this tension consideration mode, when the tension state of the user who sings is high, correction is performed so that the song evaluation becomes high. By using the tension consideration mode, it is possible to present a good singing evaluation in consideration of tension to a user who is unfamiliar with singing in public.

本実施形態では、モードの切り替えを標準モード、緊張配慮モードの何れかとしているが、ユーザー毎に標準モード、緊張配慮モードの設定を行うこととしてもよい。例えば、スナック等のナイト店において、歌唱に不慣れな顧客については緊張配慮モードに設定しておき、十分歌唱できる顧客は標準モードに設定しておくことで、歌唱するユーザー毎にモードを自動的で切り替えることが可能となる。モードの切り替えは、予約情報に含まれるユーザーIDを使用して、どちらのモードに設定されているユーザーであるかを判定することで行われる。   In the present embodiment, switching of the mode is either the standard mode or the tension consideration mode, but the standard mode and the tension consideration mode may be set for each user. For example, in a night shop such as a snack, a customer who is not familiar with singing is set in the tension consideration mode, and a customer who can sing sufficiently is set in the standard mode so that the mode is automatically set for each user who sings. It is possible to switch. The switching of the mode is performed by using the user ID included in the reservation information to determine which mode the user is set to.

モード判定において、標準モードと判定された場合(S113:標準)、歌唱評価処理(S117)が実行される。この歌唱評価処理(S117)は、ユーザーの緊張状態を配慮しない形態であって、歌唱の特徴量(本実施形態では、基本周波数f0)と、演奏した楽曲の基本音高情報と、を対比することで歌唱評価情報を算出する処理である。歌唱評価の結果としては、採点値やランク付けで提示することが考えられる。本実施形態では、歌唱中の5つの項目について得点を算出するとともに、その総合得点を歌唱評価の結果としている。歌唱評価処理(S117)で算出された歌唱評価の結果は、モニタ41に表示される等の形態でユーザーに通知される。   When it is determined in the mode determination that the mode is the standard mode (S113: standard), the song evaluation process (S117) is executed. This song evaluation process (S117) is a form which does not consider the tension state of the user, and contrasts the feature quantity of the song (the fundamental frequency f0 in this embodiment) with the basic pitch information of the played music. Is a process of calculating song evaluation information. As a result of song evaluation, it is possible to present by a graded value or ranking. In this embodiment, the score is calculated for five items in the song, and the total score is used as a result of the song evaluation. The result of the song evaluation calculated in the song evaluation process (S117) is notified to the user in the form of being displayed on the monitor 41 or the like.

図10(A)は、標準モードを使用した際の、歌唱評価の結果の通知例を示したものである。ここではモニタ41に結果を表示することで通知する形態を取っている。結果を表示する画面には、歌唱した楽曲の歌手名、曲名、歌唱したユーザーのユーザー名、5つの項目(音程、安定感、ロングトーン、抑揚、テクニック)について算出された採点値、5つの項目の採点値の合計である総合得点が表示されている。また、レーダーチャートの形態を使用して、5つの項目の採点値が表示されている。歌唱後に、この歌唱評価の結果を視認することで、歌唱したユーザーは自己の歌唱力を確認することが可能である。   FIG. 10A shows a notification example of the result of song evaluation when the standard mode is used. Here, the notification is made by displaying the result on the monitor 41. On the screen displaying the results, the singer name of the song sung, the song name, the user name of the user who sung, the scoring value calculated for the 5 items (pitch, stability, long tone, intonation, technique), 5 items The total score which is the sum of the scoring value of is displayed. Also, using the form of the radar chart, the scoring values of the five items are displayed. By watching the result of the song evaluation after singing, it is possible for the user who has sung to confirm his / her singing ability.

一方、モード判定において、緊張配慮モードと判定された場合(S113:緊張配慮)、緊張状態に配慮した歌唱評価が実行される。ここでは、緊張状態が高い場合、標準モードよりも歌唱評価が高くなるように補正することで歌唱評価情報を算出する。本実施形態では、まず、ユーザーの緊張状態を検出するための処理Aが実行される(S200)。本実施形態では、ユーザーの歌唱音声に基づいて緊張状態の検出を行っている。緊張状態で歌唱した場合、歌唱音声の震えとなって現れる。歌唱音声の震えに基づいて緊張状態を検出することが可能である。一方、歌唱において声を震わせる技術であるビブラートが知られている。ここでは、緊張状態とビブラートを峻別するため、両者の特徴を利用している。   On the other hand, when it is determined in the mode determination that the mode is the tension consideration mode (S113: tension consideration), song evaluation in consideration of the tension state is performed. Here, when the tension state is high, the song evaluation information is calculated by correcting the song evaluation to be higher than that in the standard mode. In the present embodiment, first, the process A for detecting the tension state of the user is executed (S200). In the present embodiment, the tension state is detected based on the user's singing voice. If you sing under tension, it will appear as a tremor of the singing voice. It is possible to detect tension based on the tremor of the singing voice. On the other hand, vibrato, which is a technique for shaking voices in singing, is known. Here, in order to distinguish tension and vibrato, the characteristics of both are used.

図9は、ビブラートと緊張による声の震えの特徴を説明するための図である。図9(A)〜図9(D)の何れも、基準音高に対する歌唱音高の時間変化を示した図であって、図9(A)は、歌唱技巧であるビブラートについて示したものであり、図9(B)〜図9(D)は緊張による声の震えを示している。図9(A)に示すようにビブラートは、音高が大幅に変化しないきれいな波形を描く。緊張による震えは、図9(B)に示すように、音高の揺れにバラツキが生じる。ビブラートと緊張した声の震えを峻別する1つの方法としては、このような特徴の違いを鑑みることが挙げられる。そのためには、歌唱音高とその時刻について、回帰直線の傾きを比較することが考えられる。図9(A)のように音高の揺れにバラツキのない波形の場合、回帰直線の傾きは、時間軸に対して並行に近くなる。一方、図9(B)のように音高の揺れにバラツキが生じた波形の場合、回帰直線の傾きは、時間軸に対して並行から遠ざかる。本実施形態では、このような両者の特徴の違いに基づき、回帰直線の傾きを使用して、緊張による震え、及び、その度合いを検出している。   FIG. 9 is a figure for demonstrating the feature of the tremor of the voice by vibrato and tension. 9 (A) to 9 (D) are diagrams showing temporal change of singing pitch with respect to reference pitch, and FIG. 9 (A) is a diagram showing vibrato which is singing skill. 9 (B) to 9 (D) show the tremor of the voice due to tension. As shown in FIG. 9 (A), vibrato draws a beautiful waveform whose pitch does not change significantly. The tremor due to tension causes fluctuations in pitch swing as shown in FIG. 9 (B). One way to distinguish between vibrato and tense voice tremor is to consider these differences in characteristics. In order to do so, it is conceivable to compare the slopes of the regression line for the song pitch and the time. In the case of a waveform having no fluctuation in pitch swing as shown in FIG. 9A, the slope of the regression line is close to parallel to the time axis. On the other hand, in the case of the waveform in which the fluctuation of the pitch occurs as shown in FIG. 9B, the slope of the regression line goes away from being parallel to the time axis. In this embodiment, based on the difference between the two characteristics, the slope of the regression line is used to detect tremor due to tension and its degree.

ビブラートと緊張した声の震えの違いを見るには、このような形態以外に、図9(C)に示すように、基準音高を跨ぐ回数が少ない、図9(D)に示すように音高の振幅が小さい、といった緊張による声の震えの特徴を使用することとしてもよい。   In order to see the difference in the vibration of the vibrato and the tense voice, as shown in FIG. 9 (C), the number of times of straddling the reference pitch is small as shown in FIG. 9 (D). It is also possible to use the feature of voice tremor due to tension, such as the high amplitude being small.

図6には、歌唱音声による緊張状態を検出するための処理Aを示すフロー図が示されている。処理が開始すると、バッファ参照位置iの初期化(S201)、及び、声の震え検出個数Xの初期化(S202)を実行する。次に、バッファに記憶させたi番地からi+L番地の歌唱音声の特徴量(本実施形態では、時刻に対応付けた基本周波数f0)について、山谷の数N(上ピークを形成する山の数と、下ピークを形成する谷の数の和)をカウントする(S203)。カウントした山谷の数がNtより大きい場合(S204:Yes)、声が震えている(緊張による震え、ビブラートの両方を含む)と判定する。さらに、バッファのi番地からi+L番地の回帰直線の傾きαを求める(S205)。これは、図9(A)、図9(B)を使用して説明したビブラートと緊張による震えの特徴の違いに基づくものであり、S204で検出した声の震えが緊張による震えであるか否かを判定するために行われる処理である。回帰直線の傾きの絶対値|α|が所定値αtよりも大きい場合(S206:Yes)には、緊張による声の震えであると判定して、声の震え検出個数Xをインクリメントする(S207)。一方、回帰直線の傾きの絶対値|α|が所定値αt以下である場合(S206:No)には、声の震えはビブラートであるであると判定して、声の震え検出個数Xはインクリメントしない。このようにしてバッファのi番地からi+L番地までの区間について、緊張により声が震えているか否かが判定される。   FIG. 6 is a flowchart showing a process A for detecting a tension state by singing voice. When the process starts, initialization of the buffer reference position i (S201) and initialization of the number X of voice shake detection detections (S202) are performed. Next, the number of peaks and valleys N (the number of peaks forming the upper peak and the number of peaks and valleys) for the feature amount of the singing voice from the address i to the address i + L stored in the buffer (the basic frequency f0 associated with time in this embodiment) , The sum of the number of valleys forming the lower peak) (S203). If the number of counted mountains and valleys is larger than Nt (S204: Yes), it is determined that the voice is shaking (including shaking due to tension, including both vibrato). Further, the slope α of the regression line from the address i of the buffer to the address i + L is obtained (S205). This is based on the difference between the characteristics of vibrato and tremor due to tension described using FIGS. 9A and 9B, and whether the tremor of the voice detected in S204 is tremor due to tension or not. Is a process performed to determine whether the If the absolute value | α | of the slope of the regression line is larger than the predetermined value αt (S206: Yes), it is determined that the voice is shaking due to tension, and the number X of voice shaking detections is incremented (S207) . On the other hand, if the absolute value | α | of the slope of the regression line is less than or equal to the predetermined value αt (S206: No), it is determined that the voice tremor is a vibrato, and the number X of voice tremor detection is increment do not do. In this way, whether or not the voice is shaking due to tension is determined in the section from the address i to the address i + L of the buffer.

そして、次の区間について緊張による声の震えを判定するため、現在のバッファ参照位置iをインクリメント(1加算)する(S208)。インクリメントされたバッファ参照位置iについて、i+Lが基本周波数f0の取得個数n以上となった場合(S209:Yes)、全ての歌唱音声について判定が終了したため、緊張による声の震え検出個数Xを最終的に出力(S210)し、処理Aを終了する。   Then, the current buffer reference position i is incremented (one added) in order to determine the shaking of the voice due to tension in the next section (S208). When i + L is equal to or more than the acquired number n of the fundamental frequency f0 with respect to the incremented buffer reference position i (S209: Yes), the determination is completed for all singing voices. Output (S210), and the process A ends.

S114では、処理Aで算出された声の震え検出個数Xを取得個数nで割った値X/nを緊張度として算出する。算出した緊張度X/nが、閾値Wを超えていた場合(S114:Yes)、歌唱者は歌唱期間中、閾値Wで示される割合以上、歌唱するユーザーは緊張していたと判定する。なお、本実施形態では、取得個数(歌唱期間に相当)に対する声の震え検出個数X(緊張していた時間長に相当)の割合で、緊張の判定を行っているが、緊張の判定は、このような形態のみならず、声の震え検出個数X(緊張していた時間長に相当)が所定個数以上(所定時間以上)となったことで、緊張を判定してもよい。   In S114, a value X / n obtained by dividing the number X of vibration detection of voices calculated in processing A by the number N acquired is calculated as the degree of tension. If the calculated degree of tension X / n exceeds the threshold value W (S114: Yes), it is determined that the singing person is tense or more during the singing period by the ratio indicated by the threshold value W. In the present embodiment, the determination of tension is performed at a ratio of the number X of vibrations detected (corresponding to the length of time during tension) of the number of voices acquired (corresponding to the singing period). Not only in such a form, tension may be determined when the number X of vibrations detected for the voice (corresponding to the length of time during tension) has reached a predetermined number or more (a predetermined time or more).

緊張していると判定された場合(S114:Yes)、歌唱評価が高くなるように補正を含んだ歌唱評価処理を実行する(S120)。本実施形態では、歌唱評価の基準を変更する処理B(S300)、及び、算出された歌唱評価に点数を加算する処理C(S400)を実行することで、歌唱評価が高くなる補正を行っている。一方、算出した緊張度X/nが、閾値W以下であった場合(S114:No)、ユーザーは緊張していなかった都判定し、標準モードと同じ歌唱評価処理(S117)を実行する。   If it is determined that the user is nervous (S114: Yes), a song evaluation process including correction is performed so that the song evaluation becomes high (S120). In the present embodiment, correction for increasing the song evaluation is performed by executing the process B (S300) for changing the song evaluation criteria and the process C (S400) for adding the score to the calculated song evaluation. There is. On the other hand, if the calculated degree of tension X / n is equal to or less than the threshold W (S114: No), the user determines that the city was not tense, and executes the same song evaluation process (S117) as the standard mode.

図7は、本実施形態の処理B(S300)のフロー図を示している。歌唱評価処理では、基準音高情報と歌唱の特徴量である基本周波数f0を比較することで行われる。基準音高情報から許容値P以内の基本周波数f0であれば、歌唱は正しいと判定する。本実施形態では、算出した緊張度X/nに応じて、通常の許容値Pを補正した許容値P’に拡大することで、判定の基準を甘くし、高い歌唱評価となりやすいようにしている。なお、図10で説明したように、本実施形態では5つの項目について得点を算出するため、音高以外の他の項目についても判定の基準を補正してもよい。   FIG. 7 shows a flowchart of the process B (S300) of this embodiment. The song evaluation process is performed by comparing the reference pitch information and the fundamental frequency f0 which is a feature of the song. If the fundamental frequency f0 within the allowable value P from the reference pitch information, it is determined that singing is correct. In the present embodiment, the standard of judgment is made sweeter by enlarging the normal allowable value P to the corrected allowable value P ′ according to the calculated degree of tension X / n, so that high singing evaluation can be easily made. . Note that, as described in FIG. 10, in the present embodiment, in order to calculate scores for five items, the determination criteria may be corrected for other items other than the pitch.

歌唱評価処理(S115)は、標準モードの歌唱評価処理(S117)と同じアルゴリズムを使用しているが、判定の基準(例えば、音程に関する許容値P)を変更する点において異なっている。すなわち、歌唱評価処理(S115)で算出される歌唱評価情報は、補正された歌唱評価情報ということができる。算出された歌唱評価情報は、処理C(S400)において更に補正が行われる。本実施形態では、算出後の歌唱評価情報に対して、緊張度X/nに応じた点数を加算する(下駄を履かせる)こととしている。   The song evaluation process (S115) uses the same algorithm as the song evaluation process (S117) in the standard mode, but differs in that the criterion for determination (for example, the tolerance value P for pitch is changed). That is, the song evaluation information calculated in the song evaluation process (S115) can be referred to as corrected song evaluation information. The calculated song evaluation information is further corrected in process C (S400). In the present embodiment, it is assumed that a score corresponding to the degree of tension X / n is added to the song evaluation information after calculation (the clogs are put on).

図8は、本実施形態の処理C(S400)のフロー図を示している。加算する点数Gは基準となる点数Gtに緊張度X/nを加算することで行われる(S401)。歌唱評価処理(S115)で算出された歌唱評価情報に点数Gを加算することで、補正後の歌唱評価情報が算出される(S402)。本実施形態のように項目毎に点数を算出する場合、各項目について点数を加算することとしてもよい。点数Gを加算した歌唱評価情報(点数)が最高点を上回った場合(S403:No)、歌唱評価情報を最高点とする制限が設けられている(S404)。   FIG. 8 shows a flowchart of the process C (S400) of this embodiment. The point G to be added is performed by adding the tension degree X / n to the reference point Gt (S401). By adding the point G to the song evaluation information calculated in the song evaluation process (S115), the song evaluation information after correction is calculated (S402). When calculating the score for each item as in the present embodiment, the score may be added to each item. When the song evaluation information (score) to which the score G is added exceeds the highest score (S403: No), a restriction is provided to set the song evaluation information as the highest score (S404).

標準モード、あるいは、緊張配慮モードにおいて緊張状態でないと判定された場合の歌唱評価情報と同様、補正された歌唱評価情報はユーザーに通知される(S116)。図10(B)は、補正を行った場合の歌唱評価の結果の通知例である。図10(A)と図10(B)は同じ歌唱を行った場合の歌唱評価の結果であり、図10(B)に示される補正を行った歌唱評価の結果は、図10(B)の補正を行わない場合と比較して、高い歌唱評価となっていることが分かる。このようにユーザーが緊張している場合には、図10(A)に示す歌唱評価の結果を通知することで、緊張したユーザーが歌うことに消極的となることを抑制することが可能である。   Similar to the song evaluation information in the case where it is determined that the user is not in the tension state in the standard mode or the tension consideration mode, the corrected song evaluation information is notified to the user (S116). FIG. 10B is an example of notification of the result of song evaluation when the correction is performed. 10 (A) and FIG. 10 (B) are the results of song evaluation when the same song is performed, and the results of the song evaluation which performed the correction | amendment shown by FIG. 10 (B) are FIG. 10 (B). It can be seen that the song evaluation is higher than when no correction is made. As described above, when the user is nervous, it is possible to suppress the reluctance of the nervous user to sing by notifying the result of the song evaluation shown in FIG. 10A. .

以上、カラオケ装置2について、緊張したユーザーに対する歌唱評価の一実施形態を説明したが、説明した実施形態以外に各種変形例を採用することが可能である。   As mentioned above, although one Embodiment of the song evaluation with respect to the tensioned user was demonstrated about the karaoke apparatus 2, it is possible to employ | adopt various modifications besides the embodiment described.

本実施形態では、緊張していることが判定された場合、緊張度X/nに応じた度合いで歌唱評価情報を補正することとしているが、緊張度X/nに応じて補正の度合いを変更することなく、一律に一定の度合いで補正することとしてもよい。また、緊張配慮モードは複数段階設けることとしてもよい。例えば、緊張配慮モードに、歌唱評価に対する補正の度合いの高低を付けることが考えられる。補正の度合いが高い緊張配慮モードでは、歌唱評価の上げ幅を大きくし、補正の度合いの低い緊張配慮モードでは、歌唱評価の上げ幅を低くすることが考えられる。緊張配慮モードをユーザー毎に設定する場合、補正の度合いをユーザー毎に設定することで、緊張度合いの高いユーザーには補正度合いを高く設定しておく等、ユーザーの特性に応じた設定も可能となる。   In this embodiment, when it is determined that tension is determined, the song evaluation information is corrected at a degree according to the tension degree X / n, but the degree of correction is changed according to the tension degree X / n The correction may be made uniformly at a fixed degree without being performed. Further, the tension consideration mode may be provided in a plurality of stages. For example, it is conceivable to add a degree of correction to the song evaluation to the tension consideration mode. In the tension consideration mode in which the degree of correction is high, it is conceivable to increase the increase in song evaluation, and in the tension consideration mode in which the degree of correction is low, to decrease the increase in song evaluation. When the tension consideration mode is set for each user, setting the degree of correction for each user enables setting according to the user's characteristics, such as setting the degree of correction high for users with a high degree of tension, etc. Become.

また、本実施形態では、歌唱音声に基づいて緊張状態を検出することとしているが、緊張状態の検出は、歌唱音声から検出する形態のみならず、各種形態を採用することが可能である。例えば、歌唱者をカメラで撮像することで、足や手等の震えに基づいて緊張状態を検出することとしてもよい。あるいは、歌唱するユーザーに心拍数、血圧、体温、震え等の身体情報を検出するセンサーを取り付けて検出することも可能である。近年、腕時計型などのウェアラブル端末では、このような身体情報を検出し易い環境が整ってきているため、このようなウェアラブル端末の出力を使用することも可能である。   Further, in the present embodiment, the tension state is detected based on the singing voice, but the tension state detection can be performed not only in the form of detection from the singing voice but also in various forms. For example, by capturing an image of the singer with a camera, the tension state may be detected based on tremor of a foot or hand. Alternatively, it is also possible to attach a sensor for detecting physical information such as heart rate, blood pressure, body temperature, tremor, etc. to the user who sings. In recent years, in a wearable terminal such as a watch type, since an environment in which such physical information can be easily detected has been established, it is also possible to use the output of such a wearable terminal.

また、補正された歌唱評価情報は、歌唱評価を競うランキングには使用できないようにすることが、ランキングの公平性を担保する上で好ましい。あるいは、ランキングに使用する場合には、補正前の歌唱評価情報を使用することとしてもよい。   In addition, it is preferable that the corrected song evaluation information can not be used for ranking for competing song evaluation in order to secure the fairness of the ranking. Alternatively, when used for ranking, song evaluation information before correction may be used.

以上、本実施形態では、カラオケ装置2について実行される形態について説明したが、カラオケ装置2に限ること無く、パーソナルコンピュータ、ゲーム装置、あるいは、スマートフォンなど、各種情報処理装置において本機能を実行するカラオケ用プログラムも本発明の範疇に属するものである。   As mentioned above, although the form demonstrated about the karaoke apparatus 2 was demonstrated in this embodiment, without being limited to the karaoke apparatus 2, the karaoke which performs this function in various information processing apparatuses, such as a personal computer, a game device, or a smart phone Programs also belong to the category of the present invention.

1(1a、1b):リモコン装置 29:映像再生部
2:カラオケ装置 30:CPU
5:サーバ装置 31:映像制御部
11:タッチパネルモニタ 32:ハードディスク
11a:表示部 33:タッチパネルモニタ
11b:タッチパネル 34:タッチパネル
12:ビデオRAM 35:表示部
13:映像制御部 41:モニタ
14:メモリ 42:スピーカ
15:CPU 44a、44b:マイクロホン
16:無線LAN通信部 101:ユーザー切り替えボタン
17:操作部 102:ゲストボタン
18:操作処理部 103:ログインユーザー欄
21:操作部 103a〜103e:分身像
22:操作処理部 103e:アクティブユーザー
24:LAN通信部 105:音程設定欄
25:音響制御部 106:予約ボタン
27:メモリ 110:アクセスポイント
28:ビデオRAM
1 (1a, 1b): remote control device 29: video reproduction unit 2: karaoke device 30: CPU
5: server device 31: video control unit 11: touch panel monitor 32: hard disk 11a: display unit 33: touch panel monitor 11b: touch panel 34: touch panel 12: video RAM 35: display unit 13: video control unit 41: monitor 14: memory 42 : Speaker 15: CPU 44a, 44b: Microphone 16: Wireless LAN communication unit 101: User switching button 17: Operation unit 102: Guest button 18: Operation processing unit 103: Login user column 21: Operation unit 103a to 103e: Separated image 22 : Operation processing unit 103e: active user 24: LAN communication unit 105: pitch setting column 25: sound control unit 106: reservation button 27: memory 110: access point 28: video RAM

Claims (5)

楽曲に対応する演奏情報に基づいて演奏を行う演奏処理と、
前記演奏処理期間中に歌唱するユーザーの緊張状態を検出する検出処理と、
マイクロホンから入力される歌唱音声と、演奏される演奏情報に基づいて歌唱評価情報を算出する歌唱評価処理と、
前記検出処理で検出した緊張状態が高い場合、評価が高くなるように歌唱評価情報を補正する補正処理と、
前記補正処理で補正された歌唱評価情報を通知する通知処理と、を実行することを特徴とする
カラオケ装置。
Performance processing for performing a performance based on performance information corresponding to the music;
A detection process for detecting a tension state of a user singing during the performance process period;
Singing evaluation processing that calculates singing evaluation information based on singing voice input from a microphone and performance information to be played;
A correction process for correcting song evaluation information so that the evaluation becomes high when the tension state detected in the detection process is high;
And a notification process of notifying song evaluation information corrected by the correction process.
前記検出処理は、ユーザーの歌唱音声に基づいて緊張状態を検出することを特徴とする
請求項1に記載のカラオケ装置。
The karaoke apparatus according to claim 1, wherein the detection process detects a tension state based on a singing voice of the user.
1の楽曲の演奏時間中、歌唱音声が所定の状態である時間長に基づいて緊張状態を判検出することを特徴とする
請求項2に記載のカラオケ装置。
The karaoke apparatus according to claim 2, characterized in that the tension state is detected based on the length of time the singing voice is in a predetermined state during the playing time of the music piece 1.
前記検出処理で検出した緊張状態の度合いに応じて、歌唱評価情報の補正度合いを変更することを特徴とする
請求項1から請求項3の何れか1項に記載のカラオケ装置。
The karaoke apparatus according to any one of claims 1 to 3, wherein the degree of correction of the song evaluation information is changed according to the degree of tension state detected in the detection process.
演奏情報に基づいて演奏を行う演奏処理と、
前記演奏処理期間中に歌唱するユーザーの緊張状態を検出する検出処理と、
マイクロホンから入力される歌唱音声と、演奏される演奏情報に基づいて歌唱評価情報を算出する歌唱評価処理と、
前記検出処理で検出した緊張状態が高い場合、評価が高くなるように歌唱評価情報を補正する補正処理と、
前記補正処理された歌唱評価情報を通知する通知処理と、を情報処理装置に実行させることを特徴とする
カラオケ用プログラム。
Performance processing that plays based on performance information,
A detection process for detecting a tension state of a user singing during the performance process period;
Singing evaluation processing that calculates singing evaluation information based on singing voice input from a microphone and performance information to be played;
A correction process for correcting song evaluation information so that the evaluation becomes high when the tension state detected in the detection process is high;
And a notification process for notifying the song evaluation information subjected to the correction process, the information processing apparatus being executed.
JP2015169858A 2015-08-28 2015-08-28 Karaoke apparatus and program for karaoke Active JP6531567B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015169858A JP6531567B2 (en) 2015-08-28 2015-08-28 Karaoke apparatus and program for karaoke

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015169858A JP6531567B2 (en) 2015-08-28 2015-08-28 Karaoke apparatus and program for karaoke

Publications (2)

Publication Number Publication Date
JP2017045018A JP2017045018A (en) 2017-03-02
JP6531567B2 true JP6531567B2 (en) 2019-06-19

Family

ID=58210110

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015169858A Active JP6531567B2 (en) 2015-08-28 2015-08-28 Karaoke apparatus and program for karaoke

Country Status (1)

Country Link
JP (1) JP6531567B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7061523B2 (en) * 2018-06-28 2022-04-28 株式会社第一興商 In-vehicle karaoke equipment
JP7079697B2 (en) * 2018-08-30 2022-06-02 株式会社第一興商 In-vehicle karaoke equipment

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101248353B1 (en) * 2005-06-09 2013-04-02 가부시키가이샤 에이.지.아이 Speech analyzer detecting pitch frequency, speech analyzing method, and speech analyzing program
JP5122598B2 (en) * 2010-03-30 2013-01-16 株式会社コナミデジタルエンタテインメント Speech input evaluation system, control method for speech input evaluation system, and program

Also Published As

Publication number Publication date
JP2017045018A (en) 2017-03-02

Similar Documents

Publication Publication Date Title
JP2008209640A (en) Karaoke sound effect output system
JP5269829B2 (en) Karaoke system, karaoke system control method, karaoke system control program, and information recording medium thereof
JP6501344B2 (en) Karaoke scoring system considering listener's evaluation
JP6531567B2 (en) Karaoke apparatus and program for karaoke
JP6763334B2 (en) Music selection device, karaoke system, and music selection program
JP2006201654A (en) Accompaniment following system
JP6944357B2 (en) Communication karaoke system
JP2014191192A (en) Reference data creation device, reference data creation system, and performance terminal device
JP5598685B2 (en) Karaoke device and karaoke program
JP6736914B2 (en) Music selection device, karaoke system, and music selection program
JP6176934B2 (en) Singing ranking display system
JP5823313B2 (en) Karaoke equipment
JP2016102962A (en) Karaoke rating system considering listener evaluation
JP6624982B2 (en) Karaoke system
JP7327437B2 (en) karaoke device
JP6601214B2 (en) Music selection device, karaoke system, and music selection program
JP6642215B2 (en) Music selection device, karaoke system and music selection program
JP6944364B2 (en) Karaoke equipment
JP6638429B2 (en) Karaoke device and karaoke program
JP6323236B2 (en) Karaoke device and karaoke program
JP6705167B2 (en) String instrument performance evaluation device, music performance device, and string instrument performance evaluation program
JP2023162958A (en) Karaoke device
JP6268536B2 (en) Music selection device, karaoke device, and music selection program
JP6232304B2 (en) A viewing system for singing videos that determines the display priority in consideration of the viewer's evaluation
JP6530670B2 (en) Music search system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180402

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190319

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190423

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190506

R150 Certificate of patent or registration of utility model

Ref document number: 6531567

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150