JP6292404B2 - Karaoke device, karaoke program and karaoke system - Google Patents

Karaoke device, karaoke program and karaoke system Download PDF

Info

Publication number
JP6292404B2
JP6292404B2 JP2014201693A JP2014201693A JP6292404B2 JP 6292404 B2 JP6292404 B2 JP 6292404B2 JP 2014201693 A JP2014201693 A JP 2014201693A JP 2014201693 A JP2014201693 A JP 2014201693A JP 6292404 B2 JP6292404 B2 JP 6292404B2
Authority
JP
Japan
Prior art keywords
information
music
section
singing
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014201693A
Other languages
Japanese (ja)
Other versions
JP2016071209A (en
Inventor
原田 剛
剛 原田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Brother Industries Ltd
Original Assignee
Brother Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Brother Industries Ltd filed Critical Brother Industries Ltd
Priority to JP2014201693A priority Critical patent/JP6292404B2/en
Publication of JP2016071209A publication Critical patent/JP2016071209A/en
Application granted granted Critical
Publication of JP6292404B2 publication Critical patent/JP6292404B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明は、楽曲の自動演奏に合わせて歌唱を楽しむことのできるカラオケ装置、カラオケプログラム、及び、カラオケシステムに関する。特に、歌唱評価を行うことのできるカラオケ装置、カラオケプログラム、及び、カラオケシステムに関する。   The present invention relates to a karaoke apparatus, a karaoke program, and a karaoke system that can enjoy singing according to automatic performance of music. In particular, it is related with the karaoke apparatus which can perform singing evaluation, a karaoke program, and a karaoke system.

従来、自動演奏に合わせて歌唱を楽しむことのできるカラオケが社交の場等において行われている。カラオケを行うことのできるカラオケ装置では、歌唱の技巧を競うことを目的とした採点機能を備えたものがある。採点機能は、歌唱者の歌唱音声の音程と楽曲情報に規定されたメロディの音程とを比較することにより、歌唱の技巧を数値化して示すものである。通信機能を利用可能なカラオケ装置では、複数のユーザ間で採点結果の順位を競うことが行われている。ユーザ間で採点結果を競うことで、歌唱能力の向上に対する意欲向上が図られる。   Conventionally, karaoke in which singing can be enjoyed in accordance with automatic performance has been performed in a social space. Some karaoke apparatuses capable of performing karaoke have a scoring function for the purpose of competing in singing skills. The scoring function quantifies and shows the skill of the singing by comparing the pitch of the singing voice of the singer with the pitch of the melody defined in the music information. In a karaoke apparatus that can use a communication function, a plurality of users compete for ranks of scoring results. By competing for scoring results among users, motivation for improving singing ability is improved.

一方、カラオケにおいては、歌唱能力の向上を図ることを目的として、歌唱補助を行うことが行われている。特許文献1には、このようなカラオケにおける歌唱補助として、模範ボーカル付きの楽曲を演奏する際に、当該楽曲の模範ボーカルの等級情報と、当該楽曲を歌唱する者の等級情報とを比較し、比較結果に基づいて当該楽曲の模範ボーカルを音響出力するか否かを決定するカラオケ装置が開示されている。特許文献1に開示されるカラオケ装置によれば、歌唱者のレベルに合わせた模範ボーカルを再生することが可能である。   On the other hand, in karaoke, singing assistance is performed for the purpose of improving singing ability. In Patent Document 1, when performing a song with an exemplary vocal as a singing aid in such karaoke, the grade information of the exemplary vocal of the song is compared with the grade information of the person who sings the song, A karaoke apparatus that determines whether or not to output an exemplary vocal of the music based on the comparison result is disclosed. According to the karaoke apparatus disclosed in Patent Document 1, it is possible to reproduce an exemplary vocal that matches the level of the singer.

特開2005−242238号公報JP 2005-242238 A

現在、出願人は、カラオケ装置において、歌唱評価機能を利用した新たな機能の開発を行っている。この機能では、楽曲を再生する際、区間毎に区間評価情報を算出し、算出された区間評価情報が所定条件を満たしたことを条件として、次の区間の再生が実行される。したがって、ユーザは、区間評価情報が所定条件を満たす(区間を上手く歌唱できる)まで、同じく区間の歌唱を継続して行うこととなる。   Currently, the applicant is developing a new function using the singing evaluation function in the karaoke apparatus. In this function, when the music is played, section evaluation information is calculated for each section, and playback of the next section is executed on condition that the calculated section evaluation information satisfies a predetermined condition. Therefore, the user continues to sing the same section until the section evaluation information satisfies the predetermined condition (can sing the section well).

さらに出願人は、このような新たな機能において、楽曲の再生に同期してお手本情報を再生する歌唱補助を行うことが考えられる。歌唱者は、再生されるお手本情報を聴取しつつ歌唱することで、自己の歌唱の評価向上を図ることが可能となる。しかしながら、お手本情報が、自分の歌い方に適していない場合、歌唱の評価向上にならない、さらには、歌唱の障害となることが考えられる。特に、お手本情報として録音された音声情報を使用した場合、お手本情報の歌い方や声質は、自己の歌い方に対する適否に大きく影響を及ぼすこととなる。   Further, it is conceivable that the applicant performs singing assistance for reproducing the model information in synchronization with the reproduction of the music in such a new function. The singer can improve the evaluation of his / her song by singing while listening to the reproduced model information. However, if the model information is not suitable for one's own way of singing, it is considered that the evaluation of the singing is not improved, and further, it becomes an obstacle to singing. In particular, when voice information recorded as model information is used, the way in which the model information is sung and the voice quality greatly affect the suitability of the person to sing.

このように、上述する機能において、お手本情報を再生する歌唱補助を行った場合、本来、歌唱補助を行うお手本情報の再生が、歌唱の障害となった場合、区間評価情報が所定条件を満たすことなく、何度も同じ区間を歌唱しなくてはならない場合がある。本発明は、このような状況を鑑みたものであり、歌唱評価機能を利用した新たな機能において、ユーザにあった適切な歌唱補助を行うことを目的とするものである。   As described above, in the above-described function, when the singing assistance for reproducing the model information is performed, when the reproduction of the model information for performing the singing assistance becomes an obstacle to the singing, the section evaluation information satisfies the predetermined condition. In some cases, it may be necessary to sing the same section over and over again. The present invention has been made in view of such a situation, and an object of the present invention is to perform appropriate singing assistance suitable for the user in a new function using the singing evaluation function.

そのため、本発明に係るカラオケ装置は以下の構成を採用するものである。
再生部と、制御部と、を備えるカラオケ装置であって、
前記再生部は、楽曲情報とお手本情報を再生可能とし、
前記制御部は、楽曲再生処理と、歌唱補助処理とを実行し、
前記楽曲再生処理は、ユーザから指定された楽曲に対応する楽曲情報と、当該楽曲情報に対応するお手本情報を前記再生部に再生させ、
前記歌唱補助処理は、マイクロホンから入力される歌唱音声情報と、再生中の楽曲に対応する基準情報とを対比し、所定区間毎に区間評価情報を算出し、算出された区間評価情報が所定条件を満たしていない場合、お手本情報を他のお手本情報に変更し、当該区間評価情報に対応する区間を再度再生する。
Therefore, the karaoke apparatus according to the present invention employs the following configuration.
A karaoke apparatus comprising a reproduction unit and a control unit,
The playback unit can play back music information and model information,
The control unit performs music reproduction processing and singing assistance processing,
The music reproduction process causes the reproduction unit to reproduce music information corresponding to the music specified by the user and model information corresponding to the music information,
The singing assistance process compares singing voice information input from a microphone with reference information corresponding to the music being played back, calculates section evaluation information for each predetermined section, and the calculated section evaluation information is a predetermined condition. If the condition is not satisfied, the model information is changed to other model information, and the section corresponding to the section evaluation information is reproduced again.

さらに、本発明に係るカラオケ装置において、
お手本情報は、ユーザの歌唱を録音することで得られた投稿情報である。
Furthermore, in the karaoke apparatus according to the present invention,
Model information is contribution information obtained by recording a user's song.

さらに、本発明に係るカラオケ装置において、
お手本情報には、各区間に区間評価情報が付与されており、
前記歌唱補助処理は、算出された区間評価情報が所定条件を満たしていない場合、当該区間について、算出された区間評価情報よりも良好な区間評価情報を有する他のお手本情報に変更する。
Furthermore, in the karaoke apparatus according to the present invention,
In the model information, section evaluation information is given to each section.
When the calculated section evaluation information does not satisfy the predetermined condition, the singing assistance process is changed to other example information having section evaluation information better than the calculated section evaluation information for the section.

また、本発明に係るカラオケプログラムは、
ユーザから指定された楽曲に対応する楽曲情報と、当該楽曲情報に対応するお手本情報を生部に再生させる楽曲再生処理と、
マイクロホンから入力される歌唱音声情報と、再生中の楽曲に対応する基準情報とを対比し、所定区間毎に区間評価情報を算出し、算出された区間評価情報が所定条件を満たしていない場合、お手本情報を他のお手本情報に変更し、当該区間評価情報に対応する区間を再度、再生する歌唱補助処理と、を情報処理装置に実行させる。
In addition, the karaoke program according to the present invention is
A musical information corresponding to the specified music from the user, the music piece reproduction processing to reproduce the playback unit & Learn information corresponding to the music information,
When the singing voice information input from the microphone is compared with the reference information corresponding to the music being played back, the section evaluation information is calculated for each predetermined section, and the calculated section evaluation information does not satisfy the predetermined condition, The example information is changed to other example information, and the information processing apparatus is caused to perform a singing assistance process for reproducing the section corresponding to the section evaluation information again.

また、本発明に係るカラオケシステムは、
カラオケ装置と、サーバ装置と、を備えたカラオケシステムであって、
前記カラオケ装置は、再生部と、制御部と、を備え、
前記再生部は、楽曲情報とお手本情報を再生可能とし、
前記制御部は、楽曲再生処理と、歌唱補助処理とを実行し、
前記楽曲再生処理は、ユーザから指定された楽曲に対応する楽曲情報と、当該楽曲情報に対応するお手本情報を前記再生部に再生させ、
前記歌唱補助処理は、マイクロホンから入力される歌唱音声情報と、再生中の楽曲に対応する基準情報とを対比し、所定区間毎に区間評価情報を算出し、算出された区間評価情報が所定条件を満たしていない場合、お手本情報を、前記サーバ装置から受信した他のお手本情報に変更し、当該区間評価情報に対応する区間を再度再生する。
In addition, the karaoke system according to the present invention is
A karaoke system comprising a karaoke device and a server device,
The karaoke apparatus includes a reproduction unit and a control unit,
The playback unit can play back music information and model information,
The control unit performs music reproduction processing and singing assistance processing,
The music reproduction process causes the reproduction unit to reproduce music information corresponding to the music specified by the user and model information corresponding to the music information,
The singing assistance process compares singing voice information input from a microphone with reference information corresponding to the music being played back, calculates section evaluation information for each predetermined section, and the calculated section evaluation information is a predetermined condition. If the condition is not satisfied, the model information is changed to other model information received from the server device, and the section corresponding to the section evaluation information is reproduced again.

本発明に係るカラオケ装置、カラオケプログラム、カラオケシステムによれば、が所定区間毎に算出される区間評価情報が所定条件を満たしていない場合、当該評価情報に対応する区間を再度再生する際、お手本情報を他のお手本情報に変更して再生することにより、歌唱するユーザに適したお手本情報を使用することが可能となる。自己に適したお手本情報を再生することで、歌唱するユーザは、再生されるお手本情報を参考に歌唱を楽しむことが可能となる。   According to the karaoke apparatus, the karaoke program, and the karaoke system according to the present invention, when the section evaluation information calculated for each predetermined section does not satisfy the predetermined condition, the section corresponding to the evaluation information is reproduced again. By changing the information to other model information and reproducing it, it becomes possible to use the model information suitable for the user who sings. By reproducing the model information suitable for oneself, a user who sings can enjoy singing with reference to the reproduced model information.

さらに本発明に係るカラオケ装置、カラオケプログラム、カラオケシステムにおいて、お手本情報は、ユーザの歌唱を録音することで得られた投稿情報であることとしている。お手本情報として、ユーザから広く収集した投稿情報を使用する場合、投稿情報の歌唱方法は多様であることが考えられるため、歌唱するユーザに対する適、不適も顕著となることが予想される。このように、お手本情報に投稿情報を使用した場合、お手本情報を変更することにより、歌唱補助に関する効果はさらに期待できるものとなる。   Furthermore, in the karaoke apparatus, karaoke program, and karaoke system according to the present invention, the model information is post information obtained by recording the user's song. When post information widely collected from users is used as model information, there are various ways of singing post information. Therefore, it is expected that suitability and inappropriateness for a user who sings will become significant. Thus, when post information is used for model information, the effect regarding singing assistance can be further expected by changing the model information.

本発明の実施形態に係るカラオケシステムの構成を示す図The figure which shows the structure of the karaoke system which concerns on embodiment of this invention. 本発明の実施形態に係るユーザ情報を示す図The figure which shows the user information which concerns on embodiment of this invention 本実施形態のユーザ情報の送受信を説明する図The figure explaining transmission / reception of the user information of this embodiment 本実施形態のアクティブユーザトップ画面を示す図The figure which shows the active user top screen of this embodiment 本実施形態の楽曲確認画面を示す図The figure which shows the music confirmation screen of this embodiment 本実施形態の楽曲情報、投稿情報のデータ構成を示す図The figure which shows the data structure of the music information of this embodiment, and contribution information 本実施形態の楽曲予約処理を示すフロー図Flow chart showing music reservation processing of the present embodiment 本実施形態の楽曲再生処理を示すフロー図Flow chart showing the music playback process of this embodiment 本実施形態の投稿再生処理を示すフロー図Flow chart showing the post playback process of this embodiment 本実施形態の評価再生処理を示すフロー図Flow chart showing the evaluation reproduction process of this embodiment 本実施形態の評価再生処理の概要を説明するための模式図Schematic diagram for explaining the outline of the evaluation reproduction process of the present embodiment 本実施形態の評価結果画面を示す図The figure which shows the evaluation result screen of this embodiment

図1は、本発明の実施形態に係るカラオケシステムの構成を示す図である。本実施形態におけるカラオケシステムは、カラオケ装置2(コマンダ)と、リモコン装置1を含んで構成されている。なお、図1に示す例では、1台のカラオケ装置2に対して、リモコン装置1aとリモコン装置1b、2台のリモコン装置1が使用されている例である。これらリモコン装置1a、1bの構成は同一であるため、リモコン装置1として説明を行う。カラオケ装置2とリモコン装置1は、LAN100及びアクセスポイント110を利用してネットワークを形成するように接続されている。   FIG. 1 is a diagram showing a configuration of a karaoke system according to an embodiment of the present invention. The karaoke system in this embodiment includes a karaoke device 2 (commander) and a remote control device 1. In the example shown in FIG. 1, the remote controller 1 a, the remote controller 1 b, and the two remote controllers 1 are used for one karaoke apparatus 2. Since these remote control devices 1a and 1b have the same configuration, the remote control device 1 will be described. The karaoke device 2 and the remote control device 1 are connected so as to form a network using the LAN 100 and the access point 110.

カラオケボックスなどの店舗に設置されるカラオケ装置2は、楽曲を演奏するための演奏部として音響制御部25を備えている。また、カラオケ装置2は、ユーザからの各種入力を受け付ける操作部21を備える。カラオケ装置2は、操作部21からの入力を解釈してCPU30に伝達する操作処理部22を備える。また、カラオケ装置2は、各種情報を記憶する記憶部としてのHDD32(ハードディスク)を備える。カラオケ装置2は、LAN100に接続してネットワークに加入する通信手段としてのLAN通信部24を備えている。   The karaoke apparatus 2 installed in a store such as a karaoke box includes an acoustic control unit 25 as a performance unit for playing music. Moreover, the karaoke apparatus 2 is provided with the operation part 21 which receives the various inputs from a user. The karaoke apparatus 2 includes an operation processing unit 22 that interprets an input from the operation unit 21 and transmits it to the CPU 30. The karaoke apparatus 2 includes an HDD 32 (hard disk) as a storage unit that stores various types of information. The karaoke apparatus 2 includes a LAN communication unit 24 as a communication unit that connects to the LAN 100 and joins the network.

また、カラオケ装置2は、モニタ41に対して歌詞映像、背景映像を表示させる映像再生手段を備える。この映像再生手段は、映像情報に基づいて映像を再生する映像再生部29、再生する映像を一時的に蓄積するビデオRAM28、再生された映像に対する歌詞テロップの重畳、映像効果を付与する映像制御部31を備えて構成される。   Further, the karaoke apparatus 2 includes video reproduction means for displaying lyrics video and background video on the monitor 41. This video playback means includes a video playback unit 29 that plays back video based on video information, a video RAM 28 that temporarily stores the video to be played back, a superposition of lyrics telop on the played back video, and a video control unit that provides video effects 31 is comprised.

さらに、このカラオケ装置2では、外部に接続されるモニタ41以外に、タッチパネルモニタ33に対して各種情報を表示することを可能としている。タッチパネルモニタ33は映像制御部31から入力された映像情報を表示する表示部35と、タッチ入力された位置を操作処理部22に出力するタッチパネル34が重畳されて構成されている。このタッチパネルモニタ33は、カラオケ装置2の操作部、あるいは、リモコン装置1のタッチパネルモニタ11などと同様、入力部として機能する。ユーザは、タッチパネルモニタ33にて楽曲を選択することで、直接カラオケ装置2に予約をさせるなど、カラオケ装置2に対する各種操作を行うことが可能である。   Further, in this karaoke apparatus 2, various information can be displayed on the touch panel monitor 33 in addition to the monitor 41 connected to the outside. The touch panel monitor 33 is configured by superimposing a display unit 35 that displays video information input from the video control unit 31 and a touch panel 34 that outputs a touch input position to the operation processing unit 22. The touch panel monitor 33 functions as an input unit, like the operation unit of the karaoke device 2 or the touch panel monitor 11 of the remote control device 1. The user can perform various operations on the karaoke apparatus 2 such as making the karaoke apparatus 2 make a reservation directly by selecting music on the touch panel monitor 33.

さらに、カラオケ装置2は、各構成を統括して制御するためのCPU30、各種プログラムを実行するにあたって必要となる情報を一時記憶するためのメモリ27を備えて構成される。   Furthermore, the karaoke apparatus 2 includes a CPU 30 for controlling each component in an integrated manner and a memory 27 for temporarily storing information necessary for executing various programs.

このような構成にてカラオケ装置2は、各種処理を実行することとなるが、カラオケ装置2の主な機能として、楽曲予約処理、楽曲再生処理などを実行可能としている。楽曲予約処理は、ユーザからの指定に基づいて楽曲を指定、予約するための処理であってリモコン装置1と連携して実行される。ユーザの操作により、リモコン装置1などの入力部で指定された予約情報をメモリ27中の予約テーブルに登録する。楽曲再生処理は、予約された楽曲を再生させる処理であって、楽曲演奏処理と歌詞再生処理とが同期して実行される処理である。   With such a configuration, the karaoke apparatus 2 executes various processes, but as a main function of the karaoke apparatus 2, a music reservation process, a music reproduction process, and the like can be executed. The music reservation process is a process for designating and reserving music based on designation from the user, and is executed in cooperation with the remote control device 1. The reservation information designated by the input unit such as the remote control device 1 is registered in the reservation table in the memory 27 by a user operation. The music reproduction process is a process of reproducing a reserved music, and the music performance process and the lyrics reproduction process are executed in synchronization.

楽曲演奏処理は、楽曲情報に含まれる演奏情報に基づき、音響制御部25に演奏を実行させる処理である。音響制御部25にて演奏された楽曲は、マイクロホン44a、44bから入力される歌唱音声と一緒にスピーカ42から放音される。歌詞再生処理は、楽曲情報に含まれる歌詞情報をモニタ41に表示させることで歌唱補助を行う処理である。この歌詞再生処理で表示される歌詞に、背景映像を重畳させて表示させる背景映像表示処理を実行することとしてもよい。   The music performance process is a process for causing the acoustic control unit 25 to perform a performance based on the performance information included in the music information. The music played by the acoustic control unit 25 is emitted from the speaker 42 together with the singing voice input from the microphones 44a and 44b. The lyric reproduction process is a process of performing singing assistance by displaying the lyric information included in the music information on the monitor 41. A background video display process for superimposing a background video on the lyrics displayed in the lyrics reproduction process may be executed.

カラオケ装置2には、歌唱の様子を撮影するための撮像手段としてカメラ45が接続されている。カメラ45からのカメラ映像は、映像入出力を担う映像制御部31を介して、記録手段としてのHDD32に記録、そして、モニタ41にリアルタイム表示することが可能である。   A camera 45 is connected to the karaoke apparatus 2 as an imaging means for photographing the state of singing. The camera video from the camera 45 can be recorded on the HDD 32 as a recording means and displayed on the monitor 41 in real time via the video control unit 31 responsible for video input / output.

一方、リモコン装置1は、歌唱する楽曲を選択する選曲処理を実行可能とし、予約情報などカラオケ装置2に対して各種指示を送信可能としている。また、リモコン装置1は、カラオケ装置2あるいはインターネット上に接続されたサーバ装置5から各種情報を受信し、ユーザに対して各種情報を提供することも可能である。本実施形態では、ユーザから各種指示を受け付けるユーザインターフェイスとして、操作部17と、タッチパネルモニタ11を備えている。タッチパネルモニタ11は、表示部11aとタッチパネル11bを有して構成され、表示部11aに各種インターフェイスを表示するとともに、ユーザからのタッチ入力を受付可能としている。   On the other hand, the remote control device 1 can execute a music selection process for selecting a song to be sung and can transmit various instructions to the karaoke device 2 such as reservation information. The remote control device 1 can also receive various information from the karaoke device 2 or the server device 5 connected to the Internet and provide the user with various information. In the present embodiment, an operation unit 17 and a touch panel monitor 11 are provided as user interfaces for receiving various instructions from the user. The touch panel monitor 11 includes a display unit 11a and a touch panel 11b, displays various interfaces on the display unit 11a, and can accept a touch input from a user.

さらにリモコン装置1は、楽曲検索に必要とされるデータベース、各種プログラム、並びに、プログラム実行に伴って発生する各種情報を記憶する記憶部として、メモリ14、そして、これら構成を統括して制御するためのリモコン側制御部を備えて構成される。リモコン側制御部には、CPU15、タッチパネルモニタ11に対して表示する映像を形成する映像制御部13、表示する映像情報を一時的に蓄えるビデオRAM12、タッチパネルモニタ11あるいは操作部17からの入力を解釈してCPU15に伝える操作処理部18が含まれている。   Furthermore, the remote control device 1 controls the memory 14 and the configuration as a storage unit for storing a database, various programs required for music search, and various types of information generated during program execution. Remote control side control unit. The remote control side control unit interprets inputs from the CPU 15, the video control unit 13 that forms video to be displayed on the touch panel monitor 11, the video RAM 12 that temporarily stores video information to be displayed, the touch panel monitor 11, or the operation unit 17. Thus, an operation processing unit 18 for transmitting to the CPU 15 is included.

また、リモコン装置1は、無線LAN通信部16によって、アクセスポイント110と無線接続されることで、LAN100によって構成されるネットワークに接続される。なお、各リモコン装置1は、特定のカラオケ装置2に対して事前に対応付けされている。リモコン装置1から出力される各種命令は、対応付けされたカラオケ装置2にて受信されることとなる。   Further, the remote control device 1 is connected to a network constituted by the LAN 100 by being wirelessly connected to the access point 110 by the wireless LAN communication unit 16. Each remote control device 1 is associated with a specific karaoke device 2 in advance. Various commands output from the remote control device 1 are received by the associated karaoke device 2.

このようなリモコン装置1の構成により、ユーザからの各種入力をタッチパネルモニタ11、あるいは、操作部17から受付けるとともに、映像情報をタッチパネルモニタ11の表示により各種情報を提供することで、カラオケ装置2に対して楽曲予約などの各種指示を行うことが可能とされている。   With such a configuration of the remote control device 1, various inputs from the user are received from the touch panel monitor 11 or the operation unit 17, and video information is provided to the karaoke device 2 by displaying various information on the touch panel monitor 11. On the other hand, it is possible to give various instructions such as music reservation.

本実施形態のカラオケシステムは、リモコン装置1のタッチパネルモニタ11から認証情報(後述するユーザ識別情報やパスワード)を入力することで、ログインすることが可能となっている。特に、本実施形態のカラオケシステムでは、複数のユーザをログインさせることが可能である。ログインしたユーザは、サーバ装置5にユーザ毎に記憶されたユーザ情報を利用して各種サービスを受けることが可能となる。   The karaoke system of the present embodiment can log in by inputting authentication information (user identification information and password described later) from the touch panel monitor 11 of the remote control device 1. In particular, in the karaoke system of the present embodiment, a plurality of users can be logged in. The logged-in user can receive various services using the user information stored for each user in the server device 5.

図2は、ユーザ毎にサーバ装置5に記憶されているユーザ情報を説明するための図である。本実施形態では、ユーザ情報として、個人情報、マイうたテーブル、マイアーティストテーブル、履歴テーブルといった、ユーザに関する各種情報を含んで構成される。ユーザ情報は、サーバ装置5の記憶部51において記憶管理されている。ユーザ情報には、ユーザがログインするためのアカウント情報(ユーザ識別情報とパスワード)が含まれている。個人情報には、ユーザ名(実際の名前に限ったものでなく、ニックネームであってもよい)、性別、年齢、うた年齢などを含んで構成される。これら各種情報は、リモコン装置1、あるいは、インターネットなどのネットワークに接続された図示しないパーソナルコンピュータ、携帯情報端末などを使用し、ログインして設定することも可能である。   FIG. 2 is a diagram for explaining user information stored in the server device 5 for each user. In the present embodiment, the user information includes various information related to the user such as personal information, a my song table, a my artist table, and a history table. The user information is stored and managed in the storage unit 51 of the server device 5. The user information includes account information (user identification information and password) for the user to log in. The personal information includes a user name (not limited to an actual name but may be a nickname), gender, age, song age, and the like. These various types of information can be set by logging in using the remote control device 1 or a personal computer (not shown) connected to a network such as the Internet or a portable information terminal.

マイうたテーブルは、ユーザによって登録された楽曲を記憶するテーブルであって、楽曲識別情報、音高調整値などを含んで構成されている。ユーザは、このマイうたテーブルに基づいて、過去に登録したお気に入りの楽曲を呼び出して予約、演奏することが可能となる。その際、登録した音高調整値を利用することで、自分の歌唱にあった音高で演奏(再生)を行うこともできる。   The My Uta table is a table that stores music registered by the user, and includes music identification information, pitch adjustment values, and the like. Based on this My Uta table, the user can call, reserve, and play a favorite song registered in the past. At that time, by using the registered pitch adjustment value, it is possible to perform (reproduce) at a pitch suitable for the singing.

マイアーティストテーブルは、ユーザによって登録されたアーティスト(歌手)を記憶するテーブルであって、歌手識別情報を含んで構成されている。ユーザは、このマイアーティストテーブルに基づいて、登録したお気に入りのアーティストの楽曲(持ち歌、あるいは、関連楽曲)を呼び出して予約、演奏することが可能となる。   The my artist table is a table for storing artists (singer) registered by the user, and includes singer identification information. Based on this My Artist table, the user can call, reserve, and perform a favorite favorite artist's song (a song or a related song).

履歴テーブルは、ユーザが過去に演奏した楽曲に関する各種情報を記録した情報であって、本実施形態では、過去に当該ユーザが予約することで演奏された楽曲について、楽曲の楽曲識別情報、演奏した日時を示す歌唱日時、歌唱時に行われた歌唱評価処理の結果である歌唱価情報などを含んで構成されている。ユーザは、この履歴テーブルに基づいて、過去に演奏した楽曲を呼び出して再度歌唱することが可能である。   The history table is information in which various types of information related to the music played by the user in the past are recorded. In the present embodiment, the music identification information of the music played for the music played by the user in the past in the past. It includes a singing date and time indicating date and time, singing value information that is a result of a singing evaluation process performed at the time of singing, and the like. Based on this history table, the user can call a song played in the past and sing again.

図3は、このユーザ情報の送受信の様子を示した図である。カラオケ店舗に来店したユーザは、自己のユーザ識別情報とパスワードで構成された認証情報を入力、あるいは、リモコン装置1などに設けられたICカードリーダでICカードに記憶されている認証情報を読み取らせることで認証処理(S101)を実行する。カラオケ装置2あるいはリモコン装置1は、認証情報をサーバ装置5に送信し(S102)、認証情報を受信したサーバ装置5は記憶部51に記憶されたデータベースから、該当するユーザのユーザ情報を抽出し(S121)、問い合わせのあったカラオケ装置2あるいはリモコン装置1に対して送信する(S122)。   FIG. 3 is a diagram showing how user information is transmitted and received. A user who visits a karaoke store inputs authentication information composed of his / her user identification information and password, or causes the IC card reader provided in the remote control device 1 or the like to read the authentication information stored in the IC card. Thus, the authentication process (S101) is executed. The karaoke device 2 or the remote control device 1 transmits the authentication information to the server device 5 (S102), and the server device 5 that has received the authentication information extracts the user information of the corresponding user from the database stored in the storage unit 51. (S121), it transmits to the karaoke device 2 or the remote control device 1 inquired (S122).

ユーザ情報を受信したカラオケ装置2側では(S103)、受信したユーザ情報に基づいて、楽曲予約処理、楽曲再生処理など各種サービス処理を提供する(S104)。ユーザによりログアウトが要求される(S105)とサービス処理を中断し、サービス処理中に発生した各種履歴(ログ)、あるいは、ユーザによる設定変更を反映したユーザ情報をサーバ装置5に送信する(S106)。ここで、ユーザ情報は、全ての情報を送信することの他、更新された差分だけを送信してもよい。ユーザ情報を受信したサーバ装置5では(S123)、受信したユーザ情報に基づいて記憶部51に記憶されたデータベースの更新を実行する(S124)。   On the karaoke device 2 side that has received the user information (S103), various service processes such as a music reservation process and a music reproduction process are provided based on the received user information (S104). When logout is requested by the user (S105), the service process is interrupted, and various histories (logs) generated during the service process or user information reflecting the setting change by the user is transmitted to the server apparatus 5 (S106). . Here, user information may transmit only the updated difference other than transmitting all information. In the server device 5 that has received the user information (S123), the database stored in the storage unit 51 is updated based on the received user information (S124).

以上、あるユーザが認証処理(ログイン処理)してから、ログアウトするまでの流れを説明したが、本実施形態のカラオケ装置2、リモコン装置1は、認証された複数人(認証ユーザ)が同時にログインした状態で使用することが可能となっている。ログインした複数のユーザは、リモコン装置1のタッチパネルモニタ11等に表示されるユーザインターフェイスを用いることで、サービスを提供するユーザ(以下、「アクティブユーザ」という)を切り替えて使用することが可能となっている。   The flow from the authentication process (login process) to logout has been described above. However, in the karaoke apparatus 2 and the remote control apparatus 1 of the present embodiment, a plurality of authenticated users (authenticated users) log in at the same time. It is possible to use in the state. A plurality of logged-in users can use a user providing a service (hereinafter referred to as “active user”) by using a user interface displayed on the touch panel monitor 11 or the like of the remote control device 1. ing.

図4は、本実施形態のアクティブユーザトップ画面を示す図である。この図に示されるように、複数人がログインした状態ではログインユーザ欄103にログインしたユーザの分身像103a〜103e(本実施形態では顔部分)が表示される。またログインユーザ欄103中、右端に背景がハイライト(白色)で示されるユーザは、アクティブユーザ103e(Aさん)であって、図に示す状態では、このアクティブユーザ103eに対するサービス、すなわち、アクティブユーザ103eのユーザ情報を利用したサービスが実行されている状態となっている。このアクティブユーザトップ画面では、「曲を探す」を選択することで、歌手名、楽曲名に基づく検索を行うことができる。   FIG. 4 is a diagram showing an active user top screen according to the present embodiment. As shown in this figure, when a plurality of users are logged in, the logged-in user column 103 displays the logged-in images 103a to 103e (face portions in this embodiment) of the logged-in user. In the logged-in user column 103, the user whose background is highlighted (white) at the right end is the active user 103e (Mr. A), and in the state shown in the figure, the service for the active user 103e, that is, the active user The service using the user information 103e is being executed. On this active user top screen, a search based on a singer name and a song name can be performed by selecting “Find a song”.

リモコン装置1のタッチパネルモニタ11を使用して楽曲の指定が行われた場合、タッチパネルモニタ11には、指定した楽曲の詳細を確認するための楽曲確認画面が表示される図5には、本実施形態の楽曲確認画面が示されている。アクティブユーザとして楽曲を選択した場合、この楽曲確認画面にて、予約を行う楽曲に間違いがないか、楽曲名、歌手名、歌い出しなどを表示してユーザに確認させる。本実施形態のカラオケ装置2は、歌唱後に録音した歌唱音声を投稿情報として投稿することが可能である。そのため、楽曲確認画面では、予約する楽曲に対し、オプションとして、投稿を行うか否かを設定することが可能となっている。オプション欄に表示されている変更ボタンを操作することで、投稿を行うか否か等、投稿に関する各種設定を行うことが可能である。   When the music is designated using the touch panel monitor 11 of the remote control device 1, a music confirmation screen for confirming the details of the designated music is displayed on the touch panel monitor 11. FIG. The form music confirmation screen is shown. When a song is selected as an active user, the song confirmation screen displays the song name, singer name, singing, etc. to make the user confirm whether there is a mistake in the song to be reserved. The karaoke apparatus 2 of this embodiment can post the singing voice recorded after singing as posting information. Therefore, on the music confirmation screen, it is possible to set whether or not to post as an option for the music to be reserved. By operating the change button displayed in the option column, various settings relating to posting, such as whether or not to post, can be performed.

また、楽曲確認画面には、評価再生処理を行うか否かの採点設定欄が表示されている。図5の採点設定欄は「OFF」表記の状態となっている。評価再生処理を行いたいユーザは、採点設定欄に表示されている変更ボタンを操作することで、評価再生処理を行う状態「ON」表記の状態に変更することが可能である。   In addition, on the music confirmation screen, a scoring setting column as to whether or not to perform the evaluation reproduction process is displayed. The scoring setting column in FIG. 5 is in a state of “OFF”. A user who wants to perform the evaluation reproduction process can change the state of the evaluation reproduction process to “ON” by operating the change button displayed in the scoring setting field.

図6(A)には、本実施形態で使用する楽曲情報のデータ構成を示したものである。楽曲情報は、楽曲情報に関連する各種情報であるメタ情報と、演奏等、各種処理を実行する実情報を有している。メタ情報には、楽曲情報を識別するための楽曲識別情報、曲名、歌手名、作詞者名、作曲者名、区間情報を有している。区間情報は、演奏情報の時間進行に対応した区間を規定した情報である。区間は、演奏情報を所定時間毎に区切る形態の他、小節位置やひとまとまりのフレーズ位置で区切る形態など、各種形態を採用することが考えられる。   FIG. 6A shows the data structure of music information used in this embodiment. The music information includes meta information, which is various information related to the music information, and actual information for executing various processes such as performance. The meta information includes song identification information for identifying song information, song name, singer name, songwriter name, composer name, and section information. The section information is information defining a section corresponding to the time progress of the performance information. It is conceivable that the section adopts various forms such as a form in which performance information is divided at predetermined time intervals and a form in which the performance information is divided at a bar position or a group of phrase positions.

楽曲情報の実情報には、演奏情報、歌詞情報、基準音高情報、第1お手本情報、第2お手本情報が含まれている。演奏情報は、MIDI規格に基づいて電子楽器用の制御情報、あるいは、実際の演奏を録音した圧縮音声情報等で構成され、カラオケの伴奏音を演奏するための情報である。歌詞情報は、歌唱補助のため、演奏情報に同期して表示される情報であり、演奏に同期して表示された歌詞の色替えを行うように構成してもよい。基準音高情報は、歌唱評価処理(採点)に使用される情報であり、演奏情報と同様、MIDI規格に基づいて規定された制御情報である。この基準音高情報は、マイクロホン44a、44bから入力される歌唱音声信号の音高と比較する歌唱評価処理にも使用することが可能である。   The actual information of the music information includes performance information, lyric information, reference pitch information, first model information, and second model information. The performance information is composed of control information for an electronic musical instrument based on the MIDI standard, compressed audio information recording an actual performance, or the like, and is information for playing an accompaniment sound of karaoke. The lyric information is information that is displayed in synchronization with the performance information in order to assist the singing, and may be configured to change the color of the displayed lyrics in synchronization with the performance. The reference pitch information is information used for singing evaluation processing (scoring), and is control information defined based on the MIDI standard in the same manner as performance information. This reference pitch information can also be used for singing evaluation processing for comparison with the pitch of the singing voice signal input from the microphones 44a and 44b.

第1お手本情報、第2お手本情報は、カラオケ業者側で用意した歌唱補助のための情報であり、プロの歌手の音声を録音した音声情報として構成される。本実施形態では、1つの楽曲について、2つのお手本情報が含まれており、お手本情報を変更して歌唱補助を行うことが可能となっている。楽曲を再生する際、第1お手本情報、第2お手本情報を合わせて再生することで、歌唱するユーザは、お手本となる歌唱を聴取しつつ歌唱を行うことが可能となる。お手本情報には、模範ボーカル(ガイドボーカル)の歌唱音声や、ガイドメロディとする主旋律のメロディ等を用いることが可能である。   The first model information and the second model information are information for singing assistance prepared on the karaoke trader side, and are configured as voice information obtained by recording a voice of a professional singer. In this embodiment, two example information is included for one musical piece, and it is possible to change the example information and perform singing assistance. When the music is reproduced, the user who sings can sing while listening to the model song by reproducing the first example information and the second example information together. For example information, it is possible to use a singing voice of a model vocal (guide vocal), a melody of a main melody as a guide melody, or the like.

図6(B)には、本実施形態の投稿情報のデータ構成が示されている。投稿情報は、投稿情報を識別するための投稿識別情報、投稿情報の作成に使用された楽曲を示す楽曲識別情報、歌唱音声情報、歌唱映像情報、歌唱時、歌唱処理を行うことで算出された評価情報を含んで構成されている。なお、本実施形態では、歌唱の様子を撮影した歌唱映像情報を含んでいるが、投稿情報は、歌唱音声情報のみを使用することとしてもよい。評価情報には、楽曲全体の評価である総合評価情報の他、楽曲情報中の区間情報で規定された区間毎の歌唱評価である区間評価情報a、b、c…を含んで構成されている。この区間評価情報を参照することで、投稿情報中の歌唱音声情報について、当該区間の歌唱の巧拙を判断することが可能である。   FIG. 6B shows the data structure of the posting information of this embodiment. Post information was calculated by performing singing processing, post identification information for identifying post information, music identification information indicating the music used to create the post information, singing voice information, singing video information, singing It is configured to include evaluation information. In addition, in this embodiment, although the singing video information which image | photographed the mode of singing is included, contribution information is good also as using only singing audio | voice information. The evaluation information includes section evaluation information a, b, c... That is a singing evaluation for each section defined by the section information in the music information, in addition to the comprehensive evaluation information that is an evaluation of the entire music. . By referring to this section evaluation information, it is possible to determine the skill of singing in the section for the singing voice information in the posted information.

図7には、本実施形態の楽曲予約処理を示すフロー図が示されている。カラオケ装置2は、リモコン装置1などから予約情報を受け取った場合(S201:Yes)、受け取った予約情報を、カラオケ装置2のメモリ27に記憶管理する予約テーブルに登録する(S202)。その際、予約情報中に歌唱評価の指定がある場合(S203:Yes)、予約した楽曲に対応する投稿情報をサーバ装置5からダウンロードする(S204)。このように本実施形態では、楽曲の再生前に、必要な投稿情報をダウンロードしておくことで、投稿情報のダウンロードを待つ必要が無く、迅速に楽曲の再生を開始することが可能となっている。本実施形態の評価再生処理では、ユーザの歌唱によって、複数の投稿情報を使用する場合がある。したがって、投稿情報をダウンロードする際には、予約した楽曲に対応する複数の投稿情報をサーバ装置5からダウンロードしておくことが好ましい。   FIG. 7 is a flowchart showing the music reservation process of this embodiment. When the karaoke device 2 receives the reservation information from the remote control device 1 or the like (S201: Yes), the received karaoke device 2 registers the received reservation information in the reservation table stored and managed in the memory 27 of the karaoke device 2 (S202). At that time, when the singing evaluation is specified in the reservation information (S203: Yes), the posting information corresponding to the reserved music is downloaded from the server device 5 (S204). As described above, in this embodiment, by downloading necessary post information before playing the music, it is not necessary to wait for the post information to be downloaded and it is possible to start playing the music quickly. Yes. In the evaluation reproduction process of this embodiment, a plurality of pieces of post information may be used depending on the user's singing. Therefore, when the posted information is downloaded, it is preferable to download a plurality of posted information corresponding to the reserved music from the server device 5.

なお、投稿情報の取得は、このように事前にダウンロード形態の他、投稿情報が必要となった場合に、サーバ装置5に要求してダウンロードすることとしてもよい。あるいは、楽曲再生時にサーバ装置5からストリーミング配信することとしてもよい。   In addition, acquisition of contribution information is good also as requesting and downloading to the server apparatus 5 when contribution information is needed in addition to a download form in advance. Or it is good also as streaming delivery from the server apparatus 5 at the time of music reproduction.

図8には、本実施形態の楽曲再生処理を示すフロー図が示されている。楽曲再生処理が開始されると、カラオケ装置2内のメモリ27に記憶している予約テーブルを参照し、次に再生させる楽曲の有無が判定される(S301)。予約テーブル中、次に再生させる楽曲がある場合(S302:Yes)、予約情報中に投稿指定がある場合(S303:Yes)には、カラオケ装置2は、投稿再生処理(S400)を実行する。投稿再生処理は、歌唱時に歌唱音声を録音し、投稿情報としてサーバ装置5にアップロードする処理であり、アップロードされた投稿情報は、インターネットを介して広く公開することが可能である。本実施形態では、この投稿情報に含まれる歌唱声情報を、評価再生処理におけるお手本情報として使用することとしている。   FIG. 8 is a flowchart showing the music reproduction process of the present embodiment. When the music playback process is started, the reservation table stored in the memory 27 in the karaoke apparatus 2 is referred to determine whether or not there is a music to be played next (S301). If there is a song to be reproduced next in the reservation table (S302: Yes), or if there is a post designation in the reservation information (S303: Yes), the karaoke apparatus 2 executes a post reproduction process (S400). The post reproduction process is a process of recording a singing voice at the time of singing and uploading it to the server device 5 as post information. The uploaded post information can be widely disclosed via the Internet. In this embodiment, the singing voice information included in the posted information is used as model information in the evaluation reproduction process.

一方、予約情報中に歌唱評価指定がある場合(S304:Yes)には、カラオケ装置2は、評価再生処理(S500)を実行する。評価再生処理は、点数を算出する等の形態でユーザの歌唱評価を行う処理であり、本実施形態では、所定区間毎に区間評価情報を算出し、算出された区間評価情報が所定条件を満たしていない場合、再度、同じ区間を再生が行われる。ユーザは、所定条件を満たすまで同じ区間を何度も歌唱することで、当該区間の歌唱に習熟することが可能となる。   On the other hand, when there is a singing evaluation designation in the reservation information (S304: Yes), the karaoke apparatus 2 executes an evaluation reproduction process (S500). The evaluation reproduction process is a process of evaluating a user's song in a form such as calculating a score. In this embodiment, the section evaluation information is calculated for each predetermined section, and the calculated section evaluation information satisfies a predetermined condition. If not, the same section is played again. By singing the same section many times until the predetermined condition is satisfied, the user can become familiar with the singing of the section.

さらに、本実施形態の評価再生処理では、楽曲情報に含まれるお手本情報を合わせて再生する、あるいは、投稿情報に含まれる歌唱音声情報をお手本情報として合わせて再生することで、歌唱補助を行うこととしている。そして、再度、同じく間を再生する場合には、お手本情報を他のお手本情報に変更することで、歌唱補助の機能向上を図っている。ユーザによってはお手本情報が、自分の歌い方に適していない場合がある。特に、お手本情報として録音された音声情報を使用した場合、お手本情報の歌い方や声質は、自己の歌い方に対する適否に大きく影響することになる。さらに、お手本情報として、ユーザから広く収集した投稿情報をお手本情報に使用した場合、投稿情報の歌唱方法は多様であるため、歌唱するユーザに対する適、不適も顕著となることが予想される。したがって、本実施形態の評価再生処理では、区間で算出された所定条件を満たさなかった場合、再生しているお手本情報を他のお手本情報に変更することで、歌唱するユーザに適したお手本情報を使用して歌唱補助を行うことが可能となる。   Furthermore, in the evaluation reproduction process of the present embodiment, singing assistance is performed by reproducing the model information included in the music information together or by reproducing the singing voice information included in the posted information as the model information. It is said. Then, when playing back again, the function of singing assistance is improved by changing the model information to other model information. Depending on the user, the model information may not be suitable for the way of singing. In particular, when voice information recorded as model information is used, the way in which the model information is sung and the voice quality greatly affect the suitability of the person for singing. Furthermore, when post information widely collected from the user is used as the model information as the model information, there are various post information singing methods, and it is expected that suitability and inappropriateness for the user who sings will become remarkable. Therefore, in the evaluation reproduction process of the present embodiment, when the predetermined condition calculated in the section is not satisfied, the example information suitable for the user to sing is changed by changing the example information being reproduced to other example information. It becomes possible to perform singing assistance.

一方、予約情報中に投稿指定、歌唱評価指定のどちらもない場合(S304:No)には、カラオケ装置2は、指定された楽曲情報を再生する通常の処理を実行する(S501)。楽曲情報の再生が終了した場合(S502:Yes)、楽曲再生処理の先頭に戻って次の楽曲の再生を実行する。   On the other hand, if neither the post designation nor the singing evaluation designation is included in the reservation information (S304: No), the karaoke apparatus 2 executes a normal process of reproducing the designated music information (S501). When the reproduction of the music information is completed (S502: Yes), the process returns to the beginning of the music reproduction process and the next music is reproduced.

図9には、本実施形態の投稿再生処理(S400)を示すフロー図が示されている。予約時に投稿指定された場合、この投稿再生処理(S400)を実行する。投稿再生処理が開始すると、カラオケ装置2は、楽曲情報を再生開始する(S401)。その際、マイクロホン44a、44bから入力される歌唱音声を録音する録音処理と、マイクロホン44a、44bから入力される歌唱音声と、楽曲情報に含まれる基準音程情報を比較すること等によって、ユーザの歌唱を評価する歌唱評価処理を実行する(S402)。録音処理は、カメラ45からの映像を録画し、歌唱音声情報に歌唱映像情報を合わせて記録する録画処理に代えることとしてもよい。   FIG. 9 is a flowchart showing the post reproduction process (S400) of the present embodiment. When the posting is designated at the time of reservation, this posting reproduction process (S400) is executed. When the posting reproduction process is started, the karaoke apparatus 2 starts reproducing the music information (S401). At that time, the user's singing is performed by comparing the recording process for recording the singing voice input from the microphones 44a and 44b, the singing voice input from the microphones 44a and 44b, and the reference pitch information included in the music information. A singing evaluation process is executed to evaluate (S402). The recording process may be replaced with a recording process of recording the video from the camera 45 and recording the singing voice information together with the singing voice information.

歌唱評価処理では、楽曲全体の歌唱評価である総合評価情報が算出される。また、この歌唱評価処理では、図6(B)の投稿情報のデータ構成で説明したように楽曲情報中の区間情報で規定された区間毎の歌唱評価である区間評価情報a、b、c…を算出する形態としてもよい。区間評価情報a、b、c…を算出した場合には、投稿情報をお手本情報として選択する場合の指標とすることが可能である。   In the singing evaluation process, comprehensive evaluation information that is the singing evaluation of the entire music is calculated. In this singing evaluation process, the section evaluation information a, b, c,..., Which is the singing evaluation for each section defined by the section information in the music information, as described in the data structure of the posted information in FIG. May be calculated. When the section evaluation information a, b, c... Is calculated, it can be used as an index for selecting post information as model information.

録音処理、歌唱評価処理は、楽曲の再生が終了する(S403:Yes)まで継続され、楽曲の再生終了後、歌唱音声情報、評価情報が生成される。ユーザは、これら歌唱音声情報を確認するため試聴処理を選択することが可能である(S509)。試聴処理(S406)は、楽曲情報の再生に同期して、今回の楽曲再生処理で生成された歌唱音声情報を再生することで、ユーザに投稿の内容を確認させる処理である。なお、録音処理に代え、録画処理を行った場合には、撮影された歌唱映像情報が合わせて再生される。   The recording process and the singing evaluation process are continued until the reproduction of the music is completed (S403: Yes), and the singing voice information and the evaluation information are generated after the reproduction of the music is completed. The user can select the audition process to confirm the singing voice information (S509). The trial listening process (S406) is a process for allowing the user to confirm the content of the post by reproducing the singing voice information generated by the current music reproduction process in synchronization with the reproduction of the music information. When the recording process is performed instead of the recording process, the photographed singing video information is reproduced together.

ユーザは、生成した歌唱音声情報を投稿情報としてサーバ装置5にアップロードすることが可能である。投稿情報をアップロードすることが選択された場合(S511:Yes)、カラオケ装置2は、生成された歌唱音声情報、評価情報などを含めて投稿情報を形成し、通信手段としてのLAN通信部24を介し、投稿情報をサーバ装置5にアップロードするアップロード処理(S408)を実行する。アップロードされる投稿情報には、図6(B)に示すように、楽曲識別情報、歌唱音声情報、評価情報などが含まれる。なお、投稿識別情報は、サーバ装置5で事後的に付与されることになる。   The user can upload the generated singing voice information to the server device 5 as posting information. When uploading post information is selected (S511: Yes), the karaoke apparatus 2 forms post information including the generated singing voice information, evaluation information, and the like, and the LAN communication unit 24 as a communication means is used. Then, an upload process (S408) for uploading post information to the server device 5 is executed. As shown in FIG. 6B, the uploaded post information includes music identification information, singing voice information, evaluation information, and the like. The post identification information is given afterwards by the server device 5.

このような投稿再生処理にて投稿された投稿情報は、インターネット等を介して広く公開することが可能である。本実施形態では、この投稿情報に含まれる歌唱音声情報を使用して、評価再生処理時で使用するお手本情報に適用可能としている。   Post information posted by such post reproduction processing can be widely disclosed via the Internet or the like. In the present embodiment, the singing voice information included in the posted information is used to be applicable to the model information used during the evaluation reproduction process.

図10には、本実施形態の評価再生処理を示すフロー図が示されている。カラオケ装置2は、楽曲の予約時に歌唱評価指定された場合、この評価再生処理(S500)を実行する。評価再生処理が開始すると、カラオケ装置2は、楽曲情報とお手本情報の再生を開始する(S501)。楽曲情報に合わせて再生するお手本情報としては、楽曲情報に含まれる第1、第2お手本情報や、投稿情報に含まれる歌唱音声情報など、楽曲情報に対応したものが使用される。お手本情報としては、第1、第2お手本情報、投稿情報に含まれる歌唱音声情報のように、実際の歌唱を録音した形態の他、楽曲情報に含まれる基準音程情報を音響制御部25にて、メロディ音として再生する形態であってもよい。初回に使用するお手本情報は、ランダムに選択する等、適宜形態を採用することが可能である。あるいは、初回には、お手本情報を再生しない形態としてもよい。   FIG. 10 is a flowchart showing the evaluation reproduction process of the present embodiment. The karaoke apparatus 2 executes this evaluation reproduction process (S500) when singing evaluation is designated at the time of reservation of a music piece. When the evaluation reproduction process is started, the karaoke apparatus 2 starts reproducing the music information and the model information (S501). As the model information to be reproduced in accordance with the music information, information corresponding to the music information such as the first and second model information included in the music information and the singing voice information included in the posted information is used. As the model information, in addition to the form in which the actual song is recorded, as in the first and second model information and the singing voice information included in the posted information, the reference pitch information included in the music information is stored in the acoustic control unit 25. Alternatively, it may be played back as a melody sound. The model information used for the first time can adopt a form as appropriate, such as selecting at random. Alternatively, the model information may not be reproduced at the first time.

楽曲情報の再生が開始すると、楽曲情報中の区間情報で規定された区間毎の区間評価処理を開始する(S502)。本実施形態の評価再生処理では、区間評価情報が条件に適合しない場合、同区間の楽曲再生を繰り返し行う仕様となっている。そのため、ユーザが楽曲の再生を中止したい場合、リモコン装置1等の入力手段を使用して終了指示を出すことが可能となっている。評価再生処理では、この終了指示の入力を判定した場合(S503:Yes)、一連の評価再生処理を終了する。   When the reproduction of the music information is started, the section evaluation process for each section defined by the section information in the music information is started (S502). In the evaluation reproduction process of the present embodiment, when the section evaluation information does not meet the conditions, the music is reproduced repeatedly in the same section. Therefore, when the user wants to stop the reproduction of the music, it is possible to issue an end instruction using the input means such as the remote control device 1 or the like. In the evaluation reproduction process, when the input of this end instruction is determined (S503: Yes), the series of evaluation reproduction processes is terminated.

1区間の再生が終了した場合(S504:Yes)、当該区間の区間評価情報が算出される(S505)。そして区間評価情報が条件に適合しているか否かが判定(S506)され、条件に適合している場合(S506:Yes)には、楽曲情報の再生を継続し、次の区間へと進む(S507)。一方、条件に適合していない場合(S506:No)には、条件を満たさなかった区間の開始位置に戻って楽曲情報の再生を行う(S509)。その際、合わせて再生していたお手本情報を他のお手本情報に変更する(S510)。このような形態により、使用したお手本情報がユーザに適していない場合、他のお手本情報に変更することが可能となり、次の歌唱時に区間評価情報を条件に適合させることが可能となる。ここで、次に使用するお手本情報として投稿情報を使用する場合、同じ区間について、算出された区間評価情報よりも良好な区間評価情報を有する投稿情報を使用することとしてもよい。あるいは、次の区間へと進むための条件に適合した区間評価情報を有する投稿情報を使用することとしてもよい。   When reproduction of one section is completed (S504: Yes), section evaluation information for the section is calculated (S505). Then, it is determined whether or not the section evaluation information conforms to the condition (S506). If the section evaluation information conforms to the condition (S506: Yes), the reproduction of the music information is continued and the process proceeds to the next section ( S507). On the other hand, when the condition is not met (S506: No), the music information is reproduced by returning to the start position of the section that does not satisfy the condition (S509). At this time, the model information that has been reproduced is changed to other model information (S510). With such a form, when the used model information is not suitable for the user, it can be changed to other model information, and the section evaluation information can be adapted to the conditions at the time of the next singing. Here, when post information is used as the model information to be used next, post information having better section evaluation information than the calculated section evaluation information may be used for the same section. Or it is good also as using the contribution information which has the section evaluation information suitable for the conditions for progressing to the next section.

また、本実施形態では、1区間の再生を終える毎(S504:Yes)に、区間評価情報の判定(S506)を行うこととしているが、歌唱中に随時区間評価情報が算出される形態では、区間評価情報が所定条件を満たさないと判定した時点で、当該区間の再生を終え、区間開始位置に戻る形態としてもよい。   Moreover, in this embodiment, every time playback of one section is completed (S504: Yes), the section evaluation information is determined (S506). However, in the form where the section evaluation information is calculated at any time during singing, When it is determined that the section evaluation information does not satisfy the predetermined condition, the reproduction of the section may be finished and the section start position may be returned.

図11には、本実施形態の評価再生処理の概要を説明するための模式図が示されている。この模式図は、ある楽曲について評価再生処理を行ったときの様子を示した図である。この楽曲は、区間a〜区間fの6つの区間で構成されている。また、区間評価情報には点数(0〜100点)を使用し、判定のための所定条件は、区間評価情報としての点数が、合格基準点80点以上であることとしている。楽曲再生開始時には、お手本情報aを使用している。最初の区間aでは、合格基準点を上回っているため、そのまま、次の区間bへと進んで再生を行う。区間bの1回目の歌唱では、合格基準点を下回っため、お手本情報aをお手本情報bに変更し、再度、区間bの再生を行う。区間bの2回目の歌唱において、合格基準点を上回ったため、次の区間cへと進む。区間cでは、1回目、2回目の歌唱において、合格基準点を下回ったため、それぞれ、お手本情報bからお手本情報cに、お手本情報cからお手本情報dに変更して、再度、区間cを再生する。区間cの3回目の歌唱において、合格基準点を上回ったため、お手本情報dのまま次の区間dに進む。   FIG. 11 is a schematic diagram for explaining the outline of the evaluation reproduction process of the present embodiment. This schematic diagram is a diagram showing a state when an evaluation reproduction process is performed for a certain music piece. This music is composed of six sections, section a to section f. Moreover, a score (0 to 100 points) is used for the section evaluation information, and the predetermined condition for the determination is that the score as the section evaluation information is 80 or more acceptable reference points. The example information a is used at the start of music reproduction. In the first section a, since it exceeds the acceptance reference point, the process proceeds to the next section b as it is to perform reproduction. In the first singing in the section b, the model information “a” is changed to the model information “b” and the section “b” is reproduced again because it falls below the acceptance reference point. In the second singing of the section b, since the passing reference point is exceeded, the process proceeds to the next section c. In section c, since the passing standard score was below in the first and second singing, the model information b is changed to the model information c, and the model information c is changed to the model information d, and the section c is reproduced again. . In the third singing of the section c, since the passing reference point was exceeded, the process proceeds to the next section d with the example information d.

区間dでは、合格基準点を上回っているため、そのまま、次の区間eへと進んで再生を行う。区間eの1回目の歌唱では、合格基準点を下回ったため、お手本情報dをお手本情報eに変更し、再度、区間eの再生を行う区間eの2回目の歌唱において、合格基準点を上回ったため、次の区間fへと進む。区間fでは、1回目の歌唱において、合格基準点を上回っているため、楽曲の再生を終了する。このように本実施形態では、各区間において合格基準点を上回るまで、次の区間に進むことができず、ユーザは、同じ区間を何度も歌唱することになる。次の区間に進むことができない場合、お手本情報を変更して再生することで、ユーザに適したお手本情報を使用することが可能となる。   In section d, since it exceeds the acceptance reference point, playback proceeds to the next section e as it is. In the first singing of the section e, because it was below the acceptance reference point, the example information d was changed to the example information e, and again in the second singing of the section e in which the section e was reproduced, the passing reference point was exceeded. Then, proceed to the next section f. In the section f, since the passing reference point is exceeded in the first singing, the reproduction of the music is ended. Thus, in this embodiment, it cannot progress to the next area until it exceeds the acceptance reference point in each section, and the user sings the same section many times. When it is not possible to proceed to the next section, it is possible to use the model information suitable for the user by changing and reproducing the model information.

所定条件を満たすことができず、同じ区間の先頭に戻って再生を再開する場合、いきなり当該区間の先頭から再生を行った場合、ユーザはどこから歌唱してよいか分からないことが考えられる。そのため、区間の先頭に戻って再生を再開する場合には、当該区間よりも少し前の位置から再生を再開する、あるいは、一旦停止して、再生再開前にカウントダウンすることとしてもよい。また、区間の先頭に戻って再生を再開する場合、歌詞を表示しているモニタ41に、条件を満たしていないことを理由として、再度、区間の再生を行う旨を伝えるメッセージを表示することとしてもよい。   When the predetermined condition cannot be satisfied and the reproduction is resumed by returning to the beginning of the same section, when the reproduction is suddenly performed from the beginning of the section, the user may not know where to sing. Therefore, when resuming playback by returning to the beginning of a section, the playback may be resumed from a position slightly before that section, or may be temporarily stopped and counted down before resuming playback. When the playback is resumed by returning to the head of the section, a message notifying that the section is to be played again is displayed on the monitor 41 displaying the lyrics again because the condition is not satisfied. Also good.

また、本実施形態では、楽曲予約処理時に、投稿情報をダウンロードすることとしていたが、区間の再生回数によっては、お手本情報として使用する投稿情報が不足することが考えられる。そのため、区間の先頭に戻って再生を開始する前に、お手本情報として使用する歌唱音声情報(投稿情報に含まれている)を都度、ダウンロードすることとしてもよい。   In the present embodiment, post information is downloaded at the time of music reservation processing. However, depending on the number of times a section is played, post information used as model information may be insufficient. Therefore, it is good also as downloading the singing voice information (included in contribution information) used as model information before returning to the head of a section and starting reproduction.

最後まで、楽曲の再生が終了した場合(S508:Yes)、カラオケ装置2は、歌唱全体の評価である総合評価情報を算出する(S511)。この総合評価情報は、各区間で算出した区間評価情報を使用して算出することが考えられる。なお、評価再生処理では、同じ区間を複数回、歌唱しているため、同じ区間について、複数の区間評価情報が存在する場合がある。そのため、複数種類の総合評価情報を算出することとしてもよい。例えば、同じ区間中、最も良好な(あるいは、悪い)区間評価情報を使用して区間評価情報を算出する形態の他、区間評価情報の平均を使用することが考えられる。また、歌唱した回数を総合評価として提示することとしてもよい。   When the reproduction of the music is completed until the end (S508: Yes), the karaoke apparatus 2 calculates comprehensive evaluation information that is an evaluation of the entire song (S511). The comprehensive evaluation information may be calculated using the section evaluation information calculated in each section. In the evaluation reproduction process, since the same section is sung multiple times, there may be a plurality of section evaluation information for the same section. Therefore, multiple types of comprehensive evaluation information may be calculated. For example, it is conceivable to use the average of the section evaluation information in addition to the form of calculating the section evaluation information using the best (or bad) section evaluation information in the same section. Moreover, it is good also as showing the frequency | count of singing as comprehensive evaluation.

算出された総合評価情報は、モニタ41に表示される。その際、各区間の区間評価情報を表示することとしてもよい。図12には、本実施形態の評価結果画面を示す図が示されている。この評価結果画面に表示される評価結果は、図11の模式図に対応したものである。この評価結果画面には、各区間について、最高得点(最も良好な区間評価情報)、最低得点(最も悪い区間評価情報)、歌唱回数が表形式で表示されている。また、総合結果には、総合得点(この場合、最高得点の平均値)の他、歌唱回数(区間a〜区間fの6回の歌唱で済むところ、12回歌唱している)が表示されている。ユーザは、この評価結果画面によって、全体の歌唱評価と各区間についての歌唱評価を確認することが可能となる。   The calculated comprehensive evaluation information is displayed on the monitor 41. In that case, it is good also as displaying the section evaluation information of each section. FIG. 12 shows a diagram showing an evaluation result screen of the present embodiment. The evaluation result displayed on this evaluation result screen corresponds to the schematic diagram of FIG. On this evaluation result screen, for each section, the highest score (best section evaluation information), the lowest score (worst section evaluation information), and the number of singings are displayed in a table format. In addition, in the overall result, in addition to the overall score (in this case, the average value of the highest score), the number of times of singing (where 6 singings from section a to section f are sufficient, singing 12 times) is displayed. Yes. The user can check the overall singing evaluation and the singing evaluation for each section on the evaluation result screen.

1…リモコン装置 24…LAN通信部
11…タッチパネルモニタ 25…音響制御部
11a…表示部 27…メモリ
11b…タッチパネル 28…ビデオRAM
12…ビデオRAM 29…映像再生部
13…映像制御部 30…CPU
14…メモリ 31…映像制御部
15…CPU 32…HDD(ハードディスク)
16…無線LAN通信部 41…モニタ
17…操作部 42…スピーカ
18…操作処理部 44a、44b…マイクロホン
19…赤外線通信部 45…カメラ
2…カラオケ装置(コマンダ) 5…サーバ装置
21…操作部 51…記憶装置
22…操作処理部 100…LAN
23…赤外線通信部 110…アクセスポイント
DESCRIPTION OF SYMBOLS 1 ... Remote control device 24 ... LAN communication part 11 ... Touch panel monitor 25 ... Acoustic control part 11a ... Display part 27 ... Memory 11b ... Touch panel 28 ... Video RAM
12 ... Video RAM 29 ... Video reproduction unit 13 ... Video control unit 30 ... CPU
14 ... Memory 31 ... Video control unit 15 ... CPU 32 ... HDD (hard disk)
DESCRIPTION OF SYMBOLS 16 ... Wireless LAN communication part 41 ... Monitor 17 ... Operation part 42 ... Speaker 18 ... Operation processing part 44a, 44b ... Microphone 19 ... Infrared communication part 45 ... Camera 2 ... Karaoke apparatus (commander) 5 ... Server apparatus 21 ... Operation part 51 ... Storage device 22 ... Operation processing unit 100 ... LAN
23 ... Infrared communication unit 110 ... Access point

Claims (5)

再生部と、制御部と、を備えるカラオケ装置であって、
前記再生部は、楽曲情報とお手本情報を再生可能とし、
前記制御部は、楽曲再生処理と、歌唱補助処理とを実行し、
前記楽曲再生処理は、ユーザから指定された楽曲に対応する楽曲情報と、当該楽曲情報に対応するお手本情報を前記再生部に再生させ、
前記歌唱補助処理は、マイクロホンから入力される歌唱音声情報と、再生中の楽曲に対応する基準情報とを対比し、所定区間毎に区間評価情報を算出し、算出された区間評価情報が所定条件を満たしていない場合、お手本情報を他のお手本情報に変更し、当該区間評価情報に対応する区間を再度再生する
カラオケ装置。
A karaoke apparatus comprising a reproduction unit and a control unit,
The playback unit can play back music information and model information,
The control unit performs music reproduction processing and singing assistance processing,
The music reproduction process causes the reproduction unit to reproduce music information corresponding to the music specified by the user and model information corresponding to the music information,
The singing assistance process compares singing voice information input from a microphone with reference information corresponding to the music being played back, calculates section evaluation information for each predetermined section, and the calculated section evaluation information is a predetermined condition. If not, the model information is changed to other model information, and the section corresponding to the section evaluation information is reproduced again.
お手本情報は、ユーザの歌唱を録音することで得られた投稿情報である
請求項1に記載のカラオケ装置。
The karaoke apparatus according to claim 1, wherein the model information is posted information obtained by recording a user's song.
お手本情報には、各区間に区間評価情報が付与されており、
前記歌唱補助処理は、算出された区間評価情報が所定条件を満たしていない場合、当該区間について、算出された区間評価情報よりも良好な区間評価情報を有する他のお手本情報に変更する
請求項1または請求項2に記載のカラオケ装置。
In the model information, section evaluation information is given to each section.
The said singing assistance process is changed to other example information having better section evaluation information than the calculated section evaluation information for the section when the calculated section evaluation information does not satisfy the predetermined condition. Or the karaoke apparatus of Claim 2.
ユーザから指定された楽曲に対応する楽曲情報と、当該楽曲情報に対応するお手本情報を生部に再生させる楽曲再生処理と、
マイクロホンから入力される歌唱音声情報と、再生中の楽曲に対応する基準情報とを対比し、所定区間毎に区間評価情報を算出し、算出された区間評価情報が所定条件を満たしていない場合、お手本情報を他のお手本情報に変更し、当該区間評価情報に対応する区間を再度、再生する歌唱補助処理と、を情報処理装置に実行させる
カラオケプログラム。
A musical information corresponding to the specified music from the user, the music piece reproduction processing to reproduce the playback unit & Learn information corresponding to the music information,
When the singing voice information input from the microphone is compared with the reference information corresponding to the music being played back, the section evaluation information is calculated for each predetermined section, and the calculated section evaluation information does not satisfy the predetermined condition, A karaoke program that causes the information processing apparatus to execute singing assistance processing for changing the model information to other model information and reproducing the section corresponding to the section evaluation information again.
カラオケ装置と、サーバ装置と、を備えたカラオケシステムであって、
前記カラオケ装置は、再生部と、制御部と、を備え、
前記再生部は、楽曲情報とお手本情報を再生可能とし、
前記制御部は、楽曲再生処理と、歌唱補助処理とを実行し、
前記楽曲再生処理は、ユーザから指定された楽曲に対応する楽曲情報と、当該楽曲情報に対応するお手本情報を前記再生部に再生させ、
前記歌唱補助処理は、マイクロホンから入力される歌唱音声情報と、再生中の楽曲に対応する基準情報とを対比し、所定区間毎に区間評価情報を算出し、算出された区間評価情報が所定条件を満たしていない場合、お手本情報を、前記サーバ装置から受信した他のお手本情報に変更し、当該区間評価情報に対応する区間を再度再生する
カラオケシステム。
A karaoke system comprising a karaoke device and a server device,
The karaoke apparatus includes a reproduction unit and a control unit,
The playback unit can play back music information and model information,
The control unit performs music reproduction processing and singing assistance processing,
The music reproduction process causes the reproduction unit to reproduce music information corresponding to the music specified by the user and model information corresponding to the music information,
The singing assistance process compares singing voice information input from a microphone with reference information corresponding to the music being played back, calculates section evaluation information for each predetermined section, and the calculated section evaluation information is a predetermined condition. If not satisfied, the model information is changed to other model information received from the server device, and the section corresponding to the section evaluation information is reproduced again.
JP2014201693A 2014-09-30 2014-09-30 Karaoke device, karaoke program and karaoke system Active JP6292404B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014201693A JP6292404B2 (en) 2014-09-30 2014-09-30 Karaoke device, karaoke program and karaoke system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014201693A JP6292404B2 (en) 2014-09-30 2014-09-30 Karaoke device, karaoke program and karaoke system

Publications (2)

Publication Number Publication Date
JP2016071209A JP2016071209A (en) 2016-05-09
JP6292404B2 true JP6292404B2 (en) 2018-03-14

Family

ID=55866783

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014201693A Active JP6292404B2 (en) 2014-09-30 2014-09-30 Karaoke device, karaoke program and karaoke system

Country Status (1)

Country Link
JP (1) JP6292404B2 (en)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5123012B2 (en) * 2008-03-10 2013-01-16 株式会社エクシング Karaoke system
JP5311069B2 (en) * 2010-08-03 2013-10-09 ブラザー工業株式会社 Singing evaluation device and singing evaluation program
JP5598685B2 (en) * 2012-11-30 2014-10-01 ブラザー工業株式会社 Karaoke device and karaoke program

Also Published As

Publication number Publication date
JP2016071209A (en) 2016-05-09

Similar Documents

Publication Publication Date Title
JP6708537B2 (en) Karaoke system
JP6070952B2 (en) Karaoke device and karaoke program
JP2009237503A (en) Karaoke scoring method and karaoke scoring system
JP5598685B2 (en) Karaoke device and karaoke program
JP6292404B2 (en) Karaoke device, karaoke program and karaoke system
JP2016157010A (en) Singing evaluation device and program for singing evaluation
JP6230068B2 (en) Program and information processing apparatus
JP6369225B2 (en) Karaoke device and karaoke program
JP6323236B2 (en) Karaoke device and karaoke program
JP5046862B2 (en) Karaoke system with automatic selection function
JP2021057686A (en) Information processing device, information processing system, and information processing program
JP2017045018A (en) Karaoke device and karaoke program
JP6288451B2 (en) Karaoke device and information processing device program
JP2015191160A (en) Program for karaoke, information processor and host device
JP6304490B2 (en) Karaoke device and karaoke program
JP6098828B2 (en) Karaoke device and karaoke program
JP6375780B2 (en) Karaoke device and karaoke program
JP5943390B2 (en) Music distribution system
JP6065224B2 (en) Karaoke equipment
JP6601214B2 (en) Music selection device, karaoke system, and music selection program
JP6268536B2 (en) Music selection device, karaoke device, and music selection program
JP6198003B2 (en) Karaoke device, karaoke system and karaoke program
JP6108115B2 (en) Karaoke device and karaoke program
JP2017156478A (en) Music selection device, karaoke system and program for music selection
JP6292084B2 (en) Karaoke device and information processing device program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170210

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171130

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171226

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180117

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180130

R150 Certificate of patent or registration of utility model

Ref document number: 6292404

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150