JP2015069053A - Karaoke device scoring singing by considering stretch tuning - Google Patents

Karaoke device scoring singing by considering stretch tuning Download PDF

Info

Publication number
JP2015069053A
JP2015069053A JP2013204062A JP2013204062A JP2015069053A JP 2015069053 A JP2015069053 A JP 2015069053A JP 2013204062 A JP2013204062 A JP 2013204062A JP 2013204062 A JP2013204062 A JP 2013204062A JP 2015069053 A JP2015069053 A JP 2015069053A
Authority
JP
Japan
Prior art keywords
karaoke
data
singing
information
pitch
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013204062A
Other languages
Japanese (ja)
Other versions
JP6141737B2 (en
Inventor
橘 聡
Satoshi Tachibana
聡 橘
Original Assignee
株式会社第一興商
Daiichikosho Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社第一興商, Daiichikosho Co Ltd filed Critical 株式会社第一興商
Priority to JP2013204062A priority Critical patent/JP6141737B2/en
Publication of JP2015069053A publication Critical patent/JP2015069053A/en
Application granted granted Critical
Publication of JP6141737B2 publication Critical patent/JP6141737B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide a karaoke device that scores a singing voice produced by a singer's karaoke singing and performs scoring suitable for the singing in which the singer tries to make his/her voice fit in with a pitch of an instrument sound of a karaoke accompaniment.SOLUTION: In a scoring mode, a karaoke main body 21 acquires one of stretch tuning data for an instrument sound constituting a karaoke performance sound and detects pitch information in a singing signal at a predetermined timing. The karaoke main body 21 compares the pitch information in the singing signal at the predetermined timing with pitch information in reference data at the predetermined timing to evaluate the singing on a basis of the comparison result. Furthermore, when the pitch information in the singing signal is compared with the pitch information in the reference data, the comparison result is corrected on a basis of the acquired stretch tuning data.

Description

本発明は、歌唱者のカラオケ歌唱によって生成された歌唱音声を採点する採点機能を有するカラオケ装置に関し、特にカラオケ伴奏の楽器音のピッチに合わせようとする歌唱に適した採点を行うものに関する。   The present invention relates to a karaoke apparatus having a scoring function for scoring a singing voice generated by a singer's karaoke singing, and more particularly, to a karaoke apparatus that performs scoring suitable for singing in accordance with the pitch of an instrument sound of a karaoke accompaniment.
歌唱者のカラオケ歌唱の巧拙を採点する採点機能を備えた装置が知られている。例えば、特許文献1には、MIDIデータに基づく歌唱メロディ情報(リファレンスデータ)と、歌唱者の歌のピッチ、レベル、タイミング情報の差を取り出すことで、メロディ情報に対する歌唱者の歌い方を評価するためのデータを検出するカラオケ採点装置が開示されている。   An apparatus having a scoring function for scoring the skill of a singer's karaoke song is known. For example, Patent Document 1 evaluates a singer's singing method for melody information by extracting the difference between the singing melody information (reference data) based on MIDI data and the pitch, level, and timing information of the singer's song. A karaoke scoring device for detecting data for the purpose is disclosed.
ピアノなどの鍵盤楽器や弦楽器では、一般に低域の鍵盤ほど音高を低めに、高域の鍵盤ほど音高を高めに調律する。そして、特許文献2には、自然楽器の音を電子楽器で模擬する際に、低域の鍵盤ほど音高を低めに、高域の鍵盤ほど音高を高めに設定する技術(ストレッチチューニング)が開示されている。   In keyboard instruments such as piano and stringed instruments, tuning is generally performed so that the pitch of the lower keyboard is lower and the pitch of the higher keyboard is higher. Patent Document 2 discloses a technique (stretch tuning) that sets a lower pitch for a lower keyboard and a higher pitch for a higher keyboard when simulating the sound of a natural instrument with an electronic musical instrument. It is disclosed.
カラオケ装置では、楽曲データを使って電子楽器の音源を自動演奏させるが、この音源は複数の異なる楽器の音色を同時に発音させることができる。すなわち、ピアノと共に多数の自然楽器を模擬した音色が使用される。そして、アンサンブルに違和感が出ないよう、ほとんどの楽器音色には、特許文献2に開示されているようなストレッチチューニングが施されている。   In a karaoke apparatus, a musical instrument sound source is automatically played using music data, and this sound source can simultaneously generate sounds of a plurality of different musical instruments. That is, tones that simulate many natural musical instruments are used together with the piano. And most musical instrument timbres are subjected to stretch tuning as disclosed in Patent Document 2 so that the ensemble does not feel uncomfortable.
ここで、採点機能付のカラオケ装置には、例えば特許文献3に開示されているように、楽曲データに含まれるデチューン情報を読み出し、模範ピッチデータのピッチを修正するものもある。このカラオケ装置では、本来の音程よりややずらして歌う歌唱法や民族音楽について、音程を意図的にずらして味わいを醸し出すことで不当に評価が低くなる不具合を抑制している。   Here, some karaoke apparatuses with a scoring function, for example, read detune information included in music data and correct the pitch of the exemplary pitch data as disclosed in Patent Document 3. In this karaoke apparatus, the singing method and folk music singing with a slight shift from the original pitch suppresses the problem that the evaluation is unfairly lowered by intentionally shifting the pitch and creating a taste.
特開平10−49183号公報Japanese Patent Laid-Open No. 10-49183 特開2005−99578号公報JP 2005-99578 A 特許4007298号公報Japanese Patent No. 4007298
特許文献1,2のように、カラオケ装置では、ストレッチチューニングが施された電子楽器の音源でカラオケ演奏を行っている。一方、歌唱採点に用いられるリファレンスデータはC4(ピアノの中央C)を6000centとしており、電子楽器の音源のようなストレッチチューニングは考慮されていないため、C5は7200cent、C6は8400centが正しい歌唱音高の基準とされる。   As in Patent Documents 1 and 2, in a karaoke apparatus, a karaoke performance is performed using a sound source of an electronic musical instrument that has been subjected to stretch tuning. On the other hand, the reference data used for singing is C4 (center C of the piano) of 6000 cent, and stretch tuning like the sound source of an electronic musical instrument is not taken into consideration, so C5 is 7200 cent and C6 is 8400 cent. It is considered as a standard.
一方、カラオケの歌唱者は、通常カラオケ演奏音(伴奏)を構成する楽音のチューニングに合わせて歌唱する。特に女性音声における高音域の場合、同じ音域でピアノなどの自然楽器やそれらを模擬する電子楽器音が鳴っているため、楽器音の音高に合わせて歌唱すると、ストレッチチューニングに従った音高となる。これにより、リファレンスデータの音高と差を生じ、不当に減点される可能性がある。   On the other hand, a karaoke singer usually sings along with the tuning of the musical sound that constitutes the karaoke performance sound (accompaniment). Especially in the high pitch range of female voices, natural instruments such as pianos and electronic instrument sounds simulating them are sounding in the same range. Become. As a result, a difference from the pitch of the reference data is generated, and there is a possibility that the points may be unfairly deducted.
このような不当減点の影響を低減すべく、特許文献3の技術を適用することが考えられる。しかしながら、当該技術における補正内容は、カラオケ楽曲に対して定められている。ここで、ストレッチチューニングの内容は、カラオケ装置に搭載されている電子楽器の音源によってばらつきがある。例えば、或る機種のピアノ用音源と他の機種のピアノ用音源との間で、ストレッチチューニングの内容は異なっていることが常である。   In order to reduce the influence of such unreasonable points, it is conceivable to apply the technique of Patent Document 3. However, the correction content in the technique is defined for karaoke music. Here, the content of stretch tuning varies depending on the sound source of the electronic musical instrument mounted on the karaoke apparatus. For example, the content of stretch tuning is usually different between a certain type of piano sound source and another type of piano sound source.
そして、歌唱者は音源の音高にあわせて歌唱することから、特許文献3のデチューン情報を用いて補正を行ったとしても、音源毎のストレッチチューニングの違いについてまで補正することは困難であった。   And since a singer sings according to the pitch of a sound source, even if it corrected using the detune information of patent document 3, it was difficult to correct even about the difference in stretch tuning for every sound source. .
本発明は、このような事情に鑑みてなされたものであり、その目的は、カラオケ伴奏の楽器音のピッチに合わせようとする歌唱に適した採点を行えるようにすることである。   The present invention has been made in view of such circumstances, and an object of the present invention is to enable scoring suitable for singing to match the pitch of instrumental sound of karaoke accompaniment.
前述の目的を達成するため、本発明は、カラオケ演奏データによりカラオケ演奏音を生成するとともに、歌唱者の歌唱信号が入力されるカラオケ装置であって、前記カラオケ演奏データにより自動演奏可能な電子楽器音源であって、複数のストレッチチューニング情報と、前記複数のストレッチチューニング情報のいずれかが設定された音色データを複数記憶する電子楽器音源を備え、前記カラオケ演奏データは歌唱すべき音高情報を示すリファレンスデータと、前記自動演奏で使用される音色の情報と、を含み、前記自動演奏で使用される音色に対応する音色データに設定されたストレッチチューニング情報を取得する取得手段と、前記歌唱信号の所定タイミングの音高情報を検出する検出手段と、前記検出手段により検出された前記歌唱信号の前記所定タイミングの音高情報を、前記リファレンスデータの当該所定タイミングの音高情報と比較し、この比較結果に基づいて歌唱を評価する採点手段とを備え、前記採点手段は、前記歌唱信号の音高情報を前記リファレンスデータの音高情報と比較する際に、前記取得手段により取得した前記ストレッチチューニング情報に基づき前記比較結果を補正する補正手段を備えることを特徴とする。   In order to achieve the above-described object, the present invention provides a karaoke apparatus that generates a karaoke performance sound from karaoke performance data and receives a singer's singing signal, and is an electronic musical instrument that can be automatically played by the karaoke performance data. A sound source, comprising: an electronic musical instrument sound source that stores a plurality of timbre data in which any one of a plurality of stretch tuning information and the plurality of stretch tuning information is set; and the karaoke performance data indicates pitch information to be sung Acquisition means for acquiring stretch tuning information set in timbre data corresponding to the timbre used in the automatic performance, including reference data and timbre information used in the automatic performance, and the singing signal Detection means for detecting pitch information at a predetermined timing, and the singing detected by the detection means The pitch information of the predetermined timing of the signal is compared with the pitch information of the predetermined timing of the reference data, and scoring means for evaluating the song based on the comparison result, the scoring means includes the singing signal When the pitch information is compared with the pitch information of the reference data, there is provided correction means for correcting the comparison result based on the stretch tuning information acquired by the acquisition means.
本発明によれば、歌唱信号の音高情報とリファレンスデータの音高情報の比較結果が楽器音色(音源)のストレッチチューニング情報で補正されるので、音源に設定されたストレッチチューニングを加味してカラオケ歌唱を採点することができる。これにより、ストレッチチューニングが施された楽器音色に合わせて歌唱しても、不当に減点される不具合を抑制でき、カラオケ伴奏の楽器音のピッチに合わせようとする歌唱に適した採点を行うことができる。   According to the present invention, the comparison result between the pitch information of the singing signal and the pitch information of the reference data is corrected by the stretch tuning information of the instrument tone (sound source). You can score a song. As a result, even if singing to a musical instrument tone that has been stretch-tuned, it is possible to suppress unjustified deductions and to perform scoring suitable for singing to match the pitch of karaoke accompaniment instrument sounds. it can.
前述のカラオケ装置において、前記取得手段は、前記音色のうち、所定の条件を満たす音色に対応する音色データに設定されたストレッチチューニング情報を取得することが好ましい。   In the karaoke apparatus described above, it is preferable that the acquisition unit acquires stretch tuning information set in timbre data corresponding to a timbre that satisfies a predetermined condition among the timbres.
前述のカラオケ装置において、前記所定の条件を満たす音色は、前記自動演奏で使用される音色のうち、その演奏データの音高範囲が前記リファレンスデータの音高範囲を一番多く含む音色であることが好ましい。   In the karaoke apparatus described above, the timbre that satisfies the predetermined condition is a timbre that includes the pitch range of the performance data among the timbres used in the automatic performance and includes the highest pitch range of the reference data. Is preferred.
また、本発明は、カラオケ演奏データによりカラオケ演奏音を生成するとともに、歌唱者の歌唱信号が入力されるカラオケ装置であって、前記カラオケ演奏データにより自動演奏可能な電子楽器音源であって、1または複数のストレッチチューニング情報と、前記1または複数のストレッチチューニング情報のいずれかが設定された音色データを複数記憶する電子楽器音源を備え、前記カラオケ演奏データは歌唱すべき音高情報を示すリファレンスデータを含み、前記電子楽器音源が記憶する前記1または複数のストレッチチューニング情報のうち所定のストレッチチューニング情報を取得する取得手段と、前記歌唱信号の所定タイミングの音高情報を検出する検出手段と、前記検出手段により検出された前記歌唱信号の前記所定タイミングの音高情報を、前記リファレンスデータの当該所定タイミングの音高情報と比較し、この比較結果に基づいて歌唱を評価する採点手段とを備え、前記採点手段は、前記歌唱信号の音高情報を前記リファレンスデータの音高情報と比較する際に、前記取得手段により取得した前記ストレッチチューニング情報に基づき前記比較結果を補正する補正手段を備えることを特徴とする。   Further, the present invention is a karaoke apparatus that generates a karaoke performance sound from karaoke performance data and receives a singer's singing signal, and is an electronic musical instrument sound source that can be automatically played by the karaoke performance data. Or a plurality of stretch tuning information and an electronic musical instrument sound source that stores a plurality of timbre data in which any one of the one or more stretch tuning information is set, and the karaoke performance data is reference data indicating pitch information to be sung Acquisition means for acquiring predetermined stretch tuning information among the one or more stretch tuning information stored in the electronic musical instrument sound source, detection means for detecting pitch information at a predetermined timing of the singing signal, and The predetermined timing of the singing signal detected by the detecting means The pitch information is compared with the pitch information at the predetermined timing of the reference data, and scoring means for evaluating the song based on the comparison result, the scoring means includes the pitch information of the song signal. A correction means is provided for correcting the comparison result based on the stretch tuning information acquired by the acquisition means when comparing with the pitch information of the reference data.
前述のカラオケ装置において、前記所定のストレッチチューニング情報は、ピアノを模擬する音色に設定されたストレッチチューニング情報であることが好ましい。   In the above karaoke apparatus, the predetermined stretch tuning information is preferably stretch tuning information set to a tone color that simulates a piano.
本発明によれば、歌唱者のカラオケ歌唱によって生成された歌唱音声を採点するカラオケ装置において、カラオケ伴奏の楽器音のピッチに合わせようとする歌唱に適した採点が行える。   ADVANTAGE OF THE INVENTION According to this invention, in the karaoke apparatus which scores the singing voice produced | generated by the singer's karaoke song, scoring suitable for the song which tries to match | combine the pitch of the musical instrument sound of a karaoke accompaniment can be performed.
通信カラオケシステムの概略構成を説明する図である。It is a figure explaining schematic structure of a communication karaoke system. カラオケ装置の構成を説明するブロック図である。It is a block diagram explaining the structure of a karaoke apparatus. カラオケ本体の構成を説明するブロック図である。It is a block diagram explaining the structure of a karaoke main body. ストレッチチューニングデータを説明する概念図である。It is a conceptual diagram explaining stretch tuning data. 記憶されるストレッチチューニングデータの種類を説明する概念図である。It is a conceptual diagram explaining the kind of the stretch tuning data memorize | stored. カラオケ歌唱時の動作を説明するフローチャートである。It is a flowchart explaining the operation | movement at the time of karaoke singing. 区間採点処理を説明するフローチャートである。It is a flowchart explaining a section scoring process. 複数種類のストレッチチューニングデータの中から1つのデータを選択する処理を説明するための図である。It is a figure for demonstrating the process which selects one data from multiple types of stretch tuning data.
以下、本発明の実施形態について説明する。まず、通信カラオケシステムの構成について説明する。図1に示す通信カラオケシステムは、ホスト装置1とカラオケ装置2とを有している。そして、これらが伝送路3を介して通信可能に接続されている。カラオケ装置2は、例えばカラオケ店KBの各カラオケルームRMに設置されている。ホスト装置1は、サーバとして機能し、顧客情報などの各種情報を蓄積して管理する。カラオケ装置2は、カラオケ演奏、及び、カラオケ歌唱時の採点処理等を行うものである。   Hereinafter, embodiments of the present invention will be described. First, the configuration of the online karaoke system will be described. The communication karaoke system shown in FIG. 1 has a host device 1 and a karaoke device 2. And these are connected via the transmission line 3 so that communication is possible. The karaoke apparatus 2 is installed in each karaoke room RM of the karaoke store KB, for example. The host device 1 functions as a server and accumulates and manages various information such as customer information. The karaoke apparatus 2 performs karaoke performance, scoring processing at the time of karaoke singing, and the like.
図2に示すように、カラオケ装置2は、カラオケ本体21と、スピーカ22と、モニタ23と、歌唱マイク24と、ビデオカメラ25と、リモコン装置26とを有している。   As shown in FIG. 2, the karaoke apparatus 2 includes a karaoke main body 21, a speaker 22, a monitor 23, a singing microphone 24, a video camera 25, and a remote control device 26.
カラオケ本体21は、利用者によって指定されたカラオケ楽曲の演奏制御、歌詞及び背景映像の表示制御、歌唱マイク24で生成されたマイク信号の処理、カラオケ歌唱の採点、伝送路3を介して行われる信号等の送受信といった、カラオケ歌唱に関する各種の制御を行う部分である。そして、スピーカ22からリモコン装置26の各部は、有線或いは無線でカラオケ本体21に接続されている。なお、このカラオケ本体21については、後で詳しく説明する。   The karaoke main body 21 is performed through performance control of karaoke music designated by the user, display control of lyrics and background video, processing of a microphone signal generated by the singing microphone 24, scoring of karaoke singing, and the transmission path 3. It is a part that performs various controls related to karaoke singing, such as transmission and reception of signals. And each part of the remote control device 26 from the speaker 22 is connected to the karaoke main body 21 by wire or wireless. The karaoke main body 21 will be described in detail later.
スピーカ22は、カラオケ本体21から出力される放音信号に基づいて音を出力する。例えば、歌唱者の音声とカラオケ演奏音の混合音を出力する。モニタ23は、カラオケ本体21からの映像信号に基づいて映像を画面に表示する。例えば、歌唱しているカラオケ楽曲の歌詞や背景映像を表示する。歌唱マイク24は、利用者(歌唱者)の歌唱音を集音し、マイク信号に変換してカラオケ本体21に入力させる。従って、歌唱マイク24とカラオケ本体21の組は、カラオケルームRMにおいて歌唱者が歌唱した歌唱音を収音する収音手段に相当する。そして、マイク信号はカラオケ本体21で適宜調整された後、カラオケ演奏音等と混合され、放音信号としてスピーカ22に入力される。   The speaker 22 outputs sound based on the sound emission signal output from the karaoke main body 21. For example, a mixed sound of a singer's voice and karaoke performance sound is output. The monitor 23 displays a video on the screen based on the video signal from the karaoke main body 21. For example, the lyrics and background video of a karaoke song being sung are displayed. The singing microphone 24 collects the singing sound of the user (singer), converts it into a microphone signal, and inputs it to the karaoke main body 21. Therefore, the group of the singing microphone 24 and the karaoke main body 21 corresponds to sound collecting means for collecting the singing sound sung by the singer in the karaoke room RM. The microphone signal is appropriately adjusted by the karaoke main body 21 and then mixed with the karaoke performance sound or the like and input to the speaker 22 as a sound output signal.
ビデオカメラ25は、カラオケルームRMを撮影することで映像信号を生成する。生成された映像信号はカラオケ本体21に入力される。このビデオカメラ25は、例えば、カラオケ歌唱時の映像を録画する場合に用いられる。リモコン装置26は、カラオケ本体21との間で情報を送受信するための双方向通信可能な短距離無線通信部を備えており、カラオケ楽曲の予約時などに操作される。カラオケ楽曲の予約時において、リモコン装置26からは、演奏対象の楽曲を識別するための楽曲IDを含んだ操作信号が送信される。そして、カラオケ本体21は、選択されたカラオケ楽曲を待ち行列で管理する。   The video camera 25 generates a video signal by shooting the karaoke room RM. The generated video signal is input to the karaoke main body 21. This video camera 25 is used, for example, when recording a video during karaoke singing. The remote control device 26 includes a short-range wireless communication unit capable of bidirectional communication for transmitting and receiving information to and from the karaoke main body 21 and is operated when a karaoke song is reserved. When reserving karaoke music, the remote control device 26 transmits an operation signal including a music ID for identifying the music to be played. And the karaoke main body 21 manages the selected karaoke music in a queue.
また、このリモコン装置26は、カラオケルームRMを利用するルーム利用者を認証するとき等に用いられる。その際、ルーム利用者による操作に応じた操作情報をホスト装置1に対して送信する。この場合、ホスト装置1に対しては、操作信号が近隣のルーター装置及び伝送路3を介して送信される。   The remote control device 26 is used when authenticating a room user who uses the karaoke room RM. At this time, operation information corresponding to the operation by the room user is transmitted to the host device 1. In this case, an operation signal is transmitted to the host device 1 via the neighboring router device and the transmission path 3.
次に、カラオケ本体21について詳細に説明する。図3に示すように、カラオケ本体21は、本体側制御部31と、本体側通信部32と、本体側記憶部33と、音源部34と、音響処理部35と、表示処理部36と、映像入力部37と、操作部38とを有している。そして、これらの各部がバスBSを介して通信可能な状態に接続されている。   Next, the karaoke main body 21 will be described in detail. As shown in FIG. 3, the karaoke main body 21 includes a main body side control unit 31, a main body side communication unit 32, a main body side storage unit 33, a sound source unit 34, an acoustic processing unit 35, a display processing unit 36, A video input unit 37 and an operation unit 38 are provided. These units are connected to a communicable state via the bus BS.
本体側制御部31は、カラオケ本体21における制御の中心となる部分であり、CPU31aやメモリ31bを有している。CPU31aは、メモリ31bに記憶された動作プログラムに従って各種の制御を実行する。例えば、操作部38からの操作を受け付ける操作入力処理やシーケンサとして動作するシーケンサ処理を行う。メモリ31bは、CPU31aに実行されるプログラムを記憶したり、プログラムの実行時に各種情報を一時的に記憶したりする記憶素子である。そして、メモリ31bは、リモコン装置26で予約されたカラオケ楽曲を、待ち行列で記憶することも行っている。   The main body side control unit 31 is a central part of control in the karaoke main body 21, and includes a CPU 31a and a memory 31b. The CPU 31a executes various controls according to the operation program stored in the memory 31b. For example, an operation input process for receiving an operation from the operation unit 38 or a sequencer process that operates as a sequencer is performed. The memory 31b is a storage element that stores a program to be executed by the CPU 31a and temporarily stores various types of information when the program is executed. The memory 31b also stores the karaoke music reserved by the remote control device 26 in a queue.
本体側通信部32は、ルーター装置RTを介してカラオケ本体21を伝送路3に接続するためのインタフェースを提供する。このため、本体側通信部32は、ルーター装置RTとの間で情報の送受信を行う。この本体側通信部32は、本体側制御部31によって動作が制御される。   The main body side communication unit 32 provides an interface for connecting the karaoke main body 21 to the transmission path 3 via the router device RT. Therefore, the main body side communication unit 32 transmits and receives information to and from the router device RT. The operation of the main body side communication unit 32 is controlled by the main body side control unit 31.
本体側記憶部33は、各種のデータを記憶する大容量の記憶装置であり、例えばハードディスクドライブによって構成されている。この本体側記憶部33には、例えば、楽曲データ記憶領域33a、及び、採点用プログラム記憶領域33bが設けられる。   The main body side storage unit 33 is a large-capacity storage device that stores various types of data, and includes, for example, a hard disk drive. In the main body side storage unit 33, for example, a music data storage area 33a and a scoring program storage area 33b are provided.
楽曲データ記憶領域33aには、リモコン装置26で指定されたカラオケ楽曲を演奏するための楽曲データが記憶される。楽曲データには、MIDIデータと歌詞データとリファレンスデータが含まれる。   In the music data storage area 33a, music data for playing the karaoke music designated by the remote control device 26 is stored. The music data includes MIDI data, lyrics data, and reference data.
MIDIデータは、電子楽器の音源を自動演奏させるための自動演奏データ(カラオケ演奏データ)であり、時系列のノート情報によって構成される。ノート情報は、例えば発音や消音のタイミング、キーの押圧力、音の高さ、再生ピッチなどを制御する各種の命令によって構成される。本実施形態において、MIDIデータのセットアップデータには、演奏パート毎に使用する音色を設定するための情報が含まれている。   MIDI data is automatic performance data (karaoke performance data) for automatically playing a sound source of an electronic musical instrument, and is composed of time-series note information. The note information is composed of various commands for controlling, for example, the timing of sound generation and mute, key pressing force, pitch, and playback pitch. In the present embodiment, the MIDI data setup data includes information for setting a timbre to be used for each performance part.
さらに、設定される音色には、それぞれ複数種類の楽器音色用ストレッチチューニングデータのうちのいずれかが設定されている。複数のストレッチチューニングデータのそれぞれの特性や、各音色で設定されているストレッチチューニングデータの種類は、カラオケ本体21の音源部34の仕様として決定されている。したがって、それらの情報は後述する音源部34に記憶されており自動演奏による楽音生成時に読み出される。本実施形態においては、歌唱者がピッチを合わせようとする音色が選択され、選択された音色に設定されたストレッチチューニングの種類が採用され、採用された種類のストレッチチューニングデータが、歌唱者によるカラオケ歌唱を採点する際に用いられる。   Furthermore, one of a plurality of types of instrument tone color stretch tuning data is set as the set tone color. The characteristics of each of the plurality of stretch tuning data and the type of stretch tuning data set for each tone color are determined as the specifications of the sound source unit 34 of the karaoke main body 21. Therefore, these pieces of information are stored in the tone generator 34 described later, and are read out at the time of musical tone generation by automatic performance. In this embodiment, the singer selects a timbre to match the pitch, the type of stretch tuning set for the selected timbre is adopted, and the type of stretch tuning data adopted is karaoke by the singer. Used when scoring a song.
なお、歌唱採点用のストレッチチューニングデータとして、歌唱音域(音高範囲)を含む音域を奏でる楽器音色用のものを選択することが好ましい。例えば、ピアノ音やギター音を模擬した音色に用いられるストレッチチューニングデータを選択することが好ましい。   In addition, it is preferable to select the thing for the musical instrument timbre which plays the sound range containing a singing sound range (pitch range) as stretch tuning data for singing scoring. For example, it is preferable to select stretch tuning data used for a tone color that simulates a piano sound or a guitar sound.
ここで、音源部34について説明する。図3に示す音源部34は、MIDIデータに基づいてカラオケ演奏音信号を生成する部分であり、CPU34aと、メモリ34bと、波形メモリ34cとを有している。CPU34aは、メモリ34bに記憶された動作プログラムに従って各種の制御を実行する。メモリ34bは、CPU34aに実行されるプログラムを記憶したり、プログラムの実行時に各種情報を一時的に記憶したりする記憶素子である。波形メモリ34cは、対象楽器が奏でた様々な音の波形データを読み出し可能に記憶する記憶素子である。この音源部34は、本体側制御部31がシーケンサ処理を行うと、MIDIデータに応じて波形データを加工し、加工後の楽音信号を音響処理部35に出力する。   Here, the sound source unit 34 will be described. The sound source unit 34 shown in FIG. 3 is a part that generates a karaoke performance sound signal based on MIDI data, and includes a CPU 34a, a memory 34b, and a waveform memory 34c. The CPU 34a executes various controls according to the operation program stored in the memory 34b. The memory 34b is a storage element that stores a program to be executed by the CPU 34a and temporarily stores various types of information when the program is executed. The waveform memory 34c is a storage element that stores waveform data of various sounds played by the target musical instrument in a readable manner. When the main body side control unit 31 performs sequencer processing, the sound source unit 34 processes waveform data according to MIDI data and outputs the processed musical sound signal to the acoustic processing unit 35.
さらに、音源部34は音色メモリ34d及びストレッチチューニングデータメモリ(stdメモリ)34eを有している。音色メモリ34dには、電子楽器音源で楽音を生成するための音色データが複数記憶されており、各音色データには複数のストレッチチューニングデータのいずれかが設定されている。stdメモリ34eには、ストレッチチューニングデータが記憶される。このストレッチチューニングデータは、自然楽器の音を電子楽器で模擬する際に用いられるものであり、低域の鍵盤ほど音高を低めに、高域の鍵盤ほど音高を高めに設定するための補正値群によって構成されている。   Further, the sound source unit 34 includes a timbre memory 34d and a stretch tuning data memory (std memory) 34e. The timbre memory 34d stores a plurality of timbre data for generating musical tones with an electronic musical instrument sound source, and each timbre data is set with one of a plurality of stretch tuning data. Strd tuning data is stored in the std memory 34e. This stretch tuning data is used when simulating the sound of a natural musical instrument with an electronic musical instrument, and it is a correction to set the pitch lower for the lower keyboard and higher for the higher keyboard. It is composed of value groups.
図4は、ストレッチチューニングデータを説明するための概念図であり、横軸が音名、縦軸が周波数である。A4(ピアノの中央「ド」の上にある「ラ」)が440Hzである場合、1オクターブ上のA5は理論上2倍の880Hzとなり、2オクターブ上のA6は理論上4倍の1760Hzとなる。同様に、1オクターブ下のA3は理論上1/2倍の220Hzとなり、2オクターブ下のA2は理論上1/4倍の110Hzとなる。   FIG. 4 is a conceptual diagram for explaining stretch tuning data, where the horizontal axis represents the pitch name and the vertical axis represents the frequency. When A4 ("La" on the center "do" of the piano) is 440Hz, A5 on one octave is theoretically doubled to 880Hz, and A6 on two octaves is theoretically fourfold to 1760Hz. . Similarly, A3 under 1 octave is theoretically 1/2 times 220 Hz, and A2 under 2 octaves is theoretically 1/4 times 110 Hz.
しかしながら、自然楽器(特にピアノ)では、倍音成分を聴きながら楽器全体でより豊かな響きが得られるように調律する。その結果、同図に一点鎖線で示すように、高域の鍵盤ほど音高が理論値よりも高くなり、低域の鍵盤ほど音高が理論値よりも低くなる。ストレッチチューニングデータは、この調律結果を数値化したデータ(ストレッチカーブ)によって構成されている。   However, natural instruments (especially pianos) are tuned so that a richer sound can be obtained throughout the instrument while listening to overtone components. As a result, as indicated by the alternate long and short dash line in the figure, the pitch of the higher keyboard is higher than the theoretical value, and the pitch of the lower keyboard is lower than the theoretical value. The stretch tuning data is composed of data (stretch curve) obtained by digitizing the tuning result.
図5に示すように、本実施形態では、ピアノ音色用のストレッチチューニングデータstd5をはじめ複数のストレッチチューニングデータstd0〜5が、stdメモリ34eに記憶されている。歌唱採点には、これらの複数のストレッチチューニングデータstd0〜5の中から選択された1つのデータが用いられる。この選択は、音源部34すなわち電子楽器音源に設定される音色情報に基づいて行われる。ピアノ用のストレッチチューニングデータstd5は、グランド・ピアノの調律を数値化したデータであり、その他のストレッチチューニングデータstd0〜4は、ピアノ用ストレッチチューニングデータよりもストレッチが小さい、つまり理論値からの乖離が小さいデータを数種類用意したものである。ピアノ以外の自然楽器を模擬する音色には、これらのストレッチが小さいものを設定することが多い。   As shown in FIG. 5, in this embodiment, a plurality of stretch tuning data std0 to 5 including a piano tone color stretch tuning data std5 are stored in the std memory 34e. One data selected from the plurality of stretch tuning data std0 to 5 is used for singing. This selection is performed based on timbre information set in the sound source unit 34, that is, the electronic musical instrument sound source. Stretch tuning data std5 for piano is data in which the tuning of the grand piano is digitized, and the other stretch tuning data std0 to 4 are less stretched than the stretch tuning data for piano, that is, there is a deviation from the theoretical value. Several kinds of small data are prepared. These timbres that simulate natural musical instruments other than pianos are often set with small stretches.
なお、ストレッチチューニングデータは、カラオケ演奏に用いられる楽器音色の全てに必要なものではない。この場合、ストレッチチューニングが不要な楽器音色については、ストレッチチューニングが設定されていない状態と等価なストレッチチューニングデータが設定されている。本実施形態では、ストレッチチューニングデータstd0が、これに該当する。これにより、ストレッチチューニングが必要な楽器音色と不要な楽器音色との間で処理を共通化でき、制御の簡素化が図られている。   The stretch tuning data is not necessary for all instrument sounds used for karaoke performance. In this case, for instrument sounds that do not require stretch tuning, stretch tuning data equivalent to a state in which stretch tuning is not set is set. In the present embodiment, the stretch tuning data std0 corresponds to this. As a result, the processing can be made common between the instrument timbre that requires stretch tuning and the unnecessary instrument timbre, thereby simplifying the control.
次に、本体側記憶部33に記憶された他のデータについて説明する。楽曲データ記憶領域33aに記憶された歌詞データは、カラオケ楽曲における歌詞テロップをモニタ23で表示させるためのデータである。なお、MIDIデータと歌詞データは、カラオケ装置2で演奏可能なカラオケ楽曲のそれぞれについて、楽曲IDに対応付けられた状態で記憶されている。   Next, other data stored in the main body storage unit 33 will be described. The lyrics data stored in the song data storage area 33a is data for displaying the lyrics telop in the karaoke song on the monitor 23. The MIDI data and the lyrics data are stored in a state associated with the music ID for each karaoke music that can be played by the karaoke apparatus 2.
リファレンスデータは、歌唱者によるカラオケ歌唱を採点する際に用いられるものであり、ヴォーカルの音高を表す時系列の音高情報によって構成されている。このリファレンスデータは、例えばMIDIデータに基づいて作成されている。そして、作成時点では再生される音源の種類が不明であるため、音高に対する補正はなされていない。このリファレンスデータもまた、楽曲IDに対応付けられた状態で記憶されている。   The reference data is used when scoring a karaoke song by a singer, and is composed of time-series pitch information representing the pitch of a vocal. This reference data is created based on, for example, MIDI data. Since the type of sound source to be played back is unknown at the time of creation, the pitch is not corrected. This reference data is also stored in a state associated with the music ID.
採点用プログラム記憶領域33bには採点用プログラムが記憶されている。この採点用プログラムは、採点モードの設定に伴って本体側制御部31に読み出され、適宜実行される。採点プログラムの実行により、カラオケ装置2では採点処理が行われる。その際、歌唱者の歌唱音に対応する歌唱信号とリファレンスデータとが比較される。例えば、同じタイミングにおける歌唱信号の音高情報とリファレンスデータの音高情報とが時系列で順次比較され、音高の差分情報が取得される。そして、音高の差が小さいほど高い採点値が付与される。なお、この採点用プログラムを実行した本体側制御部31は、歌唱者の歌唱を評価する採点手段に相当する。   A scoring program is stored in the scoring program storage area 33b. This scoring program is read by the main body side control unit 31 with the setting of the scoring mode, and is executed as appropriate. By executing the scoring program, the karaoke device 2 performs scoring processing. At that time, the singing signal corresponding to the singing sound of the singer is compared with the reference data. For example, the pitch information of the singing signal at the same timing and the pitch information of the reference data are sequentially compared in time series, and pitch difference information is acquired. Then, the higher the difference in pitch, the higher the scoring value is given. In addition, the main body side control part 31 which performed this scoring program is corresponded to the scoring means which evaluates a singer's song.
次に、音響処理部35から操作部38までの各部について説明する。音響処理部35は、カラオケ演奏音信号の処理、及び、歌唱マイク24で生成されたマイク信号の処理を行う部分である。例えば、カラオケ楽曲の演奏制御において、音響処理部35は、音源部34から出力された楽音信号をアナログ変換し、カラオケ演奏音信号を生成する。また、歌唱マイク24からのマイク信号が入力されると、適宜調整を施して歌唱信号を生成する。この歌唱信号は、カラオケ演奏音信号と混合され、放音信号としてスピーカ22に出力される。また、カラオケ歌唱を録音する場合、音響処理部35は、生成した歌唱信号をデジタルの歌唱録音データに変換して本体側記憶部33に記憶させる。さらに、音響処理部35は、生成した歌唱信号を所定のサンプリングレートでサンプリングし、図示しないバッファメモリに記憶する。   Next, each unit from the acoustic processing unit 35 to the operation unit 38 will be described. The acoustic processing unit 35 is a part that performs processing of the karaoke performance sound signal and processing of the microphone signal generated by the singing microphone 24. For example, in performance control of karaoke music, the sound processing unit 35 performs analog conversion on the musical sound signal output from the sound source unit 34 to generate a karaoke performance sound signal. Further, when a microphone signal from the singing microphone 24 is input, a singing signal is generated by appropriately adjusting. This singing signal is mixed with the karaoke performance sound signal and output to the speaker 22 as a sound emission signal. When recording a karaoke song, the sound processing unit 35 converts the generated song signal into digital song recording data and stores it in the main body storage unit 33. Furthermore, the sound processing unit 35 samples the generated singing signal at a predetermined sampling rate and stores it in a buffer memory (not shown).
表示処理部36は、カラオケ演奏時における背景映像の表示等の制御を行う。カラオケ演奏時において、表示処理部36には背景映像データが入力されており、この背景映像データのデコードが行われる。そして、表示処理部36は、デコードで生成された背景映像の映像信号に歌詞テロップを合成し、合成後の映像信号をモニタ23に出力する。その際、表示処理部36は、本体側制御部31でのシーケンサ処理で出力される歌詞データに基づき、歌詞テロップを合成する。また、シーケンサ処理で出力される色換え命令に従って、歌詞テロップの表示色を変更する。その結果、モニタ23には、背景映像に歌詞テロップが重ねられた映像が表示され、かつ、カラオケ楽曲の進行にあわせて歌詞テロップの表示色が変更される。   The display processing unit 36 performs control such as display of a background video during karaoke performance. At the time of karaoke performance, background video data is input to the display processing unit 36, and the background video data is decoded. Then, the display processing unit 36 combines the lyrics telop with the video signal of the background video generated by the decoding, and outputs the combined video signal to the monitor 23. At that time, the display processing unit 36 synthesizes the lyrics telop based on the lyrics data output by the sequencer processing in the main body side control unit 31. Also, the display color of the lyrics telop is changed according to the color change command output by the sequencer processing. As a result, the monitor 23 displays a video in which the lyrics telop is superimposed on the background video, and the display color of the lyrics telop is changed according to the progress of the karaoke music.
映像入力部37は、ビデオカメラ25からの映像信号を取り込む部分であり、例えばインタフェース回路によって構成されている。カラオケ歌唱の映像撮影時において、ビデオカメラ25からは歌唱中の利用者等を撮影した映像信号が出力される。そして、映像入力部37は、入力された映像信号を表示処理部36に出力する。これにより、モニタ23には、歌唱者の映像が表示される。また、カラオケ歌唱時の歌唱映像を録画する場合、映像入力部37は、入力された映像信号をデジタルの映像録画データに変換して本体側記憶部33に記憶させる。   The video input unit 37 is a part that captures a video signal from the video camera 25, and is configured by, for example, an interface circuit. At the time of video recording of a karaoke song, the video camera 25 outputs a video signal of a user who is singing. Then, the video input unit 37 outputs the input video signal to the display processing unit 36. Thereby, the video of the singer is displayed on the monitor 23. Further, when recording a singing video at the time of karaoke singing, the video input unit 37 converts the input video signal into digital video recording data and stores it in the main body storage unit 33.
操作部38は、パネルスイッチやリモコン受信回路などからなっており、パネルスイッチやリモコン装置26の操作に応じた操作信号を本体側制御部31に対して出力する。本体側制御部31は、操作入力処理を行うことで操作信号を検出し、対応する処理を実行する。なお、パネルスイッチやリモコン装置26は、操作を選択するための種々のキースイッチ(図示せず)を備えている。   The operation unit 38 includes a panel switch, a remote control receiving circuit, and the like, and outputs an operation signal corresponding to the operation of the panel switch and the remote control device 26 to the main body side control unit 31. The main body side control unit 31 detects an operation signal by performing an operation input process, and executes a corresponding process. Note that the panel switch and the remote control device 26 include various key switches (not shown) for selecting an operation.
次に、上記構成を有する通信カラオケシステムの動作について説明する。このカラオケシステムは、カラオケ採点に関する処理に特徴を有している。このため、カラオケ歌唱の処理を中心に説明を行う。   Next, the operation of the communication karaoke system having the above configuration will be described. This karaoke system is characterized by processing related to karaoke scoring. For this reason, it demonstrates centering around the process of karaoke singing.
このカラオケ装置2では、順番の到来により、待ち行列で管理されていたカラオケ楽曲が演奏される。例えば、本体側制御部31がシーケンサ処理を行うことで、楽曲データ記憶領域33aに記憶されたMIDIデータ等が読み出され、カラオケ演奏音がスピーカから放音される。また、歌唱マイク24を通じて、歌唱者の歌唱音がマイク信号としてカラオケ本体21に入力され、歌唱信号が生成される。あわせて、歌唱者の歌唱音がカラオケ演奏音と混合されてスピーカから放音される。   In this karaoke apparatus 2, the karaoke music managed in the queue is played by the arrival of the turn. For example, when the main body side control unit 31 performs a sequencer process, the MIDI data stored in the music data storage area 33a is read, and the karaoke performance sound is emitted from the speaker. In addition, the singing sound of the singer is input to the karaoke main body 21 through the singing microphone 24 as a microphone signal, and a singing signal is generated. In addition, the singing sound of the singer is mixed with the karaoke performance sound and emitted from the speaker.
また、カラオケルームRMの利用者がリモコン装置26を操作して歌唱採点を選択すると、カラオケ本体21の本体側制御部31は、採点プログラムを実行して採点モードに移行する。そして、カラオケ本体21(本体側制御部31)は取得手段として機能し、カラオケ演奏音を構成する複数種類の楽器音色の中から1つの楽器音色について、ストレッチチューニングデータを取得する。また、カラオケ本体21(本体側制御部31及び音響処理部35)は検出手段として機能し、歌唱信号における所定タイミングの音高情報を検出する。   Further, when the user of the karaoke room RM operates the remote control device 26 to select the singing score, the main body side control unit 31 of the karaoke main body 21 executes the scoring program and shifts to the scoring mode. And the karaoke main body 21 (main body side control part 31) functions as an acquisition means, and acquires stretch tuning data about one musical instrument tone color from the multiple types of musical instrument tone colors which comprise a karaoke performance sound. Moreover, the karaoke main body 21 (the main body side control unit 31 and the sound processing unit 35) functions as detection means, and detects pitch information at a predetermined timing in the singing signal.
さらに、カラオケ本体21(本体側制御部31)は採点手段としても機能し、歌唱信号の所定タイミングの音高情報をリファレンスデータの当該所定タイミングの音高情報と比較し、この比較結果に基づいて歌唱を評価する。その際、カラオケ本体21(本体側制御部31)は補正手段としても機能し、歌唱信号の音高情報をリファレンスデータの音高情報と比較する際、取得したストレッチチューニングデータに基づき比較結果を補正する。   Further, the karaoke main body 21 (main body side control unit 31) also functions as a scoring means, compares the pitch information at a predetermined timing of the singing signal with the pitch information at the predetermined timing of the reference data, and based on the comparison result. Evaluate singing. At that time, the karaoke main body 21 (main body side control unit 31) also functions as a correction means, and corrects the comparison result based on the acquired stretch tuning data when comparing the pitch information of the singing signal with the pitch information of the reference data. To do.
このような構成とすることにより、楽器音色のストレッチチューニングデータによって比較結果が補正されるので、音源に設定されたストレッチチューニングを加味してカラオケ歌唱を採点することができる。その結果、ストレッチチューニングデータが設定された楽器音のピッチにあわせて歌唱しても、不当に減点される不具合を抑制できる。   With such a configuration, since the comparison result is corrected by the stretch tuning data of the instrument tone color, the karaoke song can be scored in consideration of the stretch tuning set for the sound source. As a result, even if the song is sung in accordance with the pitch of the instrument sound for which the stretch tuning data is set, it is possible to suppress an inadequate deduction.
以下、上記の制御について詳細に説明する。ここで、図6は、カラオケ歌唱時の動作を説明するフローチャートである。また、図7は、区間採点処理を説明するフローチャートである。   Hereinafter, the above control will be described in detail. Here, FIG. 6 is a flowchart for explaining the operation during karaoke singing. FIG. 7 is a flowchart for explaining the section scoring process.
まず、カラオケルームRMの利用者(歌唱者)はログイン処理を行う(S1)。このログイン処理では、リモコン装置26に対する操作により、利用者IDやパスワードが入力される。利用者IDやパスワードはホスト装置1に送信される。そして、ホスト装置1は、受信した利用者IDやパスワードに基づき認証処理を行う。   First, the user (singer) of the karaoke room RM performs login processing (S1). In this login process, a user ID and a password are input by an operation on the remote control device 26. The user ID and password are transmitted to the host device 1. Then, the host device 1 performs an authentication process based on the received user ID and password.
次に、カラオケ本体21は、予約操作の有無を判断する(S2)。この楽曲の予約において、利用者は、リモコン装置26を操作し、歌唱を行うカラオケ楽曲を選択して予約する。予約操作が行われると、選択されたカラオケ楽曲が待ち行列で管理される(S3)。一方、予約操作がなされていない場合には、ステップS6へ移行する。   Next, the karaoke main body 21 determines the presence or absence of a reservation operation (S2). In this music reservation, the user operates the remote control device 26 to select and reserve a karaoke music to be sung. When the reservation operation is performed, the selected karaoke pieces are managed in a queue (S3). On the other hand, if no reservation operation has been performed, the process proceeds to step S6.
予約されたカラオケ楽曲が待ち行列で管理されると、カラオケ本体21は、予約されたカラオケ楽曲のMIDIデータを参照し(S4)、カラオケ楽曲で使用される複数の音色の中から一つの音色を選択し、この音色に設定されたストレッチチューニングデータを選択する(S5)。より具体的には、リファレンスデータの音高範囲と、演奏される各音色の音高範囲を比較し、リファレンスデータの音高範囲を一番多く含む音色に設定されたストレッチチューニングデータを採点に用いる。図8に示す例では、ピアノ音色用の演奏データの音高範囲が、リファレンスデータの音高範囲を一番多く内包している。このため、ピアノ音色に設定されたストレッチチューニングデータを、採点用のストレッチチューニングデータとして用いる。各音色の演奏データの音高範囲は、MIDIデータのノートデータから容易に知ることができる。このように所定の条件を満たす音色に設定されたストレッチチューニングデータが歌唱採点用として選択される。   When the reserved karaoke music is managed in the queue, the karaoke main unit 21 refers to the MIDI data of the reserved karaoke music (S4) and selects one timbre from a plurality of timbres used in the karaoke music. Select and select the stretch tuning data set for this tone (S5). More specifically, the pitch range of the reference data is compared with the pitch range of each timbre to be played, and the stretch tuning data set to the tone that contains the highest pitch range of the reference data is used for scoring. . In the example shown in FIG. 8, the pitch range of the performance data for piano timbre includes the highest pitch range of the reference data. For this reason, the stretch tuning data set for the piano tone is used as the stretch tuning data for scoring. The pitch range of the performance data of each tone color can be easily known from the note data of MIDI data. Thus, the stretch tuning data set to the tone color satisfying the predetermined condition is selected for singing.
また、選択された音色に設定されたストレッチチューニングデータの種類は、音源部34の音色メモリ34dに記憶されている、当該音色に対応する音色データから容易に知ることができる。あるいは各音色と各音色に設定されたストレッチチューニングデータの種類(番号)との対照テーブルを、あらかじめ音源部34のメモリ34bまたは本体側制御部31のメモリ31bに記憶しておき、これを参照するような構成にしても良い。   The type of stretch tuning data set for the selected timbre can be easily known from the timbre data corresponding to the timbre stored in the timbre memory 34d of the tone generator 34. Alternatively, a comparison table of each tone color and the type (number) of stretch tuning data set for each tone color is stored in advance in the memory 34b of the sound source unit 34 or the memory 31b of the main body side control unit 31 and is referred to. Such a configuration may be adopted.
次にカラオケ本体21は、演奏中のカラオケ楽曲の有無を確認する(S6)。そして、カラオケ楽曲が演奏中であれば、ステップS2に戻って新たな予約の有無を確認する。一方、演奏中のカラオケ楽曲がない場合には、ステップS7に移行する。そして、このステップS7では、最先に予約されたカラオケ楽曲(待ち行列の最初に位置するカラオケ楽曲)について演奏を行う。そして、カラオケ楽曲の歌唱期間に亘って歌唱音のサンプリングが行われる(S8)。例えば、音響処理部35は、生成した歌唱信号を所定のサンプリングレートでサンプリングし、サンプリングタイミングの情報と共にバッファメモリ(図示せず)に記憶する。   Next, the karaoke main body 21 checks whether or not there is a karaoke piece being played (S6). If the karaoke piece is being played, the process returns to step S2 to confirm whether or not a new reservation has been made. On the other hand, if there is no karaoke song being played, the process proceeds to step S7. In step S7, the first reserved karaoke piece (the karaoke piece located first in the queue) is played. Then, the singing sound is sampled over the singing period of the karaoke music (S8). For example, the acoustic processing unit 35 samples the generated singing signal at a predetermined sampling rate, and stores it in a buffer memory (not shown) together with information on the sampling timing.
また、カラオケ本体21は、カラオケ楽曲が演奏されている期間中において採点区間が終了したか否かを監視しており(S9)、採点区間が終了すると、当該採点区間の歌唱に対する採点処理(区間採点処理)を行う(S10)。   Further, the karaoke main body 21 monitors whether or not the scoring section has ended during the period in which the karaoke music is being played (S9), and when the scoring section ends, scoring processing for the song in the scoring section (section (Scoring processing) is performed (S10).
この区間採点処理では、例えば図7(a)に示すように、カラオケ本体21は、まずリファレンスデータの音高情報を歌唱採点用のストレッチチューニングデータで補正する(S21)。次に、補正後のリファレンスデータの音高情報とサンプリングで得られた歌唱信号(歌唱音)の音高情報とを比較して差分情報を取得する(S22)。対象区間に亘って差分情報を取得したならば、この差分情報を用いて区間得点を算出する(S23)。   In this section scoring process, for example, as shown in FIG. 7A, the karaoke main body 21 first corrects the pitch information of the reference data with the stretch tuning data for singing scoring (S21). Next, the difference information is acquired by comparing the pitch information of the corrected reference data with the pitch information of the singing signal (singing sound) obtained by sampling (S22). If difference information is acquired over the target section, a section score is calculated using this difference information (S23).
また、図7(b)に示すように、先にリファレンスデータの音高情報とリファレンスデータの音高情報とを比較して差分情報を取得し(S24)、その後、差分情報を歌唱採点用のストレッチチューニングデータで補正し(S25)、補正後の差分情報を用いて区間得点を算出してもよい(S26)。   Moreover, as shown in FIG.7 (b), the pitch information of reference data and the pitch information of reference data are compared first, difference information is acquired (S24), and difference information is used for singing scoring after that. Correction may be made with the stretch tuning data (S25), and the section score may be calculated using the corrected difference information (S26).
そして、何れの区間採点処理を採ったとしても、楽器音色のストレッチチューニングデータを用いて、リファレンスデータの音高情報が直接的(図7(a))に、或いは、間接的(図7(b))に補正されることから、ストレッチチューニングデータが設定された楽器音色にあわせて歌唱をしても不当に減点されることはない。   Whichever section scoring process is used, the pitch information of the reference data is directly (FIG. 7A) or indirectly (FIG. 7B using the stretch tuning data of the instrument tone color. )), It will not be unfairly deducted even if you sing along with the instrument tone for which stretch tuning data is set.
図6に示すように、区間採点処理が終了したならば、カラオケ本体21は、カラオケ楽曲の演奏が終了したか否かを判定する(S11)。ここで、終了していない場合には、ステップS7に移行して次の採点区間に対する一連の処理を繰り返し行う。一方、カラオケ楽曲の演奏が終了した場合には、採点結果を報知する(S12)。ここでは、区間採点処理で得られた区間採点の結果を総合して報知する。採点結果を報知したならば、待ち行列で管理されているカラオケ楽曲の有無を判定する(S13)。   As shown in FIG. 6, when the section scoring process is completed, the karaoke main body 21 determines whether or not the performance of the karaoke music has been completed (S11). Here, when not complete | finished, it transfers to step S7 and repeats a series of processes with respect to the next scoring area. On the other hand, when the performance of the karaoke music is completed, the scoring result is notified (S12). Here, the result of the section scoring obtained by the section scoring process is comprehensively notified. If the scoring result is notified, it is determined whether or not there is a karaoke piece managed in the queue (S13).
そして、待ち行列にカラオケ楽曲がある場合にはステップS6に移行する。この場合、ステップS6で演奏中のカラオケ楽曲は無いと判定され、待ち行列における最先のカラオケ楽曲に対し、ステップS7以降の処理が行われる。一方、待ち行列にカラオケ楽曲がない場合にはステップS2に移行する。この場合、次のカラオケ楽曲が予約されるまで、ステップS2とステップS6の処理が繰り返しなされる。すなわち、カラオケ楽曲の予約を待機する待機状態になる。そして、次のカラオケ楽曲が予約されることにより、ステップS3に移行し、前述した一連の処理が行われる。   If there is a karaoke piece in the queue, the process proceeds to step S6. In this case, it is determined in step S6 that there is no karaoke piece being played, and the processes after step S7 are performed on the earliest karaoke piece in the queue. On the other hand, if there is no karaoke song in the queue, the process proceeds to step S2. In this case, steps S2 and S6 are repeated until the next karaoke piece is reserved. In other words, a standby state for waiting for reservation of karaoke music is set. Then, when the next karaoke song is reserved, the process proceeds to step S3, and the series of processes described above is performed.
このように、本実施形態のカラオケ装置2では、ストレッチチューニングデータが設定された楽器音色にあわせて歌唱を行っても不当に減点されることを防止できる。そして、ピアノ音などの、歌唱の音高範囲をカバーする楽器音色に設定されたストレッチチューニングデータを用いることで、採点を適切に行うことができる。   Thus, in the karaoke apparatus 2 of this embodiment, even if it sings according to the musical instrument tone color for which the stretch tuning data is set, it is possible to prevent an unreasonable deduction. And it can score appropriately by using the stretch tuning data set to the instrument tone color which covers the pitch range of a song, such as a piano sound.
以上の実施形態の説明は、本発明の理解を容易にするためのものであり、本発明を限定するものではない。本発明はその趣旨を逸脱することなく、変更、改良され得ると共に本発明にはその等価物が含まれる。例えば、次のように構成してもよい。   The above description of the embodiment is for facilitating the understanding of the present invention, and does not limit the present invention. The present invention can be changed and improved without departing from the gist thereof, and the present invention includes equivalents thereof. For example, you may comprise as follows.
前述の実施形態では、カラオケ楽曲で使用される複数の音色の中から所定の条件を満たす音色を選択する際に、リファレンスデータとの間で演奏データの音高範囲を比較したが、所定の条件はこれに限定されるものではない。例えば、歌唱区間において発音頻度が一番高い音色や、あるいは歌唱区間において設定音量が一番大きい音色など、演奏上の支配性の強さを条件として音色を選択し、その音色に設定されたストレッチチューニングデータを採用してもよい。あるいは、ピアノ音色に設定されたストレッチチューニングデータに一番近いストレッチチューニングデータが設定されていることを、所定の条件とすることもできる。   In the above embodiment, the pitch range of the performance data is compared with the reference data when selecting a timbre that satisfies a predetermined condition from a plurality of timbres used in karaoke music. Is not limited to this. For example, a tone that has the highest frequency of sound in the singing section, or a timbre that has the highest volume setting in the singing section is selected on condition that the tone is dominant, and the stretch set for that timbre Tuning data may be adopted. Alternatively, the predetermined condition may be that stretch tuning data closest to the stretch tuning data set for the piano tone is set.
さらに、前述の実施形態や上記変形例では、採点に使用するストレッチチューニングデータに関し、演奏するカラオケ楽曲毎に複数のストレッチチューニングデータの中から所定の条件を満たすものを選択したが、この構成に限定されるものではない。例えば、常に同じストレッチチューニングデータを用いて歌唱採点を補正してもよい。この場合にはストレッチチューニングデータを選択する処理が省略できるので、カラオケ伴奏の楽器音のピッチに合わせようとする歌唱に適した採点を行うことができるという効果に加え、構成がシンプルになり処理負荷が軽くなるという効果がある。より具体的には、電子楽器音源ではピアノを模擬する音色が全ての音色の中心になっていることが多く、常にピアノ音色に設定されたストレッチチューニングデータを用いて歌唱採点を補正すればよい。   Furthermore, in the above-described embodiment and the above-described modified example, regarding the stretch tuning data used for scoring, a piece satisfying a predetermined condition is selected from a plurality of stretch tuning data for each karaoke piece to be played. Is not to be done. For example, the singing score may be corrected by always using the same stretch tuning data. In this case, since the process of selecting stretch tuning data can be omitted, in addition to the effect of scoring suitable for singing to match the pitch of the instrumental sound of karaoke accompaniment, the configuration is simplified and the processing load is reduced. Has the effect of lightening. More specifically, in an electronic musical instrument sound source, a timbre that simulates a piano is often the center of all timbres, and singing scoring is always corrected using stretch tuning data set to a piano timbre.
また、前述の実施形態では、ストレッチチューニングデータを音源部34のstdメモリ34eに記憶させていたが、この構成に限定されるものではない。例えば、ストレッチチューニングデータをMIDIデータのセットアップデータに含ませてもよい。或いは、リファレンスデータにストレッチチューニングを織り込んでもよい。或いは、ストレッチチューニング選択情報をMIDIデータのセットアップデータに含ませてもよい。   In the above-described embodiment, the stretch tuning data is stored in the std memory 34e of the sound source unit 34. However, the present invention is not limited to this configuration. For example, the stretch tuning data may be included in the MIDI data setup data. Alternatively, stretch tuning may be incorporated into the reference data. Alternatively, stretch tuning selection information may be included in MIDI data setup data.
1…ホスト装置,2…カラオケ装置,3…伝送路,21…カラオケ本体,22…スピーカ,23…モニタ,24…歌唱マイク,25…ビデオカメラ,26…リモコン装置,31…本体側制御部,31a…CPU,31b…メモリ,32…本体側通信部,33…本体側記憶部,33a…楽曲データ記憶領域,33b…採点用プログラム記憶領域,34…音源部,34a…CPU,34b…メモリ,34c…波形メモリ,34d…音色メモリ,34e…ストレッチチューニングデータメモリ(stdメモリ),35…音響処理部,36…表示処理部,37…映像入力部,38…操作部,KB…カラオケ店,RM…カラオケルーム,BS…バス,RT…ルーター装置 DESCRIPTION OF SYMBOLS 1 ... Host apparatus, 2 ... Karaoke apparatus, 3 ... Transmission path, 21 ... Karaoke main body, 22 ... Speaker, 23 ... Monitor, 24 ... Singing microphone, 25 ... Video camera, 26 ... Remote control device, 31 ... Main body side control part, 31a ... CPU, 31b ... memory, 32 ... main body side communication section, 33 ... main body side storage section, 33a ... music data storage area, 33b ... scoring program storage area, 34 ... sound source section, 34a ... CPU, 34b ... memory, 34c ... Waveform memory, 34d ... Tone memory, 34e ... Stretch tuning data memory (std memory), 35 ... Sound processing unit, 36 ... Display processing unit, 37 ... Video input unit, 38 ... Operation unit, KB ... Karaoke store, RM ... Karaoke room, BS ... Bus, RT ... Router device

Claims (5)

  1. カラオケ演奏データによりカラオケ演奏音を生成するとともに、歌唱者の歌唱信号が入力されるカラオケ装置であって、
    前記カラオケ演奏データにより自動演奏可能な電子楽器音源であって、複数のストレッチチューニング情報と、前記複数のストレッチチューニング情報のいずれかが設定された音色データを複数記憶する電子楽器音源を備え、
    前記カラオケ演奏データは歌唱すべき音高情報を示すリファレンスデータと、前記自動演奏で使用される音色の情報と、を含み、
    前記自動演奏で使用される音色に対応する音色データに設定されたストレッチチューニング情報を取得する取得手段と、
    前記歌唱信号の所定タイミングの音高情報を検出する検出手段と、
    前記検出手段により検出された前記歌唱信号の前記所定タイミングの音高情報を、前記リファレンスデータの当該所定タイミングの音高情報と比較し、この比較結果に基づいて歌唱を評価する採点手段とを備え、
    前記採点手段は、前記歌唱信号の音高情報を前記リファレンスデータの音高情報と比較する際に、前記取得手段により取得した前記ストレッチチューニング情報に基づき前記比較結果を補正する補正手段を備えることを特徴とするカラオケ装置。
    A karaoke device that generates a karaoke performance sound from karaoke performance data and receives a singer's singing signal,
    An electronic musical instrument sound source that can be automatically played by the karaoke performance data, comprising a plurality of stretch tuning information and an electronic musical instrument sound source that stores a plurality of timbre data set with any of the plurality of stretch tuning information,
    The karaoke performance data includes reference data indicating pitch information to be sung, and timbre information used in the automatic performance,
    Obtaining means for obtaining stretch tuning information set in timbre data corresponding to a timbre used in the automatic performance;
    Detecting means for detecting pitch information at a predetermined timing of the singing signal;
    Scoring means for comparing the pitch information of the predetermined timing of the singing signal detected by the detecting means with the pitch information of the predetermined timing of the reference data and evaluating the singing based on the comparison result. ,
    The scoring means comprises correction means for correcting the comparison result based on the stretch tuning information acquired by the acquisition means when comparing the pitch information of the singing signal with the pitch information of the reference data. A karaoke device that features it.
  2. 前記取得手段は、前記音色のうち、所定の条件を満たす音色に対応する音色データに設定されたストレッチチューニング情報を取得することを特徴とする請求項1に記載のカラオケ装置。   2. The karaoke apparatus according to claim 1, wherein the acquisition unit acquires stretch tuning information set in timbre data corresponding to a timbre that satisfies a predetermined condition among the timbres.
  3. 前記所定の条件を満たす音色は、前記自動演奏で使用される音色のうち、その演奏データの音高範囲が前記リファレンスデータの音高範囲を一番多く含む音色であることを特徴とする請求項2に記載のカラオケ装置。   The timbre that satisfies the predetermined condition is a timbre that includes a pitch range of performance data among the timbres used in the automatic performance and that includes the highest pitch range of the reference data. 2. The karaoke apparatus according to 2.
  4. カラオケ演奏データによりカラオケ演奏音を生成するとともに、歌唱者の歌唱信号が入力されるカラオケ装置であって、
    前記カラオケ演奏データにより自動演奏可能な電子楽器音源であって、1または複数のストレッチチューニング情報と、前記1または複数のストレッチチューニング情報のいずれかが設定された音色データを複数記憶する電子楽器音源を備え、
    前記カラオケ演奏データは歌唱すべき音高情報を示すリファレンスデータを含み、
    前記電子楽器音源が記憶する前記1または複数のストレッチチューニング情報のうち所定のストレッチチューニング情報を取得する取得手段と、
    前記歌唱信号の所定タイミングの音高情報を検出する検出手段と、
    前記検出手段により検出された前記歌唱信号の前記所定タイミングの音高情報を、前記リファレンスデータの当該所定タイミングの音高情報と比較し、この比較結果に基づいて歌唱を評価する採点手段とを備え、
    前記採点手段は、前記歌唱信号の音高情報を前記リファレンスデータの音高情報と比較する際に、前記取得手段により取得した前記ストレッチチューニング情報に基づき前記比較結果を補正する補正手段を備えることを特徴とするカラオケ装置。
    A karaoke device that generates a karaoke performance sound from karaoke performance data and receives a singer's singing signal,
    An electronic musical instrument sound source capable of automatic performance based on the karaoke performance data, wherein the electronic musical instrument sound source stores a plurality of timbre data in which one or more stretch tuning information and one or more stretch tuning information are set. Prepared,
    The karaoke performance data includes reference data indicating pitch information to be sung,
    Obtaining means for obtaining predetermined stretch tuning information among the one or more stretch tuning information stored in the electronic musical instrument sound source;
    Detecting means for detecting pitch information at a predetermined timing of the singing signal;
    Scoring means for comparing the pitch information of the predetermined timing of the singing signal detected by the detecting means with the pitch information of the predetermined timing of the reference data and evaluating the singing based on the comparison result. ,
    The scoring means comprises correction means for correcting the comparison result based on the stretch tuning information acquired by the acquisition means when comparing the pitch information of the singing signal with the pitch information of the reference data. A karaoke device that features it.
  5. 前記所定のストレッチチューニング情報は、ピアノを模擬する音色に設定されたストレッチチューニング情報であることを特徴とする請求項4に記載のカラオケ装置。   5. The karaoke apparatus according to claim 4, wherein the predetermined stretch tuning information is stretch tuning information set to a tone color that simulates a piano.
JP2013204062A 2013-09-30 2013-09-30 Karaoke device for singing in consideration of stretch tuning Active JP6141737B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013204062A JP6141737B2 (en) 2013-09-30 2013-09-30 Karaoke device for singing in consideration of stretch tuning

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013204062A JP6141737B2 (en) 2013-09-30 2013-09-30 Karaoke device for singing in consideration of stretch tuning

Publications (2)

Publication Number Publication Date
JP2015069053A true JP2015069053A (en) 2015-04-13
JP6141737B2 JP6141737B2 (en) 2017-06-07

Family

ID=52835748

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013204062A Active JP6141737B2 (en) 2013-09-30 2013-09-30 Karaoke device for singing in consideration of stretch tuning

Country Status (1)

Country Link
JP (1) JP6141737B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109300485A (en) * 2018-11-19 2019-02-01 北京达佳互联信息技术有限公司 Methods of marking, device, electronic equipment and the computer storage medium of audio signal
WO2019180830A1 (en) * 2018-03-20 2019-09-26 ヤマハ株式会社 Singing evaluating method, singing evaluating device, and program

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10222167A (en) * 1997-02-06 1998-08-21 Kawai Musical Instr Mfg Co Ltd Pitch control device for electronic musical instrument
JP2005107286A (en) * 2003-09-30 2005-04-21 Yamaha Corp Karaoke machine and program
JP2005284074A (en) * 2004-03-30 2005-10-13 Kawai Musical Instr Mfg Co Ltd Device and method for tuning correction of electronic musical instrument, computer program, and recording medium

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10222167A (en) * 1997-02-06 1998-08-21 Kawai Musical Instr Mfg Co Ltd Pitch control device for electronic musical instrument
JP2005107286A (en) * 2003-09-30 2005-04-21 Yamaha Corp Karaoke machine and program
JP2005284074A (en) * 2004-03-30 2005-10-13 Kawai Musical Instr Mfg Co Ltd Device and method for tuning correction of electronic musical instrument, computer program, and recording medium

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019180830A1 (en) * 2018-03-20 2019-09-26 ヤマハ株式会社 Singing evaluating method, singing evaluating device, and program
CN109300485A (en) * 2018-11-19 2019-02-01 北京达佳互联信息技术有限公司 Methods of marking, device, electronic equipment and the computer storage medium of audio signal

Also Published As

Publication number Publication date
JP6141737B2 (en) 2017-06-07

Similar Documents

Publication Publication Date Title
JP4934180B2 (en) Plucked string instrument performance evaluation device
JP4752425B2 (en) Ensemble system
JP3915807B2 (en) Automatic performance determination device and program
JP2009244789A (en) Karaoke system with guide vocal creation function
JP6141737B2 (en) Karaoke device for singing in consideration of stretch tuning
JP5708730B2 (en) Musical performance device and musical performance processing program
JP6514874B2 (en) Karaoke scoring device that compares the pitch difference of the reference with the pitch difference of the singing voice and performs scoring
JP5130348B2 (en) Karaoke collaboration using portable electronic devices
JP2006251697A (en) Karaoke device
JP5704368B2 (en) Musical performance device and musical performance processing program
JP2014026213A (en) Musical sound playing device
JP5969421B2 (en) Musical instrument sound output device and musical instrument sound output program
JP5983670B2 (en) Program, information processing apparatus, and data generation method
JP4033146B2 (en) Karaoke equipment
JP5782972B2 (en) information processing system, program
JP6065827B2 (en) Musical performance device and musical performance processing program
JP5342841B2 (en) Karaoke device that measures and displays the overtone characteristics of singing voices at the singing part of long notes
JP2015001587A (en) Stringed instrument performance evaluation device and stringed instrument performance evaluation program
JP5648877B1 (en) Musical performance device and musical performance processing program
JP4967170B2 (en) Accompaniment creation system, accompaniment creation method and program
JP6582517B2 (en) Control device and program
JP6587396B2 (en) Karaoke device with guitar karaoke scoring function
JP3706386B2 (en) Karaoke device characterized by key change user interface
JP2015102741A (en) Musical performance device and musical performance processing program
JP6144593B2 (en) Singing scoring system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160607

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170406

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170411

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170508

R150 Certificate of patent or registration of utility model

Ref document number: 6141737

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250