JP4826509B2 - Karaoke equipment - Google Patents
Karaoke equipment Download PDFInfo
- Publication number
- JP4826509B2 JP4826509B2 JP2007050145A JP2007050145A JP4826509B2 JP 4826509 B2 JP4826509 B2 JP 4826509B2 JP 2007050145 A JP2007050145 A JP 2007050145A JP 2007050145 A JP2007050145 A JP 2007050145A JP 4826509 B2 JP4826509 B2 JP 4826509B2
- Authority
- JP
- Japan
- Prior art keywords
- microphone
- signal
- choreography
- scoring
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Reverberation, Karaoke And Other Acoustics (AREA)
Description
本発明は、楽曲演奏時に歌唱者本人の振付けをより正確に採点する技術に関する。 The present invention relates to a technique for more accurately scoring a choreographer's choreography during music performance.
従来より、カラオケ装置の付帯機能として採点機能が良く知られている。
この採点機能は、マイクロフォンから入力された歌唱者の音声信号をサンプリングすることで歌唱者が発声した音高や声量あるいはテンポなどの歌唱状態を示す歌唱データを生成する。この歌唱データとカラオケデータ中の主旋律データなどの採点基準データとを比較し、その比較結果に基づいて所定の得点を付与して採点データを生成する。そして、歌唱パートが終了するとこの採点データ中の得点を集計して総合得点を算出する。総合得点はそのままの得点をスコアボードやディスプレイに表示したり、所定のメッセージや所定の表現内容を含む映像など総合得点を反映した映像をディスプレイに出力したりする。
Conventionally, a scoring function is well known as an incidental function of a karaoke apparatus.
This scoring function generates singing data indicating the singing state such as pitch, volume or tempo uttered by the singer by sampling the singer's voice signal input from the microphone. The singing data is compared with scoring reference data such as main melody data in karaoke data, and a predetermined score is given based on the comparison result to generate scoring data. When the singing part ends, the scores in the scoring data are totaled to calculate a total score. The total score is displayed as it is on the scoreboard or the display, or a video reflecting the total score such as a video including a predetermined message or predetermined expression content is output to the display.
また、同様に、利用者による音声を採点する装置としては、2つの音素列を時間軸上で正規化して表示する音声認識装置が知られている(例えば、特許文献1参照。)。このような音声認識装置は、不特定話者の音声を入力する入力手段50と、その音声信号から音声認識を行い、言語シンボルを得る認識手段51と、前記音声信号の所定の音響的特徴量とそれに対応する前記言語シンボルとの対応付け内容を、少なくとも2種類の音声について、正規化して対応させ表示する表示手段54とを備えている。なお、この音声認識装置では、2つの音声データのうちの一方については、入力手段から入力された音声データであり、他方の音声データについては、予め記憶されているお手本の音声データであり、両者を比較して処理した後に正規化して表示するようになっている。
Similarly, a speech recognition device that normalizes and displays two phoneme sequences on the time axis is known as a device for scoring speech by a user (see, for example, Patent Document 1). Such a speech recognition apparatus includes an
ところで、カラオケ装置の中には、操作者の操作に応じて演出効果の付与対象の音楽再生内容によりマッチした演出効果音を発生させるカラオケ装置がある(例えば、特許文献2参照。)。具体的には、カラオケ装置から演奏に伴って送信される音色データを受信した電子パーカッション装置では、パーカッション切替信号発生部及び音色切替スイッチによってシンセサイザに準備されたパーカッションの音色発生部を切替選択する。操作者が電子パーカッション装置の把持部を把持して上下左右に振るとその振られた方向に応じてX、Y方向加速度センサにおいて電圧が発生し、加速度方向検出部がこれらの電圧値に基づいて加速度の大きさを検出し、この加速度の大きさが所定の閾値を越えていれば、パーカッショントリガ信号発生部がトリガする信号を発生させる。
ところで、上述のような採点機能の一部として、歌唱者がカラオケ演奏に合わせて行う振付けを採点する機能がある。そこで、上述のような電子パーカッション装置の把持部を把持して上下左右に振る動作を振付けとして採点することが考えられる。 Incidentally, as a part of the scoring function as described above, there is a function of scoring the choreography performed by the singer in accordance with the karaoke performance. In view of this, it is conceivable to scoring the movement of gripping the grip part of the electronic percussion apparatus as described above and swinging it up, down, left and right.
しかしながら、必ずしも電子パーカッションを歌唱者が保持しているとは限らず、その場合には歌唱者の振付けを採点していることにはならないという問題があった。
なお、特許文献3には、キーボードとマイクロフォンとが接続され、キーボードからの入力信号とマイクロフォンからの入力信号とを分離してパソコン本体における入力端子に入力するアダプタについて開示されており、この手法を用いてマイクロフォンとカラオケ装置本体との間に歌唱者の動作を検出する構成をアダプタとして取り付けることも考えられるが、そのアダプタが歌唱者の体から離れている場合には歌唱者の体の動きを検出できず、歌唱者の振付けを採点していることにはならない。
上記課題を解決するためになされた請求項1に係るカラオケ装置は、マイクロフォンから音声信号が歌唱中に入力されているか否かを検出することで、歌唱者にマイクロフォンが利用されているか否かを特定し、さらに、マイクロフォンに取り付けられた振付け信号検出手段によって歌唱者の動作をも検出し、その検出した動作を示す信号の波形と楽音情報を構成するパートの発声データの一致度合を算出し、その算出した一致度合いからカラオケ歌唱中の歌唱者の動作を振付けとして採点することを特徴とする。
The karaoke apparatus according to
具体的には、上述のカラオケ装置は、複数の曲の中から所望の曲を選択するための選択手段と、前記選択手段によって選択された曲に対応した楽音情報であって、予め対応付けられたジャンル情報と再生時に使用されるテンポ値とが含まれるMIDI形式の演奏データである楽音情報を再生して楽音を出力する楽音出力手段と、歌唱者によるカラオケ歌唱の音声信号を入力するためのマイクロフォンと、一つ以上の振付け信号検出手段と、振付信号受信手段と、音声信号検出手段と、算出手段と、振付け採点手段と、を備える。このうち振付け信号検出手段が、マイクロフォンに取り付けられることでマイクロフォンを保持する当該歌唱者に直接的にまたは間接的に固定される固定手段を有し、楽音出力手段による楽音情報の再生に合わせた当該歌唱者の動作を示す動作信号を検出し、その検出した振付け信号を送出する。また、振付信号受信手段が、振付け信号検出手段によって送出された前記動作信号を受信する。そして、音声信号検出手段が、音声信号レベルが予め定められた閾値を越えたか否かを検出し、算出手段が、楽音出力手段によって再生する楽音情報に予め対応付けられたジャンル情報と再生時に使用されるテンポ値とに基づいて振付アルゴリズムを選択する。そして、その振付アルゴリズムを用いて、楽音出力手段による楽音情報の再生中には、そのときに使用されるテンポ値を順次取得し、テンポ値の取得毎に、再生中の前記楽音情報を構成するパートからその発音データを動作信号の波形と比較するための一つ以上のパートを前記取得したテンポ値に応じた期間になるように選択し、前記振付信号受信手段が受信した前記動作信号が示す波形とその選択されたパートが示す発音データとの一致度合を繰返し算出する。さらに、振付け採点手段が、音声信号検出手段が閾値を越えたレベルの音声信号を検出した場合に、算出手段が算出した一致度合に基づき、当該歌唱者の動作を楽音に合わせた振付けとして採点する。 Specifically, the karaoke apparatus described above includes selection means for selecting a desired song from a plurality of songs, and musical tone information corresponding to the song selected by the selection means , which is associated in advance. For outputting musical sound by reproducing musical sound information which is MIDI format performance data including genre information and tempo value used at the time of reproduction, and for inputting a voice signal of karaoke singing by a singer A microphone, one or more choreography signal detection means, a choreography signal reception means, an audio signal detection means, a calculation means, and a choreography scoring means. Among these, the choreography signal detecting means has a fixing means that is directly or indirectly fixed to the singer holding the microphone by being attached to the microphone, and the chord signal detecting means is adapted to the reproduction of the musical sound information by the musical sound output means. An operation signal indicating the operation of the singer is detected, and the detected choreography signal is transmitted. Further, the choreography signal receiving means receives the operation signal sent out by the choreography signal detecting means. Then, the audio signal detection means detects whether or not the audio signal level exceeds a predetermined threshold value, and the calculation means uses the genre information previously associated with the musical sound information reproduced by the musical sound output means and used during reproduction. The choreography algorithm is selected based on the tempo value to be selected. Then, using the choreography algorithm, during the reproduction of the musical tone information by the musical tone output means, the tempo value used at that time is sequentially obtained, and the musical tone information being reproduced is constituted each time the tempo value is obtained. One or more parts for comparing the sound generation data with the waveform of the operation signal are selected from the parts so as to have a period corresponding to the acquired tempo value, and the operation signal received by the choreography signal receiving means indicates The degree of coincidence between the waveform and the pronunciation data indicated by the selected part is repeatedly calculated. Further, when the choreography scoring means detects a voice signal at a level exceeding the threshold value by the voice signal detection means, the choreographer scores the singer's movement as choreography in accordance with the musical tone based on the degree of coincidence calculated by the calculation means. .
このように構成された本発明のカラオケ装置によれば、マイクロフォンから音声信号が歌唱中に入力されているか否かを検出することで、歌唱者にマイクロフォンが利用されているか否かを特定し、さらに、マイクロフォンに取り付けられた振付け信号検出手段によって歌唱者の動作をも検出し、その検出した動作を示す信号の波形と楽音情報を構成するパートの発声データの一致度合を算出し、その算出した一致度合いからカラオケ歌唱中の歌唱者の動作を振付けとして採点する。したがって、楽曲演奏時に歌唱者本人の振付けをより正確に採点することができる。 According to the karaoke apparatus of the present invention configured as described above, it is determined whether or not the microphone is used by the singer by detecting whether or not an audio signal is input from the microphone during singing. Further, the choreographing signal detecting means attached to the microphone also detects the singer's movement, calculates the degree of coincidence between the waveform of the signal indicating the detected movement and the utterance data of the parts constituting the musical sound information. Based on the degree of coincidence, the singer's actions during karaoke singing are scored as choreography. Therefore, the choreographer's choreography can be scored more accurately when the music is played.
この場合、上述の振付け信号検出手段がマイクロフォンに取り付け可能にアダプタ化されていることが考えられる。具体的には、請求項2のように、マイクロフォンが、音声信号を送出するためのマイク側端子を有し、振付け信号検出手段の少なくとも一つが、マイクロフォンのマイク端子に接続可能な受入れ端子と、受入れ端子と接続し、受入れ端子から受け入れた音声信号を送出可能な送出端子と、を有し、固定手段によってマイクロフォンに固定された際には、受入れ端子がマイクロフォンのマイク側端子に接続されるよう構成されていることが考えられる。
In this case, it is conceivable that the above-mentioned choreography signal detecting means is an adapter that can be attached to the microphone. Specifically, as in
このように構成すれば、マイクロフォンのマイク側端子とそのマイク側端子に接続される電線との間に振付け信号検出手段を取り付けることができ、したがって、従来構成を利用して振付け信号検出手段をマイクロフォンに取り付けることができる。また、振付け信号検出手段が歌唱者の手の動きを検出することができる。 If comprised in this way, a choreography signal detection means can be attached between the microphone side terminal of a microphone, and the electric wire connected to the microphone side terminal, Therefore, a choreography signal detection means is used for a microphone using the conventional structure. Can be attached to. Further, the choreography signal detecting means can detect the movement of the singer's hand.
また、上述の振付け信号検出手段をネクタイピンなど歌唱者の体に取り付け可能に構成することが考えられる。具体的には、請求項3のように、振付け信号検出手段の少なくとも一つが、当該歌唱者に取り付け可能な取付手段を有することが考えられる。このように構成すれば、上述の振付け信号検出手段を歌唱者の体に直接取り付けることで、例えばテンポの速い曲に合わせた歌唱者の体の動きを検出することができる。
Further, it is conceivable that the above-mentioned choreography signal detecting means can be attached to a singer's body such as a tie pin. Specifically, as in
ところで、上述のように、楽音出力手段によって再生中の楽音情報を構成するパートからその発声データを動作信号の波形と比較するための一つ以上のパートを選択する手法としては、次のような手法が考えられる。 By the way, as described above, as a method of selecting one or more parts for comparing the utterance data with the waveform of the operation signal from the parts constituting the musical tone information being reproduced by the musical tone output means, A method can be considered.
(イ)すなわち、楽音情報に含まれるジャンル情報およびテンポ値に基づいて、振付けアルゴリズムを選択することが考えられる。具体的には、算出手段が、楽音出力手段によって楽音情報に予め対応付けられた「ジャンル情報」と再生時に使用される「テンポ値」とに基づき、振付アルゴリズムを選択し、楽音出力手段によって再生中の前記楽音情報を構成するパートからその発音データを前記動作信号の波形と比較するための一つ以上のパートを上述の振付アルゴリズムから選択し、振付信号受信手段が受信した動作信号が示す波形とその選択されたパートが示す発音データとの一致度合を算出することが考えられる。このように構成すれば、演奏されている楽曲のテンポに合わせて、歌唱者本人の振付けをより正確に採点することができる。 (A) That is, it is conceivable to select a choreography algorithm based on genre information and tempo values included in musical tone information. Specifically, calculation detecting means, based on to have been previously associated with the musical tone information by the tone output means is used when reproducing the "genre information,""tempovalue", select the choreography algorithm, the tone output means One or more parts for comparing the sound generation data from the parts constituting the musical sound information being reproduced with the waveform of the operation signal are selected from the above choreography algorithm, and the operation signal received by the choreography signal receiving means indicates It is conceivable to calculate the degree of coincidence between the waveform and the pronunciation data indicated by the selected part. If comprised in this way, according to the tempo of the music currently performed, a choreographer's choreography can be scored more correctly.
(ロ)また、動作信号の発音データの隣接するピーク箇所同士の間隔とテンポ値との一致度合いを算出して、振付け採点値とすることが考えられる。具体的には、請求項5のように、算出手段が、振付信号受信手段が受信した動作信号における隣接するピーク箇所同士の間隔と再生時に使用されるテンポ値との一致度合を算出することが考えられる。このことにより、演奏されている楽曲の曲調に合わせて、歌唱者本人の振付けをより正確に採点することができる。
(B) It is also conceivable to calculate the degree of coincidence between the interval between adjacent peak portions of the sound generation data of the motion signal and the tempo value to obtain the choreography score value. Specifically, as in
つぎに、請求項4に記載のカラオケ装置は、算出手段が、振付アルゴリズムによるテンポ値の取得、その取得したテンポ値に応じたパートの選択、及びそのパートに対応する一致度の算出からなる一連の処理を、再生中の楽音情報の拍単位で繰返し実行することを特徴とする。
また、請求項6に記載のカラオケ装置は、算出手段が、楽音情報に予め対応付けられたジャンル情報ごとに予め設定されたテンポ値の閾値と、楽音情報の再生時に使用されるテンポ値との大小関係に応じて振付アルゴリズムを選択することを特徴とする。
Next, in the karaoke apparatus according to
Further, in the karaoke apparatus according to claim 6, the calculating means includes a tempo value threshold preset for each genre information previously associated with the musical sound information and a tempo value used when reproducing the musical sound information. The choreography algorithm is selected according to the magnitude relationship.
ところで、上述の手法ではマイクフォンからの音声信号検出を音声信号レベルで行っているが、マイクフォンからの音声信号検出を採点で行うことが考えられる。具体的には、請求項7のように、楽曲情報には採点情報が含まれており、採点情報に基づき、歌唱中の音声信号の採点値化を行うカラオケ採点手段と、予め定められた採点閾値と歌唱中の音声信号の採点値とを比較する採点値比較手段と、を備え、採点値比較手段によって歌唱中の音声信号の採点値が採点閾値よりも高いと判断された場合には、振付け採点手段が、算出手段が算出した一致度合に基づき、当該歌唱者の動作を楽音に合わせた振付けとして採点することが考えられる。
By the way, in the above-described method, the sound signal from the microphone is detected at the sound signal level, but it is conceivable to detect the sound signal from the microphone by scoring. Specifically, as described in
このように構成すれば、上述の手法ではマイクフォンからの音声信号検出を音声信号レベルで行うような単なる音声検出ではなく、歌唱中の採点値を用いるので、例えば採点値が及第点(採点閾値)であれば歌唱中であると特定できる。しがたって、歌唱中の歌唱者のマイクロフォンであることをさらに正確に特定することができるので、歌唱者本人が振付採点を行うことができるという効果がある。 If comprised in this way, in the above-mentioned method, since the audio | voice signal detection from a microphone is not mere audio | voice detection which performs an audio | voice signal level, the scoring value in singing is used, for example, a scoring value is a scoring point (scoring (Threshold value) can be identified as being singing. Therefore, since the microphone of the singer who is singing can be more accurately specified, there is an effect that the singer himself can perform choreography scoring.
以下に本発明の実施形態を図面とともに説明する。
[第一実施形態]
図1はカラオケ装置30およびマイク側アダプタ10が装着されたマイクロフォン41の概略外観図である。また、図2(a)はマイク側アダプタ10が装着されたマイクロフォン41の概略構成図であり、図2(b)はマイク側アダプタ10の概略構成図であり、図2(c)はマイク側アダプタ10が装着されたマイクロフォン41の概略外観図である。また、図3は本体側アダプタ20の概略構成図である。また、図4は、カラオケ装置30の概略構成を示すブロック図である。また、図5はマイク側アダプタ10の構成ブロック図である。また、図6は本体側アダプタ20の構成ブロック図である。
Embodiments of the present invention will be described below with reference to the drawings.
[First embodiment]
FIG. 1 is a schematic external view of a
[カラオケ装置30の構成の説明]
図4に示すように、カラオケ装置30は、カラオケ店舗に設置されており、例えばカラオケ店舗の各部屋にそれぞれ1台ずつ設置される。なお、これら複数台のカラオケ装置30は店舗内ネットワーク50にて接続することによってネットワークシステムを構成している。そして、これら複数台のカラオケ装置30の内、何れか一つ(以上)のカラオケ装置30は、公衆回線を介して配信用ホスト装置70に接続できるようになっており、この公衆回線60を介して接続した配信用ホスト装置70からカラオケに関する配信データ(楽曲データ等)、あるいは例えばカラオケ演奏処理を実行するためのアプリケーションプログラム(カラオケ演奏プログラム)等)を取得して、記憶装置33へ記憶しておくことができる。なお、そして、カラオケ装置30は、記憶装置33に記憶されている配信データを、店舗内ネットワーク50によって接続された他のカラオケ装置30へ送信することができる。そのため、公衆回線60を介して配信用ホスト装置70と接続する機能を持つカラオケ装置30がマスタ(親機)となり、他のカラオケ装置30がスレーブ(子機)となっている。
[Description of configuration of karaoke apparatus 30]
As shown in FIG. 4, the
マスタまたはスレーブとして機能するカラオケ装置30の基本的な構成はいずれも同じであるが、上述のように、マスタのみが公衆回線60を介して配信用ホスト装置70に接続できるようになっている。それ以外の機能は基本的にいずれも同じである。したがって、以下の構成説明に関しては、図4に示す(マスタとして機能する)カラオケ装置30に関して行うこととする。
The basic configuration of the
カラオケ装置30は、図4に示すように、カラオケ装置30を制御するための中央処理装置31、ネットワークとしての店舗内ネットワーク50を介して他のカラオケ装置(この場合はスレーブ)と接続したり、公衆回線60を介して配信用ホスト装置70と接続し、各種の情報を送受信する通信制御装置32、各種データ等を記憶している記憶装置33、曲の予約や電源のON・OFFなどを行うための操作パネル34、操作パネル34と同様に曲の予約等を行うためのリモコン送信機35、リモコン送信機35からの信号を受信するためのリモコン受信機36、操作パネル34やリモコン受信機36からの信号を受け付けて処理する操作制御部37、MIDIデータに基づく楽曲再生を行うシンセサイザ38、音楽情報にかかる電気信号を増幅等するミキシングアンプ39、ミキシングアンプ39からの電気信号を入力して伴奏曲及び操作者の歌声等を流すスピーカ40、操作者の歌声等をミキシングアンプ39に入力するマイクロフォン41、中央処理装置31によって生成された歌詞情報を記憶するビデオRAM42、画像情報等を再生する映像再生装置43、ビデオRAM42からの歌詞情報と映像再生装置43からの映像信号とに基づき、歌詞及び歌詞の背景映像を出力する映像制御部44、映像制御部44から出力された歌詞及び歌詞の背景映像を表示する表示装置45を備えている。また、このうちの中央処理装置31には、通信制御装置32、記憶装置33、操作制御部37、シンセサイザ38、ビデオRAM42、映像再生装置43及び映像制御部44が接続されており、中央処理装置31は、これらを介してカラオケ装置30を制御する。
As shown in FIG. 4, the
続いて各部の具体的な構成を説明する。
まず、中央処理装置31は、CPU、ROM、RAM(いずれも図示せず)などを備える周知の構成である。一方、記憶装置33は、中央処理装置31がカラオケ装置30を制御するための各種プログラムや楽曲データを格納している。中央処理装置31の備えるCPUによって実行される複数のプログラムは記憶装置33に格納されている。
Next, a specific configuration of each unit will be described.
First, the
通信制御装置32は、店舗内ネットワーク50を介してカラオケ店舗内の他の部屋に設置されたカラオケ装置(この場合はスレーブ)に接続されており、これら他のカラオケ装置(この場合はスレーブ)との間で各種の情報を送受信する。また、カラオケ装置30の通信制御装置32は、上述したように、公衆回線60を介して配信用ホスト装置70と接続し、この配信用ホスト装置70との間で各種の情報を送受信する。
The
操作制御部37には、操作パネル34およびリモコン受信機36が接続されている。このうち、操作パネル34は、操作者がカラオケ曲の選択や演奏アレンジの切り替えを行ったりするためのものである。
An
操作者がこの操作パネル34を操作すると、その入力操作の信号が操作制御部37および中央処理装置31に送られて処理される。一方、リモコン受信機36は、リモコン送信機35からの信号を受信するためのものである。また、このリモコン送信機35は、操作パネル34と同様に、操作者がカラオケ曲の選択や演奏アレンジの切り替えを行ったりするためのものである。操作者がこのリモコン送信機35を操作すると、その入力操作の信号がリモコン受信機36を介して操作制御部37および中央処理装置31に送られて処理される。
When the operator operates the
また、シンセサイザ38には、ミキシングアンプ39が接続され、このミキシングアンプ39にはスピーカ40が接続されている。記憶装置33等から読み出され、中央処理装置31から供給される音楽情報(MIDI形式のカラオケ演奏データ)に基づいてシンセサイザ38から出力される楽音信号はミキシングアンプ39で増幅されてスピーカ40から出力される。また、ミキシングアンプ39には操作者の歌唱音声を入力するためのマイクロフォン41が接続されており、このマイクロフォン41によって入力された音声信号もシンセサイザ38からの楽音信号と共にスピーカ40から出力される。
Further, a mixing
また、映像制御部44には、ビデオRAM42、映像再生装置43および表示装置45が接続されており、これらビデオRAM42や映像再生装置43から出力される映像信号と字幕情報に基づき、歌詞を歌詞の背景映像にスーパーインポーズして出力し、表示装置45に表示させる。
The
なお、カラオケ装置30における中央処理装置31は、選択手段、音声信号検出手段、算出手段、振付け採点手段、カラオケ採点手段および採点値比較手段に相当する。また、カラオケ装置30におけるシンセサイザ38は楽音出力手段に相当する。
The
[マイクロフォン41の構成の説明]
図2(a)に示すように、マイクロフォン41は、マイク本体41aと、アダプタ部41bと、その一端がアダプタ部41bの後端部に接続可能であり、その他端がカラオケ装置30と接続可能なマイクハーネス41cとを備えている。マイク本体41aは、その後端部にXLRメス端子が設けられている。また、アダプタ部41bは、その前端部にXLRオス端子が設けられており、そのXLRオス端子をマイク本体41a後端部のXLRメス端子に接続することで、マイク本体41aに接続することができる。
[Description of Configuration of Microphone 41]
As shown in FIG. 2A, the
[マイク側アダプタ10の構成の説明]
図2および図5に示すように、マイク側アダプタ10は、筒状の筐体10aの内部に2つのバッテリ11と、回路基板12と、加速度センサ13と、赤外線発信素子14と、筐体10aの前端部に設けられたXLRオス端子15と、筐体10aの後端部に設けられたXLRメス端子16と、を内包した構成を有している。このうちバッテリ11は、マイク側アダプタ10の各構成に電気を供給する。また、加速度センサ13は、X軸方向の加速度を検出するX1軸加速度センサ13aとY軸方向の加速度を検出するY1軸加速度センサ13bとからなり、回路基板12に装着され、マイク側アダプタ10のX軸方向やY軸方向の動きを検出する機能を有する。
[Description of the configuration of the microphone-side adapter 10]
As shown in FIGS. 2 and 5, the microphone-
回路基板12は、電源回路12aと、コネクタ12bと、コネクタ12cと、マイクプリアンプ12dと、ADコンバータ12eと、DSP12fと、DAコンバータ12gと、赤外線出力アンプ12hと、4つのセンサプリアンプ12i,12j,12k,12lと、4つのADコンバータ12m、12n、12o、12pと、を備えている。
The
このうち電源回路12aは、バッテリ11に接続されており、バッテリ11に蓄積された電気を回路基板12の各構成に供給する。また、各プリアンプは、入力された信号を増幅する機能を有する。また、各ADコンバータは、アナログ信号をデジタル化する機能を有する。また、各DAコンバータは、デジタル信号をアナログ化する機能を有する。また、DSP12fは、水平駆動パルスおよび垂直駆動パルスを供給させる機能を有する。
Among these, the power supply circuit 12 a is connected to the
そして、加速度センサ13のX1軸加速度センサ13aは、センサプリアンプ12kおよびADコンバータ12oを介してDSP12fに接続されており、X1軸加速度センサ13aによって検出された信号がセンサプリアンプ12kによって増幅されたのちにADコンバータ12oによってデジタル化されてDSP12fに入力される。また、加速度センサ13のY1軸加速度センサ13bは、センサプリアンプ12lおよびADコンバータ12pを介してDSP12fに接続されており、Y1軸加速度センサ13bによって検出された信号がセンサプリアンプ12lによって増幅されたのちにADコンバータ12pによってデジタル化されてDSP12fに入力される。また、赤外線発信素子14は、赤外線出力アンプ12hおよびDAコンバータ12gを介してDSP12fに接続されており、DSP12fから出力されたデジタル信号がDAコンバータ12gによってアナログ化されたのちに赤外線出力アンプ12hによって増幅されて赤外線発信素子14に出力される。
The X1-axis acceleration sensor 13a of the
このことにより、回路基板12は、加速度センサ13によって検出されたマイク側アダプタ10のX軸方向やY軸方向の動きを示す信号を、赤外線発信素子14を制御して本体側アダプタ20へ送信する機能を有する。
As a result, the
なお、外部のボイスコイルマイクがコネクタ12bに接続された場合には、そのボイスコイルマイクが、コネクタ12b、センサプリアンプ12kおよびADコンバータ12oを介してDSP12fに接続され、ボイスコイルマイクからの出力信号がマイクプリアンプ12dによって増幅されたのちにADコンバータ12eによってデジタル化されてDSP12fに入力されることとなる。また、外部の加速度センサがコネクタ12cに接続された場合には、その加速度センサのX2軸加速度センサがセンサプリアンプ12iおよびADコンバータ12mを介してDSP12fに接続され、加速度センサのY2軸加速度センサがセンサプリアンプ12jおよびADコンバータ12nを介してDSP12fに接続される。そして、X1軸加速度センサ13aによって検出された信号については、センサプリアンプ12iによって増幅されたのちにADコンバータ12mによってデジタル化されてDSP12fに入力され、Y1軸加速度センサ13bによって検出された信号については、センサプリアンプ12jによって増幅されたのちにADコンバータ12nによってデジタル化されてDSP12fに入力されることとなる(図15参照)。
When an external voice coil microphone is connected to the
このことにより、回路基板12は、外部のボイスコイルマイクからの出力信号を、赤外線発信素子14を制御して本体側アダプタ20へ送信したり、外部の加速度センサからの出力信号を、赤外線発信素子14を制御して本体側アダプタ20へ送信したりする機能を有する。
Thereby, the
また、マイク側アダプタ10は、その前端部のXLRオス端子15をマイク本体41a後端部のXLRメス端子に接続し、その後端部のXLRメス端子16をマイクロフォン41のアダプタ部41b後端部のXLRメス端子に接続することで、マイクロフォン41に取り付けることができる。また、マイク側アダプタ10の筐体10aには、マイクロフォン41の前方を示すためのモールド10bがその側部に形成されている。
Further, the microphone-
また、マイク側アダプタ10は、上述のようにマイクロフォン41に取り付けられた際に、マイクロフォン41のマイク本体41aのXLRメス端子から出力される音声信号を、XLRオス端子15とXLRメス端子16を介してマイクロフォン41のアダプタ部41b前端部のXLRオス端子へ伝達する機能を有する。
Further, when the microphone-
以上のように構成されたマイク側アダプタ10は、上述のようにマイクロフォン41に取り付けられた際に、マイクロフォン41を手に持って歌唱する歌唱者のX軸方向やY軸方向の動きを検出し、その検出した歌唱者の動きを示す信号を本体側アダプタ20へ送信する機能を有する(図2(c)参照)。
When the microphone-
なお、マイク側アダプタ10は振付け信号検出手段に相当する。
[本体側アダプタ20の構成の説明]
図2および図6に示すように、本体側アダプタ20は、筐体21と、赤外線受信素子22と、回路基板23と、USBハーネス24と、ハーネス25と、を備え、略方形の筐体21の内部に赤外線受信素子22と、回路基板23と、を内包した構成を有している。
The microphone-
[Description of Configuration of Main Body Side Adapter 20]
As shown in FIGS. 2 and 6, the main
回路基板23は、電源回路23aと、赤外線入力アンプ23bと、ADコンバータ23cと、DSP23dと、DAコンバータ23eと、USBコネクタ23fと、コネクタ23gと、を備えている。このうち電源回路23aは、USBコネクタ23fおよびUSBコネクタ23fに接続されたUSBハーネス24を介してカラオケ装置30から得た電気を回路基板23の各構成に供給する。また、赤外線入力アンプ23bは、入力された信号を増幅する機能を有する。また、ADコンバータ23cは、アナログ信号をデジタル化する機能を有する。また、DSP23dは、水平駆動パルスおよび垂直駆動パルスを供給し、入力されたデジタル信号から歌唱者の動作を示す信号を分離する機能を有する。また、DAコンバータ23eは、デジタル信号をアナログ化する機能を有する。
The
そして、赤外線受信素子22は、赤外線入力アンプ23bおよびADコンバータ23cを介してDSP23dに接続されており、赤外線受信素子22によって受信された信号が赤外線入力アンプ23bによって増幅されたのちにADコンバータ23cによってデジタル化されてDSP23dに入力される。また、USBハーネス24は、USBコネクタ23fに接続されており、DSP23dから出力された信号が、USBコネクタ23fおよびUSBハーネス24を介して、カラオケ装置30に送出される。また、ハーネス25は、コネクタ23gに接続されており、DSP23dから出力された信号が、DAコンバータ23eによってアナログ化され、コネクタ23gおよびハーネス25を介してカラオケ装置30に送出される。
The
このことにより、回路基板23は、赤外線受信素子22が受信した信号を赤外線入力アンプ23bによって増幅したのちにADコンバータ23dによってデジタル化されてDSP23dに入力され、入力されたデジタル信号をDSP23dで処理し、その処理したデジタル信号から歌唱者の動作を示す信号を分離して、分離した歌唱者の動作を示す信号をUSBコネクタ23fおよびUSBコネクタ23fに接続されたハーネス24を介してカラオケ装置30へ送出するとともに、他方のデジタル信号をDAコンバータ23eによってアナログ化されたのちにコネクタ23gおよびコネクタ23gに接続されたハーネス25を介してカラオケ装置30へ送出する機能を有する。
As a result, the
なお、本体側アダプタ20は振付信号受信手段に相当する。
[マイク側アダプタ10の入力信号処理の説明]
以下に、マイク側アダプタ10のDSP12fが実行する入力信号処理の処理手順を図7のフローチャートおよび図9に基づいて説明する。なお、図9(a)はマイク側アダプタ10と本体側アダプタ20との間における伝送帯域を示す説明図であり、図9(b)は加速度センサ波形サンプルを示す説明図である。
The main
[Description of input signal processing of microphone-side adapter 10]
Below, the processing procedure of the input signal processing which DSP12f of the
この入力信号処理は、マイク側アダプタ10が起動している場合に他の処理からは独立して実行される。
まず、マイクロフォン41からのマイク入力をサンプリングし(S102)、ローパスフィルタ処理を実行する(S104)。具体的には、マイク入力された信号から10KHz以上の周波数帯の信号をカットする。
This input signal processing is executed independently of other processing when the microphone-
First, the microphone input from the
また、先のS104およびS106の処理と同時に、加速度センサ13のX1軸加速度センサ13aからの入力信号をサンプリングし(S106)、ローパスフィルタ処理を実行する(S108)。具体的には、X1軸加速度センサ13aからの入力信号から1KHz以上の周波数帯の信号をカットする。そして、ローパスフィルタ処理後の信号に対してFM変調処理を実行する(S110)。具体的には、ローパスフィルタ処理後の信号を搬送波12KHzへ変換する。
Simultaneously with the processes of S104 and S106, the input signal from the X1-axis acceleration sensor 13a of the
また、同時に、加速度センサ13のY1軸加速度センサ13bからの入力信号をサンプリングし(S112)、ローパスフィルタ処理を実行する(S114)。具体的には、Y1軸加速度センサ13bからの入力信号から1KHz以上の周波数帯の信号をカットする。そして、ローパスフィルタ処理後の信号に対してFM変調処理を実行する(S116)。具体的には、ローパスフィルタ処理後の信号を搬送波14KHzへ変換する。
At the same time, the input signal from the Y1-axis acceleration sensor 13b of the
なお、外部の加速センサがマイク側アダプタ10のコネクタ12cに接続されている場合には、先のS104およびS106の処理と同時に、次の処理を実行する。すなわち、加速度センサのX2軸加速度センサからの入力信号をサンプリングし(S118)、ローパスフィルタ処理を実行する(S120)。具体的には、外部のX2軸加速度センサからの入力信号から1KHz以上の周波数帯の信号をカットする。そして、ローパスフィルタ処理後の信号に対してFM変調処理を実行する(S122)。具体的には、ローパスフィルタ処理後の信号を搬送波16KHzへ変換する。また、外部の加速度センサのY2軸加速度センサからの入力信号をサンプリングし(S124)、ローパスフィルタ処理を実行する(S126)。具体的には、Y2軸加速度センサからの入力信号から1KHz以上の周波数帯の信号をカットする。そして、ローパスフィルタ処理後の信号に対してFM変調処理を実行する(S128)。具体的には、ローパスフィルタ処理後の信号を搬送波18KHzへ変換する。
When an external acceleration sensor is connected to the
さらに、FM変調処理された各信号を加算し(S135)、その加算後の信号を本体側アダプタ20へ送出する(S140)。そして、本処理の最初に戻る。
[本体側アダプタ20の入力信号処理の説明]
以下に、本体側アダプタ20のDSP23Dが実行する入力信号処理の処理手順を図8のフローチャートおよび図9に基づいて説明する。
Further, each signal subjected to the FM modulation processing is added (S135), and the signal after the addition is sent to the main body side adapter 20 (S140). Then, the process returns to the beginning of this process.
[Description of Input Signal Processing of Main Body Side Adapter 20]
Hereinafter, the processing procedure of the input signal processing executed by the DSP 23D of the main
この入力信号処理は、本体側アダプタ20が起動している場合に他の処理からは独立して実行される。
まず、赤外線受信素子22が受信したのちに増幅されてデジタル化された信号を周波数帯に応じて分岐する(S205)。具体的には、上述の信号を搬送波12KHzから同調するFM復調処理を実行し(S210)、加速度センサ13のX1軸加速度センサ13aからの入力信号を分離して取得する(S215)。また、上述の信号を搬送波14KHzから同調するFM復調処理を実行し(S220)、加速度センサ13のY1軸加速度センサ13bからの入力信号を分離して取得する(S225)。また、上述の信号を搬送波16KHzから同調するFM復調処理を実行し(S230)、外部の加速度センサのX2軸加速度センサからの入力信号を分離して取得する(S235)。また、上述の信号を搬送波18KHzから同調するFM復調処理を実行し(S240)、外部の加速度センサのY2軸加速度センサからの信号を分離して取得する(S245)。そして、各加速度センサからの入力信号を取得した値を集計し、USBコネクタ23fから送出するためのUSBパケットを生成し(S250)、その生成したUSBパケットを、カラオケ装置30のUSB入力端子へ向けて、USBコネクタ23fから送出する(S255)。また、同時に、上述の信号に対してローパスフィルタ処理を実行する(S260)。具体的には、上述の信号から10KHz以上の周波数帯の信号をカットする。さらに、ローパスフィルタ処理後の信号を、カラオケ装置30のマイク入力端子へ向けて、コネクタ23gから送出する(S265)。
This input signal processing is executed independently from other processing when the main
First, after being received by the
[メイン処理の説明]
以下に、カラオケ装置30が実行するメイン処理の処理手順を図10のフローチャートに基づいて説明する。このメイン処理は、カラオケ装置30が起動している場合に他の処理からは独立して実行される。
[Description of main processing]
Below, the process sequence of the main process which the
まず、選曲操作があるまで待機し、選曲操作された曲番号を決定する(S305)。次に、曲番号に対応するカラオケ楽曲データを記憶装置33から取得し、カラオケ演奏の準備を行う(S310)。
First, it waits until a music selection operation is performed, and the music number for which the music selection operation has been performed is determined (S305). Next, karaoke song data corresponding to the song number is acquired from the
続いて、楽曲データをカラオケ演奏するカラオケ演奏処理を実行するとともに(S320)、マイクロフォン41からの音声信号を採点する(S315)。また、同時に、本体側アダプタ20がカラオケ装置30に接続されているか否かを判断する(S325)。本体側アダプタ20がカラオケ装置30に接続されていないと判断された場合には(S325:NO)、後述するS355に移行する。一方、本体側アダプタ20がカラオケ装置30に接続されていると判断された場合には(S325:YES)、先に取得した楽曲データに含まれるジャンル情報からカラオケ演奏曲のジャンルを選択する(S330)。カラオケ演奏曲のジャンルが演歌やバラードである場合においてテンポ値が数値「120」以上であるとき(S330:左、S335:YES)、またはカラオケ演奏曲のジャンルがロックやテクノである場合においてテンポ値が数値「90」以下ではないとき(S330:右、S335:NO)には、後述する「ビート」アルゴリズムを実行し(S350、図14(a)参照)、一方、カラオケ演奏曲のジャンルが演歌やバラードである場合においてテンポ値が数値「120」以上ではないとき(S330:左、S335:NO)、またはカラオケ演奏曲のジャンルがロックやテクノである場合においてテンポ値が数値「90」以下であるとき(S330:右、S335:YES)には、後述する「拍子」アルゴリズムを実行する(S345、図13(a)参照)。そして、S355に移行する。
Subsequently, karaoke performance processing for performing karaoke performance on the music data is executed (S320), and an audio signal from the
S355では、先の採点処理によって算出された採点結果である歌唱得点を表示装置45に表示させる(S355)。
次に、演奏曲に対応する歌唱者を特定するために、歌唱得点が1ポイント以上あるか否かを判断する(S357)。歌唱得点があれば(S357:YES)、演奏曲に対応した歌唱者であると判断する。一方、単にマイクロフォン41を所持しているだけで歌唱していない場合など採点の得点が出ないために歌唱得点が1ポイント以下である場合には(S357:NO)、歌唱者がマイクロフォン41を手で保持していないと判断する。なお、歌唱者であれば、当然、中央処理装置31の歌唱得点処理によって歌唱得点値が抽出され、単にマイクロフォン41を振っているだけであれば歌唱得点値は抽出されないので、上述のS357の処理は、カラオケ演奏曲の振付得点がカラオケ歌唱者によってカラオケ歌唱中に作用することに着目し、カラオケ歌唱の振り付け得点を行う者と、そうでない者(例えば、単にマイクを振っているだけの者)とに区別する振り付け者特定処理でもある。
In S355, the singing score which is the scoring result calculated by the previous scoring process is displayed on the display device 45 (S355).
Next, in order to specify the singer corresponding to the performance music, it is determined whether or not the singing score is 1 point or more (S357). If there is a singing score (S357: YES), it is determined that the singer corresponds to the performance song. On the other hand, when the singing score is 1 point or less because the scoring score is not obtained, such as when the user simply holds the
さらに、ゲーム性を強める効果を得るために、歌唱者が真面目に歌唱しているか否か、もしくは歌唱の難易度に応じて振り付け得点処理を行うのであれば、予め演奏曲データに歌唱得点の閾値を組み込み、演奏曲の演奏開始時に対応する閾値を抽出し、演奏曲毎に、S357の処理にて肯定判断となる歌唱得点のポイント値を決め(通称:足切り採点)、一定ポイント以上の歌唱者のみ振り付け得点を行わせるようにすることもできる。 Furthermore, in order to obtain an effect of enhancing the game performance, if the choreographing process is performed according to whether or not the singer is seriously singing or depending on the difficulty of the singing, a threshold value of the singing score in the performance music data in advance Is extracted, and the threshold value corresponding to the start of performance of the performance song is extracted, and for each performance song, the point value of the singing score that becomes affirmative judgment in the process of S357 is determined (common name: foot cut scoring). It is also possible to make only the choreographer perform a choreography score.
そして、演奏曲の歌唱者であると特定されれば、先に実行した「ビート」アルゴリズムまたは「拍子」アルゴリズムの何れかによる振付け採点において得点を得たか否かを判断する(S360)。振付け採点において得点を得ていないと判断された場合には(S360:NO)、次のカラオケ楽曲の演奏に移行することと決定し(S370)、S305に戻る。一方、振付け採点において得点を得たと判断された場合には(S360:YES)、その振付け採点による得点を表示装置45に表示させる(S365)。そして、次のカラオケ楽曲の演奏に移行することと決定し(S370)、S305に戻る。 If it is specified that the singer is a singer of performance music, it is determined whether or not a score has been obtained in the choreographic scoring performed by either the “beat” algorithm or the “time signature” algorithm previously executed (S360). When it is determined that no score is obtained in the choreography scoring (S360: NO), it is determined that the next karaoke music performance is to be performed (S370), and the process returns to S305. On the other hand, when it is determined that a score is obtained in the choreography scoring (S360: YES), the score by the choreography scoring is displayed on the display device 45 (S365). Then, it is determined to shift to the performance of the next karaoke piece (S370), and the process returns to S305.
[拍子アルゴリズム処理の説明]
以下に、カラオケ装置30が実行する拍子アルゴリズムの処理手順を図11のフローチャートおよび図13に基づいて説明する。なお、図13(a)は拍子アルゴリズムを説明する説明図であり、図13(b)は拍子アルゴリズムを実行する際に加速度センサによって検出されるX軸波形を示す説明図であり、図13(c)は拍子アルゴリズムが選択された際のスローテンポな楽曲の一例を示す説明図である。
[Explanation of time signature algorithm]
Below, the process procedure of the time signature algorithm which the
この拍子アルゴリズムは、メイン処理においてS345に移行した際にサブルーチンとして実行される。
まず、加点値を初期化する(S405)。
This time signature algorithm is executed as a subroutine when the process proceeds to S345 in the main process.
First, the added point value is initialized (S405).
続いて、1拍単位で行う処理群(ループ)を開始する(S410)。まず、加速度センサ13から取得したサンプリングデータ値、テンポ値、X1軸用ピークカウンタ、およびX2軸用ピークカウンタを初期化する(S415)。次に、テンポ値を参照して、MIDIデータのシーケンス処理を実行する(S420)。この場合、テンポ値変更データを検索し、テンポ値データが存在すれば、そのテンポ値データに応じてテンポ値設定を更新する。そして、加速度センササンプリングデータを参照して、次の式(1)によって算出された時間TのMIDI演奏処理を実行するとともに(S424)、次の式(1)によって算出された時間Tの加速度センサ13からの入力値を記憶する(S425)。
時間T=(1分/テンポ値)×4…式(1)
続いて、MIDI演奏が終了したか否かを判断する(S430)。MIDI演奏が終了したと判断された場合には(S430:YES)、加点値を出力して本サブルーチン処理を終了する。
Subsequently, a processing group (loop) performed in units of one beat is started (S410). First, the sampling data value, tempo value, X1-axis peak counter, and X2-axis peak counter acquired from the
Time T = (1 minute / tempo value) × 4 (1)
Subsequently, it is determined whether or not the MIDI performance is finished (S430). If it is determined that the MIDI performance has ended (S430: YES), the added point value is output, and this subroutine processing ends.
一方、MIDI演奏が終了していないと判断された場合には(S430:NO)、X1ピークカウンタを参照して、加速度センサ13のX1軸加速度センサ13aからの入力信号からピークの有無を検出する(S435)。なお、ピークが検出された場合には、加算値に加算する。また、X2ピークカウンタを参照して、外部の加速度センサのX2軸加速度センサからの入力信号からピークの有無を検出する(S440、図13(b)および図13(c)参照)。なお、ピークが検出された場合には、加算値に加算する。そして、X1ピークカウンタの値が数値「2」であるか否かを判断する(S445)。X1ピークカウンタの値が数値「2」であると判断された場合には(S445:YES)、加算値に加算し(S455)、1拍単位で行う処理群(ループ)を終了して(S460)、S410に戻る。一方、X1ピークカウンタの値が数値「2」ではないと判断された場合には(S445:NO)、X2ピークカウンタの値が数値「2」であるか否かを判断し(S450)、X1ピークカウンタの値が数値「2」であると判断された場合には(S445:YES)、加算値に加算し(S455)、1拍単位で行う処理群(ループ)を終了して(S460)、S410に戻る。一方、X2ピークカウンタの値が数値「2」ではないと判断された場合には(S450:NO)、1拍単位で行う処理群(ループ)を終了して(S460)、S410に戻る。
On the other hand, if it is determined that the MIDI performance has not ended (S430: NO), the presence or absence of a peak is detected from the input signal from the X1-axis acceleration sensor 13a of the
[ビートアルゴリズム処理の説明]
以下に、カラオケ装置30が実行するビートアルゴリズムの処理手順を図12のフローチャートおよび図14に基づいて説明する。なお、図14(a)はビートアルゴリズムを説明する説明図であり、図14(b)はビートアルゴリズムを実行する際に加速度センサによって検出されるY軸波形を示す説明図であり、図14(c)はビートアルゴリズムが選択された際のアップテンポな楽曲の一例を示す説明図である。
[Description of beat algorithm processing]
Below, the process sequence of the beat algorithm which the
このビートアルゴリズムは、メイン処理においてS350に移行した際にサブルーチンとして実行される。
まず、加点値を初期化する(S505)。
This beat algorithm is executed as a subroutine when the process proceeds to S350 in the main process.
First, the added point value is initialized (S505).
続いて、1拍単位で行う処理群(ループ)を開始する(S510)。まず、加速度センサ13から取得したサンプリングデータ値、テンポ値、Y1軸用ピークカウンタ、およびY2軸用ピークカウンタを初期化する(S515)。次に、テンポ値を参照して、MIDIデータのシーケンス処理を実行する(S520)。この場合、テンポ値変更データを検索し、テンポ値データが存在すれば、そのテンポ値データに応じてテンポ値設定を更新する。また、打音数値を参照して、MIDIデータのシーケンス処理を実行する(S522)。この場合、打楽器トラックを検索し、打音数をカウントして算出する。そして、加速度センササンプリングデータを参照して、上述の式(1)によって算出された時間TのMIDI演奏処理を実行するとともに(S524)、上述の式(1)によって算出された時間Tの加速度センサ13からの入力値を記憶する(S525)。
Subsequently, a processing group (loop) performed in units of one beat is started (S510). First, the sampling data value, tempo value, Y1-axis peak counter, and Y2-axis peak counter acquired from the
続いて、MIDI演奏が終了したか否かを判断する(S530)。MIDI演奏が終了したと判断された場合には(S530:YES)、加点値を出力して本サブルーチン処理を終了する。 Subsequently, it is determined whether or not the MIDI performance is finished (S530). If it is determined that the MIDI performance has ended (S530: YES), the added point value is output and this subroutine processing ends.
一方、MIDI演奏が終了していないと判断された場合には(S530:NO)、Y1ピークカウンタを参照して、加速度センサ13のY1軸加速度センサ13bからの入力信号からピークの有無を検出する(S535)。なお、ピークが検出された場合には、加算値に加算する。また、Y2ピークカウンタを参照して、外部の加速度センサのY2軸加速度センサからの入力信号からピークの有無を検出する(S540、図14(b)および図14(c)参照)。なお、ピークが検出された場合には、加算値に加算する。そして、Y1ピークカウンタの値が打音数を2倍した値であるか否かを判断する(S545)。Y1ピークカウンタの値が打音数を2倍した値であると判断された場合には(S545:YES)、加算値に加算し(S555)、1拍単位で行う処理群(ループ)を終了して(S560)、S510に戻る。一方、Y1ピークカウンタの値が打音数を2倍した値ではないと判断された場合には(S545:NO)、Y2ピークカウンタの値が打音数を2倍した値であるか否かを判断し(S550)、Y1ピークカウンタの値が打音数を2倍した値であると判断された場合には(S545:YES)、加算値に加算し(S555)、1拍単位で行う処理群(ループ)を終了して(S560)、S510に戻る。一方、Y2ピークカウンタの値が打音数を2倍した値ではないと判断された場合には(S550:NO)、1拍単位で行う処理群(ループ)を終了して(S560)、S510に戻る。
On the other hand, if it is determined that the MIDI performance has not ended (S530: NO), the presence or absence of a peak is detected from the input signal from the Y1-axis acceleration sensor 13b of the
[第一実施形態の効果]
(1)このように第一実施形態のマイク側アダプタ10、本体側アダプタ20およびカラオケ装置30によれば、マイクロフォン41から音声信号が歌唱中に入力されているか否かを検出することで、歌唱者にマイクロフォン41が利用されているか否かを特定し、さらに、マイクロフォン41に取り付けられたマイク側アダプタ10によって歌唱者の動作をも検出し、その検出した動作を示す信号の波形と楽音情報を構成するパートの発声データの一致度合を算出し、その算出した一致度合いからカラオケ歌唱中の歌唱者の動作を振付けとして採点する。したがって、楽曲演奏時に歌唱者本人の振付けをより正確に採点することができる。
[Effect of the first embodiment]
(1) Thus, according to the
(2)また、第一実施形態のマイク側アダプタ10、本体側アダプタ20およびカラオケ装置30によれば、マイク側アダプタ10がマイクロフォン41に取り付け可能にアダプタ化されている。このことにより、従来構成を利用してマイク側アダプタ10をマイクロフォンに取り付けることができる。また、マイク側アダプタ10が歌唱者の手の動きを検出することができる。
(2) Moreover, according to the
(3)また、第一実施形態のマイク側アダプタ10、本体側アダプタ20およびカラオケ装置30によれば、楽音情報に含まれるジャンル情報およびテンポ値に基づいて、振付けアルゴリズムを選択する。このことにより、演奏されている楽曲のテンポに合わせて、歌唱者本人の振付けをより正確に採点することができる。
(3) Moreover, according to the
(4)また、第一実施形態のマイク側アダプタ10、本体側アダプタ20およびカラオケ装置30によれば、歌唱者の動作を示す動作信号の発音データの隣接するピーク箇所同士の間隔とテンポ値との一致度合いを算出して振付け採点値とする。このことにより、演奏されている楽曲の曲調に合わせて、歌唱者本人の振付けをより正確に採点することができる。
(4) Moreover, according to the
[他の実施形態]
以上、本発明の一実施形態について説明したが、本発明は上記実施形態に限定されるものではなく、以下のような様々な態様にて実施することが可能である。
[Other Embodiments]
As mentioned above, although one Embodiment of this invention was described, this invention is not limited to the said embodiment, It is possible to implement in the following various aspects.
(1)上記実施形態では、マイク側アダプタ10がマイクロフォン41に取り付け可能にアダプタ化されているが、これには限られず、マイク側アダプタ10をネクタイピンなど歌唱者の体に取り付け可能に構成してもよい。一例を挙げると、図15に例示するように、加速度センサ121を備えたネクタイピン120をハーネス122を介してマイク側アダプタ10と接続するといった具合である。この場合、加速度センサ121をマイク側アダプタ10のコネクタ12cに接続し、その加速度センサ121のX2軸加速度センサがセンサプリアンプ12iおよびADコンバータ12mを介してDSP12fに接続され、加速度センサのY2軸加速度センサがセンサプリアンプ12jおよびADコンバータ12nを介してDSP12fに接続される。そして、X1軸加速度センサ13aによって検出された信号については、センサプリアンプ12iによって増幅されたのちにADコンバータ12mによってデジタル化されてDSP12fに入力され、Y1軸加速度センサ13bによって検出された信号については、センサプリアンプ12jによって増幅されたのちにADコンバータ12nによってデジタル化されてDSP12fに入力されることとなる。
(1) In the said embodiment, although the
このようにすれば、上述のネクタイピン120を歌唱者の体に直接取り付けることで、例えばテンポの速い曲に合わせた歌唱者の体の動きを検出することができる。
(2)上記実施形態では、歌唱者の動作を示す動作信号の発音データの隣接するピーク箇所同士の間隔とテンポ値との一致度合いを算出して振付け採点値としているが、これには限られず、再生中の楽音情報を構成するパートからその発音データを動作信号の波形と比較するための一つ以上のパートを任意に選択し、歌唱者の動作を示す動作信号が示す波形とその選択されたパートが示す発音データとの一致度合を算出して振付け採点値としてもよい。このようにしても、演奏されている楽曲の曲調に合わせて、歌唱者本人の振付けをより正確に採点することができる。
In this way, by directly attaching the
(2) In the above embodiment, the choreography scoring value is calculated by calculating the degree of coincidence between the interval between adjacent peak portions of the sound generation data of the motion signal indicating the motion of the singer and the tempo value, but is not limited thereto. Any one or more parts for comparing the sound generation data with the waveform of the operation signal are selected from the parts constituting the musical sound information being reproduced, and the waveform indicated by the operation signal indicating the operation of the singer is selected. The degree of coincidence with the pronunciation data indicated by the part may be calculated as a choreography score value. Even in this way, the choreographer's choreography can be scored more accurately in accordance with the tone of the music being played.
(3)また、上記実施形態では、マイクロフォン41からの音声信号検出を音声信号レベルで行っているが、マイクロフォンからの音声信号検出を採点で行うようにしてもよい。具体的には、楽曲情報には採点情報が含まれており、カラオケ装置30の中央処理装置31が、採点情報に基づき、歌唱中の音声信号の採点値化を行い、予め定められた採点閾値と歌唱中の音声信号の採点値とを比較する。そして、歌唱中の音声信号の採点値が採点閾値よりも高いと判断された場合には、算出した一致度合に基づき、当該歌唱者の動作を楽音に合わせた振付けとして採点する。
(3) Moreover, in the said embodiment, although the audio | voice signal detection from the
このようにすれば、上述の手法ではマイクロフォンからの音声信号検出を音声信号レベルで行うような単なる音声検出ではなく、歌唱中の採点値を用いるので、例えば採点値が及第点(採点閾値)であれば歌唱中であると特定できる。しがたって、歌唱中の歌唱者のマイクロフォン41であることをさらに正確に特定することができるので、歌唱者本人が振付採点を行うことができるという効果がある。
In this way, in the above-described method, since the voice signal detection from the microphone is not performed simply by voice detection at the voice signal level, the scoring value during the singing is used. If so, it can be specified that the song is being sung. Therefore, since it can identify more accurately that it is the
10…マイク側アダプタ、10a…筐体、10b…モールド、11…バッテリ、12…回路基板、12a…電源回路、12b,12c…コネクタ、12d…マイクプリアンプ、12e,12m,12n,12o,12p…ADコンバータ、12g…DAコンバータ、
12h…赤外線出力アンプ、12i,12j,12k,12l…センサプリアンプ、13,121…加速度センサ、13a…X1軸加速度センサ、13b…Y1軸加速度センサ、14…赤外線発信素子、15…XLRオス端子、16…XLRメス端子、16KHz…搬送波、20…本体側アダプタ、21…筐体、22…赤外線受信素子、23…回路基板、23a…電源回路、23b…赤外線入力アンプ、23c,23d…ADコンバータ、23e…DAコンバータ、23f…USBコネクタ、23g…コネクタ、24…USBハーネス、24,25,122…ハーネス、30…カラオケ装置、31…中央処理装置、32…通信制御装置、33…記憶装置、34…操作パネル、35…リモコン送信機、36…リモコン受信機、37…操作制御部、38…シンセサイザ、39…ミキシングアンプ、40…スピーカ、41…マイクロフォン、41a…マイク本体、41b…アダプタ部、41c…マイクハーネス、43…映像再生装置、44…映像制御部、45…表示装置、50…店舗内ネットワーク、60…公衆回線、70…配信用ホスト装置、120…ネクタイピン
DESCRIPTION OF
12h ... Infrared output amplifier, 12i, 12j, 12k, 12l ... Sensor preamplifier, 13, 121 ... Acceleration sensor, 13a ... X1-axis acceleration sensor, 13b ... Y1-axis acceleration sensor, 14 ... Infrared emitting element, 15 ... XLR male terminal, 16 ... XLR female terminal, 16KHz ... carrier wave, 20 ... main body side adapter, 21 ... housing, 22 ... infrared receiving element, 23 ... circuit board, 23a ... power supply circuit, 23b ... infrared input amplifier, 23c, 23d ... AD converter, 23e ... DA converter, 23f ... USB connector, 23g ... connector, 24 ... USB harness, 24, 25, 122 ... harness, 30 ... Karaoke device, 31 ... central processing unit, 32 ... communication control device, 33 ... storage device, 34 ...
Claims (7)
前記選択手段によって選択された曲に対応した楽音情報であって、予め対応付けられたジャンル情報と再生時に使用されるテンポ値とが含まれるMIDI形式の演奏データである楽音情報を再生して楽音を出力する楽音出力手段と、
歌唱者によるカラオケ歌唱の音声信号を入力するためのマイクロフォンと、
前記マイクロフォンに取り付けられることで前記マイクロフォンを保持する当該歌唱者に直接的にまたは間接的に固定される固定手段を有し、前記楽音出力手段による前記楽音情報の再生に合わせた当該歌唱者の動作を示す動作信号を検出し、その検出した振付け信号を送出する一つ以上の振付け信号検出手段と、
前記振付け信号検出手段によって送出された前記動作信号を受信する振付信号受信手段と、
前記音声信号レベルが予め定められた閾値を越えたか否かを検出する音声信号検出手段と、
前記楽音出力手段によって再生する前記楽音情報に予め対応付けられたジャンル情報と再生時に使用されるテンポ値とに基づいて振付アルゴリズムを選択し、その振付アルゴリズムを用いて、前記楽音出力手段による前記楽音情報の再生中には、そのときに使用されるテンポ値を順次取得し、前記テンポ値の取得毎に、再生中の前記楽音情報を構成するパートからその発音データを前記動作信号の波形と比較するためのパートを前記取得したテンポ値に応じた期間になるように選択し、前記振付信号受信手段が受信した前記動作信号が示す波形とその選択されたパートが示す発音データとの一致度合を繰返し算出する算出手段と、
前記音声検出手段が前記閾値を越えたレベルの音声信号を検出した場合に、前記算出手段が算出した一致度合に基づき、当該歌唱者の動作を前記楽音に合わせた振付けとして採点する振付け採点手段と、
を備えたことを特徴とするカラオケ装置。 A selection means for selecting a desired song from a plurality of songs;
The musical tone information corresponding to the music selected by the selection means, which is musical performance information that is MIDI format performance data including genre information associated in advance and a tempo value used at the time of reproduction, is reproduced. Musical tone output means for outputting,
A microphone for inputting an audio signal of a karaoke song by a singer;
The operation of the singer in accordance with the reproduction of the musical sound information by the musical sound output means, having fixing means that is directly or indirectly fixed to the singer holding the microphone by being attached to the microphone One or more choreography signal detecting means for detecting an operation signal indicating the above and sending the detected choreography signal;
A choreography signal receiving means for receiving the operation signal transmitted by the choreography signal detecting means;
Audio signal detection means for detecting whether or not the audio signal level exceeds a predetermined threshold;
A choreography algorithm is selected based on genre information previously associated with the tone information to be played back by the tone output means and a tempo value used during playback, and the tone output by the tone output means is selected using the choreography algorithm. During the reproduction of information, the tempo value used at that time is sequentially obtained, and each time the tempo value is obtained, the sound generation data from the parts constituting the musical sound information being reproduced is compared with the waveform of the operation signal. The part to be played is selected to have a period according to the acquired tempo value, and the degree of coincidence between the waveform indicated by the operation signal received by the choreography signal receiving means and the sounding data indicated by the selected part is determined. A calculation means for repeatedly calculating;
Choreography scoring means for scoring the singer's movement as choreography in accordance with the musical sound based on the degree of coincidence calculated by the calculating means when the sound detecting means detects a sound signal having a level exceeding the threshold value. ,
A karaoke apparatus comprising:
前記マイクロフォンは、前記音声信号を送出するためのマイク側端子を有し、
前記振付け信号検出手段の少なくとも一つは、前記マイクロフォンの前記マイク端子に接続可能な受入れ端子と、前記受入れ端子と接続し、前記受入れ端子から受け入れた前記音声信号を送出可能な送出端子と、を有し、前記固定手段によって前記マイクロフォンに固定された際には、前記受入れ端子が前記マイクロフォンの前記マイク側端子に接続されるよう構成されていること
を特徴とするカラオケ装置。 The karaoke apparatus according to claim 1,
The microphone has a microphone side terminal for transmitting the audio signal,
At least one of the choreography signal detecting means includes a receiving terminal connectable to the microphone terminal of the microphone, and a sending terminal connected to the receiving terminal and capable of transmitting the audio signal received from the receiving terminal. And a karaoke apparatus, wherein the receiving terminal is connected to the microphone-side terminal of the microphone when the microphone is fixed to the microphone by the fixing means.
前記振付け信号検出手段の少なくとも一つは、当該歌唱者に取り付け可能な取付手段を有することを特徴とするカラオケ装置。 In the karaoke apparatus according to claim 1 or 2,
At least one of the choreography signal detecting means has attachment means that can be attached to the singer.
前記算出手段は、前記振付アルゴリズムによる前記テンポ値の取得、その取得したテンポ値に応じた前記パートの選択、及びそのパートに対応する前記一致度の算出からなる一連の処理を、再生中の前記楽音情報の拍単位で繰返し実行すること
を特徴とするカラオケ装置。 The karaoke apparatus according to any one of claims 1 to 3 ,
The calculation means performs a series of processes including acquisition of the tempo value by the choreography algorithm, selection of the part according to the acquired tempo value, and calculation of the degree of coincidence corresponding to the part. A karaoke apparatus that is repeatedly executed in units of beats of musical sound information .
前記算出手段は、前記振付信号受信手段が受信した前記動作信号における隣接するピーク箇所同士の間隔と再生時に使用されるテンポ値との一致度合を算出すること
を特徴とするカラオケ装置。 The karaoke apparatus according to any one of claims 1 to 4 ,
The karaoke apparatus characterized in that the calculating means calculates a degree of coincidence between an interval between adjacent peak portions in the operation signal received by the choreography signal receiving means and a tempo value used during reproduction.
前記算出手段は、前記楽音情報に予め対応付けられたジャンル情報ごとに予め設定されたテンポ値の閾値と、前記楽音情報の再生時に使用されるテンポ値との大小関係に応じて前記振付アルゴリズムを選択すること
を特徴とするカラオケ装置。 The karaoke apparatus according to any one of claims 1 to 5 ,
The calculating means calculates the choreography algorithm according to a magnitude relationship between a threshold value of a tempo value set in advance for each genre information previously associated with the musical sound information and a tempo value used when reproducing the musical sound information. A karaoke apparatus characterized by selection .
前記楽曲情報には採点情報が含まれており、
前記採点情報に基づき、歌唱中の音声信号の採点値化を行うカラオケ採点手段と、
予め定められた採点閾値と前記歌唱中の音声信号の採点値とを比較する採点値比較手段と、を備え、
前記振付け採点手段は、前記採点値比較手段によって前記歌唱中の音声信号の採点値が前記採点閾値よりも高いと判断された場合には、前記算出手段が算出した一致度合に基づき、当該歌唱者の動作を前記楽音に合わせた振付けとして採点すること
を備えたことを特徴とするカラオケ装置。 The karaoke apparatus according to any one of claims 1 to 6 ,
The music information includes scoring information,
Based on the scoring information, karaoke scoring means for scoring voice signals during singing;
A scoring value comparison means for comparing a scoring threshold value determined in advance with the scoring value of the audio signal during the singing,
If the scoring scoring means determines that the scoring value of the audio signal being sung is higher than the scoring threshold by the scoring value comparing means, the choreographer is based on the degree of coincidence calculated by the calculating means. The karaoke apparatus is characterized by scoring the movement of the music as choreography in accordance with the musical sound.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007050145A JP4826509B2 (en) | 2007-02-28 | 2007-02-28 | Karaoke equipment |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007050145A JP4826509B2 (en) | 2007-02-28 | 2007-02-28 | Karaoke equipment |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008216335A JP2008216335A (en) | 2008-09-18 |
JP4826509B2 true JP4826509B2 (en) | 2011-11-30 |
Family
ID=39836493
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007050145A Expired - Fee Related JP4826509B2 (en) | 2007-02-28 | 2007-02-28 | Karaoke equipment |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4826509B2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10540139B1 (en) | 2019-04-06 | 2020-01-21 | Clayton Janes | Distance-applied level and effects emulation for improved lip synchronized performance |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8380119B2 (en) * | 2008-05-15 | 2013-02-19 | Microsoft Corporation | Gesture-related feedback in eletronic entertainment system |
JP2015171472A (en) * | 2014-03-12 | 2015-10-01 | ヤマハ株式会社 | Operation notification system |
JP6443093B2 (en) * | 2015-02-02 | 2018-12-26 | ヤマハ株式会社 | Signal processing apparatus and signal processing system |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0756586A (en) * | 1993-08-16 | 1995-03-03 | Kanaasu Data Kk | Accompaniment device |
JP3452783B2 (en) * | 1998-01-27 | 2003-09-29 | 株式会社第一興商 | Karaoke device with choreography scoring function |
JP2000029483A (en) * | 1998-07-15 | 2000-01-28 | Ricoh Co Ltd | Karaoke machine |
JP3136286B2 (en) * | 1998-08-04 | 2001-02-19 | 株式会社第一興商 | Karaoke device with singing game scoring function |
JP3646599B2 (en) * | 2000-01-11 | 2005-05-11 | ヤマハ株式会社 | Playing interface |
JP2006162916A (en) * | 2004-12-07 | 2006-06-22 | Xing Inc | Music reproducing apparatus |
-
2007
- 2007-02-28 JP JP2007050145A patent/JP4826509B2/en not_active Expired - Fee Related
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10540139B1 (en) | 2019-04-06 | 2020-01-21 | Clayton Janes | Distance-applied level and effects emulation for improved lip synchronized performance |
US10871937B2 (en) | 2019-04-06 | 2020-12-22 | Clayton Janes | Distance-applied level and effects emulation for improved lip synchronized performance |
Also Published As
Publication number | Publication date |
---|---|
JP2008216335A (en) | 2008-09-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6967275B2 (en) | Song-matching system and method | |
JP5958041B2 (en) | Expression performance reference data generation device, performance evaluation device, karaoke device and device | |
US7465866B2 (en) | Assistive apparatus and computer-readable medium storing computer program for playing music | |
US20140260915A1 (en) | Automatic accompaniment apparatus, a method of automatically playing accompaniment, and a computer readable recording medium with an automatic accompaniment program recorded thereon | |
JP4826509B2 (en) | Karaoke equipment | |
JP2012098637A (en) | Electronic percussion and program | |
JP3972619B2 (en) | Sound generator | |
JP2006301019A (en) | Pitch-notifying device and program | |
JP3599624B2 (en) | Electronic percussion equipment for karaoke equipment | |
JP2001022350A (en) | Waveform reproducing device | |
JP6075314B2 (en) | Program, information processing apparatus, and evaluation method | |
JP6075313B2 (en) | Program, information processing apparatus, and evaluation data generation method | |
JP2011180271A (en) | Karaoke music selection reservation device connected to host system through cradle | |
JP3618203B2 (en) | Karaoke device that allows users to play accompaniment music | |
CN219716452U (en) | Musical instrument capable of recognizing voice | |
JP6365483B2 (en) | Karaoke device, karaoke system, and program | |
JP2006308650A (en) | Singing support device | |
JP2020134901A (en) | Karaoke system | |
JP6011506B2 (en) | Information processing apparatus, data generation method, and program | |
JP6340303B2 (en) | Karaoke scoring system for scoring humming songs | |
JP2001078276A (en) | Remote controller | |
CN219180187U (en) | Electronic musical instrument | |
CN214752917U (en) | Electronic musical instrument | |
JP7165512B2 (en) | karaoke device | |
JP4073597B2 (en) | Electronic percussion instrument |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20091217 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110427 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110510 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110708 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110816 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110829 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140922 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4826509 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |