JP6217929B2 - Karaoke device and karaoke program - Google Patents

Karaoke device and karaoke program Download PDF

Info

Publication number
JP6217929B2
JP6217929B2 JP2014071673A JP2014071673A JP6217929B2 JP 6217929 B2 JP6217929 B2 JP 6217929B2 JP 2014071673 A JP2014071673 A JP 2014071673A JP 2014071673 A JP2014071673 A JP 2014071673A JP 6217929 B2 JP6217929 B2 JP 6217929B2
Authority
JP
Japan
Prior art keywords
information
singing effect
singing
performance
original
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014071673A
Other languages
Japanese (ja)
Other versions
JP2015194560A (en
Inventor
奥村 正哉
正哉 奥村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Brother Industries Ltd
Original Assignee
Brother Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Brother Industries Ltd filed Critical Brother Industries Ltd
Priority to JP2014071673A priority Critical patent/JP6217929B2/en
Publication of JP2015194560A publication Critical patent/JP2015194560A/en
Application granted granted Critical
Publication of JP6217929B2 publication Critical patent/JP6217929B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Reverberation, Karaoke And Other Acoustics (AREA)

Description

本発明は、楽曲の演奏に合わせて歌唱を行うことのできるカラオケ装置及びカラオケプログラムに関するものであり、特に、楽曲の演奏に合わせて歌唱すべき歌詞を表示するカラオケ装置及びカラオケプログラムに関する。   The present invention relates to a karaoke apparatus and a karaoke program capable of singing in accordance with the performance of music, and more particularly to a karaoke apparatus and a karaoke program for displaying lyrics to be sung in accordance with the performance of music.

従来、自動演奏による伴奏に合わせて歌唱を楽しむカラオケ装置が知られている。カラオケ装置では、上手く歌えているか否かを評価するため採点機能(歌唱評価機能)を備えたものが知られている。採点機能は、楽曲情報に含まれる主旋律と、マイクロホンから入力された歌唱音声の音程とを比較して歌唱の巧拙を判断し、歌唱終了時に歌唱者に対して得点として通知する機能である。   2. Description of the Related Art Conventionally, karaoke apparatuses that enjoy singing along with accompaniment by automatic performance are known. In the karaoke apparatus, one having a scoring function (singing evaluation function) is known in order to evaluate whether or not it is singing well. The scoring function is a function that compares the main melody included in the music information with the pitch of the singing voice input from the microphone, judges the skill of the singing, and notifies the singer as a score at the end of the singing.

また、採点機能には、歌唱中に随時、主旋律と歌唱音声の音程との違いを通知するものも知られている。通称ピアノロール表示と呼ばれる機能であって、主旋律を示すバーを演奏に同期して表示し、それに重ねて歌唱音声の音程を表示することで、歌唱中の各箇所において歌唱の巧拙を判断することができる。また、このようなピアノロール表示による採点機能では、歌唱中に行われたビブラート、しゃくり、フォール等の歌唱効果を判断し、ピアノロール表示上に、アイコンで表示するとともに、採点結果に加点を行うことが行われている。   In addition, a scoring function that notifies the difference between the main melody and the pitch of the singing voice at any time during singing is also known. This function is commonly called piano roll display, and displays a bar indicating the main melody in synchronization with the performance, and displays the pitch of the singing voice over it, thereby judging the skill of the singing at each point during the singing Can do. In addition, the scoring function with such a piano roll display judges the effects of singing such as vibrato, sneezing, and fall during singing, displays them on the piano roll display with icons, and adds points to the scoring results. Things have been done.

特許文献1には、歌唱の音高の正確さや、しゃくり、ビブラート、こぶし、ロングトーン等といった特定の歌唱技巧(歌唱効果)の発現回数を検出し、検出結果に基づいて歌唱者の歌唱を得点化するカラオケ装置が開示されている。また、再度、歌唱を行う際には、過去の分析結果に基づく教示情報を併せて表示することが開示されている。このような構成により、過去の歌唱者自身の歌唱における歌唱技巧の良否を把握しながら練習することが可能となっている。   Patent Document 1 detects the accuracy of the singing pitch, the number of occurrences of a specific singing technique (singing effect) such as shawl, vibrato, fist, and long tone, and scores the singer's singing based on the detection result. A karaoke device is disclosed. Also, it is disclosed that when performing a song again, teaching information based on past analysis results is displayed together. With such a configuration, it is possible to practice while grasping the quality of singing skills in the past singers' own singing.

特開2013−222042公報JP 2013-222042 A

従来、カラオケ装置の採点は、歌唱効果を評価する場合、歌唱中に随時タイミングで行われた歌唱者による歌唱効果を対象とするものであった。そのため、歌手が歌うオリジナルの歌唱効果とは無関係に評価が行われ、高得点を目指すことを目的として、歌唱中に必要以上に歌唱効果を行うユーザーもみられた。そのため、実際の歌唱と採点結果が乖離することもあった。   Conventionally, the scoring of a karaoke apparatus is intended for singing effects by a singer performed at any time during singing when evaluating the singing effect. Therefore, evaluation was performed regardless of the original singing effect sung by the singer, and there were also users who performed singing effects more than necessary during singing for the purpose of aiming for a high score. For this reason, the actual singing and the scoring results sometimes deviated.

本発明は、カラオケの歌唱評価におけるこのような状況を鑑みたものであって、歌手(オリジナル歌手)が楽曲中で付与している歌唱効果に即して歌唱させることを目的としている。また、歌手による歌唱効果に即して歌唱した場合を適切に評価することを目的としている。そして、歌手による歌唱効果に即して歌唱した場合と、カラオケにおける歌唱者(ユーザ)が即興で、歌唱効果を付与した場合とを判別可能とすることを目的としている。   The present invention has been made in view of such a situation in karaoke singing evaluation, and aims to sing along with the singing effect that a singer (original singer) gives in the music. Moreover, it aims at evaluating appropriately the case where it sings according to the singing effect by a singer. And it aims at making it possible to discriminate between a case where a singer sings in accordance with a singing effect by a singer and a case where a singer (user) in karaoke is improvised and gives a singing effect.

そのため、本発明に係るカラオケ装置は、
記憶手段と、演奏手段と、制御手段と、を備えるカラオケ装置において、
前記記憶手段は、演奏情報と、歌詞情報と、オリジナル歌唱効果付与情報を含む楽曲情報を記憶し、
前記歌詞情報は、前記演奏情報の進行に同期した歌詞文字を規定し、
前記オリジナル歌唱効果付与情報は、演奏情報の進行に同期したオリジナル歌唱効果区間を規定し、
前記演奏手段は、前記演奏情報に基づいて演奏を可能とし、
前記制御手段は、演奏処理と、表示処理と、評価処理と、を実行可能とし、
前記演奏処理は、前記演奏情報を前記演奏手段に演奏させ、
前記表示処理は、前記演奏処理の進行に同期して、前記歌詞情報で規定される歌詞文字を表示手段に表示させるとともに、前記オリジナル歌唱効果付与情報で規定されるオリジナル歌唱効果区間を、表示されている歌詞文字に対応した位置に表示し、
前記評価処理は、マイクロホンから入力される歌唱音声信号から特徴を抽出することで歌唱効果種別を判別し、判別された歌唱効果種別が、歌唱すべき箇所に規定されたオリジナル歌唱効果区間に対応したオリジナル歌唱種別でない場合、表示されている歌詞文字において、特徴が抽出されたタイミングに対応する位置に、オリジナル歌唱区間とは異なる形態で、判定した歌唱効果種別を示す臨時歌唱効果情報を表示する。
Therefore, the karaoke apparatus according to the present invention is
In a karaoke apparatus comprising storage means, performance means, and control means,
The storage means stores music information including performance information, lyrics information, and original singing effect grant information,
The lyric information defines lyric characters synchronized with the progress of the performance information,
The original singing effect grant information defines an original singing effect section synchronized with the progress of performance information,
The performance means enables performance based on the performance information,
The control means can perform performance processing, display processing, and evaluation processing ,
The performance processing causes the performance means to perform the performance information,
In the display process, in synchronization with the progress of the performance process, the lyric character defined by the lyric information is displayed on the display means, and the original singing effect section defined by the original singing effect grant information is displayed. Displayed at the position corresponding to the lyric character ,
The evaluation process discriminates the singing effect type by extracting features from the singing voice signal input from the microphone, and the discriminated singing effect type corresponds to the original singing effect section defined in the place to be sung. If it is not the original singing type, temporary singing effect information indicating the determined singing effect type is displayed in a form different from the original singing section at a position corresponding to the timing at which the feature is extracted in the displayed lyrics characters.

さらに本発明に係るカラオケ装置において、
前記表示処理は、前記評価処理において、前記演奏情報の歌唱すべきタイミングで抽出された特徴が、オリジナル歌唱効果区間に対応した歌唱効果でない場合、オリジナル歌唱効果区間を消去する。
Furthermore, in the karaoke apparatus according to the present invention,
The display process deletes the original singing effect section when the characteristic extracted at the timing to sing the performance information in the evaluation process is not a singing effect corresponding to the original singing effect section.

また本発明に係るカラオケプログラムは、
記憶手段に記憶された楽曲情報を再生し、コンピューター装置にて実行可能なカラオケプログラムにおいて、
前記楽曲情報は、演奏情報と、歌詞情報と、オリジナル歌唱効果付与情報を含み、
前記歌詞情報は、前記演奏情報の進行に同期した歌詞文字を規定し、
前記オリジナル歌唱効果付与情報は、前記演奏情報の進行に同期したオリジナル歌唱効果区間を規定し、
演奏処理と、表示処理と、評価処理と、を実行可能とし、
前記演奏処理は、前記演奏情報を演奏手段に演奏させ、
前記表示処理は、前記演奏処理の進行に同期して、前記歌詞情報で規定される歌詞文字を表示手段に表示させるとともに、前記オリジナル歌唱効果付与情報で規定されるオリジナル歌唱効果区間を表示されている歌詞文字に対応した位置に表示し、
前記評価処理は、マイクロホンから入力される歌唱音声信号から特徴を抽出することで歌唱効果種別を判別し、判別された歌唱効果種別が、歌唱すべき箇所に規定されたオリジナル歌唱効果区間に対応したオリジナル歌唱種別でない場合、表示されている歌詞文字において、特徴が抽出されたタイミングに対応する位置に、オリジナル歌唱区間とは異なる形態で、判定した歌唱効果種別を示す臨時歌唱効果情報を表示する。
Also, the karaoke program according to the present invention is
In the karaoke program which reproduces the music information stored in the storage means and can be executed by the computer device,
The music information includes performance information, lyrics information, and original singing effect grant information,
The lyric information defines lyric characters synchronized with the progress of the performance information,
The original singing effect grant information defines an original singing effect section synchronized with the progress of the performance information,
The performance process, display process , and evaluation process can be executed.
The performance processing causes the performance means to perform the performance information,
In the display process, the lyric character defined by the lyric information is displayed on the display means in synchronization with the progress of the performance process, and the original singing effect section defined by the original singing effect grant information is displayed. Displayed at the position corresponding to the lyric character ,
The evaluation process discriminates the singing effect type by extracting features from the singing voice signal input from the microphone, and the discriminated singing effect type corresponds to the original singing effect section defined in the place to be sung. If it is not the original singing type, temporary singing effect information indicating the determined singing effect type is displayed in a form different from the original singing section at a position corresponding to the timing at which the feature is extracted in the displayed lyrics characters.

本発明のカラオケ装置、または、カラオケプログラムによれば、オリジナル歌唱効果付与情報で規定されるオリジナル歌唱効果区間を、表示されている歌詞文字に対応した位置に表示することで、カラオケを行う歌唱者に対して、歌唱すべき歌詞文字に対応して、付与すべき歌唱効果を通知することが可能となる。   According to the karaoke apparatus or the karaoke program of the present invention, a singer who performs karaoke by displaying the original singing effect section defined by the original singing effect grant information at a position corresponding to the displayed lyric character. On the other hand, the singing effect to be given can be notified in correspondence with the lyric characters to be sung.

さらに、本発明のカラオケ装置によれば、マイクロホンから入力される歌唱音声信号を抽出し、抽出された特徴がオリジナル歌唱効果区間に対応した歌唱効果であるか否かを判定する評価処理を実行することで、歌手が本来行っている歌唱効果について、ユーザーの歌唱の巧拙を判定することが可能となる。   Furthermore, according to the karaoke apparatus of the present invention, the singing voice signal input from the microphone is extracted, and the evaluation process for determining whether or not the extracted feature is a singing effect corresponding to the original singing effect section is executed. Thus, the skill of the user's singing can be determined with respect to the singing effect originally performed by the singer.

さらに、本発明のカラオケ装置によれば、評価処理において抽出された特徴が、オリジナル歌唱効果区間に対応した歌唱効果である場合、エフェクト表示を行うことで、当該歌唱効果区間において、適切な歌唱効果を付与できたことをユーザーに確認させることが可能となる。   Furthermore, according to the karaoke apparatus of the present invention, when the feature extracted in the evaluation process is a singing effect corresponding to the original singing effect section, an appropriate singing effect is displayed in the singing effect section by displaying an effect. It is possible to make the user confirm that the user has been granted.

さらに、本発明のカラオケ装置によれば、オリジナル歌唱効果区間に対応した歌唱効果でない場合、オリジナル歌唱効果区間を消去することで、当該歌唱効果区間において、適切な歌唱効果を付与できなかったことをユーザーに確認させることが可能となる。   Furthermore, according to the karaoke apparatus of the present invention, if it is not a singing effect corresponding to the original singing effect section, by deleting the original singing effect section, an appropriate singing effect could not be given in the singing effect section. The user can be confirmed.

さらに、本発明のカラオケ装置によれば、抽出された特徴に基づいて、オリジナル歌唱効果区間で規定されている歌唱効果以外に歌唱効果を判定した場合、表示されている歌詞文字において、当該特徴が抽出されたタイミングに対応する位置に臨時歌唱効果情報を表示することで、ユーザーが即興で付与した歌唱効果(臨時歌唱効果情報)と、歌手が本来行っている歌唱効果とを、歌詞文字上において峻別して表示することが可能となる。   Furthermore, according to the karaoke apparatus of the present invention, when the singing effect is determined in addition to the singing effect defined in the original singing effect section based on the extracted feature, the feature is displayed in the displayed lyric characters. By displaying the temporary singing effect information at the position corresponding to the extracted timing, the singing effect improvised by the user (temporary singing effect information) and the singing effect originally performed by the singer on the lyrics characters It is possible to display them in a distinct manner.

さらに、本発明のカラオケ装置によれば、オリジナル歌唱効果区間の表示形態(色や形状)を演奏処理の進行に同期して変更することで、歌唱中のユーザーに対して、現在行うべき歌唱効果を通知することが可能となる。   Furthermore, according to the karaoke apparatus of the present invention, the singing effect to be performed now is performed for the user who is singing by changing the display form (color and shape) of the original singing effect section in synchronization with the progress of the performance process. Can be notified.

本実施形態に係るカラオケ装置の構成を示す図The figure which shows the structure of the karaoke apparatus which concerns on this embodiment. 本実施形態に係る楽曲情報のデータ構成を示す図The figure which shows the data structure of the music information which concerns on this embodiment. 本実施形態に係るオリジナル歌唱効果情報のデータ構成を示す図The figure which shows the data structure of the original song effect information which concerns on this embodiment. 本実施形態に係る楽曲再生処理を示すフロー図Flow chart showing music playback processing according to the present embodiment 本実施形態に係る表示処理を示すフロー図Flow chart showing display processing according to the present embodiment 本実施形態に係る歌詞表示画面(色替え前)Lyrics display screen according to this embodiment (before color change) 本実施形態に係る歌詞表示画面(色替え途中)Lyrics display screen according to this embodiment (during color change) 本実施形態に係る歌詞表示画面(色替え後:エフェクト表示有り)Lyrics display screen according to this embodiment (after color change: with effect display) 本実施形態に係る歌詞表示画面(色替え後:オリジナル歌唱効果表示消去)Lyrics display screen according to this embodiment (after color change: delete original song effect display) 他の実施形態に係る表示処理を示すフロー図Flow chart showing display processing according to another embodiment 他の実施形態に係る歌詞表示画面(色替え途中)Lyrics display screen according to another embodiment (during color change)

図1は、本発明の実施形態に係るカラオケ装置の構成を示す図である。本実施形態のカラオケ装置1(「コマンダ」ともいう)は、CPU14、RAM15、ROM16などで構成される制御部を中心として、記憶手段としてのHDD13(ハードディスク)、音響処理部18、映像処理部11、操作パネル10、通信部17などを備えて構成されている。   FIG. 1 is a diagram showing a configuration of a karaoke apparatus according to an embodiment of the present invention. The karaoke apparatus 1 (also referred to as “commander”) of the present embodiment is centered on a control unit including a CPU 14, a RAM 15, a ROM 16, and the like, and an HDD 13 (hard disk) as a storage unit, an acoustic processing unit 18, and a video processing unit 11 The operation panel 10 and the communication unit 17 are provided.

制御手段を構成するCPU14、RAM15、ROM16は、コンピューターにおいて一般的に使用される構成であって、CPU14は、プログラムの実行などに基づく各種制御を、RAM15、ROM16、HDD13などに記憶する各種プログラム、各種データに基づいて行う。   The CPU 14, RAM 15, and ROM 16 constituting the control means are generally used in a computer, and the CPU 14 stores various programs based on program execution and the like stored in the RAM 15, ROM 16, HDD 13, etc. Based on various data.

カラオケ装置1における音響処理部18は、楽曲情報に含まれる演奏情報に基づいて演奏処理を実行する手段である。演奏情報は、MIDI規格に基づいて作成された情報の他、コーラスなどを担当する音声データ等を含んで構成されている。音響処理部18では、ユーザーが指定した楽曲に対応する演奏情報に基づいて演奏処理を実行することで、所望の楽曲の演奏を行う。また、オーディオ入力端子に接続されたマイクから入力された音声情報と、演奏情報に基づく演奏音をミキシングしてアンプに出力し、アンプに接続されているスピーカーから放音する。なお、マイクロホンから入力される音声情報に対しては、エコーなどの効果を付加することも可能としている。   The acoustic processing unit 18 in the karaoke apparatus 1 is means for executing performance processing based on performance information included in music information. The performance information includes information created based on the MIDI standard, audio data in charge of chorus, and the like. The acoustic processing unit 18 performs a desired musical piece by performing a musical performance process based on performance information corresponding to the musical piece designated by the user. Also, audio information input from a microphone connected to the audio input terminal and performance sound based on the performance information are mixed and output to an amplifier, and sound is emitted from a speaker connected to the amplifier. Note that an effect such as echo can be added to audio information input from the microphone.

映像処理部11は、歌詞表示処理、並びに、背景映像表示処理など、ディスプレイ12を介してユーザーに視覚的情報を提供する処理を実行する。表示処理は、前述した楽曲情報に含まれる歌詞情報に基づいて歌詞等をディスプレイ12に表示させる処理であって、演奏処理に同期して実行される。ディスプレイ12に表示された歌詞は、楽曲の演奏の進行に同期して歌唱すべき箇所が色替え表示され、歌唱者に歌唱箇所を教示する。また、表示処理では、表示される歌詞の背景として、演奏される楽曲に対応した各種映像を表示することで、歌唱雰囲気の盛り上げを行う。そのため、記憶手段としてのHDD13には、MPEG形式などによる圧縮が施された背景映像情報が記憶されており、映像処理部11では、この背景映像情報をデコードすることでディスプレイ12に映像を表示する。   The video processing unit 11 executes processing for providing visual information to the user via the display 12 such as lyrics display processing and background video display processing. The display process is a process of displaying lyrics and the like on the display 12 based on the lyrics information included in the music information described above, and is executed in synchronization with the performance process. In the lyrics displayed on the display 12, the portion to be sung in color is displayed in synchronization with the progress of the performance of the music, and the singing location is taught to the singer. In the display process, the singing atmosphere is raised by displaying various videos corresponding to the music to be played as the background of the displayed lyrics. Therefore, the HDD 13 as the storage means stores background video information that has been compressed in the MPEG format or the like, and the video processing unit 11 displays the video on the display 12 by decoding the background video information. .

通信部17は、ネットワーク接続端子を介してインターネットに接続され、図示しないホスト装置から、新しくリリースされた楽曲情報や、背景映像情報、プログラムなどを受信するとともに、インターネット上に設置されたホスト装置に対して利用履歴などを送信する。近年では、ユーザーの利用履歴、登録楽曲などを含んだユーザー情報をホスト装置で管理し、当該ユーザーの利用時に受信することで、各個ユーザーに即したサービスを提供することも可能である。   The communication unit 17 is connected to the Internet via a network connection terminal, receives newly released music information, background video information, a program, and the like from a host device (not shown), and is connected to the host device installed on the Internet. Send usage history etc. In recent years, it is also possible to provide a service suitable for each individual user by managing user information including a user's usage history, registered music, etc. with a host device and receiving it when the user uses it.

カラオケ装置1に対して行われる楽曲指定(予約)など、ユーザーからの各種指示は、操作パネル10から行うことも可能であるが、通常、店舗内のネットワークに接続されたリモコン装置(図示せず)から行われる。リモコン装置は、タッチパネルなどのインタフェイスを備えており、ユーザーに各種情報を表示提供するとともに、タッチ指示による入力受付を行うことが可能となっている。   Various instructions from the user such as music designation (reservation) performed on the karaoke apparatus 1 can also be performed from the operation panel 10, but usually a remote control device (not shown) connected to a network in the store. ) The remote control device is provided with an interface such as a touch panel, and can display and provide various types of information to the user, and can accept input by a touch instruction.

記憶手段として機能するHDD13には、楽曲を演奏するための楽曲情報の他、ディスプレイに背景を表示するための背景映像情報、そして、カラオケ装置において各種処理を実行するために必要なプログラム等を記憶している。また、前述したホスト装置から各種データを受信することで、記憶している各種情報の追加、更新が実行される。本実施形態で説明する表示処理についても、プログラムとして受信させることで既存のカラオケ装置1に機能追加することが可能である。   The HDD 13 functioning as a storage means stores music information for playing music, background video information for displaying the background on the display, and programs necessary for executing various processes in the karaoke apparatus. doing. In addition, by receiving various data from the above-described host device, various stored information is added and updated. The display process described in the present embodiment can also be added to the existing karaoke apparatus 1 by being received as a program.

図2には、本実施形態に係る楽曲情報のデータ構成が示されている。本実施形態の楽曲情報は、メタ情報と実情報に分類される各種情報を含んで構成されている。メタ情報には、楽曲情報の識別、検索に必要な各種情報が規定されている。本実施形態では、楽曲識別情報、曲名、歌手名、作詞者名、作曲者名を含んで構成されている。一方、楽曲再生処理において使用される実情報は、演奏情報、歌詞情報、オリジナル歌唱効果情報を含んで構成されている。   FIG. 2 shows the data structure of music information according to the present embodiment. The music information of this embodiment includes various information classified into meta information and actual information. The meta information defines various pieces of information necessary for identifying and searching for music information. In this embodiment, it is comprised including music identification information, a song name, a singer name, a lyricist name, and a composer name. On the other hand, the actual information used in the music playback process includes performance information, lyrics information, and original singing effect information.

演奏情報は、MIDI規格に基づいて作成された情報の他、コーラス等を担当する音声データ、評価処理を行うため主旋律に関する音程等を規定した歌唱基準情報等を含んで構成されている。音響処理部18では、演奏情報に基づいて楽曲の演奏を行い、演奏音信号を形成する。演奏音信号は、マイクロホンから入力される歌唱音声信号とミキシングされて、オーディオ出力端子からアンプへと出力され、アンプにて増幅された信号がスピーカーから放音される。評価処理では、歌唱中、オーディオ入力端子から入力される歌唱音声信号と歌唱基準情報を比較することで得点等が算出される。特に、本実施形態では、歌唱音声信号に基づいて歌唱効果が判定される。本実施形態で判定対称とする歌唱効果は、歌唱音声信号の音程変化に基づいて判定される所定の効果であって、音程を時間軸上で揺らす「ビブラート」、音程を上昇させる「しゃくり」、音程を下降させる「フォール」である。この他、判定対称とする歌唱効果には、声帯を倍振動させることで通常より1オクターブ高い声を出す裏声(ファルセット)等、歌唱音声信号の音程、音量の少なくとも一方によって判定される各種の歌唱効果が考えられる。   The performance information includes, in addition to information created based on the MIDI standard, voice data in charge of chorus, etc., singing standard information that defines the pitch related to the main melody for performing the evaluation process, and the like. The sound processing unit 18 performs a musical piece based on the performance information and forms a performance sound signal. The performance sound signal is mixed with the singing voice signal input from the microphone, output from the audio output terminal to the amplifier, and the signal amplified by the amplifier is emitted from the speaker. In the evaluation process, during singing, a score or the like is calculated by comparing the singing voice signal input from the audio input terminal with the singing reference information. In particular, in this embodiment, the singing effect is determined based on the singing voice signal. The singing effect determined symmetrically in the present embodiment is a predetermined effect determined based on the pitch change of the singing voice signal, `` vibrato '' that fluctuates the pitch on the time axis, `` shak '' that raises the pitch, A “fall” that lowers the pitch. In addition, the singing effect that is determined symmetrically includes various types of singing determined by at least one of the pitch and volume of the singing voice signal, such as a back voice (Falset) that produces a voice one octave higher than normal by doubling the vocal cords. The effect is considered.

歌詞情報は、演奏情報による演奏に同期してディスプレイ12に歌詞を表示させるためのデータである。本実施形態では、1つのタイミングで1度に表示させるブロックデータを単位として構成されている。演奏情報の演奏に同期して出力されるステップ値に基づいて、指定されたブロックデータを読み出し、表示制御することで、演奏に同期した歌詞表示が実行される。   The lyrics information is data for displaying lyrics on the display 12 in synchronization with the performance based on the performance information. In the present embodiment, block data to be displayed at a time at one timing is configured as a unit. Based on the step value output in synchronism with the performance information, the designated block data is read out and display control is performed, so that lyrics display synchronized with the performance is executed.

オリジナル歌唱効果情報は、楽曲を歌唱しているオリジナル歌手が歌唱する際に付与している歌唱効果の付与区間(オリジナル歌唱効果区間)を規定した情報である。図3には、本実施形態に係るオリジナル歌唱効果情報のデータ構成が示されている。本実施形態のオリジナル歌唱効果情報は、演奏の進行上における開始時間、開始終了時間と、効果種別を含んで構成されている。効果種別は、歌唱効果区間において付与すべき歌唱効果の種別を規定した情報である。本実施形態では、ビブラート、しゃくり、フォールの3種類の何れかが規定される。このようなオリジナル歌唱効果情報に基づいて、楽曲の進行上、1または複数のオリジナル歌唱効果区間を規定することで、ディスプレイ12上に表示される歌詞文字に対応した位置にオリジナル歌唱効果区間を表示することが可能となる。   The original singing effect information is information that defines a singing effect granting section (original singing effect section) given when an original singer singing a song sings. FIG. 3 shows a data structure of the original singing effect information according to the present embodiment. The original singing effect information of the present embodiment includes a start time, a start / end time, and an effect type in the progress of the performance. The effect type is information defining the type of singing effect to be given in the singing effect section. In the present embodiment, one of three types of vibrato, sneeze, and fall is defined. Based on such original singing effect information, the original singing effect section is displayed at a position corresponding to the lyric characters displayed on the display 12 by defining one or a plurality of original singing effect sections in the course of the music. It becomes possible to do.

この他、オリジナル歌唱効果情報には、歌唱効果の掛け具合を含めてもよい。歌唱効果の掛け具合としては、例えば、ビブラートの場合には、ビブラートの周期等を規定しておくことが考えられる。また、しゃくりやフォールの場合には、音程の変化の度合いを規定しておくことが考えられる。歌唱効果の掛け具合については、オリジナル歌手の歌唱効果に基づいて規定される。   In addition, the original singing effect information may include the degree of singing effect. As a degree of singing effect, for example, in the case of vibrato, it is conceivable to prescribe a vibrato period or the like. Also, in the case of a sneezing or a fall, it is conceivable to prescribe the degree of pitch change. The degree of singing effect is defined based on the singing effect of the original singer.

図4は、本実施形態に係る楽曲再生処理を示すフロー図である。ユーザーは、操作パネル10、あるいは、リモコン装置を使用してカラオケ装置1に楽曲を予約する。予約処理によって形成された予約情報(楽曲識別情報を含む)は、RAM15で管理する予約リストに追記される。制御手段としてのCPU14は、予約リストを参照し、次に演奏すべき楽曲の有無を確認する(S101)。次に演奏する楽曲がある場合(S101:Yes)には、予約情報中の楽曲識別情報に対応する楽曲情報をHDD13から読み出す(S102)。読み出した楽曲情報に基づいて並列処理を開始する(S103)。   FIG. 4 is a flowchart showing music reproduction processing according to the present embodiment. The user reserves a song in the karaoke apparatus 1 using the operation panel 10 or the remote control device. The reservation information (including music identification information) formed by the reservation process is added to the reservation list managed by the RAM 15. The CPU 14 as the control means refers to the reservation list and confirms whether or not there is a song to be played next (S101). If there is a song to be played next (S101: Yes), the song information corresponding to the song identification information in the reservation information is read from the HDD 13 (S102). Parallel processing is started based on the read music information (S103).

本実施形態の並列処理は、演奏情報を音響処理部18に演奏させる演奏処理(S104)、マイクロホンから入力される歌唱音声信号と演奏情報に基づく歌唱基準情報の対比、あるいは、歌唱音声信号から抽出された特徴に基づいて歌唱効果の付与を判定する評価処理(S105)、歌詞情報及びオリジナル歌唱効果情報に基づく表示処理(S200)を含んで構成される。演奏処理の終了が判定される(S106:Yes)と、得点等、評価処理の結果をディスプレイ12に表示(S107)して、対象楽曲に関する一連の処理を終了する。一方、演奏処理(S104)において、演奏情報の演奏が完了していなかった場合(S106:No)には、演奏情報の演奏が完了するまで、並列処理(S104、S105、S200)を繰り返し実行する。   In the parallel processing of this embodiment, the performance information is played by the acoustic processing unit 18 (S104), the singing voice signal input from the microphone is compared with the singing reference information based on the performance information, or extracted from the singing voice signal. The evaluation process (S105) for determining the application of the singing effect based on the performed characteristics, and the display process (S200) based on the lyrics information and the original singing effect information are configured. When the end of the performance process is determined (S106: Yes), the result of the evaluation process such as a score is displayed on the display 12 (S107), and a series of processes related to the target music is ended. On the other hand, in the performance processing (S104), if the performance information has not been played (S106: No), the parallel processing (S104, S105, S200) is repeatedly executed until the performance information is played. .

図5は、本実施形態に係る表示処理(S200)を示すフロー図である。本実施形態の表示処理は、歌詞情報に基づく歌詞文字の表示に加え、オリジナル歌唱効果情報に基づく歌唱効果区間をディスプレイ12に表示する。歌詞情報は、ブロック単位に区切られて構成されており、ブロックに対応付けられた位置情報に基づいて、ブロックに対応付けられた表示期間の間、ブロック中に規定された歌詞文字を表示する。歌詞文字の表示期間に対応するオリジナル歌唱効果情報が存在する場合、オリジナル歌唱効果情報の開始時間から終了時間に対応する歌詞文字位置に、オリジナル歌唱効果情報の効果種別に対応した形態で、オリジナル歌唱効果区間を表示する。   FIG. 5 is a flowchart showing the display process (S200) according to the present embodiment. The display process of this embodiment displays the singing effect section based on the original singing effect information on the display 12 in addition to the display of the lyric characters based on the lyric information. The lyric information is configured by being divided into blocks, and the lyric characters defined in the block are displayed during the display period associated with the block based on the position information associated with the block. If the original singing effect information corresponding to the display period of the lyric characters exists, the original singing in the form corresponding to the effect type of the original singing effect information at the lyrics character position corresponding to the end time from the start time of the original singing effect information Displays the effect interval.

図6には、本実施形態に係る歌詞表示画面(色替え前)が示されている。ディスプレイ12には、歌詞情報に基づいて表示される歌詞文字121と、歌詞文字121に対応した位置に、効果種別をビブラートとするオリジナル歌唱効果区間122が表示されている。本実施形態では、演奏処理の進行に同期して、歌唱すべき歌詞文字の形態(本実施形態では色)を変更することとしている。図6中には、参考のため、歌唱タイミング位置A(実際には、ディスプレイ12に表示されない)を示しており、これから、歌詞「あの坂道で待っている〜」を歌唱する状態である。オリジナル歌唱効果区間122は、歌詞文字121中、歌唱効果を付与すべき歌詞文字121に対応した位置に効果種別に対応した形態で表示される。   FIG. 6 shows a lyrics display screen (before color change) according to the present embodiment. The display 12 displays a lyric character 121 displayed based on the lyric information, and an original singing effect section 122 having an effect type of vibrato at a position corresponding to the lyric character 121. In the present embodiment, the form (the color in the present embodiment) of the lyrics characters to be sung is changed in synchronization with the progress of the performance process. FIG. 6 shows a singing timing position A (not actually displayed on the display 12) for reference, and is a state of singing the lyrics “Waiting on that slope”. The original singing effect section 122 is displayed in a form corresponding to the effect type at a position corresponding to the lyric character 121 to which the singing effect is to be given in the lyric character 121.

図6の例では、歌詞文字121中、「ている〜」に対応した位置に、効果種別(ビブラート)に対応する表示形態(デザイン)で表示されており、歌唱するユーザーは、歌詞文字「ている〜」にビブラートをかけるべきであることを認識することが可能となる。図6では、ビブラートについてオリジナル歌唱効果区間122の表示形態を示しているが、しゃくりや、フォール等、他の効果種別の場合には、それに対応する表示形態(デザインや色等)で、オリジナル歌唱効果区間が表示される。   In the example of FIG. 6, the lyric character 121 is displayed in a display form (design) corresponding to the effect type (vibrato) at a position corresponding to “do” in the lyric character 121, and the user who sings the lyric character “te It becomes possible to recognize that vibrato should be applied. In FIG. 6, the display form of the original singing effect section 122 is shown for vibrato, but in the case of other effect types such as scouring and fall, the original singing is performed in the corresponding display form (design, color, etc.). The effect interval is displayed.

表示された歌詞文字121、オリジナル歌唱効果区間122に対しては、演奏処理の進行に伴って、その表示形態(本実施形態では色)が変更される(S202)。図7には、本実施形態に係る歌詞表示画面(色替え途中)が示されている。図7中には、歌唱タイミング位置A(実際には、ディスプレイ12に表示されない)が示されている。歌詞文字121中、「る」の位置が歌唱すべき歌詞文字であって、演奏の進行に伴い、左から右へその歌詞文字の色が変更される。本実施形態では、オリジナル歌唱効果区間122についても歌詞文字121と同様に、表示中の表示形態の変更を行うこととしている。このように、演奏の進行に伴い、オリジナル歌唱効果区間122の表示形態を変更することで、ユーザーは、付与すべき歌唱区間の進行を視覚的に確認することが可能となる。   With respect to the displayed lyric character 121 and the original singing effect section 122, the display form (color in this embodiment) is changed as the performance process proceeds (S202). FIG. 7 shows a lyrics display screen (in the middle of color change) according to the present embodiment. FIG. 7 shows a singing timing position A (which is not actually displayed on the display 12). In the lyric character 121, the position of “ru” is a lyric character to be sung, and the color of the lyric character is changed from left to right as the performance progresses. In the present embodiment, the display mode being displayed is changed for the original singing effect section 122 as well as the lyrics character 121. Thus, the user can visually confirm the progress of the singing section to be given by changing the display form of the original singing effect section 122 as the performance progresses.

オリジナル歌唱効果情報中に規定する開始時間、終了時間に対応する期間中、マイクロホンから入力される歌唱音声信号に、オリジナル歌唱効果情報中に規定する効果種別に対応する歌唱効果が付与されたか否かが判定される(S203)。この判定は、表示処理と並列して実行される評価処理(S104)の評価結果に基づいて行われる。図7の場合には「ている〜」の歌唱期間中にビブラートが付与されたか否かが判定される。なお、歌唱効果の付与の判定は、開始時間、終了時間に対応する期間中、予め定めた時間長以上、歌唱効果が付与されたことをもって判定する等、適宜判定条件を使用することが可能である。   Whether the singing effect corresponding to the effect type specified in the original singing effect information is given to the singing voice signal input from the microphone during the period corresponding to the start time and the ending time specified in the original singing effect information Is determined (S203). This determination is performed based on the evaluation result of the evaluation process (S104) executed in parallel with the display process. In the case of FIG. 7, it is determined whether or not vibrato has been given during the singing period of “do”. Note that the determination of the singing effect can be appropriately made using determination conditions such as deciding that the singing effect has been applied for a predetermined length of time or more during the period corresponding to the start time and end time. is there.

なお、オリジナル歌唱効果情報には、歌唱効果の掛け具合を規定しておくことも可能であることを先に述べたが、S203の判定では、歌唱効果の掛け具合を利用して判定することも可能である。評価処理(S104)で判定された歌唱効果の掛け具合が、オリジナル歌唱効果情報で規定する歌唱効果の掛け具合に所定範囲において一致していた場合には、歌唱効果が付与されたことと判定することで、よりオリジナル歌手に近い歌唱効果を行った否かを判定することが可能となる。   In addition, although it was previously described that it is possible to prescribe the degree of singing effect in the original singing effect information, in the determination of S203, it may be determined using the degree of singing effect. Is possible. When the degree of singing effect determined in the evaluation process (S104) matches the degree of singing effect defined in the original singing effect information within a predetermined range, it is determined that the singing effect is given. Thus, it is possible to determine whether or not the singing effect closer to that of the original singer has been performed.

オリジナル歌唱効果情報中に規定する開始時間、終了時間に対応する期間中、オリジナル歌唱効果情報中に規定する効果種別に対応する歌唱効果が付与された場合(S203:Yes)には、オリジナル歌唱効果区間122に対してエフェクト表示を行う。図8には、本実施形態に係る歌詞表示画面(色替え後:エフェクト表示有り)が示されている。本実施形態では、表示していたオリジナル歌唱効果区間122上に星型のエフェクト123を重畳させた形態となっている。エフェクト表示としては、このように表示中のオリジナル歌唱効果区間122にエフェクト123を追加表示する形態のみならず、表示しているオリジナル歌唱効果区間122を変形する等、各種形態を採用することが可能となる。ユーザーは、エフェクト表示されたことに基づき、付与すべき歌唱効果が付与できたことを確認することが可能である。   When the singing effect corresponding to the effect type specified in the original singing effect information is given during the period corresponding to the start time and the ending time specified in the original singing effect information (S203: Yes), the original singing effect Effect display is performed for the section 122. FIG. 8 shows a lyrics display screen (after color change: with effect display) according to the present embodiment. In the present embodiment, a star-shaped effect 123 is superimposed on the displayed original singing effect section 122. As the effect display, not only a form in which the effect 123 is additionally displayed in the original singing effect section 122 being displayed as described above, but also various forms such as transformation of the displayed original singing effect section 122 can be adopted. It becomes. The user can confirm that the singing effect to be given can be given based on the effect display.

一方、オリジナル歌唱効果情報中に規定する開始時間、終了時間に対応する期間中、オリジナル歌唱効果情報中に規定する効果種別に対応する歌唱効果が付与されなかった場合(S203:No)には、オリジナル歌唱効果区間122を消去する(S205)。図9には、本実施形態に係る歌詞表示画面(色替え後:オリジナル歌唱効果表示消去)が示されている。図9には、表示されていたオリジナル歌唱効果区間122を破線で示している(実際には、消去されている。)。ユーザーは、歌唱前には表示されていたオリジナル歌唱効果区間122が、ユーザーの歌唱によって消去されたことに基づき、付与すべき歌唱効果が付与できなかったこと、つまりオリジナルと同じような歌唱ができなかったことを確認することが可能である。   On the other hand, when the singing effect corresponding to the effect type specified in the original singing effect information is not given during the period corresponding to the start time and end time specified in the original singing effect information (S203: No), The original singing effect section 122 is deleted (S205). FIG. 9 shows a lyrics display screen (after color change: deletion of original singing effect display) according to the present embodiment. In FIG. 9, the displayed original singing effect section 122 is indicated by a broken line (actually, it is deleted). Based on the fact that the original singing effect section 122 that was displayed before singing was erased by the user's singing, the user could not give the singing effect to be given, that is, the singing similar to the original can be performed. It is possible to confirm that there was not.

歌詞文字情報で規定されるブロックの消去タイミングが到来した場合(S206:Yes)には、ブロックに対応する歌詞文字、オリジナル歌唱効果区間122を消去する(S207)。演奏処理の期間中、演奏処理の進行に同期してS201〜S207を繰り返して実行することで、歌唱すべき歌詞、及び、歌唱効果を付与すべき歌詞文字を歌唱するユーザーに対して教示することが可能となる。特に、本実施形態では、表示されたオリジナル歌唱効果区間122の表示形態を、評価処理(S104)に基づいて変更することで、ユーザーは楽曲のカラオケ演奏を行ないながら、自身の歌唱に対して、付与すべき歌唱効果が、付与すべき区間で、付与できたか否かを確認することが可能である。   When the erasure timing of the block defined by the lyric character information has arrived (S206: Yes), the lyric character and the original singing effect section 122 corresponding to the block are erased (S207). Instructing the user who sings the lyrics to be sung and the lyric characters to which the singing effect is to be given by repeatedly executing S201 to S207 in synchronization with the progress of the performance process during the performance process. Is possible. In particular, in the present embodiment, by changing the display form of the displayed original singing effect section 122 based on the evaluation process (S104), the user performs karaoke performance of the music, It is possible to confirm whether or not the singing effect to be given can be given in the section to be given.

図10には、他の実施形態に係る表示処理を示すフロー図が示されている。本実施形態では、オリジナル効果区間において、指定されている歌唱効果が付与できたか否かのみならず、歌唱するユーザーが随時、付与した歌唱効果を視覚的に視認可能としている。図10のフロー図は、臨時歌唱効果付与の判定(S213)と、臨時歌唱効果アイコンの表示(S217)において、図5の表示処理と異なっている。ここでは、これら異なる点についてのみ説明する。本実施形態では、評価処理(S104)において、随時、マイクロホンから入力される歌唱音声信号について歌唱効果の判定を行う。臨時歌唱効果とは、オリジナル歌唱効果区間で付与する歌唱効果以外の歌唱効果のことをいう。臨時歌唱効果が付与されたことを判定した場合(S213:Yes)には、臨時効果が付与されたタイミングに対応する歌詞文字121の位置に臨時歌唱効果アイコン124を表示する(S217)。   FIG. 10 is a flowchart showing display processing according to another embodiment. In the present embodiment, in the original effect section, not only whether or not the designated singing effect can be given, but also the singing effect given by the user who sings can be visually recognized at any time. The flowchart of FIG. 10 differs from the display process of FIG. 5 in the determination of provision of the special singing effect (S213) and the display of the special singing effect icon (S217). Here, only these different points will be described. In the present embodiment, in the evaluation process (S104), the singing effect is determined for the singing voice signal input from the microphone as needed. The temporary singing effect refers to a singing effect other than the singing effect provided in the original singing effect section. When it is determined that the special singing effect has been given (S213: Yes), the special singing effect icon 124 is displayed at the position of the lyric character 121 corresponding to the timing at which the special effect was given (S217).

図11には、他の実施形態に係る歌詞表示画面(色替え途中)が示されている。図7で説明した歌詞表示画面と同じ状態であり、臨時歌唱効果アイコン124を表示させている点において異なっている。歌詞表示画面には、歌詞文字121が表示され、歌唱効果を付与すべき歌詞文字(歌詞文字「ている〜」)に対応する位置には、オリジナル歌唱効果区間122が表示されている。歌唱タイミング位置A(実際には表示されない)は、歌詞文字「る」の位置であって、歌詞文字の表示形態(この場合、色)が変更されつつある状態が示されている。すなわち、「あの坂道で待っている」までは、歌唱が終了した状態であることを示している。   FIG. 11 shows a lyrics display screen (in the middle of color change) according to another embodiment. It is the same state as the lyrics display screen described in FIG. 7, and is different in that a temporary singing effect icon 124 is displayed. Lyric characters 121 are displayed on the lyric display screen, and the original singing effect section 122 is displayed at a position corresponding to the lyric characters (lyric characters “to”) to which the singing effect is to be added. The singing timing position A (not actually displayed) is the position of the lyric character “ru”, and shows a state in which the display form (in this case, color) of the lyric character is being changed. That is, it is shown that the singing has been completed until “waiting on that slope”.

本実施形態では、ビブラート、フォール、しゃくりの3種類の歌唱効果を判定することが可能であって、各歌唱効果に対応して臨時歌唱効果アイコン124が用意されている。図に示される状態は、歌詞文字「の」の上方にビブラートの臨時歌唱効果アイコン124が表示され、歌詞文字「の」を歌唱した際に歌唱効果としてビブラートが付与されたことが確認できる。また、歌詞文字「で」の上方にフォールの臨時歌唱効果アイコン124が表示され、歌詞文字「で」を歌唱した際に歌唱効果としてフォール(音程の下降)が付与されたことが確認できる。また、歌詞文字「い」の上方にしゃくりの臨時歌唱効果アイコン124が表示され、歌詞文字「い」を歌唱した際に歌唱効果としてしゃくり(音程の上昇)が付与されたことが確認できる。   In this embodiment, it is possible to determine three types of singing effects, vibrato, fall, and shackle, and a special singing effect icon 124 is prepared corresponding to each singing effect. In the state shown in the figure, a temporary vibrato singing effect icon 124 is displayed above the lyric character “NO”, and it can be confirmed that vibrato is given as a singing effect when the lyric character “NO” is sung. Further, the fall temporary singing effect icon 124 is displayed above the lyric character “de”, and it can be confirmed that singing the lyric character “de” has a fall (decrease in pitch) as a singing effect. Further, a screaming temporary singing effect icon 124 is displayed above the lyric character “I”, and it can be confirmed that screaming (increase in pitch) is given as a singing effect when the lyric character “I” is sung.

このように、本実施形態では、評価処理(S104)の評価結果に応じて、臨時歌唱効果アイコン124を表示することで、オリジナル歌唱効果区間で規定する歌唱効果以外にユーザーが付与した歌唱効果を視覚的に確認することが可能となる。なお、図11の例において、歌詞文字「ている〜」に歌唱効果としてビブラートが付与された場合には、オリジナル歌唱効果区間で規定する歌唱効果であるため、臨時歌唱効果アイコン124は表示されない(オリジナル歌唱効果としての扱いとなる)。このように本実施形態では、本来付与すべきであるオリジナル歌唱効果と、ユーザーが任意に付与した歌唱効果とを異なる表示形態で表示し、ユーザーに教示することが可能となる。   Thus, in this embodiment, according to the evaluation result of evaluation process (S104), by displaying the temporary singing effect icon 124, the singing effect given by the user in addition to the singing effect defined in the original singing effect section is displayed. Visual confirmation is possible. In addition, in the example of FIG. 11, when vibrato is given as a singing effect to the lyric characters “to”, the temporary singing effect icon 124 is not displayed because the singing effect is defined in the original singing effect section ( It will be treated as an original singing effect). As described above, in the present embodiment, the original singing effect that should originally be given and the singing effect that is arbitrarily given by the user can be displayed in different display forms and taught to the user.

図10、図11で説明する実施形態における評価処理(S104)においても、付与した歌唱効果の回数、状態等に基づいて歌唱評価を行うことが可能である。本実施形態では、本来付与すべきオリジナル歌唱効果と、ユーザーが任意に付与した臨時歌唱効果を扱うこととしているが、評価処理において採点等、数値的な評価を行う場合、オリジナル歌唱効果と臨時歌唱効果とは、評価の重みを変更することとしてもよい。同じように歌唱効果が付与された場合、当該歌唱効果がオリジナル歌唱効果区間である場合には、評価の重みを臨時歌唱効果の場合と比較して大きくすることが考えられる。歌唱評価の一つの評価手法としては、オリジナル歌手の歌い方に近いことがあげられる。このようにオリジナル歌唱効果が適切に付与されたことに基づいて歌唱評価することで、オリジナル歌手の歌い方に近いか否かを判定することが可能となる。   Also in the evaluation process (S104) in the embodiment described with reference to FIGS. 10 and 11, singing evaluation can be performed based on the number of singing effects, the state, and the like. In this embodiment, the original singing effect to be originally given and the extraordinary singing effect arbitrarily given by the user are handled. However, when performing numerical evaluation such as scoring in the evaluation process, the original singing effect and the extraordinary singing are given. The effect may be to change the evaluation weight. Similarly, when the singing effect is given, when the singing effect is the original singing effect section, it is conceivable to increase the weight of the evaluation as compared with the case of the temporary singing effect. One evaluation method of singing evaluation is close to the way of singing the original singer. Thus, it becomes possible to determine whether it is close to how to sing an original singer by performing singing evaluation based on the fact that the original singing effect was appropriately given.

1…カラオケ装置 16…ROM
10…操作パネル 17…通信部
11…映像処理部 18…音響処理部
12…ディスプレイ(表示部) 121…歌詞文字
13…HDD(ハードディスク) 122…オリジナル歌唱効果区間
14…CPU 123…エフェクト
15…RAM 124…臨時歌唱効果アイコン
1 ... Karaoke device 16 ... ROM
DESCRIPTION OF SYMBOLS 10 ... Operation panel 17 ... Communication part 11 ... Video processing part 18 ... Sound processing part 12 ... Display (display part) 121 ... Lyric character 13 ... HDD (hard disk) 122 ... Original song effect area 14 ... CPU 123 ... Effect 15 ... RAM 124 ... Temporary singing effect icon

Claims (3)

記憶手段と、演奏手段と、制御手段と、を備えるカラオケ装置において、
前記記憶手段は、演奏情報と、歌詞情報と、オリジナル歌唱効果付与情報を含む楽曲情報を記憶し、
前記歌詞情報は、前記演奏情報の進行に同期した歌詞文字を規定し、
前記オリジナル歌唱効果付与情報は、演奏情報の進行に同期したオリジナル歌唱効果区間を規定し、
前記演奏手段は、前記演奏情報に基づいて演奏を可能とし、
前記制御手段は、演奏処理と、表示処理と、評価処理と、を実行可能とし、
前記演奏処理は、前記演奏情報を前記演奏手段に演奏させ、
前記表示処理は、前記演奏処理の進行に同期して、前記歌詞情報で規定される歌詞文字を表示手段に表示させるとともに、前記オリジナル歌唱効果付与情報で規定されるオリジナル歌唱効果区間を、表示されている歌詞文字に対応した位置に表示し、
前記評価処理は、マイクロホンから入力される歌唱音声信号から特徴を抽出することで歌唱効果種別を判別し、判別された歌唱効果種別が、歌唱すべき箇所に規定されたオリジナル歌唱効果区間に対応したオリジナル歌唱種別でない場合、表示されている歌詞文字において、特徴が抽出されたタイミングに対応する位置に、オリジナル歌唱区間とは異なる形態で、判定した歌唱効果種別を示す臨時歌唱効果情報を表示する
カラオケ装置。
In a karaoke apparatus comprising storage means, performance means, and control means,
The storage means stores music information including performance information, lyrics information, and original singing effect grant information,
The lyric information defines lyric characters synchronized with the progress of the performance information,
The original singing effect grant information defines an original singing effect section synchronized with the progress of performance information,
The performance means enables performance based on the performance information,
The control means can perform performance processing, display processing, and evaluation processing ,
The performance processing causes the performance means to perform the performance information,
In the display process, in synchronization with the progress of the performance process, the lyric character defined by the lyric information is displayed on the display means, and the original singing effect section defined by the original singing effect grant information is displayed. Displayed at the position corresponding to the lyric character ,
The evaluation process discriminates the singing effect type by extracting features from the singing voice signal input from the microphone, and the discriminated singing effect type corresponds to the original singing effect section defined in the place to be sung. Karaoke that displays temporary singing effect information indicating the determined singing effect type in a form different from the original singing section at a position corresponding to the timing at which the feature is extracted in the displayed lyric character, if it is not the original singing type apparatus.
前記表示処理は、前記評価処理において、前記演奏情報の歌唱すべきタイミングで抽出された特徴が、オリジナル歌唱効果区間に対応した歌唱効果でない場合、オリジナル歌唱効果区間を消去する
請求項に記載のカラオケ装置。
The display process, in the evaluation process, features extracted at the timing to be singing the performance information, if not singing effect corresponding to the original singing effect section, according to claim 1 for erasing the original singing effect interval Karaoke equipment.
記憶手段に記憶された楽曲情報を再生し、コンピューター装置にて実行可能なカラオケプログラムにおいて、
前記楽曲情報は、演奏情報と、歌詞情報と、オリジナル歌唱効果付与情報を含み、
前記歌詞情報は、前記演奏情報の進行に同期した歌詞文字を規定し、
前記オリジナル歌唱効果付与情報は、前記演奏情報の進行に同期したオリジナル歌唱効果区間を規定し、
演奏処理と、表示処理と、評価処理と、を実行可能とし、
前記演奏処理は、前記演奏情報を演奏手段に演奏させ、
前記表示処理は、前記演奏処理の進行に同期して、前記歌詞情報で規定される歌詞文字を表示手段に表示させるとともに、前記オリジナル歌唱効果付与情報で規定されるオリジナル歌唱効果区間を表示されている歌詞文字に対応した位置に表示し、
前記評価処理は、マイクロホンから入力される歌唱音声信号から特徴を抽出することで歌唱効果種別を判別し、判別された歌唱効果種別が、歌唱すべき箇所に規定されたオリジナル歌唱効果区間に対応したオリジナル歌唱種別でない場合、表示されている歌詞文字において、特徴が抽出されたタイミングに対応する位置に、オリジナル歌唱区間とは異なる形態で、判定した歌唱効果種別を示す臨時歌唱効果情報を表示する
カラオケプログラム。
In the karaoke program which reproduces the music information stored in the storage means and can be executed by the computer device,
The music information includes performance information, lyrics information, and original singing effect grant information,
The lyric information defines lyric characters synchronized with the progress of the performance information,
The original singing effect grant information defines an original singing effect section synchronized with the progress of the performance information,
The performance process, display process , and evaluation process can be executed.
The performance processing causes the performance means to perform the performance information,
In the display process, the lyric character defined by the lyric information is displayed on the display means in synchronization with the progress of the performance process, and the original singing effect section defined by the original singing effect grant information is displayed. Displayed at the position corresponding to the lyric character ,
The evaluation process discriminates the singing effect type by extracting features from the singing voice signal input from the microphone, and the discriminated singing effect type corresponds to the original singing effect section defined in the place to be sung. Karaoke that displays temporary singing effect information indicating the determined singing effect type in a form different from the original singing section at a position corresponding to the timing at which the feature is extracted in the displayed lyric character, if it is not the original singing type program.
JP2014071673A 2014-03-31 2014-03-31 Karaoke device and karaoke program Active JP6217929B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014071673A JP6217929B2 (en) 2014-03-31 2014-03-31 Karaoke device and karaoke program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014071673A JP6217929B2 (en) 2014-03-31 2014-03-31 Karaoke device and karaoke program

Publications (2)

Publication Number Publication Date
JP2015194560A JP2015194560A (en) 2015-11-05
JP6217929B2 true JP6217929B2 (en) 2017-10-25

Family

ID=54433659

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014071673A Active JP6217929B2 (en) 2014-03-31 2014-03-31 Karaoke device and karaoke program

Country Status (1)

Country Link
JP (1) JP6217929B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6708437B2 (en) * 2016-02-29 2020-06-10 株式会社第一興商 Karaoke equipment

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4033146B2 (en) * 2004-02-23 2008-01-16 ヤマハ株式会社 Karaoke equipment
JP2007232750A (en) * 2006-02-27 2007-09-13 Yamaha Corp Karaoke device, control method and program
JP2008139426A (en) * 2006-11-30 2008-06-19 Yamaha Corp Data structure of data for evaluation, karaoke machine, and recording medium
JP5929001B2 (en) * 2011-03-28 2016-06-01 ヤマハ株式会社 Singing support device
JP5986395B2 (en) * 2012-02-24 2016-09-06 ブラザー工業株式会社 Program for portable terminal device, information presentation method, and portable terminal device

Also Published As

Publication number Publication date
JP2015194560A (en) 2015-11-05

Similar Documents

Publication Publication Date Title
KR20060112633A (en) System and method for grading singing data
JP4163584B2 (en) Karaoke equipment
JP6217929B2 (en) Karaoke device and karaoke program
JP5311069B2 (en) Singing evaluation device and singing evaluation program
WO2016017622A1 (en) Reference display device, reference display method, and program
JP5516911B2 (en) Karaoke device and karaoke program
JP6024130B2 (en) Voice evaluation device
JP6219750B2 (en) Singing battle karaoke system
JP2019101118A (en) Karaoke device
JP2003131674A (en) Music search system
JP5637169B2 (en) Karaoke device and program
JP6842357B2 (en) Karaoke equipment
JP6894766B2 (en) Karaoke equipment
JP6954780B2 (en) Karaoke equipment
JP4218064B2 (en) Karaoke device and program for karaoke device
JP6380305B2 (en) Data generation apparatus, karaoke system, and program
JP5574130B2 (en) Karaoke device and karaoke program
JP2019101071A (en) Singing evaluation device, singing evaluation program and karaoke device
JP2013231881A (en) Karaoke scoring system
JP6842356B2 (en) Karaoke equipment
JP6144593B2 (en) Singing scoring system
JP2007233078A (en) Evaluation device, control method, and program
JP7158313B2 (en) karaoke device
KR102077269B1 (en) Method for analyzing song and apparatus using the same
JP2017067998A (en) Singing evaluation system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160113

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170111

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170308

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170830

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170912

R150 Certificate of patent or registration of utility model

Ref document number: 6217929

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150