JP5708735B2 - Posted music performance system and posted music performance method - Google Patents

Posted music performance system and posted music performance method Download PDF

Info

Publication number
JP5708735B2
JP5708735B2 JP2013178255A JP2013178255A JP5708735B2 JP 5708735 B2 JP5708735 B2 JP 5708735B2 JP 2013178255 A JP2013178255 A JP 2013178255A JP 2013178255 A JP2013178255 A JP 2013178255A JP 5708735 B2 JP5708735 B2 JP 5708735B2
Authority
JP
Japan
Prior art keywords
singing
data
posted
music
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013178255A
Other languages
Japanese (ja)
Other versions
JP2015045823A (en
Inventor
直久 八田
直久 八田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Brother Industries Ltd
Original Assignee
Brother Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Brother Industries Ltd filed Critical Brother Industries Ltd
Priority to JP2013178255A priority Critical patent/JP5708735B2/en
Publication of JP2015045823A publication Critical patent/JP2015045823A/en
Application granted granted Critical
Publication of JP5708735B2 publication Critical patent/JP5708735B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Reverberation, Karaoke And Other Acoustics (AREA)

Description

本発明は、ユーザから投稿されたオリジナル楽曲を演奏する投稿楽曲演奏システム及び投稿楽曲演奏方法に関する。   The present invention relates to a posted music performance system and a posted music performance method for playing original music posted by a user.

サーバとこのサーバに接続されたカラオケ装置とを備えたシステムにおいて、歌唱者(歌唱ユーザ)から投稿された歌唱動画をサーバに記憶することで、他のユーザから閲覧可能とするサービスが、既に知られている(例えば、特許文献1参照)。   In a system including a server and a karaoke device connected to the server, a service that allows a user to view a song video posted by a singer (singing user) in the server is already known. (For example, refer to Patent Document 1).

特開2012−73310号公報JP 2012-73310 A

ところで、近年、ユーザ(投稿ユーザ)が個人的に作成した歌唱用のオリジナル楽曲をサーバに投稿可能とし、そのオリジナル楽曲を他のユーザ(歌唱ユーザ)が歌唱可能とするサービスが、考えられつつある。このようにして投稿された楽曲は上記投稿ユーザのオリジナル作品であることから、上記歌唱ユーザが上記投稿楽曲の再生に合わせて歌唱しようとしても、そのままではメロディラインが分からず、歌唱困難となる可能性があった。   By the way, in recent years, a service that allows an original song for singing created by a user (contributing user) to be posted on a server and that allows other users (singing users) to sing the original song is being considered. . Since the music posted in this way is the original work of the posting user, even if the singing user tries to sing along with the playback of the posted music, the melody line is not understood as it is, and it may be difficult to sing. There was sex.

本発明の目的は、歌唱ユーザが、投稿ユーザの投稿楽曲のメロディラインを知らなかった場合であっても、容易かつ円滑に当該楽曲の歌唱を行える、投稿楽曲演奏システム及び投稿楽曲演奏方法を提供することにある。   An object of the present invention is to provide a posted music performance system and a posted music performance method in which a singing user can easily and smoothly sing the music even when the singing user does not know the melody line of the posted music of the posting user. There is to do.

上記目的を達成するために、第1の発明の投稿楽曲演奏システムは、第1投稿ユーザにより作成された第1楽曲に係わる、投稿楽曲データ、歌唱メロディの楽譜情報、及び、歌詞データを送信する第1投稿送信手段と、前記第1投稿送信手段からの送信に応じて、少なくとも、前記投稿楽曲データ、前記楽譜情報、及び前記歌詞データを、前記第1楽曲の楽曲識別情報とともに第1投稿データとして記憶する第1投稿記憶手段と、所望の第2楽曲に係わる、第2投稿ユーザによる歌唱音声データを送信する第2投稿送信手段と、前記第2投稿送信手段からの送信に応じて、少なくとも、前記歌唱音声データを第2投稿データとして記憶する第2投稿記憶手段と、複数の歌唱ユーザそれぞれの歌唱履歴情報を記憶する歌唱履歴記憶手段と、特定の歌唱ユーザの指示に基づき、前記第1投稿記憶手段に記憶された前記第1投稿データに含まれる前記投稿楽曲データ及び前記歌詞データを前記第1投稿記憶手段から取得する投稿楽曲取得手段と、前記特定の歌唱ユーザの指示に基づき、前記投稿楽曲取得手段により取得された前記投稿楽曲データが含まれる前記第1投稿データに、対応する歌唱音声データが含まれているか否かを判定する歌唱音声判定手段と、前記特定の歌唱ユーザの指示に基づき、対応する当該特定の歌唱ユーザの歌唱履歴情報を前記歌唱履歴記憶手段から取得する歌唱履歴取得手段と、前記歌唱履歴取得手段により取得された前記歌唱履歴情報に基づき、前記投稿楽曲取得手段により取得された前記投稿楽曲データの前記歌唱メロディに対する、前記特定の歌唱ユーザの知見の有無を判定するメロディ知見判定手段と、前記歌唱音声判定手段により前記第1投稿データに前記歌唱音声データが含まれていないと判定され、かつ、前記メロディ知見判定手段により前記投稿楽曲データの前記歌唱メロディに対し前記特定の歌唱ユーザの知見がないと判定された場合に、前記第2投稿記憶手段から前記第2投稿データを読み出し、前記第2投稿データの楽曲識別情報、楽譜情報、歌詞データのいずれかと、前記第1投稿記憶手段に記憶された前記第1投稿データの前記楽曲識別情報、前記楽譜情報、前記歌詞データのいずれかと、を比較することで、当該第1投稿データと同じ楽曲の前記第2投稿データを特定し、その特定された第1投稿データと同じ楽曲の第2投稿データに含まれる前記第2投稿ユーザの前記歌唱音声データを用いて、当該楽曲のガイドボーカル音声を生成するガイドボーカル生成手段と、前記ガイドボーカル生成手段により生成された前記ガイドボーカル音声を、前記投稿楽曲取得手段により取得された前記投稿楽曲データとともに再生する音声・楽曲再生手段と、を有することを特徴とする。   In order to achieve the above object, the posted music performance system of the first invention transmits posted music data, musical score information of singing melody, and lyrics data related to the first music created by the first posting user. In response to the transmission from the first posting transmission means and the first posting transmission means, at least the posted music data, the score information, and the lyrics data, together with the music identification information of the first music, the first posting data At least in response to the transmission from the second posting transmission means, the second posting transmission means for transmitting the singing voice data by the second posting user related to the desired second music, , Second post storage means for storing the singing voice data as second post data, singing history storage means for storing singing history information of each of a plurality of singing users, and identification Based on the instruction of the singing user, the posted music acquisition means for acquiring the posted music data and the lyrics data included in the first posted data stored in the first posting storage means from the first posting storage means; Singing voice determination for determining whether or not corresponding singing voice data is included in the first posting data including the posted music data acquired by the posted music acquisition means based on an instruction of a specific singing user Singing history acquisition means for acquiring singing history information of the corresponding specific singing user from the singing history storage means, and the singing acquired by the singing history acquisition means based on an instruction of the specific singing user Based on the history information, the specific singing user for the singing melody of the posted music data acquired by the posted music acquisition means. Melody knowledge determination means for determining presence / absence of knowledge, and the singing voice determination means determine that the singing voice data is not included in the first post data, and the melody knowledge determination means determines the posted music data. When it is determined that there is no knowledge of the specific singing user with respect to the singing melody, the second posting data is read from the second posting storage means, and music identification information, score information, By comparing any of the lyric data with any of the music identification information, the score information, and the lyric data of the first post data stored in the first post storage means, the first post data and The second posting data of the same music is specified, and the second posting data of the second posting user included in the second posting data of the same music as the specified first posting data Using the singing voice data, the guide vocal generating means for generating the guide vocal sound of the music, and the posted music data acquired by the posted music acquisition means for the guide vocal sound generated by the guide vocal generating means. And a voice / music piece reproducing means for reproduction together.

本願発明においては、ユーザ(第1投稿ユーザ)が個人的に作成した歌唱用のオリジナル楽曲を投稿することで、他のユーザ(歌唱ユーザ)が歌唱可能に閲覧することができる。   In this invention, the other user (singing user) can browse so that other users (singing user) can sing by posting the original music for singing which the user (1st contribution user) created personally.

すなわち、第1投稿ユーザが楽曲を作成すると、その作成された楽曲に係わる、投稿楽曲データ、歌唱メロディ(旋律)の楽譜情報、及び、歌詞データが、第1投稿送信手段によって送信される。そして、その送信に応じて、少なくとも上記投稿楽曲データ、上記楽譜情報、上記歌詞データを含む投稿データ(第1投稿データ)が、第1投稿記憶手段に記憶される。   That is, when the first posting user creates a music piece, the posted music data, the musical score information of the singing melody (melody), and the lyric data related to the created music piece are transmitted by the first posting transmission means. In response to the transmission, post data (first post data) including at least the post music data, the score information, and the lyrics data is stored in the first post storage means.

このとき、このような第1投稿データは上記第1投稿ユーザのオリジナル作品であることから、上記歌唱ユーザが上記投稿楽曲データの再生及び上記歌詞データの表示に合わせて歌唱しようとしても、そのままではメロディラインが分からず、歌唱困難となる可能性がある。   At this time, since such first posted data is the original work of the first posted user, if the singing user tries to sing along with the reproduction of the posted music data and the display of the lyrics data, The melody line is unknown, and it may be difficult to sing.

そこで本願発明においては、上記楽譜情報に基づきガイドボーカルが生成される。その際には、上記歌唱ユーザが歌唱しようとしているものと同一の楽曲の歌唱音声を投稿した投稿ユーザ(第2投稿ユーザ)による、歌唱音声データ(すなわち第1投稿ユーザから見ると他人の歌声)を用いて上記ガイドボーカルの生成が行われる。但し、歌唱ユーザが、一度でも自らが歌唱したことがあったり他人が歌うのを見たことがある場合には、上記ガイドボーカルの生成は行われない。また、上記第1投稿データにたまたま歌唱音声データが含まれていた場合も、(歌唱音声データによりそのままメロディラインを確認できるので)同様にガイドボーカルの生成は行われない。   Therefore, in the present invention, guide vocals are generated based on the score information. In that case, the singing voice data by the posting user (second posting user) who posted the singing voice of the same music as the singing user is trying to sing (that is, the singing voice of another person when viewed from the first posting user) The guide vocal is generated using However, if the singing user has sang once or has seen others singing, the above-mentioned guide vocal is not generated. Also, when the first post data happens to contain singing voice data, the guide vocal is not generated in the same manner (because the melody line can be confirmed as it is based on the singing voice data).

すなわち、まず、特定の歌唱ユーザからの指示に応じて、上記第1投稿データに含まれる投稿楽曲データ及び歌詞データが、投稿楽曲取得手段によって上記投稿記憶手段から取得される。その後、取得された投稿楽曲データに係わる上記第1投稿データに歌唱音声データが含まれているか否かが、歌唱音声判定手段によって判定される。   That is, first, according to an instruction from a specific singing user, posted music data and lyrics data included in the first posted data are acquired from the posted storage means by the posted music acquisition means. Thereafter, it is determined by the singing voice determination means whether or not the singing voice data is included in the first posted data related to the acquired posted music data.

一方このとき、複数の歌唱ユーザそれぞれの歌唱履歴情報が、予め歌唱履歴記憶手段に記憶されている。そして、上記特定の歌唱ユーザからの指示に応じて、歌唱履歴取得手段により、当該特定の歌唱ユーザの歌唱履歴情報が歌唱履歴記憶手段から取得される。その後、この取得された歌唱履歴情報に基づき、メロディ知見判定手段により、上記投稿楽曲データの歌唱メロディに対する、当該特定の歌唱ユーザの知見の有無(例えば特定の歌唱ユーザ自身の歌唱履歴があるか、当該特定の歌唱ユーザと同時利用の別ユーザの歌唱履歴があるか、等)が判定される。   On the other hand, the singing history information of each of the plurality of singing users is stored in advance in the singing history storage means. And according to the instruction | indication from the said specific song user, the song history acquisition means acquires the song history information of the specific song user from the song history storage means. Thereafter, based on the acquired singing history information, the melody knowledge determination means determines whether or not the specific singing user has knowledge of the singing melody of the posted music data (for example, whether there is a specific singing user's own singing history, Whether there is a singing history of another user simultaneously used with the specific singing user, etc.).

上記歌唱音声判定手段及びメロディ知見判定手段の判定において、上記第1投稿データに歌唱音声データが含まれておらず、かつ当該投稿楽曲データに対する特定の歌唱ユーザの知見がない、とされた場合には、上記メロディラインの不明による歌唱困難が生じる。そこで、この場合には、ガイドボーカル生成手段により、上記第2投稿ユーザによる第2投稿データが読み出され、その第2投稿データの楽曲識別情報(あるいは楽譜情報、あるいは歌詞データ)と、上記第1投稿記憶手段に記憶された第1投稿ユーザによる第1投稿データの楽曲識別情報(あるいは楽譜情報、あるいは歌詞データ)とが比較されることで、当該第1投稿データと同じ楽曲の第2投稿データが特定される。そして、当該同じ楽曲の第2投稿データに含まれる第2投稿ユーザの歌唱音声データを用いて、ガイドボーカル音声が生成される(言い替えれば、同一楽曲であることから、第2投稿ユーザの歌唱音声がそのままガイドボーカル音声として用いられる)。生成されたガイドボーカル音声は、音声・楽曲再生手段によって投稿楽曲データとともに再生される。   In the determination of the singing voice determination means and the melody knowledge determination means, when the singing voice data is not included in the first posted data and there is no knowledge of a specific singing user for the posted music data Is difficult to sing due to the unknown melody line. Therefore, in this case, the second posting data by the second posting user is read out by the guide vocal generating means, and the music identification information (or score information or lyrics data) of the second posting data, The second contribution of the same music as the first contribution data is compared with the music identification information (or score information or lyrics data) of the first contribution data by the first contribution user stored in the one contribution storage means. Data is identified. Then, using the second posting user's singing voice data included in the second posting data of the same music, a guide vocal voice is generated (in other words, since it is the same music, the second posting user's singing voice is generated). Is used as a guide vocal voice as is). The generated guide vocal voice is reproduced together with the posted music data by the voice / music reproducing means.

以上の結果、本願発明においては、歌唱ユーザが、第1投稿ユーザの投稿楽曲データのメロディラインを知らなかった場合であっても、容易かつ円滑に当該楽曲の歌唱を行うことができる。したがって、利便性を向上することができる。   As a result, in the present invention, even if the singing user does not know the melody line of the posted music data of the first posting user, the music can be sung easily and smoothly. Therefore, convenience can be improved.

第2の発明は、上記第1発明において、前記歌唱履歴取得手段により取得された前記歌唱履歴情報に基づき、前記特定の歌唱ユーザの歌唱ジャンルを決定する歌唱ジャンル決定手段を有し、前記ガイドボーカル生成手段は、前記歌唱ジャンル決定手段により決定された前記歌唱ジャンルに対応した、前記第2投稿ユーザの前記歌唱音声データを用いて、前記ガイドボーカル音声を生成することを特徴とする。   2nd invention has the singing genre determination means which determines the singing genre of the said specific singing user based on the said singing history information acquired by the said singing history acquisition means in the said 1st invention, The said guide vocal The generating means generates the guide vocal voice using the singing voice data of the second posting user corresponding to the singing genre determined by the singing genre determining means.

これにより、ガイドボーカル生成手段における第2投稿ユーザの歌唱音声データを用いたガイドボーカル音声の生成の際、上記特定の歌唱ユーザの歌唱嗜好に合致した、より最適な音声態様のガイドボーカル音声を生成することができる。この結果、さらに利便性を向上することができる。   Thereby, when generating the guide vocal voice using the singing voice data of the second posting user in the guide vocal generating means, the guide vocal voice of a more optimal voice mode that matches the singing preference of the specific singing user is generated. can do. As a result, the convenience can be further improved.

第3発明は、上記第2発明において、前記第2投稿送信手段により送信される前記歌唱音声データを採点する採点手段を有し、前記ガイドボーカル生成手段は、前記歌唱ジャンル決定手段により決定された前記歌唱ジャンルに対応した、前記第2投稿ユーザの前記歌唱音声データであって、かつ、前記採点手段による採点結果が所定値以上であるものを用いて、前記ガイドボーカル音声を生成することを特徴とする。   A third invention has scoring means for scoring the singing voice data transmitted by the second posting transmitting means in the second invention, and the guide vocal generating means is determined by the singing genre determining means. The guide vocal voice is generated using the singing voice data of the second posting user corresponding to the singing genre, and the scoring result by the scoring means is a predetermined value or more. And

これにより、ガイドボーカル生成手段における第2投稿ユーザの歌唱音声データを用いたガイドボーカル音声の生成の際、比較的歌唱が上手な第2投稿ユーザの歌唱音声データを確実に用いてガイドボーカル音声を生成することができる。この結果、ガイドボーカル音声によるガイド機能を向上させることができるので、さらに利便性を向上することができる。   Thus, when generating the guide vocal sound using the second posting user's singing voice data in the guide vocal generating means, the second vocalizing user's singing voice data is used with certainty and the guide vocal voice is surely used. Can be generated. As a result, the guide function using the guide vocal voice can be improved, and the convenience can be further improved.

上記目的を達成するために、第4発明は、第1投稿ユーザにより作成された第1楽曲に係わる、投稿楽曲データ、歌唱メロディの楽譜情報、及び、歌詞データを送信する第1投稿送信手段と、前記第1投稿送信手段からの送信に応じて、少なくとも、前記投稿楽曲データ、前記楽譜情報、及び前記歌詞データを、前記第1楽曲の楽曲識別情報とともに第1投稿データとして記憶する第1投稿記憶手段と、所望の第2楽曲に係わる、第2投稿ユーザによる歌唱音声データを送信する第2投稿送信手段と、前記第2投稿送信手段からの送信に応じて、少なくとも、前記歌唱音声データを第2投稿データとして記憶する第2投稿記憶手段と、複数の歌唱ユーザそれぞれの歌唱履歴情報を記憶する歌唱履歴記憶手段と、を有する投稿処理システムが実行する投稿楽曲演奏方法であって、特定の歌唱ユーザの指示に基づき、前記第1投稿記憶手段に記憶された前記第1投稿データに含まれる前記投稿楽曲データ及び前記歌詞データを前記第1投稿記憶手段から取得する投稿楽曲取得手順と、前記特定の歌唱ユーザの指示に基づき、前記投稿楽曲取得手順で取得された前記投稿楽曲データが含まれる前記第1投稿データに、対応する歌唱音声データが含まれているか否かを判定する歌唱音声判定手順と、前記特定の歌唱ユーザの指示に基づき、対応する当該特定の歌唱ユーザの歌唱履歴情報を前記歌唱履歴記憶手段から取得する歌唱履歴取得手順と、前記歌唱履歴取得手順で取得された前記歌唱履歴情報に基づき、前記投稿楽曲取得手順で取得された前記投稿楽曲データの前記歌唱メロディに対する、前記特定の歌唱ユーザの知見の有無を判定するメロディ知見判定手順と、前記歌唱音声判定手順で前記第1投稿データに前記歌唱音声データが含まれていないと判定され、かつ、前記メロディ知見判定手順で前記投稿楽曲データの前記歌唱メロディに対し前記特定の歌唱ユーザの知見がないと判定された場合に、前記第2投稿記憶手段から前記第2投稿データを読み出し、前記第2投稿データの楽曲識別情報、楽譜情報、歌詞データのいずれかと、前記第1投稿記憶手段に記憶された前記第1投稿データの前記楽曲識別情報、前記楽譜情報、前記歌詞データのいずれかと、を比較することで、当該第1投稿データと同じ楽曲の前記第2投稿データを特定し、その特定された第1投稿データと同じ楽曲の第2投稿データに含まれる前記第2投稿ユーザの前記歌唱音声データを用いて、当該楽曲のガイドボーカル音声を生成するガイドボーカル生成手順と、前記ガイドボーカル生成手順で生成された前記ガイドボーカル音声を、前記投稿楽曲取得手順で取得された前記投稿楽曲データとともに再生する音声・楽曲再生手順と、を有することを特徴とする。
In order to achieve the above object, the fourth invention is a first posting transmission means for transmitting posted music data, singing melody score information, and lyrics data related to the first music created by the first posting user. In response to transmission from the first posting transmission means, at least the posted music data, the score information, and the lyrics data are stored as first posted data together with the music identification information of the first music. In response to the transmission from the storage means, the second posting transmission means for transmitting the singing voice data by the second posting user relating to the desired second music, and at least the singing voice data in response to the transmission from the second posting transmission means. a second post storage means for storing a second contribution data, post processing system comprising a singing history storage means for storing the singing history information of each of a plurality of singing users, a is a real In the posted music playing method, the posted music data and the lyrics data included in the first posted data stored in the first posted storage unit are stored in the first posted memory based on an instruction from a specific singing user. Based on the posted music acquisition procedure acquired from the means and the instruction of the specific singing user, the first posted data including the posted music data acquired in the posted music acquisition procedure includes corresponding singing voice data. A singing history determination procedure for determining whether or not the singing history is acquired, and a singing history acquisition procedure for acquiring the corresponding singing history information of the specific singing user from the singing history storage unit based on the instruction of the specific singing user, Based on the singing history information acquired in the singing history acquisition procedure, the singing melody of the posted song data acquired in the posted tune acquisition procedure The melody knowledge determination procedure for determining the presence or absence of knowledge of the specific singing user and the singing voice determination procedure determine that the singing voice data is not included in the first post data, and the melody knowledge When it is determined in the determination procedure that there is no knowledge of the specific singing user with respect to the singing melody of the posted music data, the second posted data is read from the second posting storage means, and the second posted data By comparing any of the music identification information, the score information, and the lyrics data with any of the music identification information, the score information, and the lyrics data of the first posted data stored in the first posting storage means The second post data of the same music as the first post data is specified, and the second post data included in the second post data of the same music as the specified first post data Using the singing voice data of the posting user, the guide vocal generation procedure for generating the guide vocal voice of the music and the guide vocal voice generated in the guide vocal generation procedure were acquired in the posted music acquisition procedure. And a sound / music reproduction procedure to be reproduced together with the posted music data.

本発明によれば、歌唱ユーザが、投稿ユーザの投稿楽曲のメロディラインを知らなかった場合であっても、容易かつ円滑に当該楽曲の歌唱を行うことができる。   According to the present invention, even if the singing user does not know the melody line of the posted user's posted music, the music can be easily and smoothly sung.

本発明の一実施形態に係わる通信カラオケシステムの全体構成を表す機能ブロック図である。It is a functional block diagram showing the whole structure of the communication karaoke system concerning one Embodiment of this invention. 外部端末、リモコン、カラオケ装置の装置本体、及びホストサーバにおける、データ・信号の流れ及び処理手順を表すシーケンス図である。It is a sequence diagram showing the flow of data and signals and the processing procedure in the external terminal, the remote controller, the apparatus main body of the karaoke apparatus, and the host server. ホストサーバの投稿データ記憶部に記憶された投稿データのデータ構造の一例を表す説明図である。It is explanatory drawing showing an example of the data structure of the posting data memorize | stored in the posting data storage part of the host server. カラオケ装置の装置本体の制御部により実行される、ステップSC0の詳細手順を表すフローチャートである。It is a flowchart showing the detailed procedure of step SC0 performed by the control part of the apparatus main body of a karaoke apparatus. ホストサーバにより実行される、ステップSS3の詳細手順を表すフローチャートである。It is a flowchart showing the detailed procedure of step SS3 performed by the host server. ホストサーバの歌唱履歴記憶部に記憶された各歌唱ユーザの歌唱履歴の一例を表す図である。It is a figure showing an example of each song user's song history memorize | stored in the song history memory | storage part of the host server. カラオケ装置の装置本体の制御部により実行される、ステップSC3の詳細手順を表すフローチャートである。It is a flowchart showing the detailed procedure of step SC3 performed by the control part of the apparatus main body of a karaoke apparatus. 歌唱投稿記憶部に記憶された各ユーザの歌唱音声データの曲ID及びその採点結果の一覧を表す説明図である。It is explanatory drawing showing the list of music ID of each user's song audio | speech data memorize | stored in the song posting memory | storage part, and its scoring result.

以下、本発明の一実施の形態について、図面を参照しつつ説明する。   Hereinafter, an embodiment of the present invention will be described with reference to the drawings.

図1は、本実施形態に係わる通信カラオケシステムの全体構成を表す機能ブロック図である。   FIG. 1 is a functional block diagram showing the overall configuration of the communication karaoke system according to the present embodiment.

図1において、通信カラオケシステム1(投稿楽曲演奏システム、投稿処理システムに相当)は、少なくとも1つのカラオケ装置(この例では第1カラオケ装置10A及び第2カラオケ装置10B)と、ホストサーバ20と、少なくとも1つ(この例では2つ)の外部端末Pと、を有している。   In FIG. 1, a communication karaoke system 1 (corresponding to a posted music performance system and a posting processing system) includes at least one karaoke device (first karaoke device 10A and second karaoke device 10B in this example), a host server 20, And at least one (two in this example) external terminal P.

<カラオケ装置>
カラオケ装置10A,10B(以下適宜、これらを総称して単に「カラオケ装置10」という)は、例えばカラオケ店舗等のカラオケルームKRに設置されている。カラオケ装置10は、楽曲データとしてのMusical Instrument Digital Interface(MIDI;登録商標)データ及び映像データを用いて、カラオケ楽曲の再生サービスを提供する装置である。カラオケ装置10、ホストサーバ20、及び外部端末Pは、例えば通信ネットワーク等のネットワークNWとを介し、互いに情報送受信可能に接続されている。
<Karaoke equipment>
Karaoke devices 10A and 10B (hereinafter, collectively referred to as “karaoke device 10” where appropriate) are installed in a karaoke room KR such as a karaoke store. The karaoke device 10 is a device that provides a karaoke music reproduction service using Musical Instrument Digital Interface (MIDI; registered trademark) data and video data as music data. The karaoke apparatus 10, the host server 20, and the external terminal P are connected to each other so as to be able to transmit / receive information to / from each other via a network NW such as a communication network.

カラオケ装置10は、装置本体100と、リモコン35と、マイク30と、を有している。なお、装置本体100とリモコン35とは、例えば無線又は有線のLAN等のネットワークを介し、互いに情報送受信可能に接続されている。装置本体100とマイク30とは、無線回線又は有線回線により接続されている。   The karaoke device 10 includes a device main body 100, a remote control 35, and a microphone 30. The apparatus main body 100 and the remote controller 35 are connected to each other so as to be able to transmit / receive information to / from each other via a network such as a wireless or wired LAN. The apparatus main body 100 and the microphone 30 are connected by a wireless line or a wired line.

装置本体100は、制御部101と、大容量記憶装置103と、操作部104と、受信部105と、音源106と、音声制御部107と、スピーカ108と、表示部109と、通信制御部110とを有している。   The apparatus main body 100 includes a control unit 101, a mass storage device 103, an operation unit 104, a reception unit 105, a sound source 106, a sound control unit 107, a speaker 108, a display unit 109, and a communication control unit 110. And have.

制御部101は、図示しないCPUや、RAM及びROM等のメモリを備えている。この制御部101は、RAMの一時記憶機能を利用しつつ、ROMや上記大容量記憶装置103に予め記憶された各種プログラム(後述の図2及び図7に示す処理を実行するための制御プログラムを含む)を実行する。これにより、装置本体100全体の制御を行う。   The control unit 101 includes a CPU (not shown) and a memory such as a RAM and a ROM. The control unit 101 uses various programs stored in advance in the ROM and the large-capacity storage device 103 (control programs for executing processes shown in FIGS. 2 and 7 described later) while using the temporary storage function of the RAM. Include). Thereby, the entire apparatus main body 100 is controlled.

大容量記憶装置103は、例えばHard Disk Drive(HDD)などから構成される。この大容量記憶装置103は、楽曲データ(MIDIデータ)、背景映像データ、及び歌詞データ等の各種情報が記憶されている。   The mass storage device 103 is composed of, for example, a hard disk drive (HDD). The large-capacity storage device 103 stores various information such as music data (MIDI data), background video data, and lyrics data.

操作部104は、例えば複数のキーやスイッチなどから構成される。ユーザは、この操作部104又は後述のリモコン35を用いて、カラオケ楽曲の予約操作等の各種操作を行うことができる。   The operation unit 104 includes, for example, a plurality of keys and switches. The user can perform various operations such as a reservation operation for karaoke music using the operation unit 104 or a remote controller 35 described later.

受信部105は、上記のマイク30から出力された歌唱者の歌唱による音声信号を受信する。   The receiving part 105 receives the audio | voice signal by the singer's song output from said microphone 30. FIG.

なお、以下適宜、音源106、音声制御部107、及びスピーカ108を、省略して「音源106等」と称する。
Hereinafter, the sound source 106, the sound control unit 107, and the speaker 108 are appropriately omitted and referred to as “sound source 106 etc.”.

なお、以下適宜、音源106、音声出力部107、及びスピーカ108を、省略して「音源106等」と称する。   Hereinafter, the sound source 106, the audio output unit 107, and the speaker 108 are appropriately omitted and referred to as “sound source 106 etc.”.

表示部109は、例えば液晶ディスプレイなどから構成され、各種映像を表示する。特に、表示部109は、上記音源106等により楽曲データの再生が行われるのにしたがい、楽曲データの再生に同期して、大容量記憶装置103から読み出された背景映像データ、及び歌詞データに対応したテロップ等を表示する。   The display unit 109 is composed of a liquid crystal display, for example, and displays various videos. In particular, the display unit 109 displays the background video data and the lyrics data read from the large-capacity storage device 103 in synchronization with the reproduction of the music data, as the music data is reproduced by the sound source 106 or the like. Display the corresponding telop.

通信制御部110は、リモコン35やホストサーバ20との間で情報通信の制御を行う。   The communication control unit 110 controls information communication with the remote controller 35 and the host server 20.

<ホストサーバ>
ホストサーバ20は、例えば大容量記憶装置等からなる図示しない情報記憶手段を備えている。また、ホストサーバ20は、歌唱履歴記憶部21と、楽曲投稿記憶部22と、歌唱投稿記憶部23と、視聴有無判断部24と、を機能的に備えている。これら各機能部の詳細機能については、後述する。
<Host server>
The host server 20 includes information storage means (not shown) composed of, for example, a large capacity storage device. The host server 20 functionally includes a singing history storage unit 21, a music post storage unit 22, a singing post storage unit 23, and a viewing presence / absence determination unit 24. Detailed functions of these functional units will be described later.

<ホストサーバ>
ホストサーバ20は、例えば大容量記憶装置等からなる図示しない情報記憶手段を備えている。また、ホストサーバ20は、歌唱履歴記憶部21と、楽曲投稿記憶部22と、歌唱投稿記憶部23と、視聴有無判定部24と、を機能的に備えている。これら各機能部の詳細機能については、後述する。
<Host server>
The host server 20 includes information storage means (not shown) composed of, for example, a large capacity storage device. The host server 20 functionally includes a singing history storage unit 21, a music posting storage unit 22, a singing posting storage unit 23, and a viewing presence / absence determination unit 24. Detailed functions of these functional units will be described later.

<処理シーケンス>
以上において、本実施形態のカラオケ装置10A,10Bを備えた通信カラオケシステム1では、ユーザ(以下適宜、「投稿ユーザ」という)が個人的に作成した歌唱用のオリジナル楽曲を例えば上記外部端末Pを用いてホストサーバ20へ投稿することで、他のユーザ(以下適宜、「歌唱ユーザ」という)が例えばカラオケ装置10Aにおいて(歌唱可能に)閲覧することができる。以下、その詳細を、図2のシーケンス図を参照しつつ説明する。なお、図2において、カラオケ装置10Aの装置本体100を「装置本体1」と略示するとともに当該カラオケ装置10Aのリモコン35を「リモコン」と略示し、さらにカラオケ装置10Bの装置本体100を「装置本体2」と略示している。
<Processing sequence>
In the above, in the communication karaoke system 1 provided with the karaoke apparatuses 10A and 10B according to the present embodiment, the original music for singing personally created by the user (hereinafter referred to as “posting user” as appropriate) is used, for example, for the external terminal P. By using and posting to the host server 20, other users (hereinafter referred to as “singing user” as appropriate) can browse (for example, singing) in the karaoke apparatus 10A. The details will be described below with reference to the sequence diagram of FIG. 2, the apparatus main body 100 of the karaoke apparatus 10A is abbreviated as “apparatus main body 1”, the remote control 35 of the karaoke apparatus 10A is abbreviated as “remote control”, and the apparatus main body 100 of the karaoke apparatus 10B is further referred to as “apparatus”. Abbreviated as “body 2”.

<第1投稿ユーザによる楽曲投稿>
すなわち、投稿ユーザ(第1投稿ユーザに相当)が自らのオリジナル楽曲(第1楽曲に相当)を作成すると、その作成された楽曲に係わる投稿データ(第1投稿データに相当)が外部端末Pからホストサーバ20へと送信される(ステップSP1)。この投稿データには、上記楽曲の楽曲データ(=投稿楽曲データに相当。例えばMIDIデータ)、歌唱メロディ(旋律)の楽譜情報、及び、歌詞データが含まれている。なお、この投稿データには、投稿ユーザ自らの歌唱による、当該楽曲データの歌唱音声データが含まれている場合もある。なお、このステップSP1を実行する外部端末Pが、各請求項記載の第1投稿送信手段として機能する。この投稿データを受信したホストサーバ20は、当該投稿データに固有の識別情報である曲IDを付与し、上記楽曲投稿記憶部22に記憶する。なお、この楽曲投稿記憶部22が、各請求項記載の第1投稿記憶手段として機能する。
<Music contribution by the first posting user>
That is, when the posting user (corresponding to the first posting user) creates his own original music (corresponding to the first music), the posting data (corresponding to the first posting data) related to the created music is sent from the external terminal P. It is transmitted to the host server 20 (step SP1). The posted data includes music data of the music (= corresponding to posted music data, for example, MIDI data), musical score information of singing melody (melody), and lyrics data. In addition, this contribution data may include the singing voice data of the music data by the posting user's own singing. Note that the external terminal P executing this step SP1 functions as the first posting transmission means described in each claim. The host server 20 that has received the posted data assigns a song ID, which is unique identification information, to the posted data and stores it in the song posting storage unit 22. In addition, this music contribution memory | storage part 22 functions as a 1st contribution memory | storage means as described in each claim.

<データ構造>
図3に、上記ホストサーバ20の楽曲投稿記憶部22に記憶された投稿データのデータ構造の一例を示す。図3において、この例では、投稿データ220は、上記のようにして付与された、楽曲識別情報としての曲ID(あるいは曲名等でもよい)221と、演奏データとしての上記楽曲データ224と、歌唱メロディ(旋律)の楽譜情報222と、歌詞データ223と、を備えている。
<Data structure>
FIG. 3 shows an example of the data structure of post data stored in the music post storage unit 22 of the host server 20. In FIG. 3, in this example, the post data 220 includes a song ID (or a song name or the like) 221 given as described above as song identification information, the song data 224 as performance data, and a song. Music score information 222 of melody (melody) and lyrics data 223 are provided.

曲ID221は、投稿データ220のヘッダとして置かれている。楽曲データ224は、上述したように例えばMIDIデータによって構成され、後述のようにホストサーバ20からダウンロードされて例えばカラオケ装置10A,10Bの大容量記憶装置103に記憶された後、読み出されて上記音源106等によって再生されることで、音声としてスピーカ108から放出することができる。   The song ID 221 is placed as a header of the post data 220. The music data 224 is composed of, for example, MIDI data as described above, and is downloaded from the host server 20 and stored in the large capacity storage device 103 of, for example, the karaoke apparatuses 10A and 10B as described later, and then read and read. By being reproduced by the sound source 106 or the like, it can be emitted as sound from the speaker 108.

歌詞データ223は、前述したように投稿ユーザのオリジナル作詞によるものであり、上記同様にホストサーバ20からダウンロードされてカラオケ装置10A,10Bの大容量記憶装置103に記憶された後、読み出されることで、歌詞テロップとして表示部109に表示することができる。この例では、歌詞データには、「あの言葉さえ 言わなければ あなたのこと きっと もう少し ・・」という内容の歌詞が含まれている。   The lyric data 223 is based on the original lyrics of the posting user as described above, and is downloaded from the host server 20 and stored in the mass storage devices 103 of the karaoke apparatuses 10A and 10B as described above, and then read out. Can be displayed on the display unit 109 as a lyrics telop. In this example, the lyric data contains the lyrics that say "If you don't even say that word, I'm sure a little more ...".

楽譜情報222は、上述したように、投稿ユーザの作曲によるオリジナルの歌唱メロディ(旋律)を表しており、典型的には、図示のように五線譜で表される。   As described above, the musical score information 222 represents an original singing melody (melody) created by the posting user, and is typically represented by a staff notation as shown.

なお、この例では、上記歌詞データ223や楽譜情報222が楽曲データ224と同一のファイルに組み込まれているが、これに限られない。すなわち、歌詞データ223や楽譜情報222が、楽曲データ224とは別ファイルで構成され、同じ曲名で対応付けられていてもよい。   In this example, the lyrics data 223 and the score information 222 are incorporated in the same file as the music data 224, but the present invention is not limited to this. That is, the lyrics data 223 and the score information 222 may be configured as a separate file from the music data 224 and may be associated with the same music title.

<歌唱困難の可能性>
このとき、既に述べたように、上記のような投稿データ220は上記投稿ユーザのオリジナル作品であることから、ある特定の歌唱ユーザが上記楽曲データ224が再生されるのに合わせて歌唱しようとしても、そのままではメロディラインが分からず、歌唱困難となる可能性がある。そこで本実施形態においては、上記楽譜情報222に基づき、人工的にガイドボーカルが生成される。
<Possibility of singing difficulty>
At this time, as described above, since the posting data 220 as described above is the original work of the posting user, even if a specific singing user tries to sing along with the reproduction of the music data 224, If you do not know the melody line, it may be difficult to sing. Therefore, in this embodiment, a guide vocal is artificially generated based on the score information 222.

ここで、上記特定の歌唱ユーザとは別のユーザ(第2投稿ユーザに相当)が、所望の種々のカラオケ楽曲(第2楽曲に相当)を自ら歌唱し、その歌唱音声データをホストサーバ20にアップロードしている場合がある。そのようなユーザが、たまたま、上記特定の歌唱ユーザが歌唱しようとしている上記の投稿ユーザのオリジナル楽曲(以下適宜、投稿楽曲という)についても、当該投稿データ220をダウンロードして自ら歌唱し、その歌唱音声データをホストサーバ20にアップロードしている場合がある。本実施形態では、このような、別のユーザの歌唱音声データが既にある場合には、当該歌唱音声データを用いて、上記特定の歌唱ユーザへのガイドボーカル音声が生成される。以下、その流れを順を追って説明する。   Here, a user (corresponding to the second posting user) different from the specific singing user sings various desired karaoke songs (corresponding to the second music), and the singing voice data is sent to the host server 20. You may be uploading. Such a user happens to download the post data 220 and sing the original music of the posting user (hereinafter referred to as “posted music” as appropriate) that the specific singing user is about to sing. Audio data may be uploaded to the host server 20. In this embodiment, when there is already another user's singing voice data, a guide vocal voice for the specific singing user is generated using the singing voice data. Hereinafter, the flow will be described in order.

<第2投稿ユーザによる歌唱音声投稿>
すなわち、上記別のユーザ(第2投稿ユーザに相当)が、例えばカラオケ装置10Bのリモコン35又は操作部104を適宜に操作することで、上記投稿楽曲の楽曲データ、及び、歌詞データがホストサーバ20からカラオケ装置10Bの装置本体100へ送信され(ステップSS0)、大容量記憶装置103に格納される。そして、この大容量記憶装置103に格納された投稿楽曲の楽曲データを用いてカラオケ装置100Bの装置本体100において当該投稿楽曲に対する歌唱音声投稿処理が行われる(ステップSC0)。このステップSC0の歌唱音声投稿処理を表すフローチャートを図4に示す。
<Singing Voice Posting by Second Posting User>
That is, when another user (corresponding to the second posting user) appropriately operates, for example, the remote control 35 or the operation unit 104 of the karaoke apparatus 10B, the music data and the lyrics data of the posted music are stored in the host server 20. Is transmitted to the apparatus main body 100 of the karaoke apparatus 10B (step SS0) and stored in the mass storage device 103. Then, using the music data of the posted music stored in the large-capacity storage device 103, the singing voice posting process for the posted music is performed in the apparatus main body 100 of the karaoke apparatus 100B (step SC0). A flowchart showing the singing voice posting process in step SC0 is shown in FIG.

ステップS310では、第2カラオケ装置10Bの制御部101は、マイク30を介し、上記別のユーザによる、上記投稿楽曲の歌唱音声の録音を開始させる。録音により取得された上記別のユーザの歌唱音声データは、大容量記憶装置103に記憶される。その後、ステップS320に移る。 In step S <b> 310, the control unit 101 of the second karaoke apparatus 10 </ b> B starts recording the singing voice of the posted music by the other user via the microphone 30. The other user's singing voice data acquired by recording is stored in the mass storage device 103. Thereafter, the process proceeds to step S320.

ステップS310では、第2カラオケ装置10Bの第2制御部101は、マイク30を介し、上記別のユーザによる、上記投稿楽曲の歌唱音声の録音を開始させる。録音により取得された上記別のユーザの歌唱音声データは、大容量記憶装置103に記憶される。その後、ステップS320に移る。   In step S <b> 310, the second control unit 101 of the second karaoke apparatus 10 </ b> B starts recording the singing voice of the posted music by the other user via the microphone 30. The other user's singing voice data acquired by recording is stored in the mass storage device 103. Thereafter, the process proceeds to step S320.

ステップS320では、第2カラオケ装置10Bの制御部101は、上記ステップS300で再生開始した楽曲データの再生が終了したかどうかを判定する。楽曲データの再生が終了せず判定が満たされない場合(S320:NO)には、ステップS300に戻り、ステップS300、ステップS310、ステップS320の手順を繰り返す。楽曲データの再生が終了したときは、判定が満たされて(S320:YES)、ステップS330に移る。   In step S320, the control unit 101 of the second karaoke apparatus 10B determines whether or not the reproduction of the music data started to be reproduced in step S300 is finished. If the reproduction of the music data does not end and the determination is not satisfied (S320: NO), the process returns to step S300, and the procedures of steps S300, S310, and S320 are repeated. When the reproduction of the music data is completed, the determination is satisfied (S320: YES), and the process proceeds to step S330.

ステップS330では、第2カラオケ装置10Bの制御部101は、前述のステップS310で録音された歌唱音声データを、大容量記憶装置103から読み出す。そして、この歌唱音声データを、上記投稿楽曲の曲ID、及び、当該別のユーザのユーザID(ログイン時に取得される)と関連付け、投稿データ(第2投稿データに相当)としてホストサーバ20に送信(アップロード)する。このステップS330を実行する第2カラオケ装置10Bの制御部101が、第2投稿送信手段として機能する。この投稿データを受信したホストサーバ20は、上記投稿楽曲と共通である曲IDを付与し(さらに当該投稿データに固有の識別情報である投稿IDを付与してもよい)、上記歌唱投稿記憶部23に記憶する。なお、この歌唱投稿記憶部23が、各請求項記載の第2投稿記憶手段として機能する。   In step S330, the control unit 101 of the second karaoke apparatus 10B reads the singing voice data recorded in step S310 described above from the large-capacity storage device 103. Then, this singing voice data is associated with the song ID of the posted music and the user ID of the other user (obtained at the time of login) and transmitted to the host server 20 as posted data (corresponding to the second posted data). (Upload). The control unit 101 of the second karaoke apparatus 10B that executes step S330 functions as a second posting transmission unit. The host server 20 that has received the posted data gives a song ID that is common to the posted music (and may give a posted ID that is unique identification information to the posted data), and the singing post storage unit 23. In addition, this song contribution memory | storage part 23 functions as a 2nd contribution memory | storage means as described in each claim.

なお、上記のようにして歌唱投稿記憶部23に記憶された投稿データ(曲ID、ユーザID、上記投稿楽曲の歌唱音声データを含む)は、その後、例えば上記外部端末Pやカラオケ装置10(以下適宜、「外部端末P等」という)でのユーザ(上記別のユーザでもよいし、上記投稿ユーザでもよいし、上記特定の歌唱ユーザでもよい)の適宜の操作に基づく要求信号に基づき、ホストサーバ20が、上記歌唱音声データの再生信号を外部端末P等へ出力する。これにより、当該外部端末P等において、上記歌唱音声データを聴くことができる。   The post data (including the song ID, the user ID, and the singing voice data of the posted music) stored in the singing post storage unit 23 as described above is, for example, the external terminal P or the karaoke device 10 (hereinafter, referred to as “following song data”) Based on a request signal based on an appropriate operation of a user (referred to as “external terminal P or the like”) (may be another user, the posting user, or the specific singing user). 20 outputs a reproduction signal of the singing voice data to the external terminal P or the like. Thereby, the said singing voice data can be heard in the said external terminal P grade | etc.,.

<歌唱ユーザによる投稿楽曲のダウンロード>
一方、上記のようにして上記別のユーザにおける上記投稿楽曲の歌唱音声データがホストサーバ20に記憶された状態で、例えば上記特定の歌唱ユーザにより、カラオケ装置10Aのリモコン35で適宜の操作が行われることで、上記ホストサーバ20の楽曲投稿記憶部22に上記投稿データが記憶された楽曲の一覧がリモコン35で取得され、表示される(ステップSR1)。上記特定の歌唱ユーザによるカラオケ装置10Aのリモコン35での適宜の操作により上記投稿楽曲が予約されると(ステップSR2)、当該特定の歌唱ユーザのユーザID(この時点でログインしている)と、上記投稿楽曲の上記曲ID221とが、カラオケ装置10Aの装置本体100へ送信される。当該特定の投稿楽曲の曲ID221が装置本体100の制御部101により取得されると、この曲IDを含む投稿楽曲のダウンロード要求が、カラオケ装置10Aの制御部101からホストサーバ20へと送信される(ステップSC1)。これに応じて、ホストサーバ20では、上記楽曲投稿記憶部22において上記曲IDを含む投稿データの検索が行われ、当該曲IDを備えた上記投稿楽曲の投稿データ220(楽曲データ224、歌詞データ223、楽譜情報222を含む)が、ホストサーバ20からカラオケ装置10Aへと送信されて制御部101において取得され、大容量記憶装置103に記憶される(ステップSS2)。なお、このステップSS2が各請求項記載の投稿楽曲取得手順に相当し、このステップSS2で上記のように投稿データ220を取得するカラオケ装置10Aの制御部101が、各請求項記載の投稿楽曲取得手段として機能する。
<Downloading songs submitted by singing users>
On the other hand, in the state where the singing voice data of the posted music for the other user is stored in the host server 20 as described above, for example, the specific singing user performs an appropriate operation with the remote control 35 of the karaoke apparatus 10A. As a result, a list of music pieces in which the post data is stored in the music post storage unit 22 of the host server 20 is acquired and displayed by the remote controller 35 (step SR1). When the posted music is reserved by an appropriate operation on the remote control 35 of the karaoke apparatus 10A by the specific singing user (step SR2), the user ID of the specific singing user (logged in at this time), The music ID 221 of the posted music is transmitted to the apparatus main body 100 of the karaoke apparatus 10A. When the song ID 221 of the specific posted song is acquired by the control unit 101 of the apparatus main body 100, a request to download the posted song including this song ID is transmitted from the control unit 101 of the karaoke apparatus 10A to the host server 20. (Step SC1). In response to this, the host server 20 searches the posted music data including the song ID in the music posting storage unit 22, and the posted music post data 220 (music data 224, lyrics data) having the song ID. 223 and the score information 222) are transmitted from the host server 20 to the karaoke apparatus 10A, acquired by the control unit 101, and stored in the mass storage device 103 (step SS2). This step SS2 corresponds to the posted music acquisition procedure described in each claim, and the control unit 101 of the karaoke apparatus 10A that acquires the posted data 220 as described above in this step SS2 acquires the posted music acquisition described in each claim. Functions as a means.

<歌唱履歴の参照>
ところで、上記のように投稿ユーザによるオリジナルの楽曲であっても、既に上記特定の歌唱ユーザが一度でも歌唱したことがあったり、あるいは他人が歌うのを見たことがある場合には、上記ガイドボーカルの生成を行う必要がない。したがって、上記のような、特定の歌唱ユーザ自身が歌唱したあるいは他人の歌唱を見たことがある(このような場合を、以下適宜「投稿楽曲の視聴歴あり」という)か、若しくは、特定の歌唱ユーザ自身が歌唱したあるいは他人の歌唱を見たことがない(このような場合を、以下適宜「投稿楽曲の視聴歴なし」という)か、の見極めを行うために、上記特定の歌唱ユーザの歌唱履歴が参照される。すなわち、ホストサーバ20の歌唱履歴記憶部21には、複数のユーザそれぞれの歌唱履歴情報が、予め記憶されている。そして、上記ステップSS2で投稿データ220の取得が行われた後は、ステップSC2において、カラオケ装置10Aの制御部101からホストサーバ20へ、視聴有無の判断結果の要求が送信される。なお、この要求には、上記特定の歌唱ユーザのユーザIDが付されている(後述の図5のステップS120参照)。
<Reference to singing history>
By the way, even if it is the original music by the posting user as described above, if the specific singing user has already sung once, or has seen others sing, the guide There is no need to generate vocals. Therefore, as mentioned above, a specific singing user himself has sang or has seen other people's singing (this case is hereinafter referred to as “viewed history of posted music”), or a specific singing user In order to determine whether the singing user himself has sang or has never seen another person's singing (this case is referred to as “no viewing history of posted music” as appropriate), the specific singing user's Singing history is referenced. That is, the singing history information of each of a plurality of users is stored in advance in the singing history storage unit 21 of the host server 20. Then, after the posting data 220 is obtained in step SS2, a request for a viewing result is transmitted from the control unit 101 of the karaoke apparatus 10A to the host server 20 in step SC2. Note that the user ID of the specific singing user is attached to this request (see step S120 in FIG. 5 described later).

上記要求を受信したホストサーバ20では、視聴有無判断処理が実行される(ステップSS3)。この視聴有無判断処理の詳細を表すフローチャートを図5に示す。   Upon receiving the request, the host server 20 performs viewing presence / absence determination processing (step SS3). FIG. 5 is a flowchart showing details of the viewing presence / absence determination processing.

図5において、まずステップS100で、ホストサーバ20は、上記ステップSC2においてカラオケ装置10Aの制御部101から受信した上記特定の歌唱ユーザのユーザIDに基づき、歌唱履歴記憶部21(歌唱履歴記憶手段に相当)に記憶された当該特定の歌唱ユーザの歌唱履歴を取得する。   5, first, in step S100, the host server 20 determines the singing history storage unit 21 (in the singing history storage means) based on the user ID of the specific singing user received from the control unit 101 of the karaoke apparatus 10A in step SC2. The singing history of the specific singing user stored in (equivalent) is acquired.

歌唱履歴記憶部21に記憶された各歌唱ユーザの歌唱履歴の一例を図6に示す。この例では、各歌唱ユーザのユーザIDに、歌唱したことのある楽曲の曲ID、及び、当該楽曲のジャンルが、対応付けられて記憶されている。図示の例では、ユーザ「AAA」は、ID「555」の楽曲(ジャンル:ポップ)と、ID「666」の楽曲(ジャンル:ポップ)と、ID「999」の楽曲(ジャンル:レゲエ)と、を過去に歌唱している。ユーザ「BBB」は、ID「111」の楽曲(ジャンル:ポップ)と、ID「222」の楽曲(ジャンル:演歌)と、ID「444」の楽曲(ジャンル:演歌)と、を過去に歌唱している。ユーザ「CCC」は、ID「111」の楽曲(ジャンル:ポップ)と、ID「222」の楽曲(ジャンル:演歌)と、ID「333」の楽曲(ジャンル:POP)と、ID「777」の楽曲(ジャンル:POP)と、を過去に歌唱している。ユーザ「DDD」は、ID「888」の楽曲(ジャンル:レゲエ)と、ID「999」の楽曲(ジャンル:レゲエ)と、を過去に歌唱している。   An example of the singing history of each singing user stored in the singing history storage unit 21 is shown in FIG. In this example, the song ID of a song that has been sung and the genre of the song are stored in association with the user ID of each singing user. In the example shown in the figure, the user “AAA” has a music piece with ID “555” (genre: pop), a music piece with ID “666” (genre: pop), a music piece with ID “999” (genre: reggae), Singing in the past. The user “BBB” has sung in the past the music with the ID “111” (genre: pop), the music with the ID “222” (genre: enka), and the music with the ID “444” (genre: enka). ing. The user “CCC” has a song with ID “111” (genre: pop), a song with ID “222” (genre: enka), a song with ID “333” (genre: POP), and an ID “777”. The song (genre: POP) has been sung in the past. The user “DDD” has sung the song with the ID “888” (genre: reggae) and the song with the ID “999” (genre: reggae) in the past.

なお、上記ステップS100が各請求項記載の歌唱履歴取得手順に相当し、このステップS100を実行するホストサーバ20が、各請求項記載の歌唱履歴取得手段として機能する。   In addition, said step S100 is corresponded to the song history acquisition procedure as described in each claim, and the host server 20 which performs this step S100 functions as a song history acquisition means as described in each claim.

その後、ステップS110に移り、ホストサーバ20は、上記視聴有無判断部24により、上記ステップS100で取得された歌唱履歴に、上記ステップSC1で受信した曲IDが含まれているか否かを判定する。当該曲IDが含まれていたら判定が満たされ(S110:YES)、後述のステップS140に移る。当該曲IDが含まれていなかったら判定が満たされず(S110:NO)、ステップS120に移る。   Thereafter, the process proceeds to step S110, and the host server 20 determines whether or not the singing history acquired in step S100 includes the song ID received in step SC1 by the viewing presence / absence determination unit 24. If the song ID is included, the determination is satisfied (S110: YES), and the process proceeds to step S140 described later. If the song ID is not included, the determination is not satisfied (S110: NO), and the process proceeds to step S120.

ステップS120では、ホストサーバ20は、上記視聴有無判断部24により、この時点で、上記特定の歌唱ユーザとともにログインしてた他の歌唱ユーザのユーザID(ステップSC2で取得済み)を所定の条件(後述)により抽出し、当該他の歌唱ユーザが、上記ステップSC1で受信した曲IDの上記投稿楽曲が歌唱されたか否かを判定する。当該投稿楽曲が歌唱されていたら判定が満たされ(S120:YES)、後述のステップS140に移る。当該投稿楽曲が歌唱されていなかったら判定が満たされず(S120:NO)、ステップS130に移る。   In step S120, the host server 20 uses the viewing presence / absence determining unit 24 to obtain the user IDs of other singing users who have logged in together with the specific singing user at this time (obtained in step SC2) under a predetermined condition ( The other singing user determines whether or not the posted music of the music ID received in step SC1 has been sung. If the posted music is sung, the determination is satisfied (S120: YES), and the process proceeds to step S140 described later. If the posted music is not sung, the determination is not satisfied (S120: NO), and the process proceeds to step S130.

なお、他の歌唱ユーザを抽出する上記所定の条件とは、例えば、ホストサーバ20の歌唱履歴記憶部21には、ユーザそれぞれの歌唱履歴情報が記憶されている。歌唱履歴情報には、ユーザがログインした時間情報とログアウトした時間情報(ログインからログアウト迄の時間帯もしくは、ログイン、ログアウト時間の一方を基準とした時間長でもよい)と、歌唱したカラオケ装置10を特定する情報(例えば、シリアル番号,IPアドレスなど)も含まれている。ホストサーバ20は、特定のユーザがログインからログアウト迄の時間帯で歌唱したカラオケ装置と同じカラオケ装置を利用し、同じ時間帯でログインしていた他のユーザを、特定の歌唱ユーザとともにログインしていた他の歌唱ユーザとして、抽出する。   In addition, with the said predetermined conditions which extract another singing user, the singing history information of each user is memorize | stored in the singing history memory | storage part 21 of the host server 20, for example. The singing history information includes the time information when the user logged in and the time information when the user logged out (the time period from login to logout or the time length based on one of the login and logout times) and the singing karaoke apparatus 10. Information to be specified (for example, serial number, IP address, etc.) is also included. The host server 20 uses the same karaoke device as the karaoke device that the specific user sang in the time period from login to logout, and logs in another user who has logged in in the same time zone together with the specific singing user. Extract as other singing users.

ステップS130では、ホストサーバ20は、上記視聴有無判断部24により、上記特定の歌唱ユーザ自身が当該投稿楽曲を歌唱したこともなく、上記他の歌唱ユーザが当該投稿楽曲を歌唱するのを見たこともない、とみなし、当該投稿楽曲に対する上記特定の歌唱ユーザの視聴履歴を「視聴歴なし」とする。そして、このルーチンを終了する。   In step S130, the host server 20 saw that the other singing user sings the posted music without the specific singing user singing the posted music by the viewing presence / absence judging unit 24. The viewing history of the specific singing user with respect to the posted music is “no viewing history”. Then, this routine ends.

一方、ステップS140では、ホストサーバ20は、上記視聴有無判断部24により、上記特定の歌唱ユーザ自身が当該投稿楽曲を歌唱したことがあるか、若しくは、上記他の歌唱ユーザが当該投稿楽曲を歌唱するのを見たことがある、とみなし、当該投稿楽曲に対する上記特定の歌唱ユーザの視聴履歴を「視聴歴あり」とする。そして、このルーチンを終了する。なお、上記ステップS130及びステップS140が、各請求項記載のメロディ知見判定手順に相当し、これらのステップS130及びステップS140を実行するホストサーバ20が、各請求項記載のメロディ知見判定手段として機能する。   On the other hand, in step S140, the host server 20 causes the viewing presence / absence determination unit 24 to sing the posted song by the specific singing user or the other singing user sings the posted song. The viewing history of the specific singing user with respect to the posted music is assumed to be “with viewing history”. Then, this routine ends. In addition, the said step S130 and step S140 are equivalent to the melody knowledge determination procedure of each claim, and the host server 20 which performs these steps S130 and S140 functions as the melody knowledge determination means described in each claim. .

図2に戻り、上記ステップS130又はステップS140が終了すると、ホストサーバ20は、上記ステップS130又はステップS140で得た判定結果、すなわち「視聴歴なし」又は「視聴歴あり」の旨を、カラオケ装置10Aへ送信する(ステップSS4)。   Returning to FIG. 2, when step S130 or step S140 is completed, the host server 20 indicates the determination result obtained in step S130 or step S140, that is, “no viewing history” or “with viewing history” as a karaoke device. It transmits to 10A (step SS4).

上記「視聴歴なし」又は「視聴歴あり」の判定結果を受信したカラオケ装置10Aの制御部101では、この受信結果に基づき、ガイドボーカル付与処理が実行される(ステップSC3)。このガイドボーカル付与処理の詳細を表すフローチャートを図7に示す。   The control unit 101 of the karaoke apparatus 10A that has received the determination result “no viewing history” or “with viewing history” executes a guide vocal provision process based on the reception result (step SC3). FIG. 7 shows a flowchart showing details of the guide vocal imparting process.

前述したように、上記投稿ユーザにより作成された投稿データ220には、当該投稿楽曲の楽曲データ224、楽譜情報222、及び、歌詞データ223に加え、投稿ユーザ自らの歌唱による、当該楽曲データの歌唱音声データが含まれている場合がある。このような場合には、当該歌唱音声データによりそのままメロディラインを確認できるので、ガイドボーカル音声の生成を行う必要がない。したがって、図7において、まずステップS200で、カラオケ装置10Aの制御部101は、上記ステップSS2でホストサーバ20から受信した投稿データ220に、上記歌唱音声データが含まれているか否か、を判断する。なお、この判断の手法は、例えば各投稿データ220に、歌唱音声データが含まれているか否かのフラグが付されている場合には、当該フラグをチェックすればよい。あるいは、投稿データ220に対し、公知の音声周波数検出を実行して判断するようにしてもよい。このステップS200が各請求項記載の歌唱音声判定手順に相当し、このステップS200を実行するカラオケ装置10Aの制御部101が、各請求項記載の歌唱音声判定手段として機能する。   As described above, the posted data 220 created by the posting user includes the song data 224, the score information 222, and the lyrics data 223 of the posted song, and the singing of the song data by the posting user's own singing. Audio data may be included. In such a case, since the melody line can be confirmed as it is based on the singing voice data, it is not necessary to generate a guide vocal voice. Therefore, in FIG. 7, first, in step S200, the control unit 101 of the karaoke apparatus 10A determines whether or not the singing voice data is included in the post data 220 received from the host server 20 in step SS2. . For example, when each posting data 220 is flagged as to whether or not singing voice data is included, this determination method may be checked. Alternatively, it may be determined by performing known audio frequency detection on the post data 220. This step S200 corresponds to the singing voice determination procedure described in each claim, and the control unit 101 of the karaoke apparatus 10A that executes this step S200 functions as a singing voice determination unit described in each claim.

その後、上記ステップSS4でホストサーバ20から受信した「視聴歴なし」又は「視聴歴あり」の判断結果と、ステップS201で、上記ステップS200における歌唱音声有無の判断結果と、に基づき、カラオケ装置10Aの制御部101は、上記ホストサーバ20から受信した判断結果が「視聴歴なし」であって、かつ上記ステップS200における判断結果が「歌唱音声が含まれていない」であったか否かを判定する。「視聴歴なし」「歌唱音声が含まれていない」の判断結果であった場合には判定が満たされ(S201:YES)、ステップS215に移る。「視聴歴あり」又は「歌唱音声が含まれている」のいずれかの判断結果があった場合には判定が満たされず(S201:NO)、このルーチンを終了して、後述の図2のステップSC4に移る。   Thereafter, based on the determination result “no viewing history” or “with viewing history” received from the host server 20 in step SS4 and the determination result of the presence or absence of singing voice in step S200 in step S201, the karaoke apparatus 10A The control unit 101 determines whether the determination result received from the host server 20 is “no viewing history” and the determination result in step S200 is “no singing voice”. If the determination result is “no viewing history” or “no singing voice”, the determination is satisfied (S201: YES), and the process proceeds to step S215. If there is a determination result of either “viewing history is present” or “singing voice is included”, the determination is not satisfied (S201: NO), this routine is ended, and the step of FIG. Move to SC4.

上記「視聴歴なし」「歌唱音声が含まれていない」の判断結果であった場合には、前述のメロディラインの不明による歌唱困難が生じる。そこで、この場合には、ガイドボーカル音声を生成するために、ステップS215で、カラオケ装置10Aの制御部101は、前述のようにして投稿されホストサーバ20に記憶された、(上記第2投稿ユーザによる)上記投稿楽曲の歌唱音声データが存在するか否かを判定する。投稿楽曲の歌唱音声データの存在が確認されればこの判定が満たされ(S215:YES)、ステップS220へ移る。投稿楽曲の歌唱音声データの存在が確認できなければこの判定が満たされず(S215:NO)このルーチンを終了し、後述の図2のステップSC4に移る。なお、この場合は、当該ステップSC4においては、例えば適宜の音源を用いた人工音声等によりガイドボーカル音声を作成すればよい。   When the determination result is “no viewing history” or “no singing voice”, singing difficulty due to the unknown melody line occurs. Therefore, in this case, in order to generate the guide vocal voice, in step S215, the control unit 101 of the karaoke apparatus 10A is posted as described above and stored in the host server 20 (the second posting user). It is determined whether or not the singing voice data of the posted music exists. If the existence of the singing voice data of the posted music is confirmed, this determination is satisfied (S215: YES), and the process proceeds to step S220. If the existence of the singing voice data of the posted music cannot be confirmed, this determination is not satisfied (S215: NO), this routine is terminated, and the process proceeds to Step SC4 in FIG. In this case, in step SC4, a guide vocal sound may be created by an artificial sound using an appropriate sound source, for example.

ステップS220では、カラオケ装置10Aの制御部101は、ホストサーバ20に対し、当該特定の歌唱ユーザの歌唱ジャンルの要求を送信する。図6に示したように、ホストサーバ20の歌唱履歴記憶部21に記憶された歌唱履歴には、各ユーザの歌唱した楽曲のジャンルも併せて記録されている。上記歌唱ジャンルの要求を受信したホストサーバ20は、上記歌唱履歴中に記録されたジャンルを参照して、要求された特定の歌唱ユーザの歌唱ジャンルを決定する(図2のステップSS5)。この決定では、ユーザが歌唱した各楽曲をジャンル毎に集計したときに、最も楽曲数が多いジャンルを当該ユーザの歌唱ジャンル、とすればよい。図6に示した例では、ユーザ「AAA」は、ジャンル:POPの曲を最も多く歌唱していることから歌唱ジャンルは「POP」となる。ユーザ「BBB」は、ジャンル:演歌の曲を最も多く歌唱していることから歌唱ジャンルは「演歌」となる。ユーザ「CCC」は、ジャンル:POPの曲を最も多く歌唱していることから歌唱ジャンルは「POP」となる。ユーザ「DDD」は、ジャンル:レゲエの曲を最も多く歌唱していることから歌唱ジャンルは「レゲエ」となる。なお、上記ステップSS5を実行するホストサーバ20が、各請求項記載の歌唱ジャンル決定手段として機能する。なお、この歌唱ジャンルの決定は、随時ホストサーバ20において実行され、その決定結果が保存されているようにしてもよい。   In step S <b> 220, the control unit 101 of the karaoke apparatus 10 </ b> A transmits a request for the singing genre of the specific singing user to the host server 20. As shown in FIG. 6, the singing history stored in the singing history storage unit 21 of the host server 20 also records the genre of the song sung by each user. The host server 20 that has received the request for the singing genre refers to the genre recorded in the singing history and determines the singing genre of the requested specific singing user (step SS5 in FIG. 2). In this determination, when the songs sung by the user are aggregated for each genre, the genre with the largest number of songs may be set as the singing genre of the user. In the example illustrated in FIG. 6, the user “AAA” sings the genre: POP most frequently, so the singing genre is “POP”. Since the user “BBB” sings the genre: Enka song most, the singing genre is “Enka”. Since the user “CCC” sings the genre: POP most frequently, the singing genre is “POP”. Since the user “DDD” sings the genre: reggae song most, the singing genre is “reggae”. In addition, the host server 20 which performs said step SS5 functions as a singing genre determination means as described in each claim. The determination of the singing genre may be executed by the host server 20 as needed, and the determination result may be stored.

その後、カラオケ装置10Aの制御部101は、ステップS230において、上記のようにして決定された後にホストサーバ20からカラオケ装置10Aへ送信された、上記特定の歌唱ユーザの歌唱ジャンルを取得する。その後、ステップS235に移る。   Thereafter, in step S230, the control unit 101 of the karaoke apparatus 10A acquires the singing genre of the specific singing user transmitted from the host server 20 to the karaoke apparatus 10A after being determined as described above. Thereafter, the process proceeds to step S235.

ステップS235では、カラオケ装置10Aの制御部101は、前述のようにして既に投稿されホストサーバ20の歌唱投稿記憶部23に記憶されている、上記特定の歌唱ユーザが歌おうとしている上記投稿楽曲の歌唱音声データを、前述の曲IDを用いて特定し、取得する。なお、曲IDでなく、上記楽譜情報222やあるいは上記歌詞データ223を用いて特定するようにしてもよい。その際、上記ステップS230で取得された歌唱ジャンルに基づき、上記特定の歌唱ユーザと同一ジャンルのユーザによる歌唱音声データが取得される。また、そのような歌唱音声データを提供した同一ジャンルのユーザが複数名存在した場合には、その中から、各歌唱時における採点結果の得点が、最高得点であったユーザの歌唱音声データが取得される。すなわち、各カラオケ装置10の制御部101は、公知の採点機能を備えており(各請求項記載の採点手段に相当)、上記のようにして歌唱音声データの投稿が行われホストサーバ20の歌唱投稿記憶部23に歌唱音声データが記憶される際には、当該歌唱音声データを生成するために歌唱した際の採点結果(得点)も併せて記憶されるようになっている。なお、各カラオケ装置10からの投稿後に、ホストサーバ20側で採点を行うようにしてもよい。   In step S235, the control unit 101 of the karaoke apparatus 10A transmits the posted music that the specific singing user is about to sing and has already been posted as described above and stored in the singing post storage unit 23 of the host server 20. Singing voice data is specified and acquired using the above-mentioned song ID. In addition, you may make it specify using the said musical score information 222 or the said lyric data 223 instead of music ID. At that time, based on the singing genre acquired in step S230, singing voice data by a user of the same genre as the specific singing user is acquired. Also, when there are multiple users of the same genre who provided such singing voice data, the singing voice data of the user whose scoring result score at the time of each singing was the highest score is obtained Is done. That is, the control unit 101 of each karaoke apparatus 10 has a known scoring function (corresponding to the scoring means described in each claim), and the singing voice data is posted as described above, and the singing of the host server 20 is performed. When singing voice data is stored in the posting storage unit 23, a scoring result (score) when singing to generate the singing voice data is also stored. In addition, after posting from each karaoke apparatus 10, you may make it perform scoring by the host server 20 side.

上記のようにしてホストサーバ20の歌唱投稿記憶部23に記憶されている、各ユーザの歌唱音声データの一覧を図8に示す。図示の例では、前述のようにして決定されるジャンルがPOPであるユーザ「PPP」は、ID「001」の投稿楽曲を歌唱した歌唱音声データ(その際の得点は85点)と、ID「002」の投稿楽曲を歌唱した歌唱音声データ(得点は90点)と、ID「005」の投稿楽曲を歌唱した歌唱音声データ(得点は90点)と、を既に投稿している。同様に、ジャンルが演歌であるユーザ「QQQ」は、ID「002」の投稿楽曲を歌唱した歌唱音声データ(得点は70点)と、ID「008」の投稿楽曲を歌唱した歌唱音声データ(得点は75点)と、ID「009」の投稿楽曲を歌唱した歌唱音声データ(得点は60点)と、を既に投稿している。また、ジャンルがPOPであるユーザ「RRR」は、ID「001」の投稿楽曲を歌唱した歌唱音声データ(得点は80点)と、ID「005」の投稿楽曲を歌唱した歌唱音声データ(得点は85点)と、ID「011」の投稿楽曲を歌唱した歌唱音声データ(得点は80点)と、ID「015」の投稿楽曲を歌唱した歌唱音声データ(得点は90点)と、を既に投稿している。また、ジャンルがレゲエであるユーザ「SSS」は、ID「001」の投稿楽曲を歌唱した歌唱音声データ(得点は90点)と、ID「007」の投稿楽曲を歌唱した歌唱音声データ(得点は95点)と、を既に投稿している。   FIG. 8 shows a list of the singing voice data of each user stored in the singing post storage unit 23 of the host server 20 as described above. In the example shown in the figure, the user “PPP” whose genre determined as described above is POP, singing voice data (score at that time is 85 points) singing the posted music of ID “001”, and ID “ Singing voice data (scoring is 90 points) for singing the “002” posted music and singing voice data (score is 90 points) for the ID “005”. Similarly, the user “QQQ” whose genre is enka is singing voice data (score is 70 points) singing the posted music of ID “002” and singing voice data (scores) of the posted music of ID “008”. And 75 points) and singing voice data (score is 60 points) singing the posted music of ID “009”. In addition, the user “RRR” whose genre is POP, singing voice data (score is 80 points) singing the posted music of ID “001”, and singing voice data (score is singing the posted music of ID “005”) 85 points), singing voice data singing the posted music with ID “011” (score is 80 points), and singing voice data singing the posted music with ID “015” (score is 90 points). doing. In addition, the user “SSS” whose genre is reggae is singing voice data (score is 90 points) singing the posted music piece with ID “001” and singing voice data (score is the score is singing the posted music piece with ID “007”). (95 points).

図示のような投稿状態の場合に、上記特定の歌唱ユーザが歌唱しようとしている(言い換えればガイドボーカル音声を必要としている)上記投稿楽曲の曲IDが「001」であり、かつ当該特定の歌唱ユーザの歌唱ジャンルが「POP」であったとする。この場合、曲ID「001」の歌唱音声データは、前述のように、ユーザ「PPP」と、ユーザ「RRR」と、ユーザ「SSS」と、の合計3名が投稿済みである。しかしながら、ユーザ「SSS]の歌唱ジャンルはレゲエであり上記特定の歌唱ユーザの歌唱ジャンルであるPOPとは異なるため、除外される。そして、上記特定の歌唱ユーザと同一の歌唱ジャンル(POP)であるユーザ「PPP」とユーザ「RRR」のうち、得点が所定値(例えば70点)以上であってかつ最高得点である、ユーザ「PPP」による曲ID「001」の歌唱音声データ(この例では得点85点)が、ガイドボーカル生成用の歌唱音声データとして選択され、カラオケ装置10Aの制御部101によって取得され、大容量制御装置103に記憶される。図7に戻り、以上のようにしてステップS235が完了すると、ステップS250に移る。   In the posting state as shown in the figure, the specific singing user is trying to sing (in other words, a guide vocal voice is required) and the tune ID of the posted musical piece is “001” and the specific singing user Suppose that the singing genre is “POP”. In this case, the singing voice data of the song ID “001” has been posted by a total of three people, the user “PPP”, the user “RRR”, and the user “SSS” as described above. However, it is excluded because the singing genre of the user “SSS” is reggae and different from the POP that is the singing genre of the specific singing user, and is the same singing genre (POP) as the specific singing user. Singing voice data of the song ID “001” by the user “PPP” whose score is equal to or higher than a predetermined value (for example, 70 points) among the user “PPP” and the user “RRR” (in this example, the score) 85 points) is selected as singing voice data for generating guide vocals, acquired by the control unit 101 of the karaoke apparatus 10A, and stored in the large-capacity control apparatus 103. Returning to FIG. 7, when step S235 is completed as described above, the process proceeds to step S250.

ステップS250では、カラオケ装置10Aの制御部101は、上記ステップS235で取得された歌唱音声データを用いて、ガイド音声ボーカルを生成する。この生成は、上記取得された歌唱音声データをそのまま使用できる場合は(特に加工等を行うことなく)そのまま転用して生成され、必要があれば適宜に音質等の加工が公知の手法により行われる。生成されたガイドボーカル音声は、例えば改めて上記大容量記憶装置103に記憶される。上記ステップS235及びステップS250が各請求項記載のガイドボーカル生成手順に相当し、これらのステップを実行するカラオケ装置10Aの制御部101が、各請求項記載のガイドボーカル生成手段として機能する。   In step S250, the control unit 101 of the karaoke apparatus 10A generates a guide voice vocal using the singing voice data acquired in step S235. This generation is generated by diverting the acquired singing voice data as it is (without any special processing), and processing of sound quality, etc. is appropriately performed by a known method if necessary. . The generated guide vocal sound is stored in the mass storage device 103 again, for example. Steps S235 and S250 correspond to the guide vocal generation procedure described in each claim, and the control unit 101 of the karaoke apparatus 10A that executes these steps functions as a guide vocal generation unit described in each claim.

図2に戻り、以上のようにしてステップSC3のガイドボーカル付与処理が終了すると、カラオケ装置10Aの制御部101の制御に基づき、上記投稿楽曲の楽曲データ224が上記大容量記憶装置103から読み出されて音源106等によって再生されると共に、これに同期して、上記ステップS250で生成されたガイドボーカル音声が大容量記憶装置103から読み出されて再生される(ステップSC4)。言い換えれば、当該投稿楽曲がガイドボーカル付きで再生される。また、このとき、歌詞データ223による歌詞表示がカラオケ装置10Aの上記表示部109によって行われる。このステップSC4が各請求項記載の音声・楽曲再生手順に相当し、このステップSC4を実行するカラオケ装置10Aの制御部101が、各請求項記載の音声・楽曲再生手段として機能する。   Returning to FIG. 2, when the guide vocal giving process in step SC <b> 3 is completed as described above, the music data 224 of the posted music is read from the mass storage device 103 based on the control of the control unit 101 of the karaoke apparatus 10 </ b> A. In addition to being reproduced by the sound source 106 and the like, the guide vocal sound generated in step S250 is read out from the mass storage device 103 and reproduced in synchronism with this (step SC4). In other words, the posted music is played with a guide vocal. At this time, lyrics display by the lyrics data 223 is performed by the display unit 109 of the karaoke apparatus 10A. This step SC4 corresponds to the voice / music reproduction procedure described in each claim, and the control unit 101 of the karaoke apparatus 10A executing this step SC4 functions as the voice / music reproduction means described in each claim.

以上説明したように、本実施形態においては、投稿ユーザによるオリジナル投稿楽曲の投稿データ220に歌唱音声データが含まれておらず、かつ当該投稿楽曲に対し、特定の歌唱ユーザの歌唱履歴や他ユーザの歌唱を見た履歴がない場合には、既に投稿されてホストサーバ20に記憶されている他のユーザによる歌唱音声データを用いてガイドボーカル音声が生成されて再生される。これにより、上記特定の歌唱ユーザが、投稿ユーザの上記投稿楽曲のメロディラインを知らなくても、容易かつ円滑に当該楽曲の歌唱を行うことができる。したがって、利便性を向上することができる。   As described above, in the present embodiment, the singing voice data is not included in the posting data 220 of the original posted music by the posting user, and the specific singing user's singing history and other users are included in the posted music. If there is no history of watching the song, a guide vocal voice is generated and reproduced using song voice data by other users already posted and stored in the host server 20. Thereby, even if the said specific singing user does not know the melody line of the said contribution music of a contribution user, it can sing the said music easily and smoothly. Therefore, convenience can be improved.

また、本実施形態では特に、歌唱履歴に基づき上記特定の歌唱ユーザの歌唱ジャンルが決定され、その歌唱ジャンルに対応したユーザの歌唱音声データを用いてガイドボーカル音声が生成される。これにより、ガイドボーカル音声の生成の際、上記特定の歌唱ユーザの歌唱嗜好に合致した、より最適な音声態様のガイドボーカル音声を生成することができる。この結果、さらに利便性を向上することができる。   In this embodiment, in particular, the singing genre of the specific singing user is determined based on the singing history, and the guide vocal voice is generated using the singing voice data of the user corresponding to the singing genre. Thereby, at the time of the production | generation of a guide vocal audio | voice, the guide vocal audio | voice of the more optimal audio | voice aspect which matched the singing preference of the said specific singing user can be produced | generated. As a result, the convenience can be further improved.

また、本実施形態では特に、上記ガイドボーカル音声の生成のために他のユーザが投稿した歌唱音声データを活用する際、採点結果が所定値以上であるものを用いて、ガイドボーカル音声を生成する。これにより、ガイドボーカル音声の生成の際、比較的歌唱が上手なユーザの歌唱音声データを確実に用いてガイドボーカル音声を生成することができる。この結果、ガイドボーカル音声によるガイド機能を向上させることができるので、さらに利便性を向上することができる。   In this embodiment, in particular, when singing voice data posted by another user is used to generate the guide vocal voice, the guide vocal voice is generated by using the scoring result that is a predetermined value or more. . Thereby, when the guide vocal sound is generated, the guide vocal sound can be generated by reliably using the singing sound data of the user who is relatively good at singing. As a result, the guide function using the guide vocal voice can be improved, and the convenience can be further improved.

なお、以上において、図2、図4、図5、図7等に示すフローチャートは本発明を上記フローに示す手順に限定するものではなく、発明の趣旨及び技術的思想を逸脱しない範囲内で手順の追加・削除又は順番の変更等をしてもよい。   In the above, the flowcharts shown in FIG. 2, FIG. 4, FIG. 5, FIG. 7, etc. are not intended to limit the present invention to the procedure shown in the above-mentioned flow, but are within the scope not departing from the spirit and technical idea of the invention. May be added / deleted or the order may be changed.

また、以上既に述べた以外にも、上記実施形態や各変形例による手法を適宜組み合わせて利用しても良い。   In addition to those already described above, the methods according to the above-described embodiments and modifications may be used in appropriate combination.

その他、一々例示はしないが、本発明は、その趣旨を逸脱しない範囲内において、種々の変更が加えられて実施されるものである。   In addition, although not illustrated one by one, the present invention is implemented with various modifications within a range not departing from the gist thereof.

1 通信カラオケシステム(投稿楽曲演奏システム)
21 歌唱履歴記憶部(歌唱履歴記憶手段)
22 楽曲投稿記憶部(第1投稿記憶手段)
23 歌唱投稿記憶部(第2投稿記憶手段)
106 音源
107 音声制御部
108 スピーカ
220 投稿データ
222 楽譜情報
223 歌詞データ
224 楽曲データ(カラオケ楽曲データ)
1 Online karaoke system (contributed music performance system)
21 Singing history storage unit (singing history storage means)
22 Music contribution storage section (first contribution storage means)
23 Singing Post Storage Unit (Second Post Storage Unit)
106 sound source 107 audio control unit 108 speaker 220 post data 222 score information 223 lyrics data 224 music data (karaoke music data)

Claims (4)

第1投稿ユーザにより作成された第1楽曲に係わる、投稿楽曲データ、歌唱メロディの楽譜情報、及び、歌詞データを送信する第1投稿送信手段と、
前記第1投稿送信手段からの送信に応じて、少なくとも、前記投稿楽曲データ、前記楽譜情報、及び前記歌詞データを、前記第1楽曲の楽曲識別情報とともに第1投稿データとして記憶する第1投稿記憶手段と、
所望の第2楽曲に係わる、第2投稿ユーザによる歌唱音声データを送信する第2投稿送信手段と、
前記第2投稿送信手段からの送信に応じて、少なくとも、前記歌唱音声データを第2投稿データとして記憶する第2投稿記憶手段と、
複数の歌唱ユーザそれぞれの歌唱履歴情報を記憶する歌唱履歴記憶手段と、
特定の歌唱ユーザの指示に基づき、前記第1投稿記憶手段に記憶された前記第1投稿データに含まれる前記投稿楽曲データ及び前記歌詞データを前記第1投稿記憶手段から取得する投稿楽曲取得手段と、
前記特定の歌唱ユーザの指示に基づき、前記投稿楽曲取得手段により取得された前記投稿楽曲データが含まれる前記第1投稿データに、対応する歌唱音声データが含まれているか否かを判定する歌唱音声判定手段と、
前記特定の歌唱ユーザの指示に基づき、対応する当該特定の歌唱ユーザの歌唱履歴情報を前記歌唱履歴記憶手段から取得する歌唱履歴取得手段と、
前記歌唱履歴取得手段により取得された前記歌唱履歴情報に基づき、前記投稿楽曲取得手段により取得された前記投稿楽曲データの前記歌唱メロディに対する、前記特定の歌唱ユーザの知見の有無を判定するメロディ知見判定手段と、
前記歌唱音声判定手段により前記第1投稿データに前記歌唱音声データが含まれていないと判定され、かつ、前記メロディ知見判定手段により前記投稿楽曲データの前記歌唱メロディに対し前記特定の歌唱ユーザの知見がないと判定された場合に、前記第2投稿記憶手段から前記第2投稿データを読み出し、前記第2投稿データの楽曲識別情報、楽譜情報、歌詞データのいずれかと、前記第1投稿記憶手段に記憶された前記第1投稿データの前記楽曲識別情報、前記楽譜情報、前記歌詞データのいずれかと、を比較することで、当該第1投稿データと同じ楽曲の前記第2投稿データを特定し、その特定された第1投稿データと同じ楽曲の第2投稿データに含まれる前記第2投稿ユーザの前記歌唱音声データを用いて、当該楽曲のガイドボーカル音声を生成するガイドボーカル生成手段と、
前記ガイドボーカル生成手段により生成された前記ガイドボーカル音声を、前記投稿楽曲取得手段により取得された前記投稿楽曲データとともに再生する音声・楽曲再生手段と、
を有することを特徴とする投稿楽曲演奏システム。
First posted transmission means for transmitting posted music data, musical score information of singing melody, and lyrics data related to the first music created by the first posting user;
A first posting memory that stores at least the posted music data, the score information, and the lyrics data as first posted data together with the music identification information of the first music in response to transmission from the first posting transmitting means. Means,
Second posting transmission means for transmitting singing voice data by the second posting user relating to the desired second music;
In response to transmission from the second posting transmission means, at least second posting storage means for storing the singing voice data as second posting data;
Singing history storage means for storing singing history information of each of a plurality of singing users;
Based on an instruction from a specific singing user, posted music acquisition means for acquiring the posted music data and the lyric data included in the first posted data stored in the first posted storage means from the first posted storage means; ,
A singing voice that determines whether or not corresponding singing voice data is included in the first posted data that includes the posted music data acquired by the posted music acquisition means based on an instruction of the specific singing user. A determination means;
Based on the instruction of the specific singing user, singing history acquisition means for acquiring the corresponding singing history information of the specific singing user from the singing history storage means,
Melody knowledge determination for determining presence / absence of knowledge of the specific singing user with respect to the singing melody of the posted music data acquired by the posted music acquisition means based on the singing history information acquired by the singing history acquisition means Means,
The singing voice determination means determines that the singing voice data is not included in the first post data, and the melody knowledge determination means determines the knowledge of the specific singing user with respect to the singing melody of the posted music data. When it is determined that there is not, the second posted data is read from the second posted storage means, and any one of the music identification information, the score information, and the lyric data of the second posted data is stored in the first posted storage means. The second posted data of the same music as the first posted data is identified by comparing the music identification information, the score information, or the lyrics data of the stored first posted data, Using the singing voice data of the second posting user included in the second posting data of the same music as the specified first posting data, the guide vocal of the music And a guide vocal generating means for generating a sound,
Voice / music reproduction means for reproducing the guide vocal sound generated by the guide vocal generation means together with the posted music data acquired by the posted music acquisition means;
The contribution music performance system characterized by having.
請求項1記載の投稿楽曲演奏システムにおいて、
前記歌唱履歴取得手段により取得された前記歌唱履歴情報に基づき、前記特定の歌唱ユーザの歌唱ジャンルを決定する歌唱ジャンル決定手段を有し、
前記ガイドボーカル生成手段は、
前記歌唱ジャンル決定手段により決定された前記歌唱ジャンルに対応した、前記第2投稿ユーザの前記歌唱音声データを用いて、前記ガイドボーカル音声を生成する
ことを特徴とする投稿楽曲演奏システム。
The posted music performance system according to claim 1,
Based on the singing history information acquired by the singing history acquisition means, the singing genre determining means for determining the singing genre of the specific singing user,
The guide vocal generating means includes
The posted music performance system, wherein the guide vocal sound is generated using the singing voice data of the second posting user corresponding to the singing genre determined by the singing genre determining means.
請求項2記載の投稿楽曲演奏システムにおいて、
前記第2投稿送信手段により送信される前記歌唱音声データを採点する採点手段を有し、
前記ガイドボーカル生成手段は、
前記歌唱ジャンル決定手段により決定された前記歌唱ジャンルに対応した、前記第2投稿ユーザの前記歌唱音声データであって、かつ、前記採点手段による採点結果が所定値以上であるものを用いて、前記ガイドボーカル音声を生成する
ことを特徴とする投稿楽曲演奏システム。
The posted music performance system according to claim 2,
Scoring means for scoring the singing voice data transmitted by the second post transmission means;
The guide vocal generating means includes
Using the singing voice data of the second posting user corresponding to the singing genre determined by the singing genre determining means, and the scoring result by the scoring means being a predetermined value or more, A posted music performance system characterized by generating a guide vocal voice.
第1投稿ユーザにより作成された第1楽曲に係わる、投稿楽曲データ、歌唱メロディの楽譜情報、及び、歌詞データを送信する第1投稿送信手段と、
前記第1投稿送信手段からの送信に応じて、少なくとも、前記投稿楽曲データ、前記楽譜情報、及び前記歌詞データを、前記第1楽曲の楽曲識別情報とともに第1投稿データとして記憶する第1投稿記憶手段と、
所望の第2楽曲に係わる、第2投稿ユーザによる歌唱音声データを送信する第2投稿送信手段と、
前記第2投稿送信手段からの送信に応じて、少なくとも、前記歌唱音声データを第2投稿データとして記憶する第2投稿記憶手段と、
複数の歌唱ユーザそれぞれの歌唱履歴情報を記憶する歌唱履歴記憶手段と、
を有する投稿処理システムが実行する投稿楽曲演奏方法であって、
特定の歌唱ユーザの指示に基づき、前記第1投稿記憶手段に記憶された前記第1投稿データに含まれる前記投稿楽曲データ及び前記歌詞データを前記第1投稿記憶手段から取得する投稿楽曲取得手順と、
前記特定の歌唱ユーザの指示に基づき、前記投稿楽曲取得手順で取得された前記投稿楽曲データが含まれる前記第1投稿データに、対応する歌唱音声データが含まれているか否かを判定する歌唱音声判定手順と、
前記特定の歌唱ユーザの指示に基づき、対応する当該特定の歌唱ユーザの歌唱履歴情報を前記歌唱履歴記憶手段から取得する歌唱履歴取得手順と、
前記歌唱履歴取得手順で取得された前記歌唱履歴情報に基づき、前記投稿楽曲取得手順で取得された前記投稿楽曲データの前記歌唱メロディに対する、前記特定の歌唱ユーザの知見の有無を判定するメロディ知見判定手順と、
前記歌唱音声判定手順で前記第1投稿データに前記歌唱音声データが含まれていないと判定され、かつ、前記メロディ知見判定手順で前記投稿楽曲データの前記歌唱メロディに対し前記特定の歌唱ユーザの知見がないと判定された場合に、前記第2投稿記憶手段から前記第2投稿データを読み出し、前記第2投稿データの楽曲識別情報、楽譜情報、歌詞データのいずれかと、前記第1投稿記憶手段に記憶された前記第1投稿データの前記楽曲識別情報、前記楽譜情報、前記歌詞データのいずれかと、を比較することで、当該第1投稿データと同じ楽曲の前記第2投稿データを特定し、その特定された第1投稿データと同じ楽曲の第2投稿データに含まれる前記第2投稿ユーザの前記歌唱音声データを用いて、当該楽曲のガイドボーカル音声を生成するガイドボーカル生成手順と、
前記ガイドボーカル生成手順で生成された前記ガイドボーカル音声を、前記投稿楽曲取得手順で取得された前記投稿楽曲データとともに再生する音声・楽曲再生手順と、
を有することを特徴とする投稿楽曲演奏方法。
First posted transmission means for transmitting posted music data, musical score information of singing melody, and lyrics data related to the first music created by the first posting user;
A first posting memory that stores at least the posted music data, the score information, and the lyrics data as first posted data together with the music identification information of the first music in response to transmission from the first posting transmitting means. Means,
Second posting transmission means for transmitting singing voice data by the second posting user relating to the desired second music;
In response to transmission from the second posting transmission means, at least second posting storage means for storing the singing voice data as second posting data;
Singing history storage means for storing singing history information of each of a plurality of singing users;
A posted music performance method executed by a post processing system having
A posted song acquisition procedure for acquiring the posted song data and the lyrics data included in the first posted data stored in the first posted storage unit from the first posted storage unit based on an instruction of a specific singing user; ,
Based on the instruction of the specific singing user, the singing voice for determining whether or not the corresponding singing voice data is included in the first posting data including the posted music data acquired in the posted music acquisition procedure. Judgment procedure;
Based on the instruction of the specific singing user, the singing history acquisition procedure for acquiring the corresponding singing history information of the specific singing user from the singing history storage means,
Melody knowledge determination for determining the presence or absence of knowledge of the specific singing user for the singing melody of the posted music data acquired in the posted music acquisition procedure based on the singing history information acquired in the singing history acquisition procedure Procedure and
It is determined in the singing voice determination procedure that the singing voice data is not included in the first post data, and the specific singing user's knowledge with respect to the singing melody of the posted music data in the melody knowledge determination procedure When it is determined that there is not, the second posted data is read from the second posted storage means, and any one of the music identification information, the score information, and the lyric data of the second posted data is stored in the first posted storage means. The second posted data of the same music as the first posted data is identified by comparing the music identification information, the score information, or the lyrics data of the stored first posted data, Using the singing voice data of the second posting user included in the second posting data of the same music as the identified first posting data, the guide vocal voice of the music is And a guide vocal generation procedure to be formed,
An audio / music reproduction procedure for reproducing the guide vocal audio generated in the guide vocal generation procedure together with the posted music data acquired in the posted music acquisition procedure;
A posted music performance method characterized by comprising:
JP2013178255A 2013-08-29 2013-08-29 Posted music performance system and posted music performance method Active JP5708735B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013178255A JP5708735B2 (en) 2013-08-29 2013-08-29 Posted music performance system and posted music performance method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013178255A JP5708735B2 (en) 2013-08-29 2013-08-29 Posted music performance system and posted music performance method

Publications (2)

Publication Number Publication Date
JP2015045823A JP2015045823A (en) 2015-03-12
JP5708735B2 true JP5708735B2 (en) 2015-04-30

Family

ID=52671362

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013178255A Active JP5708735B2 (en) 2013-08-29 2013-08-29 Posted music performance system and posted music performance method

Country Status (1)

Country Link
JP (1) JP5708735B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7063533B2 (en) * 2016-09-02 2022-05-09 株式会社第一興商 Karaoke system

Also Published As

Publication number Publication date
JP2015045823A (en) 2015-03-12

Similar Documents

Publication Publication Date Title
JP5713048B2 (en) Karaoke system
JP5269829B2 (en) Karaoke system, karaoke system control method, karaoke system control program, and information recording medium thereof
JP5220494B2 (en) Low-level music search system for music selectors
JP5029644B2 (en) Karaoke network system
JP5459331B2 (en) Post reproduction apparatus and program
JP5986387B2 (en) Information processing program, information processing apparatus, lyrics display method, and communication system
JP5708735B2 (en) Posted music performance system and posted music performance method
JP2014191192A (en) Reference data creation device, reference data creation system, and performance terminal device
JP6196839B2 (en) A communication karaoke system characterized by voice switching processing during communication duets
JP5660408B1 (en) Posted music performance system and posted music performance method
JP6316099B2 (en) Karaoke equipment
JP2014194471A (en) Karaoke device, karaoke program, and recording medium
JP6219750B2 (en) Singing battle karaoke system
JP7093270B2 (en) Karaoke system, karaoke equipment
JP5234950B2 (en) Singing recording system
JP5220493B2 (en) A high-level music search system for music selectors
JP5046862B2 (en) Karaoke system with automatic selection function
JP2007188175A (en) Server device, terminal device, and program
JP2016033616A (en) Performance support apparatus and performance support system
JP6144593B2 (en) Singing scoring system
JP7295777B2 (en) karaoke device
JP7312683B2 (en) karaoke device
JP6574697B2 (en) Karaoke system
JP2015191162A (en) Karaoke device, information processing apparatus and program
JP5472245B2 (en) Karaoke equipment

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141224

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150203

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150216

R150 Certificate of patent or registration of utility model

Ref document number: 5708735

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150