JP6589521B2 - Singing standard data correction device, karaoke system, program - Google Patents

Singing standard data correction device, karaoke system, program Download PDF

Info

Publication number
JP6589521B2
JP6589521B2 JP2015193711A JP2015193711A JP6589521B2 JP 6589521 B2 JP6589521 B2 JP 6589521B2 JP 2015193711 A JP2015193711 A JP 2015193711A JP 2015193711 A JP2015193711 A JP 2015193711A JP 6589521 B2 JP6589521 B2 JP 6589521B2
Authority
JP
Japan
Prior art keywords
singing
data
song
evaluation
difference
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015193711A
Other languages
Japanese (ja)
Other versions
JP2017068046A (en
Inventor
俊希 河合
俊希 河合
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Brother Industries Ltd
Original Assignee
Brother Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Brother Industries Ltd filed Critical Brother Industries Ltd
Priority to JP2015193711A priority Critical patent/JP6589521B2/en
Publication of JP2017068046A publication Critical patent/JP2017068046A/en
Application granted granted Critical
Publication of JP6589521B2 publication Critical patent/JP6589521B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、カラオケ楽曲の歌唱の基準メロディを表す歌唱基準データを修正する技術に関する。   The present invention relates to a technique for correcting singing reference data representing a reference melody for singing karaoke music.

従来、カラオケシステムにおいて、カラオケ楽曲の歌唱の基準メロディを表す歌唱基準データを利用して、歌唱者による歌唱を採点したり、歌唱の手本となるガイドボーカルや歌唱メロディを表示するピアノロールを生成する歌唱支援機能を備えるものが知られている。   Conventionally, in a karaoke system, a singing standard data representing a singing melody of a karaoke song is used to score a singing by a singer, or to generate a guide vocal or a piano roll that displays a singing melody. What has a singing support function is known.

例えば特許文献1には、歌唱の採点基準となるレファレンスデータ(歌唱基準データ)から生成された基準音声合成パラメータを外部入力手段から入力された設定に応じて修正し、それに基づいて修正基準音声合成データ(修正されたガイドボーカル)を生成する技術が開示されている。   For example, in Patent Document 1, a reference speech synthesis parameter generated from reference data (singing reference data) serving as a singing scoring reference is modified according to a setting input from an external input means, and a modified reference speech synthesis is performed based thereon. Techniques for generating data (modified guide vocals) are disclosed.

特開2015−87617号公報Japanese Patent Laying-Open No. 2015-87617

一般的に、カラオケで用いられる歌唱基準データは、カラオケでの使用に合わせて人為的に作成されるものであるため、製作者によるアレンジやデータの誤りを含んでいることがある。そのため、歌唱基準データで表される歌唱の基準メロディは、世間一般に認知されている原曲の歌唱メロディと必ずしも一致するとは限らない。   Generally, singing standard data used in karaoke is artificially created for use in karaoke, and therefore may contain arrangements and data errors by the producer. Therefore, the reference melody of the singing represented by the singing reference data does not necessarily match the singing melody of the original song that is generally recognized by the public.

原曲と一致しない歌唱基準データが歌唱の採点に用いられた場合、たとえ歌唱者が原曲の歌唱メロディに近い歌い方(世間一般のユーザにとって上手いと感じられる歌い方)をしても低い点数しか得られないことがある。また、原曲と一致しない歌唱基準データに基づいてガイドボーカルやピアノロールが生成された場合、ユーザにとって上手いと感じられる歌唱を行う妨げとなり得る。このように、従来の歌唱基準データにおいては、歌唱基準データに沿った歌い方と、世間一般のユーザにとって上手いと感じられる歌い方とが乖離するという問題がある。   If singing standard data that does not match the original song is used for singing, even if the singer sings close to the original song melody (how the singing feels good for the general public), the score is low There are times when it can only be obtained. Further, when a guide vocal or piano roll is generated based on singing reference data that does not match the original music, it may be an obstacle to performing a singing that feels good for the user. As described above, in the conventional singing standard data, there is a problem that the way of singing along the singing standard data is different from the way of singing that seems to be good for general users.

本発明は、上記課題を解決するためになされたものである。本発明の目的は、歌唱基準データを人の主観による評価に基づいて修正するための技術を提供することである。   The present invention has been made to solve the above problems. An object of the present invention is to provide a technique for correcting singing reference data based on evaluation by human subjectivity.

本発明の一形態に係る歌唱基準データ修正装置は、記憶手段と、取得手段と、抽出手段と、差分生成手段と、修正手段と、更新手段とを備える。記憶手段は、カラオケ楽曲の歌唱者による歌唱音声が曲目に対応付けて記録された歌唱データと、カラオケ楽曲の歌唱の基準メロディを表す歌唱基準データとを記憶する。取得手段は、記憶手段に記憶されている歌唱データに基づいて再生された歌唱音声を聴取した聴取者によって判定された評価を表す評価情報を取得する。   A singing reference data correction apparatus according to an aspect of the present invention includes a storage unit, an acquisition unit, an extraction unit, a difference generation unit, a correction unit, and an update unit. A memory | storage means memorize | stores the song data by which the singing voice by the singer of karaoke music was matched and recorded, and the song reference data showing the reference | standard melody of the song of karaoke music. The acquisition unit acquires evaluation information representing an evaluation determined by a listener who has listened to the singing voice reproduced based on the singing data stored in the storage unit.

抽出手段は、記憶手段に記憶されている歌唱データの中から、取得手段により取得された評価情報で表される評価が所定の高評価基準を満たす歌唱データを抽出する。差分生成
手段は、抽出手段により抽出された歌唱データと、その歌唱データの曲目に対応する歌唱基準データとを比較して、歌唱データで表される歌唱メロディと歌唱基準データで表される基準メロディとの差分を表す差分データを生成する。修正手段は、差分生成手段により生成された差分データを歌唱基準データに適用して、歌唱基準データを修正する。更新手段は、修正手段により修正された歌唱基準データによって記憶手段に記憶されている修正前の歌唱基準データを更新する。
The extraction unit extracts song data in which the evaluation represented by the evaluation information acquired by the acquisition unit satisfies a predetermined high evaluation criterion from the song data stored in the storage unit. The difference generating means compares the singing data extracted by the extracting means with the singing melody data corresponding to the song data of the singing data, and the singing melody represented by the singing data and the reference melody represented by the singing reference data. Difference data representing the difference between and is generated. The correcting means applies the difference data generated by the difference generating means to the singing reference data to correct the singing reference data. The updating means updates the singing reference data before correction stored in the storage means with the singing reference data corrected by the correcting means.

本発明によれば、歌唱音声の聴取者の主観に基づいて高く評価された歌唱データと、歌唱基準データとを比較することにより、乖離する部分について歌唱基準データを修正できる。このようにすることで、歌唱基準データを人の主観において上手いと感じる歌い方に合わせることができる。   According to the present invention, the singing reference data can be corrected with respect to the part of the singing by comparing the singing reference data with the singing data highly evaluated based on the subjectivity of the listener of the singing voice. By doing in this way, it is possible to match the singing reference data to the way of singing that feels good in human subjectivity.

本発明の第2の形態に係る歌唱基準データ修正装置は、次の特徴を有する。すなわち、抽出手段は、同一の曲目について複数の歌唱データを抽出する。平均化手段は、抽出手段により抽出された同一の曲目に関する複数の歌唱データで表される歌唱メロディを平均化する。差分生成手段は、平均化手段により平均化された歌唱データと、平均化された歌唱データの曲目に対応する歌唱基準データとを比較して差分データを生成する。このようにすることで、より多くの人の主観に基づく評価を統計的に反映した態様にて歌唱基準データを修正できる。   The singing reference data correction device according to the second aspect of the present invention has the following characteristics. That is, the extraction means extracts a plurality of song data for the same piece of music. The averaging means averages singing melody expressed by a plurality of singing data related to the same piece of music extracted by the extracting means. The difference generation means generates the difference data by comparing the song data averaged by the averaging means with the song reference data corresponding to the song of the averaged song data. By doing in this way, singing reference | standard data can be corrected in the aspect which reflected the evaluation based on more people's subjectivity statistically.

本発明の第3の形態に係る歌唱基準データ修正装置は、次の特徴を有する。すなわち、取得手段は、歌唱データについて楽曲を複数に区分けした区間ごとに判定された評価を表す評価情報を取得する。抽出手段は、評価情報で表される区間ごとの評価が所定の高評価基準を満たす歌唱データを、同一の曲目について複数抽出する。平均化手段は、抽出手段により抽出された同一の曲目に関する複数の歌唱データについて、高評価基準を満たす同一区間の歌唱メロディ同士を平均化する。差分生成手段は、平均化手段により平均化された区間ごとの歌唱データと、歌唱基準データにおける対応する区間とを比較して差分データを生成する。このように、楽曲全体の中から特に評価の高い区間を抽出して歌唱基準データを修正することで、人の主観に基づく評価をより的確に反映した態様にて歌唱基準データを修正できる。 The singing standard data correction device according to the third aspect of the present invention has the following characteristics. That is, an acquisition means acquires the evaluation information showing the evaluation determined for every section which divided the music into plurality about song data. The extraction means extracts a plurality of pieces of singing data for the same piece of music in which the evaluation for each section represented by the evaluation information satisfies a predetermined high evaluation criterion. An averaging means averages the song melody of the same area which satisfy | fills high evaluation criteria about the some song data regarding the same music extracted by the extraction means. The difference generation means generates difference data by comparing the singing data for each section averaged by the averaging means with the corresponding section in the singing reference data. In this manner, by extracting a section having a particularly high evaluation from the entire music and correcting the singing reference data, the singing reference data can be corrected in a manner that more accurately reflects the evaluation based on the human subjectivity.

本発明の第4の形態に係る歌唱基準データ修正装置は、次の特徴を有する。すなわち、記憶手段に記憶されている歌唱基準データには、特定の歌唱技巧とその歌唱技巧が発現する時点に関する評価基準を表す歌唱技巧評価情報が含まれているものとする。検出手段は、抽出手段により抽出された歌唱データで表される歌唱音声に含まれる特定の歌唱技巧とその歌唱技巧が発現した時点を検出する。修正手段は、検出手段により検出された歌唱技巧とその歌唱技巧が発現した時点の集計に基づいて、歌唱基準データの歌唱技巧評価情報を修正する。このようにすることで、聴取者によって高く評価された歌唱に含まれている歌唱技巧の内容やタイミングに合わせて、歌唱基準データにおける歌唱技巧に関する評価基準を修正できる。   The singing standard data correction device according to the fourth aspect of the present invention has the following characteristics. That is, the singing technique data stored in the storage means includes singing technique evaluation information that represents an evaluation standard regarding a specific singing technique and a point in time when the singing technique is developed. The detecting means detects a specific singing technique included in the singing voice represented by the singing data extracted by the extracting means and a point in time when the singing technique is expressed. The correcting means corrects the singing technique evaluation information of the singing reference data based on the singing technique detected by the detecting means and the aggregation at the time when the singing technique is expressed. By doing in this way, the evaluation standard regarding the singing technique in singing standard data can be corrected according to the content and timing of the singing technique included in the song highly evaluated by the listener.

本発明の一形態に係るカラオケシステムは、歌唱データ生成手段と、アップロード手段と、再生手段と、受付手段と、記憶手段と、取得手段と、抽出手段と、差分生成手段と、修正手段と、更新手段と、制御手段とを備える。歌唱データ生成手段は、演奏されたカラオケ楽曲の歌唱者による歌唱音声を記録して曲目に対応付けた歌唱データを生成する。アップロード手段は、歌唱データ生成手段により生成された歌唱データを記憶手段にアップロードする。再生手段は、記憶手段に記憶されている歌唱データに基づいて歌唱音声を再生する。受付手段は、再生手段により再生された歌唱データに対する評価を聴取者から受付ける。   A karaoke system according to an aspect of the present invention includes a singing data generation unit, an upload unit, a reproduction unit, a reception unit, a storage unit, an acquisition unit, an extraction unit, a difference generation unit, a correction unit, An update unit and a control unit are provided. The singing data generating means records the singing voice by the singer of the played karaoke music and generates singing data associated with the music. The upload unit uploads the song data generated by the song data generation unit to the storage unit. The reproduction means reproduces the singing voice based on the song data stored in the storage means. The accepting means accepts an evaluation of the song data reproduced by the reproducing means from the listener.

記憶手段は、アップロード手段によりアップロードされた歌唱データと、カラオケ楽曲の歌唱の基準メロディを表す歌唱基準データとを記憶する。取得手段は、受付け手段により受付された評価を評価対象の歌唱データに対応付けて表す評価情報を取得する。抽出手段は、記憶手段に記憶されている歌唱データの中から、取得手段により取得された評価情報で表される評価が所定の高評価基準を満たす歌唱データを抽出する。差分生成手段は、抽出手段により抽出された歌唱データと、歌唱データの曲目に対応する歌唱基準データとを比較して、歌唱データで表される歌唱メロディと歌唱基準データで表される基準メロディとの差分を表す差分データを生成する。修正手段は、差分生成手段により生成された差分データを歌唱基準データに適用して、歌唱基準データを修正する。更新手段は、修正手段により修正された歌唱基準データによって記憶手段に記憶されている修正前の歌唱基準データを更新する。制御手段は、記憶手段に記憶されている歌唱基準データに従って、カラオケ楽曲の歌唱を支援する支援機能を実行する。   The storage means stores singing data uploaded by the uploading means and singing reference data representing a reference melody for singing karaoke music. The acquisition means acquires evaluation information representing the evaluation received by the reception means in association with the song data to be evaluated. The extraction unit extracts song data in which the evaluation represented by the evaluation information acquired by the acquisition unit satisfies a predetermined high evaluation criterion from the song data stored in the storage unit. The difference generation means compares the singing data extracted by the extracting means with the singing melody data corresponding to the song data of the singing data, and the melody represented by the singing data and the reference melody represented by the singing reference data, Difference data representing the difference is generated. The correcting means applies the difference data generated by the difference generating means to the singing reference data to correct the singing reference data. The updating means updates the singing reference data before correction stored in the storage means with the singing reference data corrected by the correcting means. The control means executes a support function for supporting the singing of the karaoke music according to the singing reference data stored in the storage means.

本発明にかかるカラオケシステムによれば、歌唱データの生成及びアップロード、歌唱データに対する評価の取得、歌唱データと歌唱基準データとの比較に基づく歌唱基準データの修正、修正された歌唱基準データに基づく歌唱支援といった各種機能を一貫して行うことができる。   According to the karaoke system according to the present invention, generation and upload of singing data, acquisition of evaluation of singing data, correction of singing standard data based on comparison between singing data and singing standard data, singing based on the modified singing standard data Various functions such as support can be performed consistently.

なお、本発明は、コンピュータにおいて実行されるプログラム、あるいはプログラムを記憶する記憶媒体の形態で実現することもできる。   The present invention can also be realized in the form of a program executed on a computer or a storage medium for storing the program.

カラオケシステムの構成を表すブロック図。The block diagram showing the structure of a karaoke system. カラオケシステムの動作の概要を表す説明図。Explanatory drawing showing the outline | summary of operation | movement of a karaoke system. カラオケシステムの各部が実行する処理の手順を表すフローチャート。The flowchart showing the procedure of the process which each part of a karaoke system performs.

以下、本発明の実施形態を図面に基づいて説明する。なお、本発明は下記の実施形態に限定されるものではなく様々な態様にて実施することが可能である。
[カラオケシステムの構成の説明]
図1に例示されるとおり、カラオケシステム1は、カラオケサーバ2、カラオケ装置3及びユーザ再生端末4それぞれがインターネット10に接続されており、互いに通信可能に構成されている。なお、図1においては、説明を簡潔にするためカラオケ装置及びユーザ再生端末4を1台ずつ記載した。しかしながら、実際には、これらの機器が数多くの接続された態様で実施されるものとする。
Hereinafter, embodiments of the present invention will be described with reference to the drawings. In addition, this invention is not limited to the following embodiment, It is possible to implement in various aspects.
[Description of karaoke system configuration]
As illustrated in FIG. 1, the karaoke system 1 is configured such that the karaoke server 2, the karaoke device 3, and the user playback terminal 4 are connected to the Internet 10 and can communicate with each other. In FIG. 1, the karaoke apparatus and the user reproduction terminal 4 are shown one by one for the sake of simplicity. In practice, however, it is assumed that these devices are implemented in a number of connected ways.

カラオケサーバ2は、コンピュータシステムによって構成されたサーバ装置であり、制御部21、記憶部22、通信部23を備える。このカラオケサーバ2は、カラオケ装置3からアップロードされる歌唱データを蓄積し、蓄積されている歌唱データをユーザ再生端末4からの要求に応じてインターネット10経由で配信する機能を有する。また、カラオケサーバ2は、カラオケ装置3において演奏されるカラオケ楽曲に対応する歌唱基準データを保有し、カラオケ装置3に配信する機能を有する。また、カラオケサーバ2は、本発明における特徴的な機能として、ユーザ再生端末4の聴取者から受付けた歌唱データの評価に基づいて、対応するカラオケ楽曲の歌唱基準データを修正する機能を有する。   The karaoke server 2 is a server device configured by a computer system, and includes a control unit 21, a storage unit 22, and a communication unit 23. The karaoke server 2 has a function of accumulating song data uploaded from the karaoke apparatus 3 and distributing the accumulated song data via the Internet 10 in response to a request from the user reproduction terminal 4. Further, the karaoke server 2 has a function of holding singing reference data corresponding to karaoke music played in the karaoke apparatus 3 and distributing it to the karaoke apparatus 3. Moreover, the karaoke server 2 has a function of correcting the singing reference data of the corresponding karaoke piece based on the evaluation of the singing data received from the listener of the user reproduction terminal 4 as a characteristic function in the present invention.

制御部21は、CPU、RAM、ROM等を中心に構成された情報処理装置であり、装置全体の制御を司る。制御部21は、記憶媒体に格納されたプログラムに従って演算処理を実行することにより、各種機能を実現する。記憶部22は、プログラムや、各種データベース等を保存しておくための記憶装置である。通信部23は、カラオケサーバ2をインターネット10に接続してカラオケ装置3及びユーザ再生端末4とデータ通信を行うため
の通信インタフェースである。
The control unit 21 is an information processing apparatus configured mainly with a CPU, RAM, ROM, and the like, and controls the entire apparatus. The control part 21 implement | achieves various functions by performing arithmetic processing according to the program stored in the storage medium. The storage unit 22 is a storage device for storing programs, various databases, and the like. The communication unit 23 is a communication interface for connecting the karaoke server 2 to the Internet 10 and performing data communication with the karaoke apparatus 3 and the user reproduction terminal 4.

カラオケサーバ2は、カラオケシステム1が提供する歌唱録音配信サービスにおいて公開される歌唱データを蓄積するための歌唱データベースを記憶部22に備える。この歌唱データベースには、インターネットを介してカラオケ装置3からアップロードされた複数の歌唱データが蓄積される。歌唱データは、歌唱者による歌唱音声の波形をサンプリングすることにより得られるデジタル音声データで構成される。   The karaoke server 2 includes in the storage unit 22 a singing database for storing singing data released in the singing recording and distribution service provided by the karaoke system 1. In this singing database, a plurality of singing data uploaded from the karaoke apparatus 3 via the Internet is accumulated. The singing data is composed of digital audio data obtained by sampling the waveform of the singing voice by the singer.

また、カラオケサーバ2は、カラオケ装置3において演奏されるカラオケ楽曲に対応する歌唱基準データを保有するための歌唱基準データベースを記憶部22に備える。歌唱基準データは、歌唱の手本となる基準の歌唱メロディ(歌唱の音高と発音時間)を表す情報によって構成されている。また、この歌唱基準データには、ビブラートやしゃくり、こぶし等の特定の歌唱技巧(テクニック)について、歌唱技巧の種類や発現時点に基づく評価基準を定めた歌唱技巧評価情報が含まれているものとする。この歌唱基準データは、必要に応じてカラオケ装置3に配信され、カラオケ装置3において歌唱採点機能や、ガイドボーカル作成、ピアノロール表示のための基準として用いられる。   Further, the karaoke server 2 includes a singing reference database for storing singing reference data corresponding to karaoke pieces played in the karaoke apparatus 3 in the storage unit 22. The singing reference data is composed of information representing a reference singing melody (singing pitch and pronunciation time) that serves as a model for singing. In addition, this singing standard data includes singing technique evaluation information that defines the evaluation standard based on the type of singing technique and the point of onset for a specific singing technique (technique) such as vibrato, shackles, and fist. To do. This singing reference data is distributed to the karaoke device 3 as necessary, and is used as a reference for the singing scoring function, guide vocal creation, and piano roll display in the karaoke device 3.

カラオケ装置3は、例えば、カラオケ店舗に設置される業務用のカラオケ装置で具現化される。カラオケ装置は、ユーザ(歌唱者)からリクエストされたカラオケ楽曲を演奏する機能を有する。また、カラオケ装置3は、カラオケ楽曲の演奏中にマイクを介して入力された歌唱音声を記録した歌唱データをカラオケサーバ2にアップロードする機能を有する。これにより、多くの歌唱者の歌唱データがカラオケサーバ2に蓄積される。また、カラオケ装置3は、カラオケサーバ2から配信される歌唱基準データを用いて、歌唱採点やガイドボーカル作成、ピアノロール表示等の歌唱支援機能を実行する機能を有する。なお、カラオケ装置3のその他の機能や構成については公知技術に従っているので、ここでは詳細な説明を省略する。   The karaoke device 3 is embodied by a business karaoke device installed in a karaoke store, for example. The karaoke apparatus has a function of playing karaoke music requested by a user (singer). Moreover, the karaoke apparatus 3 has a function of uploading to the karaoke server 2 singing data in which singing voices input via a microphone during the performance of karaoke music are recorded. Thereby, singing data of many singers are accumulated in the karaoke server 2. Further, the karaoke apparatus 3 has a function of performing singing support functions such as singing grading, guide vocal creation, and piano roll display using the singing reference data distributed from the karaoke server 2. Since other functions and configurations of the karaoke apparatus 3 are in accordance with known techniques, detailed description thereof is omitted here.

ユーザ再生端末4は、カラオケサーバ2から歌唱データを取得して再生出力する機能を有する情報処理装置である。このユーザ再生端末4は、例えば、カラオケ店舗に設置される業務用のカラオケ装置や、ユーザ個人が所有するスマートフォン等の高機能携帯電話端末、パーソナルコンピュータ等によって具現化される。ユーザ再生端末4は、インターネット10経由でカラオケサーバ2とデータ通信を行う。ユーザ再生端末4は、ユーザ(聴取者)から歌唱データのリクエストを受付ける。そして、リクエストに応じてカラオケサーバ2から取得した歌唱データを再生し、再生した歌唱音声を出力する。また、ユーザ再生端末4は、再生された歌唱データについて、聴取者により判定された評価を受付け、その評価内容を表す評価情報をカラオケサーバ2に通知する機能を有する。   The user reproduction terminal 4 is an information processing apparatus having a function of acquiring song data from the karaoke server 2 and reproducing and outputting it. The user reproduction terminal 4 is embodied by, for example, a business karaoke apparatus installed in a karaoke store, a high-functional mobile phone terminal such as a smartphone owned by the user, a personal computer, or the like. The user reproduction terminal 4 performs data communication with the karaoke server 2 via the Internet 10. The user reproduction terminal 4 receives a request for song data from the user (listener). And the song data acquired from the karaoke server 2 according to the request is reproduced, and the reproduced song voice is output. Further, the user reproduction terminal 4 has a function of receiving the evaluation determined by the listener for the reproduced song data and notifying the karaoke server 2 of evaluation information representing the evaluation content.

[カラオケシステムの動作の説明]
カラオケサーバ2に保存されている歌唱基準データを修正するための一連の動作の概要について、図2を参照しながら説明する。以下、図2に記載の番号[1]〜[7]の順にカラオケシステム1の各装置における動作を説明する。
[Explanation of Karaoke system operation]
An outline of a series of operations for correcting the singing reference data stored in the karaoke server 2 will be described with reference to FIG. Hereinafter, the operation of each device of the karaoke system 1 will be described in the order of numbers [1] to [7] shown in FIG.

[1]カラオケ装置3は、カラオケ楽曲の演奏時に入力された歌唱者の歌唱音声が記録された歌唱データを、演奏されたカラオケ楽曲の曲目に対応する楽曲識別情報に対応付けて、カラオケサーバ2にアップロードする。カラオケサーバ2は、カラオケ装置3からアップロードされた歌唱データを、楽曲識別情報に対応付けて記憶部22の歌唱データベースに保存する。カラオケサーバ2に保存された歌唱データは、カラオケシステム1が提供する歌唱録音配信サービスに対応するインターネット上のウェブサイトを通じて、ユーザ再生端末4に対して公開される。   [1] The karaoke apparatus 3 associates the singing data in which the singer's singing voice input at the time of the performance of the karaoke music is recorded with the music identification information corresponding to the tune of the played karaoke music. Upload to. The karaoke server 2 stores the song data uploaded from the karaoke apparatus 3 in the song database of the storage unit 22 in association with the music identification information. The song data stored in the karaoke server 2 is disclosed to the user playback terminal 4 through a website on the Internet corresponding to the song recording and distribution service provided by the karaoke system 1.

[2]カラオケサーバ2は、公開された歌唱データについて、ユーザ再生端末4から配信を要求するリクエストを受付けると、リクエストに該当する歌唱データをリクエスト元のユーザ再生端末4に配信する。ユーザ再生端末4は、カラオケサーバ2から取得した歌唱データを再生して、歌唱音声を出力する。   [2] When the karaoke server 2 accepts a request for distribution from the user reproduction terminal 4 for the released song data, the karaoke server 2 distributes the song data corresponding to the request to the user reproduction terminal 4 that is the request source. The user reproduction terminal 4 reproduces the singing data acquired from the karaoke server 2 and outputs the singing voice.

なお、歌唱データが公開されるウェブサイトには、公開された歌唱データを検索・分類するための目印として機能する情報である「タグ」を、個々のユーザ再生端末4から聴取者が自由に付与できる機能が備えられているものとする。歌唱データに付与されるタグには、聴取者によって判断された歌唱の巧拙に関する評価や感想、コメント等の様々な情報が含まれる。   In addition, a “tag”, which is information that functions as a mark for searching and classifying the released song data, is freely given from each user playback terminal 4 to the website where the song data is released. It is assumed that it has a function that can The tag given to the singing data includes various information such as evaluations, impressions, comments, etc. regarding the skill of the singing determined by the listener.

また、このタグは、歌唱データの楽曲を所定の複数の区間に分けた演奏区間ごとに対応付けて付与することができるようになっている。具体的には、ユーザ再生端末4において歌唱データのある演奏区間が再生されているときに聴取者によって「上手い」と評価するタグが入力された場合、入力された時点の演奏区間に対応付けて「上手い」タグが付与される。   In addition, this tag can be assigned in association with each performance section obtained by dividing the song data of the song data into a plurality of predetermined sections. Specifically, when a tag that evaluates “good” is input by the listener when a performance section with singing data is being played back on the user playback terminal 4, it is associated with the performance section at the time of input. A “good” tag is given.

ユーザ再生端末4は、歌唱データの演奏区間に対応付けて付与されたタグを表す情報を、歌唱データに対する評価情報として、カラオケサーバ2に通知する。この評価情報には、評価対象の歌唱データの識別情報と、その歌唱データに付与されたタグの内容、タグが付与された演奏区間を表す情報が含まれる。カラオケサーバ2は、ユーザ再生端末4から受信した評価情報に含まれるタグの内容を、その評価情報に該当する歌唱データの演奏区間に対応付けて歌唱データベースに登録する。図2の事例では、記憶部22の歌唱データベースにおいて、楽曲Sに関する複数の歌唱データA〜D…に対して「上手い」、「面白い」、「泣ける」等のタグが、各演奏区間に対応付けて登録されているものとする。   The user reproduction terminal 4 notifies the karaoke server 2 of information representing a tag assigned in association with the performance section of the song data as evaluation information for the song data. This evaluation information includes identification information of the singing data to be evaluated, the contents of the tag given to the singing data, and information representing the performance section to which the tag is given. The karaoke server 2 registers the contents of the tag included in the evaluation information received from the user reproduction terminal 4 in the song database in association with the performance section of the song data corresponding to the evaluation information. In the example of FIG. 2, in the song database of the storage unit 22, tags such as “good”, “interesting”, and “crying” are associated with each performance section for a plurality of song data A to D. Registered.

[3]カラオケサーバ2は、歌唱データベースに蓄積されている歌唱データについて、歌唱基準データを修正する対象となる特定のカラオケ楽曲(以下、修正対象の楽曲)に対応する歌唱データ群から、高評価条件を満たす複数の歌唱データを抽出する。具体的には、高評価条件として、歌唱の評価が高いことを表す所定のタグが付いた歌唱データを抽出する。図2の事例では、修正対象の楽曲Sに関する歌唱データ群A〜D…の中から、高評価条件を満たす歌唱データとして「上手い」タグが付いた歌唱データを抽出するものとする。なお、1つの歌唱データを構成する複数の演奏区間のうち少なくとも1つに評価の高いタグが付いた歌唱データについて、1つの歌唱データ全体を抽出してもよいし、評価の高いタグが付いた個々の演奏区間単位に抽出してもよい。   [3] The karaoke server 2 highly evaluates singing data stored in the singing database from a singing data group corresponding to a specific karaoke piece (hereinafter, a piece to be corrected) that is a target of correcting the singing reference data. A plurality of song data satisfying the conditions are extracted. Specifically, singing data with a predetermined tag indicating that the singing evaluation is high is extracted as the high evaluation condition. In the example of FIG. 2, singing data with a “good” tag is extracted as singing data satisfying the high evaluation condition from the singing data groups A to D. In addition, about the singing data with which the tag with high evaluation was attached to at least 1 among the several performance sections which comprise one singing data, one whole singing data may be extracted, or the tag with high evaluation was attached. You may extract for each performance section unit.

[4]カラオケサーバ2は、[3]において抽出された修正対象の楽曲に関する歌唱データ群について、平均化処理及び歌唱技巧抽出処理を行う。平均化処理は、抽出された歌唱データ群の歌唱メロディの音の高さを歌唱時点ごとに平均化し、また、抽出された歌唱データ群の歌唱メロディを構成する各音が出現する時間長を平均化することにより、評価の高い歌唱データに関する平均データを生成する処理である。なお、本実施形態では、抽出された各歌唱データから、個々の演奏区間ごとに評価の高いタグが付いた部分を抽出し、評価の高いタグが付いた同一の演奏区間の歌唱メロディ同士を平均化するものとする。   [4] The karaoke server 2 performs an averaging process and a singing skill extraction process on the song data group related to the music to be corrected extracted in [3]. Averaging processing averages the pitch of the singing melody in the extracted song data group for each singing point, and averages the length of time each sound constituting the singing melody in the extracted song data group appears It is the process which produces | generates the average data regarding song data with high evaluation by converting. In the present embodiment, from each extracted song data, a portion with a high evaluation tag is extracted for each performance section, and the singing melody in the same performance section with a high evaluation tag is averaged. Shall be

歌唱技巧抽出処理は、抽出された各歌唱データで表される歌唱メロディから、特定の歌唱技巧(例えば、ビブラート、しゃくり、こぶし等)を検出することにより、評価の高い歌唱データにおいて用いられた歌唱技巧に関する統計情報を得る処理である。具体的には、抽出された歌唱データ群の評価の高いタグが付いた演奏区間において検出された歌唱技巧の種類とその発現時点とを集計し、歌唱技巧の種類及び発現時点が共通する検出結果が既定数以上ある事象を、模範的な歌唱技巧として特定する。なお、カラオケにおける歌唱
技巧の検出方法は周知の技術につき、詳しい説明については省略する。
The singing technique extraction process detects a specific singing technique (for example, vibrato, shackle, fist, etc.) from the singing melody represented by each extracted singing data, thereby singing the song used in the highly evaluated singing data. This is a process for obtaining statistical information about the skill. Specifically, the type of singing technique detected in the performance section with a high evaluation tag of the extracted singing data group and the time of its expression are tabulated, and the detection result in which the type of singing technique and the time of expression are common Is identified as an exemplary singing skill. In addition, since the detection method of the singing technique in karaoke is a well-known technique, detailed description is abbreviate | omitted.

[5]カラオケサーバ2は、[4]において生成された平均データで表される歌唱メロディと、修正対象の楽曲に対応する既存の歌唱基準データで表される歌唱メロディとを比較し、両者の差分を表す差分データを生成する。   [5] The karaoke server 2 compares the singing melody represented by the average data generated in [4] with the singing melody represented by the existing singing reference data corresponding to the music to be corrected, Difference data representing the difference is generated.

[6]カラオケサーバ2は、[5]において生成された差分データを既存の歌唱基準データに併合することにより、既存の歌唱基準データの歌唱メロディを修正する。また、カラオケサーバ2は、既存の歌唱基準データに含まれる歌唱技巧評価情報で表される歌唱技巧の評価基準について、[4]において抽出された模範的な歌唱技巧に従って評価の重み付けを修正する。具体的には、抽出された模範的な歌唱技巧が既存の歌唱技巧評価情報に含まれていない場合、その模範的な歌唱技巧の種類及び発現時点に関する評価基準を歌唱技巧評価情報に付与する。また、既存の歌唱技巧評価情報に含まれる歌唱技巧が抽出された模範的な歌唱技巧と一致しない場合、その歌唱技巧に関する評価基準を歌唱技巧評価情報から削除する。カラオケサーバ2は、歌唱基準データベースに保存されている既存の歌唱基準データ及び歌唱技巧評価情報を、修正された歌唱基準データ及び歌唱技巧評価情報の内容に更新する。   [6] The karaoke server 2 corrects the singing melody of the existing singing reference data by merging the difference data generated in [5] with the existing singing reference data. Moreover, the karaoke server 2 corrects the evaluation weights according to the exemplary singing technique extracted in [4] for the singing technique evaluation standard represented by the singing technique evaluation information included in the existing singing standard data. Specifically, when the extracted exemplary singing technique is not included in the existing singing technique evaluation information, an evaluation criterion regarding the type and time of expression of the exemplary singing technique is given to the singing technique evaluation information. Moreover, when the singing technique included in the existing singing technique evaluation information does not match the extracted singing technique, the evaluation standard regarding the singing technique is deleted from the singing technique evaluation information. The karaoke server 2 updates the existing singing standard data and singing technique evaluation information stored in the singing standard database to the contents of the modified singing standard data and singing technique evaluation information.

[7]カラオケサーバ2は、更新された歌唱基準データをカラオケ装置3に配信する。カラオケ装置3は、カラオケサーバ2から配信された歌唱基準データに従って、歌唱採点、ガイドボーカル作成、ピアノロール表示等の歌唱支援機能を実施する。   [7] The karaoke server 2 distributes the updated singing reference data to the karaoke apparatus 3. The karaoke apparatus 3 performs singing support functions such as singing scoring, guide vocal creation, and piano roll display in accordance with the singing reference data distributed from the karaoke server 2.

[歌唱基準データの修正に係る処理の説明]
歌唱基準データの修正に係る処理について、カラオケシステム1の各装置が実行する手順を図3のフローチャートを参照しながら説明する。
[Description of processing related to correction of singing standard data]
About the process which concerns on correction of singing standard data, the procedure which each apparatus of the karaoke system 1 performs is demonstrated, referring the flowchart of FIG.

S100では、カラオケ装置3が、ユーザ(歌唱者)からリクエストされたカラオケ楽曲を演奏する。このとき、カラオケ装置3は、カラオケ楽曲の演奏中にマイクを介して入力された歌唱音声を記録して歌唱データを生成する。また、カラオケ装置3は、カラオケサーバ2から各カラオケ装置3に配信された既存の歌唱基準データを利用して、歌唱採点等の歌唱支援機能を実行する。   In S100, the karaoke apparatus 3 plays the karaoke music requested by the user (singer). At this time, the karaoke apparatus 3 records the singing voice input through the microphone during the performance of the karaoke music and generates singing data. Moreover, the karaoke apparatus 3 performs singing support functions, such as a singing score, using the existing singing reference | standard data delivered to each karaoke apparatus 3 from the karaoke server 2. FIG.

S102では、カラオケ装置3が、S100において記録された歌唱データを演奏されたカラオケ楽曲の曲目に対応する楽曲識別情報に対応付けて、カラオケサーバ2にアップロードする。カラオケサーバ2の制御部21は、カラオケ装置3からアップロードされた歌唱データを、楽曲識別情報に対応付けて記憶部22の歌唱データベースに保存する。   In S102, the karaoke apparatus 3 uploads the singing data recorded in S100 to the karaoke server 2 in association with the music identification information corresponding to the tune of the karaoke music played. The control unit 21 of the karaoke server 2 stores the song data uploaded from the karaoke device 3 in the song database of the storage unit 22 in association with the song identification information.

S104では、ユーザ再生端末4が、公開された歌唱データをカラオケサーバ2から取得して再生する。そして、ユーザ再生端末4は、再生された歌唱データに対する聴取者の評価を表す評価情報をカラオケサーバ2に送信する。カラオケサーバ2の制御部21は、歌唱データの再生を行ったユーザ再生端末4から送信された評価情報を取得する。この評価情報には、評価対象の歌唱データの識別情報と、その歌唱データに付与された歌唱の評価に関するタグの内容、タグが付与された演奏区間を表す情報が含まれる。カラオケサーバ2の制御部21は、取得した評価情報に含まれるタグの内容を、その評価情報に該当する歌唱データの演奏区間に対応付けて歌唱データベースに登録する。   In S104, the user reproduction terminal 4 acquires the released song data from the karaoke server 2 and reproduces it. Then, the user reproduction terminal 4 transmits to the karaoke server 2 evaluation information indicating the listener's evaluation on the reproduced song data. The control unit 21 of the karaoke server 2 acquires evaluation information transmitted from the user reproduction terminal 4 that has reproduced the song data. The evaluation information includes identification information of the singing data to be evaluated, the contents of the tag related to the evaluation of the singing given to the singing data, and information representing the performance section to which the tag is given. The control unit 21 of the karaoke server 2 registers the contents of the tag included in the acquired evaluation information in the song database in association with the performance section of the song data corresponding to the evaluation information.

S106では、カラオケサーバ2の制御部21が、歌唱データベースに蓄積されている歌唱データのうち修正対象の楽曲に対応する歌唱データ群の中から、高評価条件を満たす「複数の」歌唱データを抽出する。歌唱データを抽出する手順については、図2の[3]の事例に基づいて先行して説明したとおりである。   In S <b> 106, the control unit 21 of the karaoke server 2 extracts “several” singing data satisfying the high evaluation condition from the singing data group corresponding to the music to be corrected among the singing data stored in the singing database. To do. The procedure for extracting the singing data is as described above based on the case of [3] in FIG.

S108では、カラオケサーバ2の制御部21が、S106において抽出された歌唱データ群を対象に歌唱技巧抽出処理を実行し、抽出された歌唱データの歌唱技巧に関する統計情報を取得する。また、S110では、カラオケサーバ2の制御部21は、S106において抽出された歌唱データ群を対象に平均化処理を実行し、抽出された歌唱データに関する平均データを生成する。この平均化処理及び歌唱技巧抽出処理の内容については、図2の[4]の事例に基づいて先行して説明したとおりである。S112では、カラオケサーバ2の制御部21が、S110において生成された平均データと、修正対象の楽曲に対応する既存の歌唱基準データとを比較し、両者の歌唱メロディの差分を表す差分データを生成する。   In S108, the control part 21 of the karaoke server 2 performs a singing technique extraction process for the singing data group extracted in S106, and acquires statistical information on the singing technique of the extracted singing data. Moreover, in S110, the control part 21 of the karaoke server 2 performs an averaging process for the song data group extracted in S106, and generates average data regarding the extracted song data. The contents of the averaging process and the singing technique extraction process are as previously described based on the case of [4] in FIG. In S112, the control unit 21 of the karaoke server 2 compares the average data generated in S110 with the existing singing reference data corresponding to the music to be corrected, and generates difference data representing the difference between the two singing melody. To do.

S114では、カラオケサーバ2の制御部21が、S108で抽出された歌唱技巧の統計情報とS112で生成された差分データに従って、既存の歌唱基準データの歌唱メロディ及び歌唱技巧の評価基準を修正する。S116では、カラオケサーバ2の制御部21は、歌唱基準データベースに保存されている既存の歌唱基準データ、及びこの歌唱基準データに対応する歌唱技巧評価情報を、S114において修正された歌唱基準データ及び歌唱技巧評価情報の内容に更新する。S118では、カラオケ装置3は、カラオケサーバ2から修正された新しい歌唱基準データを取得し、取得した歌唱基準データを用いて歌唱採点等の歌唱支援機能を実行する。   In S114, the control unit 21 of the karaoke server 2 corrects the singing melody and singing technique evaluation criteria of the existing singing reference data according to the singing technique statistical information extracted in S108 and the difference data generated in S112. In S116, the control unit 21 of the karaoke server 2 converts the existing singing standard data stored in the singing standard database and the singing skill evaluation information corresponding to the singing standard data into the singing standard data and the singing modified in S114. Update to the skill evaluation information. In S118, the karaoke apparatus 3 acquires new singing standard data corrected from the karaoke server 2, and executes a singing support function such as singing score using the acquired singing standard data.

[効果]
実施形態のカラオケシステム1によれば、次の効果を奏する。
ユーザ再生端末4の聴取者の主観に基づいて高く評価された歌唱データと、既存の歌唱基準データとを比較することにより、乖離する部分について歌唱基準データを修正できる。このようにすることで、カラオケサーバ2に保存されている既存の歌唱基準データを、人の主観において上手いと感じる歌い方に合わせて修正することができる。
[effect]
The karaoke system 1 according to the embodiment has the following effects.
By comparing the singing data highly evaluated based on the subjectivity of the listener of the user reproduction terminal 4 and the existing singing reference data, the singing reference data can be corrected with respect to the divergence portion. By doing in this way, the existing singing reference | standard data preserve | saved at the karaoke server 2 can be corrected according to the way of singing which feels good in a human subjectivity.

また、同一の曲目について評価の高い歌唱データを複数抽出し、抽出された歌唱データ群から生成された平均データに基づいて既存の歌唱基準データを修正することで、より多くの人の主観に基づく評価を歌唱基準データに反映できる。   In addition, based on the subjectivity of more people by extracting multiple singing data with high evaluation for the same song and modifying existing singing standard data based on average data generated from the extracted singing data group Evaluation can be reflected in singing standard data.

また、カラオケ楽曲を複数に区分けした演奏区間ごと付与された評価に基づいて、演奏区間ごとに高い評価の付いた歌唱データを用いて平均データを生成することができる。このように、楽曲全体の中から特に評価の高い演奏区間を抽出して歌唱基準データを修正することで、人の主観に基づく評価をより的確に歌唱基準データに反映できる。また、高く評価された歌唱データから検出された歌唱技巧の種類や発現時点に関する統計情報に基づいて、既存の歌唱基準データにおける歌唱技巧の評価基準を修正することができる。   Moreover, based on the evaluation given to each performance section divided into a plurality of karaoke songs, average data can be generated using song data with high evaluation for each performance section. Thus, by extracting a performance section with particularly high evaluation from the entire music and correcting the singing reference data, the evaluation based on the human subjectivity can be more accurately reflected in the singing reference data. Moreover, the evaluation standard of the singing technique in the existing singing standard data can be corrected based on the statistic information on the type and the time point of expression of the singing technique detected from the highly evaluated singing data.

[変形例]
上述の実施形態では、歌唱データに対して複数の演奏区間ごとにタグによる評価が付与され、評価の高いタグが付いた演奏区間単位で平均データを生成した上で、歌唱基準データを修正する事例について説明した。これに限らず、歌唱データを演奏区間単位で分割せず、1曲分全体の歌唱データ同士を平均化することより平均データを生成する構成であってもよい。この場合、歌唱データに対する評価は、演奏区間単位で付与されるものであってもよいし、1曲分の歌唱データに対して一括して付与されるものであってもよい。
[Modification]
In the above-described embodiment, a case in which singing data is corrected for each of a plurality of performance sections with respect to the singing data, and the average data is generated for each performance section with a high evaluation tag, and then the singing reference data is corrected Explained. Not only this but the structure which produces | generates average data by dividing | segmenting song data of 1 music whole may be sufficient, without dividing | segmenting song data per performance section unit. In this case, the evaluation with respect to the song data may be given in units of performance sections, or may be given collectively to the song data for one song.

上述の実施形態では、図3のS106において、高評価基準を満たす歌唱データとして、歌唱の評価の高いタグが付いた「複数の」歌唱データを抽出し、それら複数の歌唱データの歌唱メロディを平均化する事例について説明した。これとは別に、高評価基準を満たす歌唱データとして、歌唱の評価の高いタグが他の歌唱データと比較してより多く付いた
所定数の歌唱データを抽出する構成であってもよい。
In the above-described embodiment, in S106 of FIG. 3, “single” singing data with a tag having a high evaluation of singing is extracted as singing data satisfying the high evaluation criteria, and the singing melody of these singing data is averaged. We explained an example to make. Separately from this, as a song data satisfying the high evaluation criteria, a configuration may be adopted in which a predetermined number of song data to which more tags with a higher evaluation of the song are attached than other song data is extracted.

さらに、高評価基準を満たす歌唱データとして、歌唱の評価の高いタグが最も多く付いた「1つの」歌唱データを抽出する構成であってもよい。この場合、抽出された歌唱データを他の歌唱データと平均化する処理(図3のS110)については行わず、抽出された歌唱データと既存の歌唱基準データとを比較し、両者の歌唱メロディの差分を表す差分データを生成する。そして、生成された差分データに基づいて、既存の歌唱基準データを修正する。   Furthermore, the structure which extracts "one" song data with the most tags with high evaluation of song as song data which satisfy | fills high evaluation criteria may be sufficient. In this case, the process of averaging the extracted song data with other song data (S110 in FIG. 3) is not performed, the extracted song data is compared with the existing song reference data, and the song melodies of both are compared. Difference data representing the difference is generated. And based on the produced | generated difference data, the existing song reference data are corrected.

上記実施形態における1つの構成要素が有する機能を複数の構成要素として分散させたり、複数の構成要素が有する機能を1つの構成要素に統合させたりしてもよい。なお、特許請求の範囲に記載した文言のみによって特定される技術思想に含まれるあらゆる態様が本発明の実施形態である。   The functions of one component in the above embodiment may be distributed as a plurality of components, or the functions of a plurality of components may be integrated into one component. In addition, all the aspects included in the technical idea specified only by the wording described in the claim are embodiment of this invention.

[特許請求の範囲に記載の構成との対応]
実施形態の各構成と、特許請求の範囲に記載の構成との対応は次のとおりである。
カラオケサーバ2が歌唱基準データ修正装置に相当する。カラオケサーバ2の記憶部22が、記憶手段に相当する。カラオケサーバ2の制御部21が実行する図3のS104が、取得手段に相当する。カラオケサーバ2の制御部21が実行する図3のS106が、抽出手段に相当する。カラオケサーバ2の制御部21が実行する図3のS108が、検出手段に相当する。カラオケサーバ2の制御部21が実行する図3のS110が、平均化手段に相当する。カラオケサーバ2の制御部21が実行する図3のS112が、差分生成手段に相当する。カラオケサーバ2の制御部21が実行する図3のS114が、修正手段に相当する。カラオケサーバ2の制御部21が実行する図3のS116が、更新手段に相当する。
[Correspondence with configuration described in claims]
The correspondence between each configuration of the embodiment and the configuration described in the claims is as follows.
The karaoke server 2 corresponds to a singing standard data correction device. The storage unit 22 of the karaoke server 2 corresponds to storage means. S104 of FIG. 3 which the control part 21 of the karaoke server 2 performs corresponds to an acquisition means. S106 of FIG. 3 which the control part 21 of the karaoke server 2 performs corresponds to an extraction means. S108 of FIG. 3 which the control part 21 of the karaoke server 2 performs corresponds to a detection means. S110 of FIG. 3 which the control part 21 of the karaoke server 2 performs corresponds to an averaging means. S112 of FIG. 3 which the control part 21 of the karaoke server 2 performs corresponds to a difference production | generation means. S114 of FIG. 3 which the control part 21 of the karaoke server 2 performs corresponds to a correction means. S116 of FIG. 3 which the control part 21 of the karaoke server 2 performs corresponds to an update means.

カラオケ装置3が実行する図3のS100が、生成手段に相当する。カラオケ装置3が実行する図3のS102が、アップロード手段に相当する。カラオケ装置3が実行する図3のS118が、制御手段に相当する。ユーザ再生端末4が実行する図3のS104が、再生手段及び受付手段に相当する。   S100 of FIG. 3 which the karaoke apparatus 3 performs corresponds to a production | generation means. S102 in FIG. 3 executed by the karaoke apparatus 3 corresponds to upload means. S118 in FIG. 3 executed by the karaoke apparatus 3 corresponds to the control means. S104 in FIG. 3 executed by the user reproduction terminal 4 corresponds to reproduction means and reception means.

1…カラオケシステム、2…カラオケサーバ、21…制御部、22…記憶部、23…通信部、3…カラオケ装置、4…ユーザ再生端末、10…インターネット。   DESCRIPTION OF SYMBOLS 1 ... Karaoke system, 2 ... Karaoke server, 21 ... Control part, 22 ... Memory | storage part, 23 ... Communication part, 3 ... Karaoke apparatus, 4 ... User reproduction terminal, 10 ... Internet.

Claims (6)

カラオケ楽曲の歌唱者による歌唱音声が曲目に対応付けて記録された歌唱データと、前記カラオケ楽曲の歌唱の基準メロディを表す歌唱基準データとを記憶する記憶手段と、
前記記憶手段に記憶されている歌唱データに基づいて再生された歌唱音声を聴取した聴取者によって判定された評価を表す評価情報を取得する取得手段と、
前記記憶手段に記憶されている歌唱データの中から、前記取得手段により取得された評価情報で表される評価が所定の高評価基準を満たす歌唱データを抽出する抽出手段と、
前記抽出手段により抽出された歌唱データと、前記歌唱データの曲目に対応する歌唱基準データとを比較して、前記歌唱データで表される歌唱メロディと前記歌唱基準データで表される基準メロディとの差分を表す差分データを生成する差分生成手段と、
前記差分生成手段により生成された差分データを前記歌唱基準データに適用して、前記歌唱基準データを修正する修正手段と、
前記修正手段により修正された歌唱基準データによって前記記憶手段に記憶されている修正前の歌唱基準データを更新する更新手段と、
を備えることを特徴とする歌唱基準データ修正装置。
Storage means for storing singing data in which singing voices by singers of karaoke songs are recorded in association with songs, and singing reference data representing reference melody of singing karaoke songs;
Obtaining means for obtaining evaluation information representing an evaluation determined by a listener who has listened to the singing voice reproduced based on the song data stored in the storage means;
Extraction means for extracting song data in which the evaluation represented by the evaluation information acquired by the acquisition means satisfies a predetermined high evaluation criterion from the song data stored in the storage means;
The singing melody represented by the singing data is compared with the singing melody represented by the singing data and the singing melody represented by the singing data by comparing the singing data extracted by the extracting means and the singing data of the singing data. Difference generation means for generating difference data representing the difference;
Applying the difference data generated by the difference generating means to the singing reference data, correcting means for correcting the singing reference data;
Updating means for updating the singing reference data before correction stored in the storage means with the singing reference data corrected by the correcting means;
A singing standard data correction device comprising:
請求項1に記載の歌唱基準データ修正装置において、
前記抽出手段は、同一の曲目について複数の歌唱データを抽出し、
前記抽出手段により抽出された同一の曲目に関する複数の歌唱データで表される歌唱メロディを平均化する平均化手段を備え、
前記差分生成手段は、前記平均化手段により平均化された歌唱データと、前記平均化された歌唱データの曲目に対応する歌唱基準データとを比較して、前記平均化された歌唱データで表される歌唱メロディと前記歌唱基準データで表される基準メロディとの差分を表す差分データを生成すること、
を特徴とする歌唱基準データ修正装置。
In the singing standard data correction device according to claim 1,
The extraction means extracts a plurality of song data for the same music piece,
An averaging means for averaging singing melodies represented by a plurality of song data relating to the same piece of music extracted by the extracting means;
The difference generation means compares the singing data averaged by the averaging means with the singing reference data corresponding to the song of the averaged singing data, and is expressed by the averaged singing data. Generating difference data representing a difference between the singing melody and the reference melody represented by the singing reference data,
A singing standard data correction device characterized by the above.
請求項1に記載の歌唱基準データ修正装置において、
前記取得手段は、前記歌唱データについて楽曲を複数に区分けした区間ごとに判定された評価を表す評価情報を取得し、
前記抽出手段は、前記評価情報で表される区間ごとの評価が所定の高評価基準を満たす歌唱データを、同一の曲目について複数抽出し、
記抽出手段により抽出された同一の曲目に関する複数の歌唱データについて、前記高評価基準を満たす同一区間の歌唱メロディ同士を平均化する平均化手段を備え
前記差分生成手段は、前記平均化手段により平均化された区間ごとの歌唱データと、前記歌唱基準データにおける対応する区間とを比較して、前記歌唱データで表される歌唱メロディと前記歌唱基準データで表される基準メロディとの差分を表す差分データを生成すること、
を特徴とする歌唱基準データ修正装置。
In the singing standard data correction device according to claim 1,
The acquisition means acquires evaluation information representing an evaluation determined for each section in which the song data is divided into a plurality of pieces of the song data,
The extraction means extracts a plurality of pieces of singing data that satisfy a predetermined high evaluation criterion for each section represented by the evaluation information for the same piece of music,
A plurality of song data for the same music extracted by the pre-Symbol extracting means comprises averaging means for averaging the singing melodies each other the same section that satisfies the high criteria,
The difference generating means compares the singing data for each section averaged by the averaging means with the corresponding section in the singing reference data, and the singing melody represented by the singing data and the singing reference data Generating difference data representing a difference from the reference melody represented by
A singing standard data correction device characterized by the above.
請求項1ないし請求項3の何れか1項に記載の歌唱基準データ修正装置において、
前記記憶手段に記憶されている歌唱基準データには、特定の歌唱技巧とその歌唱技巧が発現する時点に関する評価基準を表す歌唱技巧評価情報が含まれており、
前記抽出手段により抽出された歌唱データで表される歌唱音声に含まれる特定の歌唱技巧とその歌唱技巧が発現した時点を検出する検出手段を備え、
前記修正手段は、前記検出手段により検出された歌唱技巧とその歌唱技巧が発現した時点の集計に基づいて、前記歌唱基準データの歌唱技巧評価情報を修正すること、
を特徴とする歌唱基準データ修正装置。
In the singing standard data correction device according to any one of claims 1 to 3,
The singing standard data stored in the storage means includes singing technique evaluation information representing an evaluation standard regarding a specific singing technique and a point in time when the singing technique is expressed,
A detection means for detecting a specific singing technique included in the singing voice represented by the singing data extracted by the extracting means and a point in time when the singing technique is expressed;
The correcting means corrects the singing technique evaluation information of the singing reference data based on the singing technique detected by the detecting means and the aggregation at the time when the singing technique is expressed;
A singing standard data correction device characterized by the above.
演奏されたカラオケ楽曲の歌唱者による歌唱音声を記録して曲目に対応付けた歌唱デー
タを生成する歌唱データ生成手段と、
前記歌唱データ生成手段により生成された歌唱データを記憶手段にアップロードするアップロード手段と、
前記記憶手段に記憶されている歌唱データに基づいて歌唱音声を再生する再生手段と、
前記再生手段により再生された歌唱データに対する評価を聴取者から受付ける受付手段と、
前記アップロード手段によりアップロードされた歌唱データと、前記カラオケ楽曲の歌唱の基準メロディを表す歌唱基準データとを記憶する記憶手段と、
前記受付け手段により受付された評価を評価対象の歌唱データに対応付けて表す評価情報を取得する取得手段と、
前記記憶手段に記憶されている歌唱データの中から、前記取得手段により取得された評価情報で表される評価が所定の高評価基準を満たす歌唱データを抽出する抽出手段と、
前記抽出手段により抽出された歌唱データと、前記歌唱データの曲目に対応する歌唱基準データとを比較して、前記歌唱データで表される歌唱メロディと前記歌唱基準データで表される基準メロディとの差分を表す差分データを生成する差分生成手段と、
前記差分生成手段により生成された差分データを前記歌唱基準データに適用して、前記歌唱基準データを修正する修正手段と、
前記修正手段により修正された歌唱基準データによって前記記憶手段に記憶されている修正前の歌唱基準データを更新する更新手段と、
前記記憶手段に記憶されている歌唱基準データに従って、カラオケ楽曲の歌唱を支援する支援機能を実行する制御手段と、
を備えることを特徴とするカラオケシステム。
Singing data generating means for generating singing data associated with each song by recording the singing voice by the singer of the karaoke song performed;
Upload means for uploading the song data generated by the song data generating means to the storage means;
Playback means for playing back the singing voice based on the song data stored in the storage means;
Accepting means for accepting an evaluation of the song data reproduced by the reproducing means from a listener;
Storage means for storing singing data uploaded by the uploading means, and singing reference data representing a reference melody for singing the karaoke music;
Obtaining means for obtaining evaluation information representing the evaluation received by the receiving means in association with the song data to be evaluated;
Extraction means for extracting song data in which the evaluation represented by the evaluation information acquired by the acquisition means satisfies a predetermined high evaluation criterion from the song data stored in the storage means;
The singing melody represented by the singing data is compared with the singing melody represented by the singing data and the singing melody represented by the singing data by comparing the singing data extracted by the extracting means and the singing data of the singing data. Difference generation means for generating difference data representing the difference;
Applying the difference data generated by the difference generating means to the singing reference data, correcting means for correcting the singing reference data;
Updating means for updating the singing reference data before correction stored in the storage means with the singing reference data corrected by the correcting means;
In accordance with the singing reference data stored in the storage means, control means for executing a support function for supporting the singing of karaoke music,
A karaoke system comprising:
カラオケ楽曲の歌唱者による歌唱音声が曲目に対応付けて記録された歌唱データに基づいて再生された歌唱音声を聴取した聴取者によって判定された評価を表す評価情報を取得する取得手順と、
前記歌唱データを記憶する記憶手段から、前記取得手順において取得された評価情報で表される評価が所定の高評価基準を満たす歌唱データを抽出する抽出手順と、
前記抽出手順において抽出された歌唱データと、前記歌唱データの曲目に対応するカラオケ楽曲の歌唱の基準メロディを表す歌唱基準データとを比較して、前記歌唱データで表される歌唱メロディと前記歌唱基準データで表される基準メロディとの差分を表す差分データを生成する差分生成手順と、
前記差分生成手順において生成された差分データを前記歌唱基準データに適用して、前記歌唱基準データを修正する修正手順と、
前記修正手順において修正された歌唱基準データによって、記憶手段に記憶されている修正前の歌唱基準データを更新する更新手順と、
をコンピュータに実行させるプログラム。
An acquisition procedure for acquiring evaluation information representing an evaluation determined by a listener who has listened to the singing voice reproduced based on the singing data in which the singing voice of the karaoke song singer is recorded in association with the song,
From the storage means for storing the song data, an extraction procedure for extracting song data in which the evaluation represented by the evaluation information acquired in the acquisition procedure satisfies a predetermined high evaluation criterion;
The singing melody represented by the singing data and the singing standard are compared by comparing the singing data extracted in the extraction procedure with the singing standard data representing the singing melody of the karaoke music corresponding to the song data. A difference generation procedure for generating difference data representing a difference from the reference melody represented by the data;
Applying the difference data generated in the difference generation procedure to the singing reference data, correcting the singing reference data,
An update procedure for updating the singing reference data before correction stored in the storage means by the singing reference data corrected in the correction procedure;
A program that causes a computer to execute.
JP2015193711A 2015-09-30 2015-09-30 Singing standard data correction device, karaoke system, program Active JP6589521B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015193711A JP6589521B2 (en) 2015-09-30 2015-09-30 Singing standard data correction device, karaoke system, program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015193711A JP6589521B2 (en) 2015-09-30 2015-09-30 Singing standard data correction device, karaoke system, program

Publications (2)

Publication Number Publication Date
JP2017068046A JP2017068046A (en) 2017-04-06
JP6589521B2 true JP6589521B2 (en) 2019-10-16

Family

ID=58492413

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015193711A Active JP6589521B2 (en) 2015-09-30 2015-09-30 Singing standard data correction device, karaoke system, program

Country Status (1)

Country Link
JP (1) JP6589521B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6944357B2 (en) * 2017-11-30 2021-10-06 株式会社第一興商 Communication karaoke system
CN111081277B (en) * 2019-12-19 2022-07-12 广州酷狗计算机科技有限公司 Audio evaluation method, device, equipment and storage medium

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4103364B2 (en) * 2001-09-19 2008-06-18 ヤマハ株式会社 Karaoke system, karaoke device, and server device for karaoke system
JP2007256619A (en) * 2006-03-23 2007-10-04 Yamaha Corp Evaluation device, control method and program
JP2008276101A (en) * 2007-05-07 2008-11-13 Yamaha Corp Music piece reproduction system and device
JP2009244789A (en) * 2008-03-31 2009-10-22 Daiichikosho Co Ltd Karaoke system with guide vocal creation function
JP5428459B2 (en) * 2009-03-30 2014-02-26 ヤマハ株式会社 Singing evaluation device
JP5029644B2 (en) * 2009-03-31 2012-09-19 ブラザー工業株式会社 Karaoke network system
JP6184296B2 (en) * 2013-10-31 2017-08-23 株式会社第一興商 Karaoke guide vocal generating apparatus and guide vocal generating method

Also Published As

Publication number Publication date
JP2017068046A (en) 2017-04-06

Similar Documents

Publication Publication Date Title
US11710474B2 (en) Text-to-speech from media content item snippets
US10347250B2 (en) Utterance presentation device, utterance presentation method, and computer program product
CN110675886B (en) Audio signal processing method, device, electronic equipment and storage medium
US11521585B2 (en) Method of combining audio signals
JP2017513049A (en) How to provide users with feedback on the performance of karaoke songs
CN106898339B (en) Song chorusing method and terminal
CN104715760A (en) KTV song matching analyzing method and system
CN110010159B (en) Sound similarity determination method and device
CN110741430B (en) Singing synthesis method and singing synthesis system
CN106611603A (en) Audio processing method and audio processing device
JP6589521B2 (en) Singing standard data correction device, karaoke system, program
JP6288197B2 (en) Evaluation apparatus and program
JP6102076B2 (en) Evaluation device
KR101813704B1 (en) Analyzing Device and Method for User&#39;s Voice Tone
JP2014191192A (en) Reference data creation device, reference data creation system, and performance terminal device
CN113032616A (en) Audio recommendation method and device, computer equipment and storage medium
JP6219750B2 (en) Singing battle karaoke system
JP2014013340A (en) Music composition support device, music composition support method, music composition support program, recording medium storing music composition support program and melody retrieval device
JP2017116899A (en) Karaoke generation by voice input
US20110077756A1 (en) Method for identifying and playing back an audio recording
CN115410544B (en) Sound effect processing method and device and electronic equipment
US20120197841A1 (en) Synchronizing data to media
EP3996084B1 (en) Determining relations between music items
JP5627063B2 (en) Inappropriate song scoring reference data notification system
US20220044666A1 (en) Intelligent accompaniment generating system and method of assisting a user to play an instrument in a system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180821

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190611

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190625

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190802

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190820

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190902

R150 Certificate of patent or registration of utility model

Ref document number: 6589521

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150