JP2010237532A - Karaoke system, karaoke device, and server - Google Patents

Karaoke system, karaoke device, and server Download PDF

Info

Publication number
JP2010237532A
JP2010237532A JP2009086602A JP2009086602A JP2010237532A JP 2010237532 A JP2010237532 A JP 2010237532A JP 2009086602 A JP2009086602 A JP 2009086602A JP 2009086602 A JP2009086602 A JP 2009086602A JP 2010237532 A JP2010237532 A JP 2010237532A
Authority
JP
Japan
Prior art keywords
sound data
singing
data
singing sound
determination
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009086602A
Other languages
Japanese (ja)
Other versions
JP4983835B2 (en
Inventor
Akihiro Kamimura
晃弘 上村
Tetsuya Mizutani
哲也 水谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Brother Industries Ltd
Original Assignee
Brother Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Brother Industries Ltd filed Critical Brother Industries Ltd
Priority to JP2009086602A priority Critical patent/JP4983835B2/en
Publication of JP2010237532A publication Critical patent/JP2010237532A/en
Application granted granted Critical
Publication of JP4983835B2 publication Critical patent/JP4983835B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Reverberation, Karaoke And Other Acoustics (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a karaoke system, a karaoke device, a server, etc., capable of efficiently using the singing voice data contributed upon part-singing. <P>SOLUTION: Once it is determined that singing voice data for decision making corresponds to a melody part (harmony part), a singing voice based upon the contributed singing voice data of a harmony part (melody part) suitable to part-singing is output during performance of a karaoke music on condition that the contributed singing voice data is recorded. When the contributed singing voice data of the harmony part (melody part) suitable to the part-singing is not available, the contributed singing voice data of the melody part (harmony part) is selected and a singing voice based upon the singing voice data of the harmony part (singing part) generated from the singing voice data is output during the performance of the karaoke music. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、カラオケに関するものであり、特に、重唱や合唱のための歌唱音声を出力するためのカラオケシステム、カラオケ装置、サーバ等に関するものである。   The present invention relates to karaoke, and particularly relates to a karaoke system, a karaoke apparatus, a server, and the like for outputting singing voices for singing and chorusing.

従来、歌唱者のパート以外のパートの歌唱音声をカラオケ楽曲の演奏の際に出力することにより、重唱や合唱(以下、「重唱」という。)を可能としたカラオケ装置が提案されている。このようなカラオケ装置では、歌唱者が主旋律パートを歌唱するときはハーモニーパートの歌唱音声を出力し、歌唱者がハーモニーパートを歌唱するときは主旋律パートの歌唱信号を出力する。この技術に関連する下記特許文献1には、歌唱者の歌唱信号から音域を判定し、判定結果に応じた歌唱信号を出力するカラオケ装置が記載されている。   2. Description of the Related Art Conventionally, there has been proposed a karaoke apparatus that enables singing and chorusing (hereinafter referred to as “singing”) by outputting singing voices of parts other than a singer's part when performing karaoke music. In such a karaoke apparatus, when the singer sings the main melody part, the singing voice of the harmony part is output, and when the singer sings the harmony part, the singing signal of the main melody part is output. The following Patent Document 1 related to this technology describes a karaoke device that determines a sound range from a singer's singing signal and outputs a singing signal according to the determination result.

特開平9−44171号公報JP 9-44171 A

通信技術及び記録技術の進歩に伴い、歌唱音データを投稿(サーバにアップロードして、サーバで記録)することができるカラオケシステムが提案されている。そして、このようなカラオケシステムと、重唱可能なカラオケ装置とを技術的に融合させることにより、カラオケを楽しむ歌唱者の興趣を高めることができると考えられる。   Along with advances in communication technology and recording technology, a karaoke system has been proposed that can post singing sound data (upload to a server and record it on the server). And it is thought that the interest of a singer who enjoys karaoke can be enhanced by technically combining such a karaoke system and a karaoke apparatus capable of performing singing.

本発明は、重唱時において、投稿された歌唱音データを効率的に利用することができるカラオケシステム、カラオケ装置、サーバ等を提供することを目的とする。   An object of the present invention is to provide a karaoke system, a karaoke apparatus, a server, and the like that can efficiently use posted singing sound data during heavy singing.

上記目的を達成するために、請求項1に係る発明は、サーバと当該サーバと通信可能なカラオケ装置とから構成されるカラオケシステムであって、前記サーバは、前記カラオケ装置から送信された歌唱者の判定用歌唱音データを一時的に記録する一時記録手段と、前記カラオケ装置で歌唱された投稿歌唱音データを記録するデータベースを有し、前記カラオケ装置は、前記判定用歌唱音データを取得しつつ、前記サーバに送信し、前記サーバは、前記判定用歌唱音データを前記一時記録手段に記録しつつ、当該判定用歌唱音データのパートを判定し、前記サーバは、前記判定用歌唱音データのパートを判定すると、前記一時記録手段に記録された判定用歌唱音データを用いて、前記データベースから前記投稿歌唱音データを選択し、前記サーバは、前記選択した投稿歌唱音データまたは当該投稿歌唱音データから生成した歌唱音データを重唱用歌唱音データ(重唱音データ)として前記カラオケ装置に送信し、前記カラオケ装置は、カラオケ楽曲を演奏する際に、前記受信した重唱用歌唱音データ(重唱音データ)を用いて歌唱音声を出力することを特徴とする。   In order to achieve the above object, the invention according to claim 1 is a karaoke system comprising a server and a karaoke device capable of communicating with the server, wherein the server is a singer transmitted from the karaoke device. A temporary recording means for temporarily recording the singing sound data for determination, and a database for recording the posted singing sound data sung by the karaoke apparatus, wherein the karaoke apparatus acquires the singing sound data for determination The server transmits the determination singing sound data to the temporary recording unit while determining the part of the determination singing sound data, and the server determines the singing sound data for determination. When the part is determined, the posted singing sound data is selected from the database using the determination singing sound data recorded in the temporary recording means, and the server Transmits the selected posted singing sound data or the singing sound data generated from the posted singing sound data to the karaoke device as singing sound data for singing (singing sound data), and the karaoke device plays karaoke music. In this case, a singing voice is output using the received singing sound data for heavy singing (single singing sound data).

また、請求項2に係る発明は、投稿歌唱音データを記録するデータベースを有するサーバと通信可能なカラオケ装置であって、歌唱者の判定用歌唱音データを取得しつつ、前記サーバに送信し、前記サーバから、前記投稿歌唱音データまたは当該投稿歌唱音データから生成した歌唱音データを重唱用歌唱音データ(重唱音データ)として受信し、カラオケ楽曲を演奏する際に、前記受信した重唱用歌唱音データ(重唱音データ)を用いて歌唱音声を出力することを特徴とする。   Moreover, the invention which concerns on Claim 2 is a karaoke apparatus which can communicate with the server which has a database which records contribution song sound data, and transmits to the server, acquiring song sound data for singers' judgment, When the singing sound data generated from the posted singing sound data or the singing singing sound data is received as the singing singing sound data (singing sound data) from the server, and the karaoke music is played, the received singing singing sound data is received. A singing voice is output using sound data (heavy sound data).

また、請求項3に係る発明は、カラオケ装置と通信可能なサーバであって、前記カラオケ装置から送信された歌唱者の判定用歌唱音データを一時的に記録する一時記録手段と、前記カラオケ装置で歌唱された投稿歌唱音データを記録するデータベースを有し、前記判定用歌唱音データを受信し、前記判定用歌唱音データを前記一時記録手段に記録しつつ、当該判定用歌唱音データのパートを判定し、前記判定用歌唱音データのパートを判定すると、前記一時記録手段に記録された判定用歌唱音データを用いて、前記データベースから前記投稿歌唱音データを選択し、前記選択した投稿歌唱音データまたは当該投稿歌唱音データから生成した歌唱音データを重唱用歌唱音データ(重唱音データ)として前記カラオケ装置に送信することを特徴とする。   Moreover, the invention which concerns on Claim 3 is a server which can communicate with a karaoke apparatus, Comprising: The temporary recording means which records the song sound data for determination of the singer transmitted from the said karaoke apparatus temporarily, The said karaoke apparatus And a database for recording the posted singing sound data sung in, receiving the judgment singing sound data, and recording the judgment singing sound data in the temporary recording means, and a part of the judgment singing sound data And determining the part of the determination singing sound data, using the determination singing sound data recorded in the temporary recording means, selecting the posted singing sound data from the database, and selecting the posted singing sound Transmitting singing sound data generated from the sound data or the posted singing sound data to the karaoke apparatus as singing sound data for singing (singing sound data), That.

本発明によれば、判定用歌唱音データを記録しながらパート判定を行うので、当該判定用歌唱音データのパート判定を高速に行うことができる。また、判定用歌唱音データが主旋律パート(ハーモニーパート)と判定されると、重唱に適切なハーモニーパート(主旋律パート)の投稿歌唱音データが記録されている場合には、当該投稿歌唱音データに基いた歌唱音声を、カラオケ楽曲の演奏時に出力する。さらに、重唱に適切なハーモニーパート(主旋律パート)の投稿歌唱音データがない場合には、主旋律パート(ハーモニーパート)の投稿歌唱音データを選択し、当該歌唱音データから生成したハーモニーパート(歌唱パート)の歌唱音データに基いた歌唱音声を、カラオケ楽曲の演奏時に出力する。これにより、投稿された歌唱音データを、重唱するときに効果的に利用することができる。   According to the present invention, since the part determination is performed while recording the determination singing sound data, the part determination of the determination singing sound data can be performed at high speed. In addition, when the singing sound data for determination is determined to be the main melody part (harmonic part), if the posted singing sound data of the harmony part (main melody part) appropriate for repeated singing is recorded, The singing voice based on it is output when playing karaoke music. Furthermore, when there is no post singing sound data of a harmony part (main melody part) suitable for repeated singing, the post singing sound data of the main melody part (harmony part) is selected, and the harmony part (singing part) generated from the singing sound data is selected. Singing sound based on the singing sound data of) is output when the karaoke music is played. Thereby, the posted singing sound data can be effectively used when singing.

カラオケシステムの構成の一例を示した図である。It is the figure which showed an example of the structure of a karaoke system. 投稿歌唱音データベースのデータ構造の一例を示した図である。It is the figure which showed an example of the data structure of a contribution song sound database. カラオケシステムにおける情報の流れの一例を示した説明図である。It is explanatory drawing which showed an example of the flow of information in a karaoke system. カラオケ側処理のフローチャートである。It is a flowchart of a karaoke side process. 一時記録処理及び重唱音データ送信処理のフローチャートである。It is a flowchart of a temporary recording process and a chorus sound data transmission process. パート判定処理のフローチャートである。It is a flowchart of a part determination process. 重唱音データ決定処理のフローチャートである。It is a flowchart of a chorus sound data determination process. 主旋律パートのデータをハモリパートのデータに変換する様子を示した説明図である。It is explanatory drawing which showed a mode that the data of a main melody part were converted into the data of a hamori part. ハモリパートのデータを主旋律パートのデータに変換する様子を示した説明図である。It is explanatory drawing which showed a mode that the data of a hamori part were converted into the data of a main melody part. 提供データ選択処理のフローチャートである。It is a flowchart of provided data selection processing.

以下、本発明の実施形態に係るカラオケシステムについて説明する。   Hereinafter, a karaoke system according to an embodiment of the present invention will be described.

[カラオケシステムの概要]
本実施形態に係るカラオケシステムでは、重唱に適切な重唱音データを決定し、当該重唱音データに基いた重唱音声をカラオケ楽曲の楽音と共に出力するものである。
歌唱者はカラオケ楽曲の一部分を歌唱し、カラオケ装置はその歌唱音声を判定用歌唱音データとして取得し、サーバに送信する。サーバは、当該判定用歌唱音データに基いて重唱音データを決定し、カラオケ装置に送信する。カラオケ装置は、受信した重唱音データに基いた重唱音声をカラオケ楽曲の楽音と共に出力する。これにより、歌唱者の歌唱に基いた適切な重唱音声を出力することができる。
[Outline of Karaoke system]
In the karaoke system according to the present embodiment, the chorus sound data appropriate for the chorus is determined, and the chorus sound based on the chorus sound data is output together with the musical sound of the karaoke music.
The singer sings a part of the karaoke music, and the karaoke apparatus acquires the singing voice as determination singing sound data and transmits it to the server. The server determines the heavy singing sound data based on the singing sound data for determination and transmits it to the karaoke apparatus. The karaoke apparatus outputs a chorus sound based on the received chorus sound data together with the musical sound of the karaoke song. Thereby, the appropriate repeated voice based on a singer's song can be output.

[カラオケステムの構成]
カラオケシステムは、図1に示すように、各地のカラオケ店舗の客室に設置されたカラオケ装置100と各種情報の配信・管理を行うサーバ200とから構成され、各カラオケ装置100とサーバ200とは通信網を介して接続されている。図1ではカラオケ装置100は1つであるが、実際は多数のカラオケ装置100がサーバ200に接続される構成となっている。
[Composition of karaoke stem]
As shown in FIG. 1, the karaoke system includes a karaoke device 100 installed in a guest room of a karaoke store in each place and a server 200 that distributes and manages various information. The karaoke device 100 and the server 200 communicate with each other. Connected via the network. In FIG. 1, there is one karaoke device 100, but actually, a large number of karaoke devices 100 are connected to the server 200.

[サーバ200の構成]
サーバ200は、図1に示すように、制御部201とカラオケ楽曲データベース202と投稿歌唱音データベース203と一時記録部204とから構成される。制御部201は、CPUとRAMとROM等から構成され、CPUがROMに記録された各種プログラムを読み出して実行することにより、サーバ200全体を統括制御する。また、上述したとおり、多数のカラオケ装置100がサーバ200に接続されるので、サーバ200に複数のカラオケ装置100が同時にアクセスされることがある。また、サーバ200は自己の負荷を監視することができる。
[Configuration of Server 200]
As shown in FIG. 1, the server 200 includes a control unit 201, a karaoke song database 202, a posted singing sound database 203, and a temporary recording unit 204. The control unit 201 includes a CPU, a RAM, a ROM, and the like. The CPU reads and executes various programs recorded in the ROM, and controls the entire server 200 as a whole. Moreover, since many karaoke apparatuses 100 are connected to the server 200 as above-mentioned, the some karaoke apparatus 100 may be accessed to the server 200 simultaneously. Further, the server 200 can monitor its own load.

カラオケ楽曲データベース202には、カラオケ楽曲の演奏等に用いられる楽曲データが記録されている。また、後述の判定用歌唱音データと比較するための主旋律基準データ及びハモリ基準データが記録されている。さらに、通常のカラオケ楽曲の演奏時に用いられる歌唱音データ(予め作成されているもの)が記録されている。歌唱音データは、いわゆるガイドメロディであり、MIDI形式や生音形式で記録されている。なお、カラオケ楽曲データベース202のデータ構造等は公知のものを採用でき、本発明の理解に直接関係のない部分であるので詳細な説明を省略する。   In the karaoke music database 202, music data used for performance of karaoke music is recorded. In addition, main melody reference data and hammer reference data for comparison with later-described determination singing sound data are recorded. Furthermore, singing sound data (prepared in advance) used when playing normal karaoke music is recorded. The singing sound data is a so-called guide melody and is recorded in a MIDI format or a raw sound format. The data structure and the like of the karaoke song database 202 can be a known one and is not directly related to the understanding of the present invention.

投稿歌唱音データベース203には、カラオケ装置100から投稿された「投稿データ」が記録される。投稿データには、カラオケ装置100での投稿歌唱音データが含まれる。
図2に示すように、投稿歌唱音データベース203には、「識別コード」をキーとして、「投稿歌唱音データ」、「楽曲コード」、「パート」、「投稿者コード」、「投稿日」等が記録されている。
“Posted data” posted from the karaoke apparatus 100 is recorded in the posted singing sound database 203. The posted data includes posted singing sound data in the karaoke apparatus 100.
As shown in FIG. 2, in the posted singing sound database 203, “posted singing sound data”, “music code”, “part”, “poster code”, “posting date”, etc., using “identification code” as a key. Is recorded.

「識別コード」は、各投稿歌唱音データを識別するためのユニークな識別符号である。
「楽曲コード」は、投稿歌唱音データの楽曲名を示す識別符号であり、カラオケ楽曲データベース202と同じ楽曲コードが用いられる。
「パート」は、当該投稿歌唱音データのパートを示す識別符号であり、主旋律のメロディが歌唱された場合は「主旋律」となり、ハモリのメロディが歌唱された場合は「ハモリ」となる。
「投稿者コード」は、投稿歌唱音データを投稿した歌唱者を識別するための識別符号である。
「投稿日」は、投稿歌唱音データが投稿された日時を示している。
The “identification code” is a unique identification code for identifying each posted singing sound data.
The “music code” is an identification code indicating the music name of the posted singing sound data, and the same music code as the karaoke music database 202 is used.
“Part” is an identification code indicating the part of the posted singing sound data, and becomes “main melody” when a melody of the main melody is sung, and becomes “hamomori” when a melody of the hamori is sung.
The “contributor code” is an identification code for identifying a singer who has posted posted singing sound data.
“Posted date” indicates the date and time when the posted singing sound data was posted.

一時記録部204には、カラオケ装置100から送信された判定用歌唱音データが一時的に記録され、記録された判定用歌唱音データは後述するパート判定処理や重唱音データ決定処理において用いられる。また、後述の提供データ選択処理で用いられる「基準データ」及び「候補データ」が一時的に記録される。   In the temporary recording unit 204, the singing sound data for determination transmitted from the karaoke apparatus 100 is temporarily recorded, and the recorded singing sound data for determination is used in part determination processing and repetitive sound data determination processing described later. In addition, “reference data” and “candidate data” used in provided data selection processing described later are temporarily recorded.

[カラオケ装置100の構成]
図1に示すように、カラオケ装置100は、リモコン110とコマンダ120とから構成される。なお、複数のリモコン110が、コマンダ120と通信可能となるように構成してもよい。
リモコン110は制御部111を有し、制御部111は、CPUとRAMとROM等から構成され、CPUがROMに記録された各種プログラムを読み出して実行することにより、リモコン110全体を統括制御する。
[Configuration of Karaoke Device 100]
As shown in FIG. 1, the karaoke apparatus 100 includes a remote controller 110 and a commander 120. Note that a plurality of remote controllers 110 may be configured to be able to communicate with the commander 120.
The remote controller 110 includes a control unit 111. The control unit 111 includes a CPU, a RAM, a ROM, and the like. The CPU reads and executes various programs recorded in the ROM, thereby performing overall control of the entire remote control 110.

コマンダ120は制御部121を有し、制御部121は、CPUとRAMとROM等から構成され、CPUがROMに記録された各種プログラムを読み出して実行することにより、コマンダ120全体を統括制御する。また、コマンダ120には、マイク130が接続されており、歌唱者の歌唱音声を歌唱音データとして取得する。また、コマンダ120には、スピーカ140が接続されており、カラオケ楽曲の楽音や重唱用歌唱音声が出力される。
なお、リモコン110及びコマンダ120の構成のうち、本発明の理解に直接関係のない部分については詳細な説明を省略する。
The commander 120 includes a control unit 121. The control unit 121 includes a CPU, a RAM, a ROM, and the like, and the CPU reads and executes various programs recorded in the ROM, thereby performing overall control of the commander 120. Moreover, the microphone 130 is connected to the commander 120, and the singer's singing voice is acquired as singing sound data. In addition, the commander 120 is connected to a speaker 140, and a musical sound of karaoke music and a singing voice for singing are output.
Of the configurations of the remote controller 110 and the commander 120, detailed descriptions of portions that are not directly related to the understanding of the present invention are omitted.

[カラオケシステムで送受信される情報]
次に、カラオケシステムで送受信される情報の一例について、図3を参照しつつ説明する。
[Information sent and received by the karaoke system]
Next, an example of information transmitted and received by the karaoke system will be described with reference to FIG.

リモコン110は、歌唱する楽曲のリクエスト操作を歌唱者から受け付ける(1)。
リモコン110は、コマンダ120にリクエスト信号を送信する(2)。
コマンダ120は、リクエスト信号に基いて楽曲演奏を行い、また、歌唱者の歌唱音声を判定用歌唱音データとして取得する(3)。
コマンダ120は、取得した判定用歌唱音データを順次、サーバ200に送信する(4)。
サーバ200は、受信した判定用歌唱音データに基いてパート判定処理を行い、判定用歌唱音データのパートを判定する(5)。
サーバ200は、判定用歌唱音データのパートを判定した後、受信した判定用歌唱音データに基いて重唱音データ決定処理を行い、歌唱者の歌唱の際に用いられる重唱音データを決定する(6)。
サーバ200は、決定した重唱音データをコマンダ120に送信する(7)。
コマンダ120は、前記リクエスト信号に基いて楽曲演奏を再度行い、また、歌唱者の歌唱音声を投稿歌唱音データとして取得する(8)。
コマンダ120は、投稿データを作成する(9)。
コマンダ120は、投稿データをサーバ200に送信する(10)。
サーバ200は、受信した投稿データに基いて投稿歌唱音データベース203を更新する(11)。
The remote controller 110 accepts a request operation for a song to be sung from a singer (1).
The remote controller 110 transmits a request signal to the commander 120 (2).
The commander 120 performs the music performance based on the request signal, and acquires the singing voice of the singer as the singing sound data for determination (3).
The commander 120 sequentially transmits the acquired singing sound data for determination to the server 200 (4).
The server 200 performs part determination processing based on the received determination singing sound data, and determines the part of the determination singing sound data (5).
After determining the part of the determination singing sound data, the server 200 performs the heavy singing sound data determination process based on the received determination singing sound data, and determines the singing sound data used when the singer sings ( 6).
The server 200 transmits the determined chorus sound data to the commander 120 (7).
The commander 120 performs the music performance again based on the request signal, and acquires the singing voice of the singer as posted singing sound data (8).
The commander 120 creates post data (9).
The commander 120 transmits post data to the server 200 (10).
The server 200 updates the posted song sound database 203 based on the received posted data (11).

以上の処理により、歌唱者の歌唱に基いた適切な重唱音声を出力することができる。また、カラオケ楽曲の一部分の判定用歌唱音データに基いて重唱に適切な重唱音データを選択させるため、歌唱者の負担を低減させることができる。   With the above processing, it is possible to output appropriate repeated voice based on the singing of the singer. Moreover, since the suitable chorus sound data for a chorus is selected based on the singing sound data for determination of a part of karaoke music, the burden on the singer can be reduced.

[カラオケ装置側の処理]
次に、カラオケ装置100側で実行されるカラオケ側処理について図4のフローチャートを用いて具体的に説明する。カラオケ側処理のプログラムは、制御部111及び制御部121内のROMに記録されており、制御部111内のCPU及び制御部121内のCPUにより実行される。
[Karaoke equipment processing]
Next, the karaoke side process executed on the karaoke apparatus 100 side will be specifically described with reference to the flowchart of FIG. The karaoke-side processing program is recorded in the ROM in the control unit 111 and the control unit 121, and is executed by the CPU in the control unit 111 and the CPU in the control unit 121.

S11において、リモコン110の制御部111は、歌唱する楽曲のリクエスト操作を歌唱者から受け付ける。また、リクエスト操作を受け付けると、制御部111は、コマンダ120にリクエスト信号を送信する。
S12において、コマンダ120の制御部121は、リクエスト信号に基いてカラオケ楽曲の演奏を開始する。また、歌唱者は、カラオケ楽曲の演奏に伴って歌唱を行う。
In S11, the control unit 111 of the remote controller 110 receives a request operation for a song to be sung from a singer. In addition, when receiving a request operation, the control unit 111 transmits a request signal to the commander 120.
In S12, the control unit 121 of the commander 120 starts playing karaoke music based on the request signal. The singer sings along with the performance of karaoke music.

S13において、制御部121は、歌唱者の歌唱音声を判定用歌唱音データとして取得し、取得した判定用歌唱音データを楽曲コードと共に順次、サーバ200に送信する。なお、送信する際は、当該判定用歌唱音データを所定時間分蓄積し、順次送信する。
S14において、制御部121は、サーバ200から重唱音データを受信したか否かを判断する。この処理において、重唱音データを受信していないと判断した場合は(S14:NO)、制御部121は、処理をS13に戻す。これにより、重唱音データを受信するまでの間、判定用歌唱音データの取得・送信が繰り返されることになる。
一方、S14において、重唱音データを受信したと判断した場合は(S14:YES)、制御部121は、処理をS15に移行させる。
In S13, the control unit 121 acquires the singing voice of the singer as determination singing sound data, and sequentially transmits the acquired determination singing sound data to the server 200 together with the music code. When transmitting, the determination singing sound data is accumulated for a predetermined time and sequentially transmitted.
In S <b> 14, the control unit 121 determines whether or not the chorus sound data has been received from the server 200. In this process, when it is determined that the chorus sound data is not received (S14: NO), the control unit 121 returns the process to S13. Thereby, acquisition and transmission of the singing sound data for determination are repeated until the heavy singing sound data is received.
On the other hand, if it is determined in S14 that the chorus sound data has been received (S14: YES), the control unit 121 shifts the process to S15.

S15において、制御部121は、カラオケ楽曲の演奏を停止する。
S16において、制御部121は、カラオケ楽曲の演奏を開始する。なお、S16では、カラオケ楽曲の最初から演奏が開始される。また、カラオケ楽曲の演奏中、歌唱者の歌唱音声は、投稿歌唱音データとして記録される。
S17において、制御部121は、カラオケ楽曲の演奏を終了する。
S18において、制御部121は、投稿データを作成する。投稿データには、投稿歌唱音データと楽曲コードと投稿者コードが含まれる。
S19において、制御部121は、投稿データをサーバ200に送信する。
In S15, the control unit 121 stops the performance of the karaoke music.
In S16, the control unit 121 starts playing karaoke music. In S16, the performance starts from the beginning of the karaoke song. In addition, during the performance of karaoke music, the singing voice of the singer is recorded as posted singing sound data.
In S <b> 17, the control unit 121 ends the performance of the karaoke song.
In S18, the control unit 121 creates post data. The posted data includes posted singing sound data, music code, and contributor code.
In S <b> 19, the control unit 121 transmits post data to the server 200.

[サーバ側の処理]
次に、サーバ200で実行される処理について説明する。サーバ200では、受信した判定用歌唱音データを順次、一時記録部204に記録する一時記録処理と、重唱音データを決定し、カラオケ装置100に送信する重唱音データ送信処理の2つの処理が並列に実行される。また、一時記録処理と重唱音データ送信処理とはプロセス間通信が可能である。
[Server-side processing]
Next, processing executed by the server 200 will be described. In the server 200, two processes of a temporary recording process for sequentially recording the received singing sound data for determination in the temporary recording unit 204 and a repeated sound data transmission process for determining the repeated sound data and transmitting it to the karaoke apparatus 100 are parallel. To be executed. Further, the inter-process communication is possible between the temporary recording process and the chorus sound data transmission process.

まず、一時記録処理について図5のフローチャートを用いて具体的に説明する。
S21において、サーバ200の制御部201は、受信した判定用歌唱音データを一時記録部204に順次記録する。
S22において、記録停止指示があったか否かを判断する。記録停止指示は、重唱音データ送信処理から行われる。この処理において、記録停止指示はなかったと判断した場合は(S22:NO)、制御部201は、処理をS21に戻す。これにより、記録停止指示があるまでの間、判定用歌唱音データは一時記録部204に順次記録されることになる。一方、記録停止指示があったと判断した場合は(S22:YES)、制御部201は、一時記録処理を終了する。
First, the temporary recording process will be specifically described with reference to the flowchart of FIG.
In S <b> 21, the control unit 201 of the server 200 sequentially records the received determination song sound data in the temporary recording unit 204.
In S22, it is determined whether or not a recording stop instruction has been issued. The recording stop instruction is issued from the chorus sound data transmission process. In this process, when it is determined that there is no recording stop instruction (S22: NO), the control unit 201 returns the process to S21. Thereby, the singing sound data for determination is sequentially recorded in the temporary recording unit 204 until a recording stop instruction is issued. On the other hand, when it is determined that there is a recording stop instruction (S22: YES), the control unit 201 ends the temporary recording process.

次に、重唱音データ送信処理について、図5のフローチャートを用いて説明する。
S31において、制御部201は、パート判定処理を実行する。
以下、パート判定処理について、図6のフローチャートを用いて説明する。
Next, the repeated sound data transmission processing will be described with reference to the flowchart of FIG.
In S31, the control unit 201 executes part determination processing.
Hereinafter, the part determination process will be described with reference to the flowchart of FIG.

S41において、制御部201は、一時記録部204から判定用歌唱音データを読み込む。
S42において、制御部201は、判定用歌唱音データと同じ楽曲の主旋律基準データをカラオケ楽曲データベース202から読み出し、公知の技術を用いて判定用歌唱音データと比較する。
S43において、制御部201は、判定用歌唱音データと同じ楽曲のハモリ基準データをカラオケ楽曲データベース202から読み出し、公知の技術を用いて判定用歌唱音データと比較する。
In S <b> 41, the control unit 201 reads the determination singing sound data from the temporary recording unit 204.
In S <b> 42, the control unit 201 reads out the main melody reference data of the same music as the determination singing sound data from the karaoke music database 202 and compares it with the determination singing sound data using a known technique.
In S43, the control unit 201 reads out the reference data of the same music as the singing sound data for determination from the karaoke music database 202 and compares it with the singing sound data for determination using a known technique.

S44において、制御部201は、S42及びS43の比較結果に基いて、判定用歌唱音データのパート判定ができたか否かを判断する。この処理において、パート判定ができなかったと判断した場合は(S44:NO)、制御部201は、処理をS45に移行させる。
S45において、制御部201は、パート判定処理の開始から所定時間が経過したか否かを判断する。この処理において、所定時間が経過していないと判断した場合は(S45:NO)、制御部201は、処理をS41に戻す。一方、この処理において、所定時間が経過したと判断した場合は(S45:YES)、制御部201は、処理をS46に移行させる。
In S44, the control unit 201 determines whether or not the part determination of the singing sound data for determination has been made based on the comparison result of S42 and S43. In this process, when it is determined that the part determination cannot be performed (S44: NO), the control unit 201 shifts the process to S45.
In S45, the control unit 201 determines whether or not a predetermined time has elapsed since the start of the part determination process. In this process, when it is determined that the predetermined time has not elapsed (S45: NO), the control unit 201 returns the process to S41. On the other hand, in this process, when it is determined that the predetermined time has elapsed (S45: YES), the control unit 201 shifts the process to S46.

S46において、制御部201は、エラー処理を実行する。エラー処理では、制御部201は、所定時間内にパート判定ができなかったことを示す表示データを作成し、カラオケ装置100に送信する。また、カラオケ装置100では、歌唱したパートを歌唱者に選択させるための処理を行うことができる。また、制御部201は、エラー処理を終了すると、重唱音データ送信処理を終了する。   In step S46, the control unit 201 executes error processing. In the error process, the control unit 201 creates display data indicating that the part determination cannot be performed within a predetermined time, and transmits the display data to the karaoke apparatus 100. Moreover, in the karaoke apparatus 100, the process for making a singer select the sung part can be performed. Moreover, the control part 201 will complete | finish a chorus sound data transmission process, after complete | finishing an error process.

一方、S44において、パート判定ができたと判断し、かつ、そのパートが主旋律パートであると判断した場合は、制御部201は、処理をS47に移行させる。
S47において、制御部201は、制御部201内のRAMに確保されている「提供フラグ」にハモリパートの重唱音データを提供することを示す「ハモリ」値を設定する。
また、S44において、パート判定できたと判断し、かつ、そのパートがハモリパートであると判断した場合は、制御部201は、処理をS48に移行させる。
S48において、制御部201は、「提供フラグ」に主旋律パートの重唱音データを提供することを示す「主旋律」値を設定する。
On the other hand, if it is determined in S44 that the part has been determined and the part is determined to be a main melody part, the control unit 201 shifts the process to S47.
In step S <b> 47, the control unit 201 sets a “harm” value indicating that the repeated sound data of the hammer part is to be provided to the “providing flag” reserved in the RAM in the control unit 201.
In S44, if it is determined that the part has been determined and it is determined that the part is a hammer part, the control unit 201 shifts the process to S48.
In S <b> 48, the control unit 201 sets a “main melody” value indicating that the chord sound data of the main melody part is to be provided in the “provide flag”.

説明を図5に戻す。
S32において、制御部201は、重唱音データ決定処理を実行する。
以下、重唱音データ決定処理について、図7のフローチャートを用いて説明する。
Returning to FIG.
In S <b> 32, the control unit 201 performs a chorus sound data determination process.
Hereinafter, the repeated sound data determination process will be described with reference to the flowchart of FIG.

S61において、制御部201は、提供フラグが「ハモリ」となっているか(すなわち、ハモリパートの重唱音データを提供するべきか)否かを判断する。この判断において、提供フラグが「ハモリ」となっていると判断した場合は(S61:YES)、制御部201は、処理をS62に移行させる。   In S <b> 61, the control unit 201 determines whether or not the provision flag is “harm” (that is, whether or not the hammer part repeated sound data should be provided). In this determination, when it is determined that the provision flag is “harm” (S61: YES), the control unit 201 shifts the process to S62.

S62において、制御部201は、判定用歌唱音データと同じ楽曲のハモリパートの投稿歌唱音データ(以下、「ハモリ曲データ」という)が投稿歌唱音データベース203に投稿されているか否かを判断する。この処理において、同じ楽曲のハモリ曲データが投稿されていると判断した場合は(S62:YES)、制御部201は、処理をS63に移行させる。
S63において、制御部201は、同じ楽曲のハモリ曲データを投稿歌唱音データベース203から抽出し、「候補データ」として一時記録部204に記録する。なお、S63において、複数のハモリ曲データが抽出されたものとする。
In step S <b> 62, the control unit 201 determines whether or not post-song sound data (hereinafter referred to as “hemo-tune data”) of the humming part of the same music as the determination singing sound data has been posted to the posted singing sound database 203. . In this process, when it is determined that the same song music data is posted (S62: YES), the control unit 201 shifts the process to S63.
In S <b> 63, the control unit 201 extracts the humor song data of the same song from the posted singing sound database 203 and records it in the temporary recording unit 204 as “candidate data”. In S63, it is assumed that a plurality of pieces of song music data are extracted.

S64において、制御部201は、判定用歌唱音データ(主旋律パート)を、ハモリパートに変換し、「基準データ」として一時記録部204に記録する。すなわち、基準データを作成する。図8に示すように、カラオケ楽曲データベース202に記録されているハモリ基準データと主旋律基準データとの差分値を、主旋律パートのデータ(判定用歌唱音データ)に加算することによりハモリパートのデータを生成することができる。なお、他の公知の方法によって主旋律パートのデータからハモリパートのデータを生成してもよい。また、S64における処理は、一時記録部204に判定用歌唱音データが新たに書き込まれる毎に、継続して行われるものとする。すなわち、パート判定処理(図5のS31)が終了した後に受信した判定用歌唱音データについても、順次、ハモリパートに変換され、「基準データ」として一時記録部204に記録される。   In S <b> 64, the control unit 201 converts the determination singing sound data (main melody part) into a hammer part and records it as “reference data” in the temporary recording unit 204. That is, reference data is created. As shown in FIG. 8, the difference value between the hamori reference data and the main melody reference data recorded in the karaoke song database 202 is added to the main melody part data (determining singing sound data) to obtain the hamori part data. Can be generated. Note that the hamori part data may be generated from the main melody part data by another known method. Further, the process in S64 is continuously performed every time the singing sound data for determination is newly written in the temporary recording unit 204. That is, the singing sound data for determination received after the end of the part determination process (S31 in FIG. 5) is also sequentially converted into a hammer part and recorded in the temporary recording unit 204 as “reference data”.

S65において、制御部201は、提供データ選択処理を実行する。提供データ選択処理により、S63の「候補データ」(ハモリ曲データ)のうち、ハモリパートに変換された判定用歌唱音データに最も似ている「候補データ」が選択されることになる。そして、当該選択された「候補データ」が、カラオケ装置100に送信される「重唱音データ」となる。なお、提供データ選択処理の詳細については後述する。また、S63において、1つのハモリ曲データのみが抽出された場合は、S64及びS65の処理は実行されず、当該1つのハモリ曲データが、カラオケ装置100に送信される「重唱音データ」となる。
なお、以下では、S64及びS65の一連の処理を「第1の処理」ということがある。
In step S65, the control unit 201 executes a provided data selection process. By the provided data selection processing, “candidate data” that is most similar to the singing sound data for determination converted into the hammer part is selected from the “candidate data” (hammori song data) in S63. Then, the selected “candidate data” becomes “single sound data” transmitted to the karaoke apparatus 100. Details of the provided data selection process will be described later. In S63, when only one piece of song data is extracted, the processing of steps S64 and S65 is not executed, and the one piece of song data becomes “song sound data” transmitted to the karaoke apparatus 100. .
Hereinafter, the series of processes of S64 and S65 may be referred to as “first process”.

また、「重唱音データ」は、以下の処理によっても決定することができる(以下の処理を「第2の処理」ということがある。)
(1)S63で抽出したハモリ曲データを、主旋律パートの投稿歌唱音データ(以下、「主旋律曲データ」という)に変換し、変換した主旋律曲データを「候補データ」とする。「候補データ」は、判定用歌唱音データ(主旋律パート)との比較に用いられる。図9に示すように、カラオケ楽曲データベース202に記録されているハモリ基準データと主旋律基準データとの差分値を、ハモリ曲データに加算することにより主旋律パートのデータを生成することができる。なお、ハモリ曲データから主旋律曲データの変換を、他の公知の方法によって行ってもよい。
(2)判定用歌唱音データを「基準データ」として一時記録部204に記録し、提供データ選択処理を実行する。これにより、複数の候補データの中から1つのデータが決定され、決定された候補データ(主旋律曲データ)に対応するハモリ曲データが、カラオケ装置100に送信される「重唱音データ」となる。また、パート判定処理(図5のS31)が終了した後に受信した判定用歌唱音データについても、順次、「基準データ」として一時記録部204に記録される。
Further, the “repeated sound data” can also be determined by the following processing (the following processing may be referred to as “second processing”).
(1) The hamori song data extracted in S63 is converted into post melody data of the main melody part (hereinafter referred to as “main melody data”), and the converted main melody data is set as “candidate data”. The “candidate data” is used for comparison with the determination singing sound data (main melody part). As shown in FIG. 9, the data of the main melody part can be generated by adding the difference value between the hammer reference data and the main melody reference data recorded in the karaoke song database 202 to the hammer song data. It should be noted that the conversion of the main song data from the hammer song data may be performed by other known methods.
(2) Record the singing sound data for determination as “reference data” in the temporary recording unit 204, and execute the provided data selection process. Thereby, one data is determined from among a plurality of candidate data, and the humor song data corresponding to the determined candidate data (main melody data) becomes the “song sound data” transmitted to the karaoke apparatus 100. Also, the determination singing sound data received after the part determination process (S31 in FIG. 5) is also sequentially recorded in the temporary recording unit 204 as “reference data”.

ここで、第1の処理を用いる場合は、判定用歌唱音データのみに対してパート変換の処理(主旋律パート→ハモリパート)が行われるため、処理量が少なくサーバ200の負荷を軽くすることができる。
一方、第2の処理を用いる場合は、複数の投稿歌唱音データに対してパート変換の処理(ハモリパート→主旋律パート)が行われるため処理量が多くなるが、提供データの選択の基準となる「基準データ」として判定用歌唱音データをそのまま用いる(すなわち、判定用歌唱音データに処理を施さない)ので、精度が高い提供データ選択処理を行うことができる。
Here, when the first process is used, the part conversion process (main melody part → hamo part) is performed only on the determination singing sound data, so the processing amount is small and the load on the server 200 can be reduced. it can.
On the other hand, when the second process is used, the amount of processing increases because the part conversion process (harmory part → main melody part) is performed on a plurality of posted singing sound data, but this is a criterion for selecting provided data. Since the singing sound data for determination is used as it is as “reference data” (that is, the processing is not performed on the singing sound data for determination), the provided data selection process with high accuracy can be performed.

また、第1の処理及び第2の処理の両方を実行可能となるように構成し、サーバ200の負荷に応じて、処理を切替えるようにしてもよい。すなわち、サーバ200の負荷が高い場合には第1の処理を実行し、そうではない場合には第2の処理を実行するように構成してもよい。   Further, both the first processing and the second processing may be executed, and the processing may be switched according to the load of the server 200. In other words, the first process may be executed when the load on the server 200 is high, and the second process may be executed when the load is not so.

一方、S62において、同じ楽曲のハモリ曲データが投稿されていないと判断した場合は(S62:NO)、制御部201は、処理をS66に移行させる。
S66において、判定用歌唱音データと同じ楽曲の主旋律曲データが投稿歌唱音データベース203に投稿されているか否かを判断する。この処理において、同じ楽曲の主旋律曲データが投稿されていると判断した場合は(S66:YES)、制御部201は、処理をS67に移行させる。
On the other hand, in S62, when it is determined that the same song music data is not posted (S62: NO), the control unit 201 shifts the process to S66.
In S <b> 66, it is determined whether or not the main melody data of the same music as the determination singing sound data is posted in the posted singing sound database 203. In this process, when it is determined that the main melody data of the same music is posted (S66: YES), the control unit 201 shifts the process to S67.

S67において、制御部201は、同じ楽曲の主旋律曲データを投稿歌唱音データベース203から抽出する。なお、S67において、複数の主旋律データが抽出されたものとする。また、抽出した主旋律データを「候補データ」として一時記録部204に記録する。なお、判定用歌唱音データは、「基準データ」として一時記録部204に記録され、また、パート判定処理(図5のS31)が終了した後に受信した判定用歌唱音データについても、順次、「基準データ」として一時記録部204に記録される。
S68において、制御部201は、提供データ選択処理を実行する。提供データ選択処理により、複数の候補データの中から1つのデータ(主旋律曲データ)が決定される。
In step S <b> 67, the control unit 201 extracts main melody data of the same music from the posted singing sound database 203. In S67, a plurality of main melody data are extracted. The extracted main melody data is recorded in the temporary recording unit 204 as “candidate data”. Note that the singing sound data for determination is recorded in the temporary recording unit 204 as “reference data”, and the singing sound data for determination received after the part determination process (S31 in FIG. 5) is also sequentially performed. It is recorded in the temporary recording unit 204 as “reference data”.
In S68, the control unit 201 executes a provided data selection process. One data (main melody data) is determined from the plurality of candidate data by the provided data selection process.

S69において、制御部201は、S68で決定した主旋律曲データを、ハモリ曲データに変換する。
また、変換したハモリ曲データが、カラオケ装置100に送信される「重唱音データ」となる。
In S69, the control unit 201 converts the main melody data determined in S68 into hammer song data.
Also, the converted song data data becomes “singing sound data” transmitted to the karaoke apparatus 100.

一方、S66において、判定用歌唱音データと同じ楽曲の主旋律曲データが投稿されていないと判断した場合は(S66:NO)、制御部201は、処理をS70に移行させる。
S70において、制御部201は、カラオケ楽曲データベース202から同じ楽曲の歌唱音データを抽出する。抽出した歌唱音データが、カラオケ装置100に送信される「重唱音データ」となる。
On the other hand, when it is determined in S66 that the main melody data of the same music as the singing sound data for determination is not posted (S66: NO), the control unit 201 shifts the process to S70.
In S <b> 70, the control unit 201 extracts singing sound data of the same music from the karaoke music database 202. The extracted singing sound data becomes “single sound data” transmitted to the karaoke apparatus 100.

一方、S61において、提供フラグが「ハモリ」となっていない(すなわち、「主旋律」となっている)と判断した場合は(S61:NO)、制御部201は、処理をS71に移行させる。   On the other hand, in S61, when it is determined that the provision flag is not “harm” (that is, “main melody”) (S61: NO), the control unit 201 shifts the process to S71.

S71において、制御部201は、判定用歌唱音データと同じ楽曲の主旋律曲データが投稿歌唱音データベース203に投稿されているか否かを判断する。この処理において、同じ楽曲の主旋律曲データが投稿されていると判断した場合は(S71:YES)、制御部201は、処理をS72に移行させる。
S72において、制御部201は、同じ楽曲の主旋律曲データを投稿歌唱音データベース203から抽出し、「候補データ」として一時記録部204に記録する。なお、S72において、複数の主旋律曲データが抽出されたものとする。
In S <b> 71, the control unit 201 determines whether or not the main melody data of the same music as the determination singing sound data is posted in the posted singing sound database 203. In this process, when it is determined that the main melody data of the same music is posted (S71: YES), the control unit 201 shifts the process to S72.
In S <b> 72, the control unit 201 extracts the main melody data of the same music from the posted singing sound database 203 and records it as “candidate data” in the temporary recording unit 204. In S72, a plurality of main melody data are extracted.

S73において、制御部201は、判定用歌唱音データ(ハモリパート)を、主旋律パートに変換し、「基準データ」として一時記録部204に記録する。すなわち、基準データを作成する。また、S73における処理は、一時記録部204に判定用歌唱音データが新たに書き込まれる毎に、継続して行われるものとする。すなわち、パート判定処理(図5のS31)が終了した後に受信した判定用歌唱音データについても、順次、主旋律パートに変換され、「基準データ」として一時記録部204に記録される。   In step S <b> 73, the control unit 201 converts the singing sound data for determination (hamo part) into a main melody part, and records it in the temporary recording unit 204 as “reference data”. That is, reference data is created. Moreover, the process in S73 shall be performed continuously whenever the song data for determination is newly written in the temporary recording part 204. FIG. That is, the singing sound data for determination received after the part determination processing (S31 in FIG. 5) is also sequentially converted into the main melody part and recorded in the temporary recording unit 204 as “reference data”.

S74において、制御部201は、提供データ選択処理を実行する。提供データ選択処理により、S72の「候補データ」(主旋律曲データ)のうち、主旋律パートに変換された判定用歌唱音データに最も似ている「候補データ」が選択されることになる。そして、当該選択された「候補データ」が、カラオケ装置100に送信される「合唱音データ」となる。また、S71において、1つの主旋律曲データのみが抽出された場合は、S73及びS74の処理は実行されず、当該1つの主旋律曲データが、カラオケ装置100に送信される「重唱音データ」となる。
なお、以下では、S73及びS74の一連の処理を「第3の処理」ということがある。
In step S74, the control unit 201 executes a provided data selection process. By the provided data selection process, “candidate data” most similar to the singing sound data for determination converted into the main melody part is selected from the “candidate data” (main melody data) in S72. Then, the selected “candidate data” becomes “choral sound data” transmitted to the karaoke apparatus 100. Further, when only one main melody data is extracted in S71, the processing of S73 and S74 is not executed, and the one main melody data becomes “song sound data” transmitted to the karaoke apparatus 100. .
Hereinafter, the series of processes of S73 and S74 may be referred to as “third process”.

また、「重唱音データ」は、以下の処理によっても決定することができる(以下の処理を「第4の処理」ということがある。)
(1)S72で抽出した主旋律曲データを、ハモリ曲データに変換し、変換したハモリ曲データを「候補データ」とする。「候補データ」は、判定用歌唱音データ(ハモリパート)との比較に用いられる。
(2)判定用歌唱音データを「基準データ」として一時記録部204に記録し、提供データ選択処理を実行する。これにより、複数の候補データの中から1つのデータが決定され、決定された候補データ(ハモリ曲データ)に対応する主旋律曲データが、カラオケ装置100に送信される「重唱音データ」となる。また、パート判定処理(図5のS31)が終了した後に受信した判定用歌唱音データについても、順次、「基準データ」として一時記録部204に記録される。
In addition, the “repeated sound data” can be determined by the following processing (the following processing may be referred to as “fourth processing”).
(1) The main melody data extracted in S72 is converted into hammer music data, and the converted hammer music data is set as “candidate data”. The “candidate data” is used for comparison with the determination singing sound data (humor part).
(2) Record the singing sound data for determination as “reference data” in the temporary recording unit 204, and execute the provided data selection process. Thereby, one data is determined from among a plurality of candidate data, and the main melody data corresponding to the determined candidate data (humor song data) becomes “repeated sound data” transmitted to the karaoke apparatus 100. Also, the determination singing sound data received after the part determination process (S31 in FIG. 5) is also sequentially recorded in the temporary recording unit 204 as “reference data”.

ここで、第3の処理を用いる場合は、判定用歌唱音データのみに対してパート変換の処理(ハモリパート→主旋律パート)が行われるため、処理量が少なくサーバ200の負荷を軽くすることができる。
一方、第4の処理を用いる場合は、複数の投稿歌唱音データに対してパート変換の処理(主旋律パート→ハモリパート)が行われるため処理量が多くなるが、提供データの選択の基準となる「基準データ」として判定用歌唱音データをそのまま用いる(すなわち、判定用歌唱音データに処理を施さない)ので、精度が高い提供データ選択処理を行うことができる。
Here, when the third process is used, the part conversion process (harm part → main melody part) is performed only on the determination singing sound data, so the processing amount is small and the load on the server 200 can be reduced. it can.
On the other hand, when the fourth process is used, the amount of processing increases because part conversion processing (main melody part → humor part) is performed on a plurality of posted singing sound data, but this is a criterion for selecting provided data. Since the singing sound data for determination is used as it is as “reference data” (that is, the processing is not performed on the singing sound data for determination), the provided data selection process with high accuracy can be performed.

また、第3の処理及び第4の処理の両方を実行可能となるように構成し、サーバ200の負荷に応じて、処理を切替えるようにしてもよい。すなわち、サーバ200の負荷が高い場合には第1の処理を実行し、そうではない場合には第2の処理を実行するように構成してもよい。   Further, both the third process and the fourth process may be executed, and the process may be switched according to the load of the server 200. In other words, the first process may be executed when the load on the server 200 is high, and the second process may be executed when the load is not so.

一方、S71において、同じ楽曲の主旋律曲データが投稿されていないと判断した場合は(S71:NO)、制御部201は、処理をS75に移行させる。
S75において、判定用歌唱音データと同じ楽曲のハモリ曲データが投稿歌唱音データベース203に投稿されているか否かを判断する。この処理において、同じ楽曲のハモリ曲データが投稿されていると判断した場合は(S75:YES)、制御部201は、処理をS76に移行させる。
On the other hand, when it is determined in S71 that the main melody data of the same music has not been posted (S71: NO), the control unit 201 shifts the process to S75.
In S <b> 75, it is determined whether or not the humming song data of the same song as the determination singing tone data is posted in the posted singing tone database 203. In this process, when it is determined that the same song music data has been posted (S75: YES), the control unit 201 shifts the process to S76.

S76において、制御部201は、同じ楽曲のハモリ曲データを投稿歌唱音データベース203から抽出する。なお、S76において、複数の主旋律データが抽出されたものとする。また、抽出したハモリ曲データを「候補データ」として一時記録部204に記録する。なお、判定用歌唱音データは、「基準データ」として一時記録部204に記録され、また、パート判定処理(図5のS31)が終了した後に受信した判定用歌唱音データについても、順次、「基準データ」として一時記録部204に記録される。
S77において、制御部201は、提供データ選択処理を実行する。提供データ選択処理により、複数の候補データの中から1つのデータ(ハモリ曲データ)が決定される。
In step S <b> 76, the control unit 201 extracts hamori music data of the same music from the posted singing sound database 203. In S76, a plurality of main melody data are extracted. Further, the extracted song music data is recorded in the temporary recording unit 204 as “candidate data”. Note that the singing sound data for determination is recorded in the temporary recording unit 204 as “reference data”, and the singing sound data for determination received after the part determination process (S31 in FIG. 5) is also sequentially performed. It is recorded in the temporary recording unit 204 as “reference data”.
In step S77, the control unit 201 executes a provided data selection process. By the provided data selection processing, one data (harmong song data) is determined from among a plurality of candidate data.

S78において、制御部201は、S77で決定したハモリ曲データを、主旋律曲データに変換する。また、変換した主旋律曲データが、カラオケ装置100に送信される「重唱音データ」となる。   In S78, the control unit 201 converts the hammer music data determined in S77 into main melody data. Further, the converted main melody data is “single sound data” transmitted to the karaoke apparatus 100.

一方、S75において、判定用歌唱音データと同じ楽曲のハモリ曲データが投稿されていないと判断した場合は(S75:NO)、制御部201は、処理をS79に移行させる。
S79において、制御部201は、カラオケ楽曲データベース202から同じ楽曲の歌唱音データを抽出する。抽出した歌唱音データが、カラオケ装置100に送信される「重唱音データ」となる。
On the other hand, when it is determined in S75 that the same song music data as the determination singing sound data is not posted (S75: NO), the control unit 201 shifts the process to S79.
In step S <b> 79, the control unit 201 extracts singing sound data of the same music from the karaoke music database 202. The extracted singing sound data becomes “single sound data” transmitted to the karaoke apparatus 100.

次に、提供データ選択処理について、図10のフローチャートを用いつつ説明する。
S81において、制御部201は、一時記録部204から基準データ及び候補データを取得する。
S82において、制御部201は、基準データと候補データとを比較する。
Next, the provided data selection process will be described with reference to the flowchart of FIG.
In step S <b> 81, the control unit 201 acquires reference data and candidate data from the temporary recording unit 204.
In S82, the control unit 201 compares the reference data with the candidate data.

S83において、制御部201は、各候補データのうち提供データを決定することができたか否かを判断する。この判断は、判定用歌唱音データに最も近い候補データを1つ特定できたか否かに基いて行われる。例えば、一般的なカラオケ採点処理を行い、複数の時間区間において、1つの候補データが安定して最高順位となっていれば、「最も近い候補データを1つ特定できた」と判断することができる。この処理において、提供データを決定することができたと判断した場合は(S83:YES)、制御部201は、提供データ選択処理を終了する。一方、提供データを決定することができないと判断した場合は(S83:NO)、制御部201は、処理をS84に移行させる。   In step S83, the control unit 201 determines whether or not the provision data can be determined among the candidate data. This determination is made based on whether one candidate data closest to the determination singing sound data has been identified. For example, when a general karaoke scoring process is performed and one candidate data is stably in the highest rank in a plurality of time intervals, it can be determined that “one closest candidate data has been identified”. it can. In this process, when it is determined that the provision data can be determined (S83: YES), the control unit 201 ends the provision data selection process. On the other hand, when determining that the provided data cannot be determined (S83: NO), the control unit 201 shifts the process to S84.

S84において、一時記録部204から判定用歌唱音データを取得する。この処理において取得される判定用歌唱音データは、一時記録処理によって新たに一時記録部204に記録された判定用歌唱音データである。
S85において、制御部201は、基準データと候補データとを比較する。
In S84, the singing sound data for determination is acquired from the temporary recording unit 204. The determination singing sound data acquired in this process is the determination singing sound data newly recorded in the temporary recording unit 204 by the temporary recording process.
In S85, the control unit 201 compares the reference data with the candidate data.

S86において、制御部201は、各候補データのうち提供データを決定することができたか否かを判断する。この処理において、提供データを決定することができたと判断した場合は(S86:YES)、制御部201は、提供データ選択処理を終了する。一方、提供データを決定することができないと判断した場合は(S86:NO)、制御部201は、処理をS84に戻す。これにより、提供データを決定するまでの間、一時記録部204に新たに記録された判定用歌唱音データに基いて、候補データとの比較が行われる。   In S <b> 86, the control unit 201 determines whether or not the provision data can be determined among the candidate data. In this process, when it is determined that the provision data can be determined (S86: YES), the control unit 201 ends the provision data selection process. On the other hand, when determining that the provided data cannot be determined (S86: NO), the control unit 201 returns the process to S84. Thus, until the provision data is determined, the comparison with the candidate data is performed based on the singing sound data for determination newly recorded in the temporary recording unit 204.

説明を図5に戻す。
S33において、一時記録処理の記録停止を指示する記録停止指示を行う。
S34において、重唱用データ決定処理によって決定された重唱用データを、カラオケ装置100に送信する。
Returning to FIG.
In S33, a recording stop instruction is issued to instruct to stop recording in the temporary recording process.
In S <b> 34, the data for heavy singing determined by the data determination processing for heavy singing is transmitted to the karaoke apparatus 100.

以上説明したとおり、本実施形態によれば、判定用歌唱音データが主旋律パート(ハーモニーパート)と判定されると、重唱に適切なハーモニーパート(主旋律パート)の投稿歌唱音データが記録されている場合には、当該投稿歌唱音データに基いた歌唱音声を、カラオケ楽曲の演奏時に出力する。さらに、重唱に適切なハーモニーパート(主旋律パート)の投稿歌唱音データがない場合には、主旋律パート(ハーモニーパート)の投稿歌唱音データを選択し、当該歌唱音データから生成したハーモニーパート(歌唱パート)の歌唱音データに基いた歌唱音声を、カラオケ楽曲の演奏時に出力する。これにより、投稿された歌唱音データを、重唱するときに効果的に利用することができる。   As described above, according to the present embodiment, when the singing sound data for determination is determined to be the main melody part (harmonic part), the posted singing sound data of the harmony part (main melody part) suitable for repeated singing is recorded. In this case, the singing voice based on the posted singing sound data is output when the karaoke music piece is played. Furthermore, when there is no post singing sound data of a harmony part (main melody part) suitable for repeated singing, the post singing sound data of the main melody part (harmony part) is selected, and the harmony part (singing part) generated from the singing sound data is selected. Singing sound based on the singing sound data of) is output when the karaoke music is played. Thereby, the posted singing sound data can be effectively used when singing.

また、カラオケ楽曲の一部分の判定用歌唱音データに基いて重唱に適切な重唱音データを選択させるため、歌唱者の負担を低減させることができる。さらに、判定用歌唱音データを比較の基準として候補データとの比較を行うことにより、歌唱の仕方に応じて送信される重唱音データが変化するので、歌唱者の興趣を高めることができる。   Moreover, since the suitable chorus sound data for a chorus is selected based on the singing sound data for determination of a part of karaoke music, the burden on the singer can be reduced. Further, by comparing the candidate song data with the judgment song sound data as a reference for comparison, the song sound data transmitted according to the way of singing changes, so that the interest of the singer can be enhanced.

本発明は上述した実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内で種々の改良、変形が可能であることはいうまでもない。   The present invention is not limited to the above-described embodiment, and it goes without saying that various improvements and modifications can be made without departing from the scope of the present invention.

また、上述した各フローチャートは単なる一例であり、該各フローチャートの処理と同等の結果を得ることができるものであれば、他のフローチャートによって処理を実現してもよい。
また、上述したリモコン、コマンダ、サーバに係る各方法、当該方法をコンピュータに実行させるためのプログラム、当該プログラムを記録した記録媒体等としても本発明は実現可能である。
Further, each flowchart described above is merely an example, and the processing may be realized by another flowchart as long as a result equivalent to the processing of each flowchart can be obtained.
Further, the present invention can be realized as each method relating to the above-described remote controller, commander, and server, a program for causing a computer to execute the method, a recording medium recording the program, and the like.

100…カラオケ装置
110…リモコン、111…制御部
120…コマンダ、121…制御部、130…マイク、140…スピーカ
200…サーバ、201…制御部、
202…カラオケ楽曲データベース、203…投稿歌唱音データベース
DESCRIPTION OF SYMBOLS 100 ... Karaoke apparatus 110 ... Remote control, 111 ... Control part 120 ... Commander, 121 ... Control part, 130 ... Microphone, 140 ... Speaker 200 ... Server, 201 ... Control part,
202 ... Karaoke music database, 203 ... Posted singing sound database

Claims (3)

サーバと当該サーバと通信可能なカラオケ装置とから構成されるカラオケシステムであって、
前記サーバは、前記カラオケ装置から送信された歌唱者の判定用歌唱音データを一時的に記録する一時記録手段と、前記カラオケ装置で歌唱された投稿歌唱音データを記録するデータベースを有し、
前記カラオケ装置は、前記判定用歌唱音データを取得しつつ、前記サーバに送信し、
前記サーバは、前記判定用歌唱音データを前記一時記録手段に記録しつつ、当該判定用歌唱音データのパートを判定し、
前記サーバは、前記判定用歌唱音データのパートを判定すると、前記一時記録手段に記録された判定用歌唱音データを用いて、前記データベースから前記投稿歌唱音データを選択し、
前記サーバは、前記選択した投稿歌唱音データまたは当該投稿歌唱音データから生成した歌唱音データを重唱用歌唱音データとして前記カラオケ装置に送信し、
前記カラオケ装置は、カラオケ楽曲を演奏する際に、前記受信した重唱用歌唱音データを用いて歌唱音声を出力する、
ことを特徴とするカラオケシステム。
A karaoke system comprising a server and a karaoke device capable of communicating with the server,
The server has temporary recording means for temporarily recording singing sound data for determination of a singer transmitted from the karaoke device, and a database for recording post singing sound data sung by the karaoke device,
The karaoke device transmits to the server while obtaining the determination singing sound data,
The server determines the part of the determination singing sound data while recording the determination singing sound data in the temporary recording means,
When the server determines the part of the determination singing sound data, the server uses the determination singing sound data recorded in the temporary recording means to select the posted singing sound data from the database,
The server transmits the selected singing sound data or the singing sound data generated from the posted singing sound data to the karaoke apparatus as the singing sound data for singing,
The karaoke device outputs a singing voice using the received singing sound data for singing when performing karaoke music,
Karaoke system characterized by that.
投稿歌唱音データを記録するデータベースを有するサーバと通信可能なカラオケ装置であって、
歌唱者の判定用歌唱音データを取得しつつ、前記サーバに送信し、
前記サーバから、前記投稿歌唱音データまたは当該投稿歌唱音データから生成した歌唱音データを重唱用歌唱音データとして受信し、
カラオケ楽曲を演奏する際に、前記受信した重唱用歌唱音データを用いて歌唱音声を出力する、
ことを特徴とするカラオケ装置。
A karaoke apparatus capable of communicating with a server having a database for recording posted singing sound data,
While obtaining the song sound data for determination of the singer, send it to the server,
From the server, the singing sound data generated from the posted singing sound data or the posted singing sound data is received as singing sound data for singing,
When performing karaoke music, the singing voice data is output using the received singing sound data for heavy singing.
A karaoke apparatus characterized by that.
カラオケ装置と通信可能なサーバであって、
前記カラオケ装置から送信された歌唱者の判定用歌唱音データを一時的に記録する一時記録手段と、前記カラオケ装置で歌唱された投稿歌唱音データを記録するデータベースを有し、
前記判定用歌唱音データを受信し、
前記判定用歌唱音データを前記一時記録手段に記録しつつ、当該判定用歌唱音データのパートを判定し、
前記判定用歌唱音データのパートを判定すると、前記一時記録手段に記録された判定用歌唱音データを用いて、前記データベースから前記投稿歌唱音データを選択し、
前記選択した投稿歌唱音データまたは当該投稿歌唱音データから生成した歌唱音データを重唱用歌唱音データとして前記カラオケ装置に送信する、
ことを特徴とするサーバ。
A server that can communicate with a karaoke device,
A temporary recording means for temporarily recording singing sound data for judgment of a singer transmitted from the karaoke device; and a database for recording posted singing sound data sung by the karaoke device;
Receiving the judgment singing sound data;
While recording the determination singing sound data in the temporary recording means, determine the part of the determination singing sound data,
When determining the part of the determination singing sound data, using the determination singing sound data recorded in the temporary recording means, selecting the posted singing sound data from the database,
Transmitting the selected posted singing sound data or the singing sound data generated from the posted singing sound data to the karaoke apparatus as singing sound data for singing,
A server characterized by that.
JP2009086602A 2009-03-31 2009-03-31 Karaoke system, server Expired - Fee Related JP4983835B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009086602A JP4983835B2 (en) 2009-03-31 2009-03-31 Karaoke system, server

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009086602A JP4983835B2 (en) 2009-03-31 2009-03-31 Karaoke system, server

Publications (2)

Publication Number Publication Date
JP2010237532A true JP2010237532A (en) 2010-10-21
JP4983835B2 JP4983835B2 (en) 2012-07-25

Family

ID=43091894

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009086602A Expired - Fee Related JP4983835B2 (en) 2009-03-31 2009-03-31 Karaoke system, server

Country Status (1)

Country Link
JP (1) JP4983835B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014092593A (en) * 2012-10-31 2014-05-19 Daiichikosho Co Ltd Singing voice selection system of karaoke singing image
JP2014109681A (en) * 2012-11-30 2014-06-12 Daiichikosho Co Ltd Selection system for singing moving image corresponding to singing voice

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0944171A (en) * 1995-07-31 1997-02-14 Yamaha Corp Karaoke device
JPH09230881A (en) * 1996-02-27 1997-09-05 Yamaha Corp Karaoke device
JPH113090A (en) * 1997-06-13 1999-01-06 Nec Corp Karaoke (recorded accompaniment) device
JP2003091291A (en) * 2001-09-19 2003-03-28 Yamaha Corp Karaoke system, karaoke device and server device, for karaoke system
JP2004053736A (en) * 2002-07-17 2004-02-19 Daiichikosho Co Ltd Method for using karaoke system
JP2004279786A (en) * 2003-03-17 2004-10-07 Konami Co Ltd Karaoke machine, interval deciding method, and program
JP2006184684A (en) * 2004-12-28 2006-07-13 Xing Inc Music reproducing device
JP2008051896A (en) * 2006-08-22 2008-03-06 Taito Corp Voice mixing down apparatus and voice mixing down program

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0944171A (en) * 1995-07-31 1997-02-14 Yamaha Corp Karaoke device
JPH09230881A (en) * 1996-02-27 1997-09-05 Yamaha Corp Karaoke device
JPH113090A (en) * 1997-06-13 1999-01-06 Nec Corp Karaoke (recorded accompaniment) device
JP2003091291A (en) * 2001-09-19 2003-03-28 Yamaha Corp Karaoke system, karaoke device and server device, for karaoke system
JP2004053736A (en) * 2002-07-17 2004-02-19 Daiichikosho Co Ltd Method for using karaoke system
JP2004279786A (en) * 2003-03-17 2004-10-07 Konami Co Ltd Karaoke machine, interval deciding method, and program
JP2006184684A (en) * 2004-12-28 2006-07-13 Xing Inc Music reproducing device
JP2008051896A (en) * 2006-08-22 2008-03-06 Taito Corp Voice mixing down apparatus and voice mixing down program

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014092593A (en) * 2012-10-31 2014-05-19 Daiichikosho Co Ltd Singing voice selection system of karaoke singing image
JP2014109681A (en) * 2012-11-30 2014-06-12 Daiichikosho Co Ltd Selection system for singing moving image corresponding to singing voice

Also Published As

Publication number Publication date
JP4983835B2 (en) 2012-07-25

Similar Documents

Publication Publication Date Title
WO2006112584A1 (en) Music composing device
JP6784022B2 (en) Speech synthesis method, speech synthesis control method, speech synthesis device, speech synthesis control device and program
US11087727B2 (en) Auto-generated accompaniment from singing a melody
Arzt et al. Artificial intelligence in the concertgebouw
JP2009210790A (en) Music selection singer analysis and recommendation device, its method, and program
JP6514874B2 (en) Karaoke scoring device that compares the pitch difference of the reference with the pitch difference of the singing voice and performs scoring
JP4983835B2 (en) Karaoke system, server
JP6065703B2 (en) Reference data creation system and performance terminal device
JP5311069B2 (en) Singing evaluation device and singing evaluation program
WO2019180830A1 (en) Singing evaluating method, singing evaluating device, and program
JP5071439B2 (en) Karaoke system, server
JP5807754B2 (en) Stringed instrument performance evaluation apparatus and stringed instrument performance evaluation program
JP5708730B2 (en) Musical performance device and musical performance processing program
JP6219750B2 (en) Singing battle karaoke system
JP6316099B2 (en) Karaoke equipment
JP4182782B2 (en) Karaoke equipment
JP6144593B2 (en) Singing scoring system
JP2014191331A (en) Music instrument sound output device and music instrument sound output program
JP2014066937A (en) Piano roll type musical score display device, piano roll type musical score display program, and piano roll type musical score display method
JP5825533B2 (en) Music search device, music search system, and music search program
JP2016142843A (en) Karaoke system having pitch shift function for harmony singing
JP2018072596A (en) Karaoke system
JP2009244790A (en) Karaoke system with singing teaching function
KR20170025634A (en) Method for creating music over the internet
JP6631428B2 (en) Automatic accompaniment device, accompaniment data generation program, and accompaniment data generation method

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20111209

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111213

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120213

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120327

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120409

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 4983835

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150511

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees