JP5823320B2 - Karaoke system, karaoke playback display method, karaoke server, and computer program - Google Patents

Karaoke system, karaoke playback display method, karaoke server, and computer program Download PDF

Info

Publication number
JP5823320B2
JP5823320B2 JP2012049794A JP2012049794A JP5823320B2 JP 5823320 B2 JP5823320 B2 JP 5823320B2 JP 2012049794 A JP2012049794 A JP 2012049794A JP 2012049794 A JP2012049794 A JP 2012049794A JP 5823320 B2 JP5823320 B2 JP 5823320B2
Authority
JP
Japan
Prior art keywords
karaoke
musical instrument
music
instrument performance
performance sound
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012049794A
Other languages
Japanese (ja)
Other versions
JP2013186208A (en
Inventor
翔 岡田
翔 岡田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xing Inc
Original Assignee
Xing Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xing Inc filed Critical Xing Inc
Priority to JP2012049794A priority Critical patent/JP5823320B2/en
Publication of JP2013186208A publication Critical patent/JP2013186208A/en
Application granted granted Critical
Publication of JP5823320B2 publication Critical patent/JP5823320B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)
  • Electrophonic Musical Instruments (AREA)

Description

本発明は、カラオケ楽曲を構成する楽器パートの楽器演奏音等をアップロードして、カラオケ楽曲の再生の際にマイナスワン機能又はマイナスワン的な機能を働かせながら、アップロードした楽器演奏音の再生等を行うようにしたカラオケシステム、カラオケ再生表示方法、カラオケサーバ、及びコンピュータプログラムに関する。 The present invention uploads the musical instrument performance sounds of the musical instrument parts constituting the karaoke music piece, and plays the uploaded musical instrument performance sound while playing the minus one function or the minus one function when reproducing the karaoke music piece. Karaoke system to perform, karaoke reproduction display method, karaoke server relates及 beauty computer program.

従来、自動演奏装置の分野において、楽曲の自動演奏を行う際、楽曲を構成する複数の楽器パートのいずれかをミュートすると共に、そのミュートする楽器パートをユーザ自身が実際に演奏することにより、自動演奏に合わせて楽器演奏の練習を行えるようにした装置(いわゆるマイナスワン機能と称される機能を有する装置)が存在する(特許文献1、2参照)。   Conventionally, when performing automatic performance of music in the field of automatic performance devices, one of a plurality of musical instrument parts constituting a musical composition is automatically muted and the user himself / herself actually plays the musical instrument part to be muted. There is a device (a device having a function called a minus one function) that can practice musical instrument performance in accordance with performance (see Patent Documents 1 and 2).

さらに、上述したマイナスワン機能をカラオケ装置又はカラオケシステムに適用して、カラオケ楽曲の再生時に楽器パートのいずれかをミュートして、そのミュートされた楽器パートに応じた楽器を、ユーザ自身が実際に演奏するようにしたものが開示されている(特許文献3〜5参照)。   Furthermore, the minus one function described above is applied to the karaoke apparatus or karaoke system so that any one of the instrument parts is muted when the karaoke music is reproduced, and the user himself / herself actually selects the instrument corresponding to the muted instrument part. A performance is disclosed (see Patent Documents 3 to 5).

さらにまた、通信カラオケに係る分野では、カラオケ端末からサーバへ歌又は演奏データをアップロードし、アップロードされた歌又は演奏データを用いて合唱又は合奏を行えるようにしたものが開示されている(特許文献6参照)。なお、通信カラオケの分野では、アップロードされた複数のユーザのカラオケ楽曲の歌唱音声及び歌唱者画像をメドレー的に繋いで再生表示処理を行うものもある(特許文献7参照)。   Furthermore, in the field related to online karaoke, a song or performance data is uploaded from a karaoke terminal to a server, and a chorus or performance can be performed using the uploaded song or performance data (Patent Literature). 6). In addition, in the field of online karaoke, there is one that performs reproduction display processing by connecting singing voices and singer images of uploaded karaoke songs of a plurality of users in a medley manner (see Patent Document 7).

特開平5−188956号公報Japanese Patent Laid-Open No. 5-188956 特開平8−6553号公報JP-A-8-6553 特開平9−258728号公報JP-A-9-258728 特開平8−30284号公報JP-A-8-30284 特開2007−193273号公報JP 2007-193273 A 特開2010−14823号公報JP 2010-14823 A 特開2011−59620号公報JP 2011-59620 A

特許文献1〜5に開示されるマイナスワン機能を有するものは、ユーザが実際に楽器を演奏する際にマイナスワン機能を働かせるものであることから、アップロードされた楽器演奏音について、マイナスワン機能を働かせることはできなかった。また、特許文献6、7に係る通信カラオケの分野では、アップロードされた歌又は演奏データ等は、合唱、合奏又はメドレー的な再生に利用されるにとどまっていた。そのため、カラオケ楽曲の再生時にマイナスワン機能と連携させて、アップロードされた楽器演奏音を利用できなかったという問題がある。   Since the one having the minus one function disclosed in Patent Documents 1 to 5 activates the minus one function when the user actually plays the musical instrument, the minus one function is provided for the uploaded instrument performance sound. I couldn't work. In addition, in the field of online karaoke according to Patent Documents 6 and 7, uploaded songs or performance data are only used for choral, ensemble or medley-like reproduction. For this reason, there is a problem in that an uploaded musical instrument performance sound cannot be used in cooperation with the minus one function when reproducing karaoke music.

すなわち、カラオケ楽曲を歌唱するユーザが、そのユーザの友人によりアップロードされた友人の楽器演奏音に基づいてカラオケ楽曲の歌唱を希望しても、従来の通信カラオケシステムでは、そのようなことは実現できないという問題があった。   That is, even if a user who sings karaoke music desires to sing karaoke music based on the musical instrument performance of a friend uploaded by the user's friend, such a situation cannot be realized with the conventional communication karaoke system. There was a problem.

また、従来の通信カラオケシステムでは、アップロードされる画像について利用可能なものは、ユーザの歌唱時の歌唱者画像にとどまっていたため(特許文献7参照)、楽器を演奏するユーザに係る演奏者画像は、アップロードされた楽器演奏音に連係して表示できなかったという問題もある。   Moreover, in the conventional communication karaoke system, since what can be utilized about the image uploaded is only the singer image at the time of a user's singing (refer patent document 7), the player image which concerns on the user who plays a musical instrument is There is also a problem that the uploaded musical instrument performance sound cannot be displayed.

本発明は、斯かる事情に鑑みてなされたものであり、アップロードされた楽曲に係る楽器演奏音についてマイナスワン機能又はマイナスワン的な機能を働かせてカラオケ楽曲と共に再生可能にすると共に、アップロードされた演奏者画像も再生時に表示することで、ユーザのアップロードデータを聴覚的な面及び視覚的な面の両方で通信カラオケに利用して、通信カラオケの新たな楽しさを展開したカラオケシステム、カラオケ再生表示方法、カラオケサーバ、及びコンピュータプログラムを提供することを目的とする。
すなわち、本発明は、通信カラオケを楽しむユーザが、アップロードされた楽器演奏音、及びその楽器演奏音を演奏する演奏者に係る演奏者画像を、通信カラオケにおいて多様に利用できる仕組みを工夫したカラオケシステム、カラオケ再生表示方法、カラオケサーバ、及びコンピュータプログラムを提供することを目的とする
The present invention has been made in view of such circumstances, and the musical instrument performance sound related to the uploaded musical piece can be played with the karaoke music piece by using the minus one function or the minus one function and uploaded. A karaoke system that plays new joys of online karaoke using karaoke system that uses the user's upload data for both audible and visual aspects, by displaying the player image during playback and karaoke playback and to provide a display method, the karaoke server, the beauty computer program.
In other words, the present invention is a karaoke system in which a user who enjoys online karaoke devised a mechanism that can use the uploaded musical instrument performance sound and the player image related to the player who plays the musical instrument performance sound in a variety of ways in online karaoke. , and to provide a karaoke reproducing display method, the karaoke server, the beauty computer program

上記課題を解決するために本発明に係るカラオケシステムは、複数の楽器パートを含むカラオケ楽曲及び前記カラオケ楽曲に係る楽曲歌詞を有するカラオケデータを複数記憶したカラオケサーバと、前記カラオケサーバへカラオケ楽曲を指定する旨の楽曲指定情報を送信することで、前記楽曲指定情報に応じたカラオケデータを前記カラオケサーバから受信してカラオケ楽曲の再生及び楽曲歌詞の表示を行うカラオケ端末装置とを備えるカラオケシステムにおいて、前記カラオケサーバは、カラオケ楽曲に含まれる複数の楽器パートの中の一つの楽器パートに応じた楽器演奏音及び前記楽器演奏音を演奏した演奏者に係る演奏者画像を記憶するようにしてあり、前記カラオケ端末装置から送信されてきた楽曲指定情報を受信した場合、前記楽曲指定情報が指定するカラオケ楽曲に係る楽器演奏音を記憶する中から検索する検索手段と、検索に該当する楽器演奏音がある場合、該当した楽器演奏音、前記楽器演奏音に応じた演奏者画像、及び前記楽曲指定情報に応じたカラオケデータを前記カラオケ端末装置へ送信するデータ送信手段とを備え、前記カラオケ端末装置は、前記カラオケサーバから送信される楽器演奏音、演奏者画像、及びカラオケデータを受信する手段と、受信したカラオケデータが有するカラオケ楽曲に含まれる複数の楽器パートの中で、受信した楽器演奏音に係る楽器パートをミュート、又は受信した楽器演奏音に係る楽器パートの音量を他の楽器パートより低下してカラオケ楽曲の再生を行うと共に、前記カラオケ楽曲の再生に合わせて、受信した楽器演奏音の再生を行う再生手段と、前記再生手段の再生に合わせて、前記カラオケデータが有する楽曲歌詞及び受信した演奏者画像の表示を行う表示手段とを備えることを特徴とする。   In order to solve the above-mentioned problems, a karaoke system according to the present invention includes a karaoke server that stores a plurality of karaoke data including karaoke songs including a plurality of instrument parts and song lyrics related to the karaoke songs, and karaoke songs to the karaoke server. In a karaoke system comprising a karaoke terminal device that receives karaoke data corresponding to the tune designation information from the karaoke server and displays karaoke tunes and displays song lyrics by transmitting tune designation information to designate The karaoke server stores a musical instrument performance sound corresponding to one musical instrument part among a plurality of musical instrument parts included in the karaoke music piece and a player image related to the performer who performed the musical instrument performance sound. When the music designation information transmitted from the karaoke terminal device is received, Search means for searching from among memorized instrument performance sounds related to karaoke music specified by the specified information, and if there is an instrument performance sound corresponding to the search, the corresponding instrument performance sound, a player image corresponding to the instrument performance sound And data transmission means for transmitting karaoke data corresponding to the music designation information to the karaoke terminal device, wherein the karaoke terminal device transmits musical instrument performance sounds, player images, and karaoke data transmitted from the karaoke server. Among the plurality of instrument parts included in the karaoke music included in the received karaoke data, mute the instrument part related to the received instrument performance sound, or the volume of the instrument part related to the received instrument performance sound The karaoke music is played back at a lower level than the other instrument parts, and the received musical instrument performance sound is played along with the playback of the karaoke music. Reproducing means for reproducing, in accordance with the reproduction of the reproduction means, characterized in that it comprises a display means for displaying a musical lyrics and received performer image the karaoke data has.

また、本発明に係るカラオケシステムは、前記カラオケサーバは、アップロードされてくる楽器演奏音及び演奏者画像を受信する手段を備え、受信した楽器演奏音及び演奏者画像を記憶するようにしてあることを特徴とする。
さらに、本発明に係るカラオケシステムは、前記カラオケサーバは、カラオケユーザに係る情報を格納したユーザデータベースを記憶しており、前記ユーザデータベースには予め、演奏者画像が格納してあり、アップロードされてくる楽器演奏音を受信する手段を備え、受信した楽器演奏音を記憶するようにしてあることを特徴とする。
In the karaoke system according to the present invention, the karaoke server includes means for receiving uploaded instrument performance sounds and player images, and stores the received instrument performance sounds and player images. It is characterized by.
Further, in the karaoke system according to the present invention, the karaoke server stores a user database storing information related to a karaoke user, and a player image is stored in the user database in advance and uploaded. Means for receiving a musical instrument performance sound is provided, and the received musical instrument performance sound is stored.

本発明に係るカラオケシステムは、前記カラオケ端末装置が、撮像手段を備えており、前記表示手段は、前記撮像手段が撮像した撮像画像を、前記楽曲歌詞及び前記演奏者画像と共に表示することを特徴とする。   In the karaoke system according to the present invention, the karaoke terminal device includes an imaging unit, and the display unit displays a captured image captured by the imaging unit together with the music lyrics and the player image. And

さらに、本発明に係るカラオケシステムは、検索に該当する楽器演奏音が複数ある場合、前記データ送信手段は、該当した複数の楽器演奏音及び前記複数の楽器演奏音に応じた複数の演奏者画像を送信するようにしてあり、前記再生手段は、再生対象の楽器演奏音を、カラオケ楽曲の一定期間ごとに、前記複数の楽器演奏音の中から順次切り替えるようにしており、前記表示手段は、表示対象の演奏者画像を、前記複数の演奏者画像の中から、前記再生手段が再生を行う楽器演奏音に応じた演奏者画像へと順次切り替えるようにしてあることを特徴とする。   Further, in the karaoke system according to the present invention, when there are a plurality of musical instrument performance sounds corresponding to the search, the data transmission means includes a plurality of musical instrument performance sounds and a plurality of player images corresponding to the plurality of musical instrument performance sounds. And the playback means sequentially switches the musical instrument performance sound to be played back from the plurality of musical instrument performance sounds for each predetermined period of karaoke music, and the display means The player image to be displayed is sequentially switched from the plurality of player images to a player image corresponding to a musical instrument performance sound reproduced by the reproduction means.

さらにまた、本発明に係るカラオケシステムは、異なる楽器パートで検索に該当する楽器演奏音がある場合、前記データ送信手段は、該当した異なる各楽器パートの複数の楽器演奏音及び前記複数の楽器演奏音に応じた複数の演奏者画像を送信するようにしてあり、前記再生手段は、カラオケデータが有するカラオケ楽曲に含まれる複数の楽器パートの中で、前記複数の楽器演奏音に応じた異なる楽器パートをミュート、又は前記異なる楽器パートの音量を他の楽器パートより低下してカラオケ楽曲の再生を行うと共に、前記カラオケ楽曲の再生に合わせて前記複数の楽器演奏音の再生を行うようにしてあり、前記再生手段の再生に合わせて、カラオケデータが有する楽曲歌詞及び前記複数の演奏者画像の表示を行うようにしてあることを特徴とする。   Furthermore, in the karaoke system according to the present invention, when there are musical instrument performance sounds corresponding to the search in different musical instrument parts, the data transmission means includes a plurality of musical instrument performance sounds of the corresponding different musical instrument parts and the plurality of musical instrument performances. A plurality of player images corresponding to the sound are transmitted, and the reproducing means is a different instrument corresponding to the plurality of instrument performance sounds among the plurality of instrument parts included in the karaoke music included in the karaoke data. Playing karaoke music while muting parts or lowering the volume of the different musical instrument parts from other musical instrument parts, and playing back the plurality of musical instrument performance sounds as the karaoke music plays The music lyrics included in the karaoke data and the plurality of player images are displayed in accordance with the playback of the playback means. To.

また、本発明に係るカラオケシステムは、前記楽器演奏音には、カラオケ楽曲の中の少なくとも一つの期間を独奏として指定する独奏指定情報が付帯しており、前記再生手段は、前記独奏指定情報が指定するカラオケ楽曲の中の期間、カラオケデータが有するカラオケ楽曲に含まれる全ての楽器パートをミュート、又は前記全ての楽器パートの音量を基準音量より低下すると共に、前記楽器演奏音の再生を行うようにしてあることを特徴とする。   Further, in the karaoke system according to the present invention, the musical instrument performance sound is accompanied by solo designation information for designating at least one period in the karaoke piece as a solo, and the playback means includes the solo designation information. During the specified karaoke music period, all instrument parts included in the karaoke music data included in the karaoke data are muted, or the volume of all the instrument parts is reduced below the reference volume, and the instrument performance sound is reproduced. It is characterized by that.

さらに、本発明に係るカラオケシステムは、前記カラオケ端末装置は、検索条件を受け付ける受付手段と、前記受付手段が受け付けた検索条件を前記カラオケサーバへ送信する手段とを備え、前記検索手段は、前記カラオケサーバへ送信されてきた検索条件に該当する楽器演奏音を検索するようにしてあることを特徴とする。   Furthermore, the karaoke system according to the present invention includes a receiving unit that receives a search condition, and a unit that transmits the search condition received by the receiving unit to the karaoke server. The musical instrument performance sound corresponding to the search condition transmitted to the karaoke server is searched.

本発明に係るカラオケ再生表示方法は、複数の楽器パートを含むカラオケ楽曲及び前記カラオケ楽曲に係る楽曲歌詞を有するカラオケデータを複数記憶したカラオケサーバへ、カラオケ端末装置がカラオケ楽曲を指定する旨の楽曲指定情報を送信することで、前記楽曲指定情報に応じたカラオケデータを前記カラオケサーバから受信してカラオケ楽曲の再生及び楽曲歌詞の表示を行うカラオケ再生表示方法において、前記カラオケサーバは、カラオケ楽曲に含まれる複数の楽器パートの中の一つの楽器パートに応じた楽器演奏音及び前記楽器演奏音を演奏した演奏者に係る演奏者画像を記憶しており、前記カラオケ端末装置から送信されてきた楽曲指定情報を受信した場合、前記楽曲指定情報が指定するカラオケ楽曲に係る楽器演奏音を記憶する中から検索するステップと、検索に該当する楽器演奏音がある場合、該当した楽器演奏音、前記楽器演奏音に応じた演奏者画像、及び前記楽曲指定情報に応じたカラオケデータを前記カラオケ端末装置へ送信するステップとを備え、前記カラオケ端末装置は、前記カラオケサーバから送信される楽器演奏音、演奏者画像、及びカラオケデータを受信するステップと、前記カラオケデータが有するカラオケ楽曲に含まれる複数の楽器パートの中で、受信した楽器演奏音に係る楽器パートをミュート、又は受信した楽器演奏音に係る楽器パートの音量を他の楽器パートより低下してカラオケ楽曲の再生を行うと共に、前記カラオケ楽曲の再生に合わせて、受信した楽器演奏音の再生を行うステップと、前記再生に合わせて、前記カラオケデータが有する楽曲歌詞及び受信した演奏者画像の表示を行うステップとを備えることを特徴とする。   The karaoke playback display method according to the present invention includes a karaoke song containing a plurality of musical instrument parts and a karaoke server storing a plurality of karaoke data having song lyrics related to the karaoke song, and a song indicating that the karaoke terminal device specifies the karaoke song. In the karaoke playback display method for transmitting karaoke data corresponding to the music specification information from the karaoke server and displaying the karaoke music and displaying the music lyrics by transmitting the specification information, the karaoke server includes the karaoke music Musical instrument performance sound corresponding to one musical instrument part among a plurality of musical instrument parts included and a player image related to the performer who performed the musical instrument performance sound are stored, and the music transmitted from the karaoke terminal device When the designation information is received, the musical instrument performance sound related to the karaoke song designated by the song designation information is stored. If there is a musical instrument performance sound corresponding to the search step and the musical instrument performance sound corresponding to the retrieval, the karaoke terminal stores the corresponding musical instrument performance sound, a player image corresponding to the musical instrument performance sound, and karaoke data corresponding to the music designation information The karaoke terminal device includes a step of receiving instrument performance sounds, player images, and karaoke data transmitted from the karaoke server, and a plurality of karaoke songs included in the karaoke data. Among the musical instrument parts, the musical instrument part related to the received musical instrument performance sound is muted, or the volume of the musical instrument part related to the received musical instrument performance sound is reduced from that of the other musical instrument parts, and the karaoke music is reproduced. A step of playing the received musical instrument performance sound in accordance with the reproduction of the music, and the karaoke day in accordance with the reproduction; Characterized in that it comprises a step of performing a display of song lyrics and received player image included in the.

本発明に係るカラオケサーバは、複数の楽器パートを含むカラオケ楽曲及び前記カラオケ楽曲に係る楽曲歌詞を有するカラオケデータを複数記憶する手段を備え、外部端末から送信されてくるカラオケ楽曲を指定する旨の楽曲指定情報を受信することで、前記楽曲指定情報に応じたカラオケデータを前記楽曲指定情報の送信元の外部端末へ送信するようにしてあるカラオケサーバにおいて、カラオケ楽曲に含まれる複数の楽器パートの中の一つの楽器パートに応じた楽器演奏音及び前記楽器演奏音を演奏した演奏者に係る演奏者画像を記憶するようにしてあり、外部端末から送信されてきた楽曲指定情報を受信した場合、前記楽曲指定情報が指定するカラオケ楽曲に係る楽器演奏音を記憶する中から検索する検索手段と、検索に該当する楽器演奏音がある場合、該当した楽器演奏音、前記楽器演奏音に応じた演奏者画像、及び前記楽曲指定情報に応じたカラオケデータを、前記楽曲指定情報の送信元の外部端末へ送信するデータ送信手段とを備えることを特徴とする。   The karaoke server according to the present invention comprises means for storing a plurality of karaoke data including a karaoke song including a plurality of instrument parts and a song lyrics related to the karaoke song, and designates a karaoke song transmitted from an external terminal. In the karaoke server configured to transmit the karaoke data corresponding to the music specification information to the external terminal that is the transmission source of the music specification information by receiving the music specification information, a plurality of instrument parts included in the karaoke music When a musical instrument performance sound corresponding to one musical instrument part and a performer image related to the performer who performed the musical instrument performance sound are stored, and when music designation information transmitted from an external terminal is received, Search means for searching from storing musical instrument performance sounds related to karaoke music specified by the music specification information, and musical instruments corresponding to the search When there is a performance sound, data transmission for transmitting the corresponding musical instrument performance sound, a player image corresponding to the musical instrument performance sound, and karaoke data corresponding to the music designation information to the external terminal that is the transmission source of the music designation information Means.

本発明に係るカラオケ端末装置は、複数の楽器パートを含むカラオケ楽曲及び前記カラオケ楽曲に係る楽曲歌詞を有するカラオケデータを複数記憶すると共に、カラオケ楽曲に含まれる複数の楽器パートの中の一つの楽器パートに応じた楽器演奏音及び前記楽器演奏音を演奏した演奏者に係る演奏者画像を記憶する外部サーバへ、カラオケ楽曲を指定する旨の楽曲指定情報を送信するカラオケ端末装置において、前記楽曲指定情報の送信に応じて、外部サーバから前記楽曲指定情報が指定するカラオケ楽曲に応じたカラオケデータ、楽器演奏音、及び前記楽器演奏音に応じた演奏者画像を受信する手段と、前記カラオケデータが有するカラオケ楽曲に含まれる複数の楽器パートの中で、受信した楽器演奏音に係る楽器パートをミュート、又は受信した楽器演奏音に係る楽器パートの音量を他の楽器パートより低下してカラオケ楽曲の再生を行うと共に、前記カラオケ楽曲の再生に合わせて、受信した楽器演奏音の再生を行う再生手段と、前記再生手段の再生に合わせて、前記カラオケデータが有する楽曲歌詞及び受信した演奏者画像の表示を行う表示手段とを備えることを特徴とする。   The karaoke terminal device according to the present invention stores a plurality of karaoke data including karaoke music pieces including a plurality of musical instrument parts and music lyrics related to the karaoke music pieces, and one musical instrument among the plurality of musical instrument parts included in the karaoke music pieces. In the karaoke terminal device for transmitting music designating information for designating karaoke music to an external server for storing a musical instrument performance sound corresponding to a part and a performer image related to the performer who performed the musical instrument performance sound. Means for receiving, from the external server, karaoke data corresponding to karaoke music designated by the music designation information, musical instrument performance sound, and a player image corresponding to the musical instrument performance sound from an external server; Mute the musical instrument part related to the received musical instrument performance sound among the multiple musical instrument parts included in the karaoke music piece Reproduction means for lowering the volume of the musical instrument part related to the received musical instrument performance sound than other musical instrument parts and reproducing the karaoke music, and reproducing the received musical instrument performance sound in accordance with the reproduction of the karaoke music; In accordance with the reproduction of the reproduction means, it comprises display means for displaying the song lyrics of the karaoke data and the received player image.

本発明に係るコンピュータプログラムは、通信デバイスと、複数の楽器パートを含むカラオケ楽曲及び前記カラオケ楽曲に係る楽曲歌詞を有するカラオケデータを記憶すると共に、カラオケ楽曲に含まれる複数の楽器パートの中の一つの楽器パートに応じた楽器演奏音及び前記楽器演奏音を演奏した演奏者に係る演奏者画像を記憶する記憶デバイスとを備えるコンピュータに、外部端末から送信されてくるカラオケ楽曲を指定する旨の楽曲指定情報を前記通信デバイスを通じて受信することで、前記楽曲指定情報に応じたカラオケデータを前記楽曲指定情報の送信元の外部端末へ前記通信デバイスを通じて送信する処理を行わせるためのコンピュータプログラムにおいて、前記コンピュータを、外部端末から送信されてきた楽曲指定情報を受信した場合、前記楽曲指定情報が指定するカラオケ楽曲に係る楽器演奏音を記憶する中から検索する処理を行う手段と、検索に該当する楽器演奏音がある場合、該当した楽器演奏音、前記楽器演奏音に応じた演奏者画像、及び前記楽曲指定情報に応じたカラオケデータを、前記楽曲指定情報の送信元の外部端末へ送信する処理を、前記通信デバイスを通じて行う手段として機能させることを特徴とする。   A computer program according to the present invention stores a karaoke data having a communication device, a karaoke song including a plurality of instrument parts, and a song lyrics related to the karaoke song, and one of a plurality of instrument parts included in the karaoke song. A musical piece for designating a karaoke piece transmitted from an external terminal to a computer comprising a musical instrument performance sound corresponding to two musical instrument parts and a storage device for storing a performer image of the performer who performed the musical instrument performance sound In the computer program for causing the karaoke data corresponding to the music designation information to be transmitted through the communication device to the external terminal of the music designation information by receiving the designation information through the communication device, The computer receives the music designation information sent from the external terminal. In the case where there is a musical instrument performance sound corresponding to the search, a means for performing a search process from storing the musical instrument performance sound related to the karaoke music specified by the music designation information, and the corresponding musical instrument performance sound, A process for transmitting a player image corresponding to a sound and karaoke data corresponding to the music designation information to an external terminal that is a transmission source of the music designation information is made to function as a means for performing through the communication device. .

本発明に係るコンピュータプログラムは、通信手段を有するコンピュータに、複数の楽器パートを含むカラオケ楽曲及び前記カラオケ楽曲に係る楽曲歌詞を有するカラオケデータを記憶すると共に、カラオケ楽曲に含まれる複数の楽器パートの中の一つの楽器パートに応じた楽器演奏音及び前記楽器演奏音を演奏した演奏者に係る演奏者画像を記憶する外部サーバへ、カラオケ楽曲を指定する旨の楽曲指定情報を、前記通信手段を通じて送信する処理を行わせるためのコンピュータプログラムにおいて、前記コンピュータを、前記楽曲指定情報の送信に応じて、外部サーバから送信されてくる前記楽曲指定情報が指定するカラオケ楽曲に応じたカラオケデータ、楽器演奏音、及び前記楽器演奏音に応じた演奏者画像を受信する処理を、前記通信手段を通じて行う手段と、前記カラオケデータが有するカラオケ楽曲に含まれる複数の楽器パートの中で、受信した楽器演奏音に係る楽器パートをミュート、又は受信した楽器演奏音に係る楽器パートの音量を他の楽器パートより低下してカラオケ楽曲の再生処理を行うと共に、前記カラオケ楽曲の再生に合わせて、受信した楽器演奏音の再生処理を行う手段と、前記再生処理に合わせて、前記カラオケデータが有する楽曲歌詞及び受信した演奏者画像の表示処理を行う手段として機能させることを特徴とする。   A computer program according to the present invention stores, in a computer having communication means, karaoke data including a karaoke piece including a plurality of instrument parts and a song lyrics related to the karaoke piece, and a plurality of instrument parts included in the karaoke piece. Music designation information for designating a karaoke piece of music is sent to the external server that stores the musical instrument performance sound corresponding to one musical instrument part and the performer image related to the performer who performed the musical instrument performance sound through the communication means. In the computer program for performing the process to transmit, in response to the transmission of the music specification information, the computer performs karaoke data corresponding to the karaoke music specified by the music specification information transmitted from the external server, musical instrument performance A process of receiving a player image corresponding to a sound and the musical instrument performance sound; Means for performing through the means, and among the plurality of instrument parts included in the karaoke music included in the karaoke data, the instrument part related to the received instrument performance sound is muted, or the volume of the instrument part related to the received instrument performance sound is changed. The karaoke data is included in the karaoke data in accordance with the reproduction process and means for performing the reproduction process of the received musical instrument performance sound in accordance with the reproduction of the karaoke music piece. It is made to function as a means which performs the display process of a music lyrics and the received player image.

本発明にあっては、カラオケサーバが、楽曲指定情報を受信すると、記憶する中から楽曲指定情報が指定するカラオケ楽曲に係る楽器演奏音を検索し、検索で該当した楽器演奏音及び演奏者画像をカラオケ端末装置へ送信し、カラオケ端末装置は、いわゆるマイナスワン機能(ミュート機能)又はマイナスワン的な機能(音量低下機能)を働かせてカラオケ楽曲の再生を行いながら、受信した楽器演奏音を再生するので、通信カラオケでもアップロードされた楽器演奏音をマイナスワン機能又はマイナスワン的な機能と連携して利用できるようになる。さらに、カラオケ端末装置は、受信した演奏者画像の表示も行うので、視覚的にも、ミュート(消音)又は音量低下された楽器パートを演奏する演奏者の画像も、カラオケ楽曲を指定したユーザが見ることができる。それにより、例えば、通信カラオケを利用するユーザが、カラオケ楽曲を歌唱する際に、そのユーザの友人が楽器を演奏する画像を見ながら、その友人による楽器演奏音をバックに歌唱することも可能となり、新たな通信カラオケの楽しみ方を提供できる。   In the present invention, when the karaoke server receives the music designation information, the musical instrument performance sound related to the karaoke music designated by the music designation information is searched from the stored music specification information, and the musical instrument performance sound and the player image corresponding to the search are searched. Is transmitted to the karaoke terminal device, and the karaoke terminal device plays the received musical instrument performance sound while playing the karaoke music by using the so-called minus one function (mute function) or minus one function (volume reduction function). Therefore, the musical instrument performance sound uploaded in the online karaoke can be used in conjunction with the minus one function or minus one function. Furthermore, since the karaoke terminal apparatus also displays the received player image, the image of the player who plays the musical instrument part that is muted (silenced) or volume-reduced is also visually selected by the user who specified the karaoke piece. Can see. Thereby, for example, when a user who uses online karaoke sings karaoke music, the user's friend can sing the instrument performance sound by the friend while watching the image of the friend playing the instrument. , Provide new ways to enjoy online karaoke.

本発明にあっては、カラオケサーバが、アップロードされてくる楽器演奏音及び演奏者画像を受信して記憶するので、楽器演奏音及び演奏者画像をペアにして一度に記憶することができ、ペアで記憶する楽器演奏音及び演奏者画像をカラオケ端末装置へ送信する処理をスムーズに行いやすくなる。また、アップロードする側は、楽器演奏音が再生される際に表示させたい演奏者画像をペアにしてアップロードできるので、演奏者が意図した内容で楽器演奏音の再生にあわせて演奏者画像を表示できるようになる。   In the present invention, the karaoke server receives and stores the uploaded musical instrument performance sound and player image, so that the musical instrument performance sound and player image can be stored as a pair at a time. It becomes easy to smoothly perform the process of transmitting the musical instrument performance sound and the performer image stored in step S to the karaoke terminal device. Also, the uploader can upload a pair of performer images to be displayed when playing the instrument performance sound, so that the player image is displayed as the instrument performance sound plays with the content intended by the performer. become able to.

本発明にあっては、カラオケサーバが、ユーザデータベースに予め演奏者画像を格納すると共に、アップロードされてくるのは楽器演奏音だけであることから、楽器演奏音及び演奏者画像の両方が一度にアップロードされてくる場合に比べて、アップロードに係る受信処理の負担が低減されると共に、アップロードごとに演奏者画像を記憶する必要もなくなるので、記憶に係る処理も低減される。また、アップロードの送信を行う側も、楽器演奏音のみをアップロードすればよいため、アップロードを行う処理負担も低減できるようになり、全体として、より手軽に、アップロードした楽器演奏音を、通信カラオケにおいて、カラオケ楽曲を歌唱する際に利用できるようになる。なお、ユーザデータベースに演奏者画像を記憶するのは、カラオケサービスへのユーザ登録を行う際に、ユーザに係る情報(氏名、連絡先等)と共に、演奏者画像もユーザデータベースへ登録しておくことが好適である。   In the present invention, the karaoke server stores the player image in the user database in advance and only the musical instrument performance sound is uploaded. Therefore, both the musical instrument performance sound and the player image are stored at the same time. Compared to uploading, the burden of receiving processing related to uploading is reduced, and it is not necessary to store a player image for each upload, so processing related to storage is also reduced. Also, since the uploader only needs to upload the musical instrument performance sound, the processing burden of uploading can be reduced, and as a whole, the uploaded musical instrument performance sound can be transmitted more easily in online karaoke. It can be used when singing karaoke music. The player image is stored in the user database when the user image is registered in the user database together with information related to the user (name, contact information, etc.) when the user is registered in the karaoke service. Is preferred.

本発明にあっては、カラオケ端末装置で撮像した撮像画像を、カラオケ画像及び演奏者画像と共に表示するので、カラオケ端末装置を利用してカラオケ楽曲を歌唱するユーザの画像も、演奏者画像等と一緒に表示されることになり、歌唱を行うユーザと、演奏を行うユーザとが同じステージでパフォーマンスを行っているような状況を擬似的に楽しめる表示内容を提供できるようになる。   In the present invention, since the captured image captured by the karaoke terminal device is displayed together with the karaoke image and the player image, the image of the user who sings karaoke music using the karaoke terminal device is also the player image or the like. Displayed together, it is possible to provide display content that allows the user who sings and the user who performs the performance to enjoy the situation in which the performance is performed on the same stage.

本発明にあっては、アップロードされた中から複数の楽器演奏音が検索されると、カラオケ楽曲の一定期間ごとに、複数の中から再生される楽器演奏音を順次切り替えると共に、表示される演奏者画像も順次切り替えるので、アップロードされて蓄積されている複数の楽器演奏音及び演奏者画像を満遍なく、カラオケ楽曲を指定するユーザが楽しめるようになる。   In the present invention, when a plurality of musical instrument performance sounds are retrieved from the uploaded music, the musical instrument performance sounds reproduced from the plurality are sequentially switched and the displayed performance is displayed for each predetermined period of the karaoke music piece. Since the player images are also switched sequentially, the user who specifies the karaoke music can enjoy the plurality of musical instrument performance sounds and player images that have been uploaded and stored.

本発明にあっては、アップロードされた中から、異なる楽器パートに応じた楽器演奏音が複数検索されると、検索された各楽器演奏音に係る各楽器パートをミュート又は音量低下してカラオケ楽曲の再生を行いながら、検索された各楽器演奏音を再生すると共に、それらの各楽器演奏音に応じた各演奏者画像の表示を行うので、複数の楽器パートを、アップロードされた複数の楽器演奏音で置き換えた状態でカラオケ歌唱を行えるようになり、アップロードされた楽器演奏音の占有度を高めた状態でカラオケ歌唱を楽しめる状況を提供できる。   In the present invention, when a plurality of musical instrument performance sounds corresponding to different musical instrument parts are searched from among the uploaded musical instrument parts, each musical instrument part related to the searched musical instrument performance sounds is muted or the volume is reduced to karaoke music , While playing each instrument performance sound that has been searched, and display each player image corresponding to each instrument performance sound, multiple instrument parts, multiple uploaded instrument performances The karaoke singing can be performed with the sound replaced, and a situation in which the singing of the karaoke singing can be provided in a state in which the degree of occupancy of the uploaded musical instrument performance is increased can be provided.

本発明にあっては、楽器演奏音には、カラオケ楽曲の中の少なくとも一つの期間を独奏として指定する独奏指定情報が付帯し、カラオケ楽曲を再生する際、独奏指定情報が指定する期間、全ての楽器パートをミュート又は音量低下して、アップロードされた楽器演奏音を再生するので、カラオケ楽曲の再生中に、アップロードされた楽器演奏音をソロパート的に再生する期間が存在するようになり、アップロードされる楽器演奏音の独奏を楽しめる期間を提供できるようになる。   In the present invention, the musical instrument performance sound is accompanied by solo designation information that designates at least one period of karaoke music as solo, and when playing the karaoke music, all periods specified by the solo designation information are all included. Mute or lower the volume of the instrument part and play the uploaded instrument performance sound, so there will be a period during which the uploaded instrument performance sound is played as a solo part while playing karaoke music. It will be possible to provide a period during which you can enjoy the solo performance of the musical instrument performance.

本発明にあっては、アップロードされた楽器演奏音の中から、カラオケサーバへ送信されてきた検索条件に合致する楽器演奏音を検索するので、一つのカラオケ楽曲に対して多数の楽器演奏音がアップロードにより蓄積されている場合でも、その一つのカラオケ楽曲を指定するユーザが希望する条件に合致する楽器演奏音のみに絞って利用することが可能となる。その結果、例えば、カラオケ楽曲を歌唱するユーザの友人のみに絞って、楽器演奏音を検索できるようになる。   In the present invention, since the musical instrument performance sound that matches the search condition transmitted to the karaoke server is searched from the uploaded musical instrument performance sounds, there are a large number of musical instrument performance sounds for one karaoke piece. Even when it is accumulated by uploading, it is possible to use only the musical instrument performance sound that meets the conditions desired by the user who designates that one karaoke piece. As a result, for example, it is possible to search for musical instrument performance sounds by focusing only on a user's friend who sings karaoke music.

本発明にあっては、カラオケサーバが、受信した楽曲指定情報に応じた楽器演奏音を検索して、楽器演奏音及び演奏者画像をカラオケ端末装置へ送信し、カラオケ端末装置は、マイナスワン機能(ミュート機能)又はマイナスワン的な機能(音量低下機能)を働かせてカラオケ楽曲を再生しながら、受信した楽器演奏音楽器演奏音を再生すると共に、受信した演奏者画像を表示するので、アップロードされた楽器演奏音をマイナスワン機能又はマイナスワン的な機能と連携して通信カラオケで利用できる上、その楽器演奏音に係る演奏者画像も視覚的に楽しむことができる。   In the present invention, the karaoke server searches for the musical instrument performance sound according to the received music designation information, and transmits the musical instrument performance sound and the performer image to the karaoke terminal device. The karaoke terminal device has a minus one function. (Mute function) or minus one function (volume reduction function) while playing karaoke music, while playing the instrument performance music instrument received sound and displaying the received player image, uploaded The musical instrument performance sound can be used in the online karaoke in cooperation with the minus one function or the minus one function, and the player image related to the instrument performance sound can be enjoyed visually.

本発明にあっては、ペアとなった楽器演奏音及び演奏者画像を含む演奏データがアップロードされてきて、カラオケサーバで記憶されるので、楽器演奏音及び演奏者画像をペアの状態で扱うことができ、楽器演奏音に係る演奏状態に応じた演奏者画像を、楽器演奏音にあわせて表示できる。   In the present invention, performance data including a paired instrument performance sound and player image is uploaded and stored in the karaoke server, so that the instrument performance sound and player image are handled in a paired state. The player image corresponding to the performance state related to the musical instrument performance sound can be displayed in accordance with the musical instrument performance sound.

本発明にあっては、カラオケサーバに記憶されるユーザデータベースに予め、演奏者画像を格納しておき、楽器演奏音のみをアップロードするので、演奏者となるユーザは、演奏者画像を毎回、アップロードする負担から解放され、より手軽に、アップロードした楽器演奏音を通信カラオケで活用できると共に、演奏者に係る画像の表示は、ユーザデータベースに予め格納した演奏者画像で対応できるので、処理負担を低減しても視覚的な楽しさは維持できる。   In the present invention, the performer image is stored in advance in the user database stored in the karaoke server, and only the musical instrument performance sound is uploaded. Therefore, the performer user uploads the performer image every time. Easily and easily upload uploaded instrument performance sounds in online karaoke, and performer images can be displayed with player images stored in advance in the user database, reducing the processing burden. Even so, the visual enjoyment can be maintained.

本発明にあっては、カラオケ端末装置で撮像した撮像画像を、カラオケ画像及び演奏者画像と共に表示するので、歌唱を行うユーザと、演奏を行うユーザとが同じステージで共演しているような表示内容を楽しむことができる。   In the present invention, the captured image captured by the karaoke terminal device is displayed together with the karaoke image and the performer image, so that the user who performs the singing and the user who performs the performance co-star on the same stage. You can enjoy the contents.

本発明にあっては、アップロードされた中から複数の楽器演奏音が検索されると、カラオケ楽曲の一定期間ごとに、複数の中から再生される楽器演奏音を順次切り替えると共に、表示される演奏者画像も順次切り替えるので、アップロードされて蓄積されている複数の楽器演奏音及び演奏者画像をカラオケ再生の進行に伴い満遍なく楽しむことができる。   In the present invention, when a plurality of musical instrument performance sounds are retrieved from the uploaded music, the musical instrument performance sounds reproduced from the plurality are sequentially switched and the displayed performance is displayed for each predetermined period of the karaoke music piece. Since the player images are also sequentially switched, a plurality of musical instrument performance sounds and player images that have been uploaded and stored can be enjoyed evenly as the karaoke playback progresses.

本発明にあっては、アップロードされた中から、異なる楽器パートに応じた楽器演奏音が複数検索されると、検索された各演奏データが有する演奏楽器音を再生すると共に、それらの各楽器演奏音に応じた各演奏者画像の表示を行うので、アップロードされた多数の楽器演奏音が演奏グループ的に出力される状況を楽しみながら、カラオケ歌唱を行える。   In the present invention, when a plurality of musical instrument performance sounds corresponding to different musical instrument parts are retrieved from the uploaded music, the musical instrument sounds possessed by the retrieved performance data are reproduced and the performances of the respective musical instrument performances are reproduced. Since each player image is displayed according to the sound, karaoke singing can be performed while enjoying the situation where a large number of uploaded musical instrument performance sounds are output as a performance group.

本発明にあっては、楽器演奏音には、カラオケ楽曲の中の少なくとも一つの期間を独奏として指定する独奏指定情報が付帯し、カラオケ楽曲を再生する際、独奏指定情報が指定する期間、全ての楽器パートをミュートして、アップロードされた楽器演奏音を再生するので、カラオケ楽曲中においてアップロードされる楽器演奏音をソロパート的に楽しめる期間を提供できる。   In the present invention, the musical instrument performance sound is accompanied by solo designation information that designates at least one period of karaoke music as solo, and when playing the karaoke music, all periods specified by the solo designation information are all included. The musical instrument part is muted and the uploaded musical instrument performance sound is reproduced, so that it is possible to provide a period during which the musical instrument performance sound uploaded in karaoke music can be enjoyed as a solo part.

本発明にあっては、アップロードされて蓄積されている楽器演奏音の中から、カラオケサーバへ送信されてきた検索条件に合致する楽器演奏音を検索するので、カラオケを歌唱するユーザの所望条件に合致する楽器演奏音のみをカラオケ歌唱時に利用することができる。   In the present invention, the musical instrument performance sound that matches the search condition transmitted to the karaoke server is searched from the musical instrument performance sounds that have been uploaded and stored, so that the user's desired conditions for singing karaoke are met. Only matching musical instrument performance sounds can be used when singing karaoke.

本発明の実施形態に係るカラオケシステムの全体的な構成を示す概略図である。It is the schematic which shows the whole structure of the karaoke system which concerns on embodiment of this invention. カラオケサーバの主要な内部構成を示すブロック図である。It is a block diagram which shows the main internal structures of a karaoke server. カラオケDB(データベース)を示す図表である。It is a chart which shows karaoke DB (database). カラオケ楽曲を構成する各楽器パートのデータ内容を概念的に示す図表である。It is a chart which shows notionally the data contents of each musical instrument part which constitutes karaoke music. ユーザDBを示す図表である。It is a chart which shows user DB. アップロードDBを示す図表である。It is a chart which shows upload DB. (a)はアップロードされる演奏データのフォーマットの中身の一例を示す概略的な図表であり、(b)は他の例を示す図表である。(A) is a schematic chart which shows an example of the content of the format of the performance data uploaded, (b) is a chart which shows another example. アップロードされる演奏データについてのカラオケサーバの処理手順を示す第1フローチャートである。It is a 1st flowchart which shows the process sequence of the karaoke server about the performance data uploaded. 演奏データの検索に係るカラオケサーバの処理手順を示す第2フローチャートである。It is a 2nd flowchart which shows the process sequence of the karaoke server which concerns on the search of performance data. カラオケ端末装置の主要な内部構成を示すブロック図である。It is a block diagram which shows the main internal structures of a karaoke terminal device. (a)は初期選択メニュー画面を示す概略図、(b)は楽器パート選択画面を示す概略図である。(A) is a schematic diagram showing an initial selection menu screen, (b) is a schematic diagram showing a musical instrument part selection screen. (a)は独奏フレーズ指定画面を示す概略図、(b)はスタート画面を示す概略図である。(A) is the schematic which shows a solo phrase designation | designated screen, (b) is the schematic which shows a start screen. (a)は収録確認画面を示す概略図、(b)はモード選択画面を示す概略図である。(A) is the schematic which shows a recording confirmation screen, (b) is the schematic which shows a mode selection screen. (a)は検索メニュー画面を示す概略図、(b)は検索条件選択画面を示す概略図である。(A) is the schematic which shows a search menu screen, (b) is the schematic which shows a search condition selection screen. (a)はモード選択スタート画面を示す概略図、(b)は演奏評価画面を示す概略図である。(A) is the schematic which shows a mode selection start screen, (b) is the schematic which shows a performance evaluation screen. (a)は演奏者画像を表示した状態を示す概略図、(b)は複数の楽器パートに応じた演奏者画像を表示した状態を示す概略図である。(A) is the schematic which shows the state which displayed the player image, (b) is the schematic which shows the state which displayed the player image according to several musical instrument parts. (a)は演奏者画像及び歌唱者画像(撮像画像)を表示した状態を示す概略図、(b)は複数の楽器パートに応じた演奏者画像及び歌唱者画像(撮像画像)を表示した状態を示す概略図である。(A) is the schematic which shows the state which displayed the player image and singer image (captured image), (b) is the state which displayed the player image and singer image (captured image) according to several musical instrument parts FIG. 演奏収録に係るカラオケ端末装置の処理手順を示す第3フローチャートである。It is a 3rd flowchart which shows the process sequence of the karaoke terminal device which concerns on performance recording. カラオケ楽曲の選択に係るカラオケ端末装置の処理手順を示す第4フローチャートである。It is a 4th flowchart which shows the process sequence of the karaoke terminal device which concerns on selection of karaoke music. カラオケ再生に係るカラオケ端末装置の処理手順を示す第5フローチャートである。It is a 5th flowchart which shows the process sequence of the karaoke terminal device which concerns on karaoke reproduction | regeneration. (a)〜(d)は、楽器演奏音の再生及び演奏者画像の表示に係る複数のパターンに応じたタイムチャートである。(A)-(d) is a time chart according to the some pattern which concerns on reproduction | regeneration of a musical instrument performance sound, and a display of a player image. (a)〜(d)は、楽器演奏音の再生、並びに演奏者画像及び撮像画像の表示に係る複数のパターンに応じたタイムチャートである。(A)-(d) is a time chart according to the some pattern which concerns on reproduction | regeneration of a musical instrument performance sound, and display of a player image and a captured image. 変形例のユーザDBを示す図表である。It is a chart which shows user DB of a modification. (a)(b)は、変形例に係るアップロードされる演奏データのフォーマットの中身の例を示す概略的な図表である。(A) (b) is a schematic diagram which shows the example of the content of the format of the performance data uploaded according to a modification. 変形例のアップロードDBを示す図表である。It is a chart which shows upload DB of a modification. 更なる変形例のアップロードDBを示す図表である。It is a chart which shows upload DB of the further modification. 演奏収録に係るカラオケ端末装置における変形例の処理手順を示す第6フローチャートである。It is a 6th flowchart which shows the process sequence of the modification in the karaoke terminal device which concerns on performance recording. (a)は収録確認画面を示す概略図、(b)は独奏フレーズ指定画面を示す概略図である。(A) is the schematic which shows a recording confirmation screen, (b) is the schematic which shows a solo phrase designation | designated screen. カラオケ楽曲の選択に係るカラオケ端末装置における変形例の処理手順を示す第7フローチャートである。It is a 7th flowchart which shows the process sequence of the modification in the karaoke terminal device which concerns on selection of karaoke music. (a)(b)は変形例に係る楽曲予約画面を示す概略図である。(A) (b) is the schematic which shows the music reservation screen which concerns on a modification. カラオケ楽曲の選択に係るカラオケ端末装置における別の変形例の処理手順を示す第8フローチャートである。It is an 8th flowchart which shows the process sequence of another modification in the karaoke terminal device which concerns on selection of karaoke music. 演奏者画像を表示した状態を示す変形例の概略図である。It is the schematic of the modification which shows the state which displayed the player image. カラオケ端末装置の変形例の映像出力デバイスに係る構成を示すブロック図である。It is a block diagram which shows the structure which concerns on the video output device of the modification of a karaoke terminal device.

図1は、本発明の実施形態に係るカラオケシステム1の全体の主要構成を示す概略図である。本実施形態のカラオケシステム1は、カラオケ楽曲等を提供するシステム側に設けられるカラオケサーバ2と、ユーザが利用する各店舗等に設けられるカラオケ端末装置11、21、31等とをネットワークNWで接続した構成になっている。本実施形態のカラオケサーバ2は、カラオケDB(データベース)5、ユーザDB6、及びアップロードDB7と云った各種データベースを備えており、ユーザの要望するカラオケデータに加えて、アップロードされている楽器演奏音及び演奏者画像を、ネットワークNWを介してカラオケ端末装置11、21、31等へ送信する。カラオケ端末装置11、21、31は、受信したカラオケデータ、楽器演奏音、及び演奏者画像について、楽器演奏音に係る楽器パートをミュートしてカラオケ楽曲の再生を行うと共に、その再生に合わせて楽器演奏音を再生し、さらには演奏者画像をカラオケ画像と共に表示することを特徴にしている(図16、17参照)。   FIG. 1 is a schematic diagram showing an overall main configuration of a karaoke system 1 according to an embodiment of the present invention. The karaoke system 1 of the present embodiment connects a karaoke server 2 provided on the system side that provides karaoke music and the like to a karaoke terminal device 11, 21, 31, etc. provided in each store used by the user via a network NW. It has a configuration. The karaoke server 2 of the present embodiment includes various databases such as a karaoke DB (database) 5, a user DB 6, and an upload DB 7. In addition to the karaoke data requested by the user, The performer image is transmitted to the karaoke terminal apparatuses 11, 21, 31 and the like via the network NW. The karaoke terminal devices 11, 21, and 31 reproduce the karaoke music by muting the musical instrument part related to the musical instrument performance sound with respect to the received karaoke data, musical instrument performance sound, and performer image. The performance sound is reproduced, and the player image is displayed together with the karaoke image (see FIGS. 16 and 17).

なお、図1では、計3台のカラオケ端末装置11、21、31を示すに留まるが、実際のシステムでは、ネットワークNWを経由してカラオケサーバ2に接続可能なカラオケ端末装置の台数に限定はない。また、カラオケサーバ2は、処理内容を分散して行う複数のサーバを組み合わせて構成することも可能である。さらに、本発明の内容に直接的に関係しないので図1では図示を省略しているが、通信カラオケサービスにおけるユーザ登録及び登録したユーザの認証等に係る処理等を行うサーバ等もカラオケシステム1に含むことも可能である。以下、カラオケサーバ2、カラオケサーバ2に含まれる各種データベース、カラオケ端末装置11等について順次説明する。   In FIG. 1, only a total of three karaoke terminal devices 11, 21, and 31 are shown. However, in an actual system, the number of karaoke terminal devices that can be connected to the karaoke server 2 via the network NW is limited. Absent. Moreover, the karaoke server 2 can also be configured by combining a plurality of servers that distribute processing contents. Further, since it is not directly related to the contents of the present invention, illustration is omitted in FIG. 1, but a server or the like that performs processing related to user registration and authentication of registered users in the communication karaoke service is also included in the karaoke system 1. It can also be included. Hereinafter, the karaoke server 2, various databases included in the karaoke server 2, the karaoke terminal device 11, and the like will be sequentially described.

図2は、カラオケサーバ2の主要な内部構成を示している。本実施形態のカラオケサーバ2には一般的なサーバコンピュータを適用しており、全体的な制御及び各種処理を行うMPU2aに、各種デバイス等を内部接続線2hで接続したものになっており、各種デバイス等には、通信モジュール2b、RAM2c、ROM2d、入力インタフェース2e、出力インタフェース2f、大容量記憶システム(HDDシステム)2g等がある。   FIG. 2 shows a main internal configuration of the karaoke server 2. A general server computer is applied to the karaoke server 2 of the present embodiment, and various devices and the like are connected to the MPU 2a that performs overall control and various processes by an internal connection line 2h. Examples of the device include a communication module 2b, a RAM 2c, a ROM 2d, an input interface 2e, an output interface 2f, a mass storage system (HDD system) 2g, and the like.

通信モジュール2bは、ネットワークNWとの接続モジュールに相当する通信デバイスであり、所要の通信規格に応じたものである(例えばLANモジュール)。通信モジュール2bは、所要の通信機器(図示は省略。例えばルータ等が該当)を介してネットワークNWと接続されており、カラオケ端末装置11等から送られてくる情報又はデータ等を受信してMPU2aへ伝えると共に、MPU2aの制御指示に基づき、カラオケ端末装置11等へ各種データ等を送信する。   The communication module 2b is a communication device corresponding to a connection module with the network NW, and conforms to a required communication standard (for example, a LAN module). The communication module 2b is connected to the network NW via a required communication device (not shown; for example, a router or the like), receives information or data sent from the karaoke terminal device 11 or the like, and receives the MPU 2a. And transmitting various data to the karaoke terminal device 11 and the like based on the control instruction of the MPU 2a.

RAM2cは、MPU2aの処理に伴う内容、ファイル等を一時的に記憶するものであり、ROM2dは、MPU2aの基本的な処理内容を規定したプログラム等を記憶するものである。入力インタフェース2eは、カラオケサーバ2のオペレータからの操作指示等を受け付けるキーボード2i、マウス等が接続されるものであり、オペレータから受け付けた操作指示等をMPU2aへ伝える。出力インタフェース2fは、ディスプレイ2j(表示出力装置)が接続されるものであり、MPU2aの処理に伴う内容をディスプレイ2jへ出力し、オペレータが現在の処理内容等を確認できるようにしている。   The RAM 2c temporarily stores contents, files, and the like accompanying the processing of the MPU 2a, and the ROM 2d stores programs and the like that define the basic processing contents of the MPU 2a. The input interface 2e is connected to a keyboard 2i, a mouse, and the like for receiving an operation instruction from the operator of the karaoke server 2, and transmits the operation instruction received from the operator to the MPU 2a. The output interface 2f is connected to a display 2j (display output device), and outputs the contents accompanying the processing of the MPU 2a to the display 2j so that the operator can check the current processing contents and the like.

大容量記憶システム2g(記憶デバイスに相当)は、カラオケサービスを提供するに当たり必要なデータを含む各種データベース及びプログラム等を記憶するものであり、具体的には、サーバプログラム3、カラオケサービスプログラム4、カラオケDB5、ユーザDB6、アップロードDB7等を記憶している。   The large-capacity storage system 2g (corresponding to a storage device) stores various databases and programs including data necessary for providing the karaoke service. Specifically, the server program 3, the karaoke service program 4, Karaoke DB5, user DB6, upload DB7, etc. are memorize | stored.

サーバプログラム3は、サーバ用のオペレーションシステムに応じた処理を規定したものであり、この規定内容に基づいた処理をMPU2aが行うことで、カラオケサーバ2はサーバとしての機能を果たす。   The server program 3 defines processing according to the server operation system, and the karaoke server 2 functions as a server when the MPU 2a performs processing based on the specified content.

カラオケサービスプログラム4は、サーバコンピュータ用のコンピュータプログラムに相当し、本実施形態に係るカラオケサービスを提供するために、MPU2aが行う各種処理を規定している。具体的に、カラオケサービスプログラム4は、通信カラオケにおいてカラオケサーバ側が行う基本的な処理内容(従来から存在する処理)に加えて、本発明に係る特有の処理内容を規定している。基本的な処理内容としては、カラオケ端末装置11でユーザが歌唱を希望するカラオケ楽曲を選択できるように、選択に必要なデータ(カラオケ楽曲の名称・歌手名・歌詞テキスト・楽器パート等を含むデータ)をカラオケ端末装置11へ送る処理、ユーザにより選択されたカラオケ楽曲を指定する楽曲指定情報を受信する処理、受信した楽曲指定情報に基づき、ユーザが所望するカラオケ楽曲に応じたカラオケデータをカラオケDB5から検索する処理、検索で該当したカラオケデータを、楽曲指定情報の送信元のカラオケ端末装置11等へ送信する処理等が存在する。   The karaoke service program 4 corresponds to a computer program for a server computer, and defines various processes performed by the MPU 2a in order to provide a karaoke service according to the present embodiment. Specifically, the karaoke service program 4 defines the specific processing content according to the present invention in addition to the basic processing content (processing that exists conventionally) performed by the karaoke server side in online karaoke. Basic processing contents include data necessary for selection (data including karaoke song name, singer name, lyric text, musical instrument part, etc.) so that the user can select a karaoke song desired to be sung by the karaoke terminal device 11. ) To the karaoke terminal device 11, processing to receive music designation information for designating the karaoke music selected by the user, and karaoke data corresponding to the karaoke music desired by the user based on the received music designation information. For example, a process for transmitting the karaoke data corresponding to the search to the karaoke terminal apparatus 11 or the like that is the transmission source of the music designation information, and the like.

また、本発明に係る特有の処理内容としては、カラオケ端末装置11等からアップロード(投稿)されてくる楽器の演奏データをアップロードDB7に蓄積(記憶)する処理、カラオケ端末装置11等から送られてくる楽曲指定情報に演奏データフラグが含まれていると、楽曲指定情報に係るカラオケ楽曲を構成する楽器パートを演奏する楽器演奏音をアップロードDB7から検索する処理等が存在する。これらの本発明に係る特有の処理内容の詳細については、図8、9の第1、2フローチャートを参照して後述する。   Further, as specific processing contents according to the present invention, processing for accumulating (storing) musical instrument performance data uploaded (posted) from the karaoke terminal device 11 or the like in the upload DB 7, sent from the karaoke terminal device 11 or the like. When the performance data flag is included in the coming music designation information, there is a process of searching for the musical instrument performance sound for playing the musical instrument part constituting the karaoke music related to the music designation information from the upload DB 7. Details of the specific processing contents according to the present invention will be described later with reference to the first and second flowcharts of FIGS.

図3は、本実施形態で用いるカラオケDB5の中身の概要を示している。カラオケDB5はカラオケデータを格納したものであり、カラオケ楽曲を識別するための「曲ID」に、「カラオケ楽曲」、「カラオケ画像」、「楽曲歌詞」、「歌詞テキスト」、「曲名」、「歌手名」、及び「曲情報」等の各項目に応じたデータ又は情報を対応付けて格納したものであり、新曲のカラオケ楽曲が登場するごとに、格納されるデータ等も追加される。以下、カラオケDB5に格納される各データ又は情報について説明する。   FIG. 3 shows an outline of the contents of the karaoke DB 5 used in the present embodiment. The karaoke DB 5 stores karaoke data, and the “song ID” for identifying the karaoke song includes “karaoke song”, “karaoke image”, “song lyrics”, “lyric text”, “song name”, “ Data or information corresponding to each item such as “singer name” and “song information” is stored in association with each other, and stored data and the like are added each time a new karaoke song appears. Hereinafter, each data or information stored in the karaoke DB 5 will be described.

カラオケDB5の「カラオケ楽曲」とは、複数の楽器パート及びコーラスパート等のデータから構成されるカラオケ楽曲のデータである。楽器パートのデータ(楽器パートデータ)とは、そのカラオケ楽曲を演奏する楽器の演奏音のデータであり、演奏楽器が複数の場合は、楽器ごとのパートデータが独立して存在する。例えば、あるカラオケ楽曲が、ギター、ベース、及びドラムという三種の楽器で演奏される場合、そのカラオケ楽曲の楽器パートデータは、ギターパートデータ、ベースパートデータ、及びドラムパートデータを有することになる。   “Karaoke music” in the karaoke DB 5 is data of karaoke music composed of data such as a plurality of instrument parts and chorus parts. The instrument part data (instrument part data) is data of the performance sound of the instrument that plays the karaoke music piece. When there are a plurality of performance instruments, the part data for each instrument exists independently. For example, when a certain karaoke piece is played with three kinds of musical instruments such as a guitar, a bass, and a drum, the instrument part data of the karaoke piece includes guitar part data, base part data, and drum part data.

図4は、あるカラオケ楽曲の複数の楽器パートを含む楽器パートデータ8の内容を概念的に示したものである。楽器パートデータ8は、カラオケ楽曲の演奏に使用される楽器を示す目次的な情報であるプロパティ情報を含み、図4の例では、楽器コードとして「1」をギター、「2」をベース、「3」をドラム、「4」をキーボード、「5」をサックスとしたものがプロパティ情報に相当する。また、楽器パートデータ8は、各楽器音のデータを、プロパティ情報の楽器コードごとに対応付けて、ギターパートデータ8a、ベースパートデータ8b、ドラムパートデータ8c、キーボードパートデータ8d、サックスパートデータ8eを有したものになっている。   FIG. 4 conceptually shows the contents of the instrument part data 8 including a plurality of instrument parts of a certain karaoke piece. The instrument part data 8 includes property information which is table of contents information indicating instruments used for the performance of karaoke music. In the example of FIG. 4, “1” is a guitar, “2” is a base, “3” is a drum, “4” is a keyboard, and “5” is a saxophone. In addition, the instrument part data 8 associates the data of each instrument sound with each instrument code of the property information, so that the guitar part data 8a, the base part data 8b, the drum part data 8c, the keyboard part data 8d, and the saxophone part data 8e. It has become.

このような楽器パートデータ8の内容は、カラオケ楽曲によって当然異なる場合もあり、例えば、楽器としてサックスを含まないカラオケ楽曲の楽器パートデータの場合は、楽器コードの「5」に係る内容自体が存在しないものになっており、また、逆に、楽器としてバイオリンを含むカラオケ楽曲の楽器パートデータの場合は、例えば楽器コードとして「6」に対応付けて、バイオリンという楽器名及びバイオリンパートデータを含むものになる。 The contents of the instrument part data 8 may naturally differ depending on the karaoke music piece. For example, in the case of the instrument part data of the karaoke music piece that does not include the saxophone as the musical instrument, the content itself related to the instrument code “5” exists. Conversely, in the case of karaoke music instrument part data including a violin as a musical instrument, for example, a musical instrument code associated with “6” and including a musical instrument name and violin part data. become.

また、図3に示すカラオケDB5の「カラオケ画像」とは、カラオケ楽曲の再生に合わせて画面に表示される画像データであり、通常、カラオケ楽曲の内容に応じた背景動画である。「楽曲歌詞」とは、カラオケ楽曲の再生に合わせて画面に表示されるカラオケ楽曲の歌詞データであり、カラオケ楽曲の再生進行のタイミングに応じた歌詞部分が画面下部でテロップ的に順次、表示されるようになっている。   Further, the “karaoke image” in the karaoke DB 5 shown in FIG. 3 is image data displayed on the screen in accordance with the reproduction of the karaoke music, and is usually a background moving image according to the content of the karaoke music. “Song Lyrics” is the lyrics data of karaoke music that is displayed on the screen as the karaoke music is played back. The lyrics corresponding to the playback progress of the karaoke music are displayed in telop sequentially at the bottom of the screen. It has become so.

カラオケDB5の「歌詞テキスト」とは、カラオケ楽曲のフレーズに応じた歌詞を示すテキストデータであり(カラオケ楽曲のフレーズ数も示す)、カラオケ楽曲を歌詞で検索する場合などに使用される(上記の「楽曲歌詞」は表示用のデータである)。カラオケDB5の「曲名」とは、カラオケ楽曲の曲名を表すテキストデータであり、この曲名もカラオケ楽曲の検索に用いられる。カラオケDB5の「歌手名」とは、カラオケ楽曲を歌唱する歌手又はグループ等の名称を表すテキストデータであり、この歌手名もカラオケ楽曲の検索に用いられる。   The “lyric text” in the karaoke DB 5 is text data indicating the lyrics corresponding to the phrase of the karaoke song (also indicates the number of phrases of the karaoke song), and is used when searching for the karaoke song by the lyrics (above-mentioned) "Song lyrics" is data for display). “Song name” in the karaoke DB 5 is text data representing the name of a karaoke song, and this song name is also used for searching for a karaoke song. The “singer name” in the karaoke DB 5 is text data representing the name of a singer or group who sings karaoke music, and this singer name is also used for searching for karaoke music.

さらに、カラオケDB5の「曲情報」とは、曲に関する各種情報(テキスト情報)であり、「ドラマの主題歌になっている」、「ある商品のテレビコマーシャルに使用されている」などの情報が該当する。なお、本発明におけるカラオケデータの中身には、上述した「カラオケ楽曲」の楽曲データ、「カラオケ画像」の画像データ、「曲名」のデータ、及び「歌手名」のデータ等が含まれ、このような中身のカラオケデータが、カラオケ端末装置11等から要求(楽曲指定情報の送信)に応じて、カラオケ端末装置11等へ送られるようになっている。   Furthermore, “song information” in the karaoke DB 5 is various information (text information) related to the song, and information such as “it is the theme song of a drama”, “used for a TV commercial of a certain product”, and the like. Applicable. The contents of the karaoke data in the present invention include the above-mentioned song data of “Karaoke song”, image data of “Karaoke image”, data of “Song name”, data of “Singer name”, and the like. The contents of the karaoke data are sent from the karaoke terminal device 11 or the like to the karaoke terminal device 11 or the like in response to a request (transmission of music designation information).

図5は、ユーザDB6の中身の概要を示している。ユーザDB6は、カラオケサーバ2が提供する通信カラオケサービスについて登録したカラオケユーザの情報を蓄積して格納したものであり、ユーザ登録又は登録ユーザの退会に応じてユーザDB5の中身は変化する。ユーザDB5は、登録ユーザを識別するための「ユーザID」に、そのユーザの「氏名」、「ニックネーム」、「出身地」、「居住地」、「年齢」、「性別」、「登録日」、「利用履歴」、及び「フレンズ」等の情報を対応付けて格納している。なお「利用履歴」とは、あるカラオケ楽曲を指定した場合、その日付及びカラオケ楽曲の曲IDを対応づけた情報を含んだものである。また「フレンズ」とは、ある登録ユーザとは異なる別の登録ユーザを友人として設定したことを示す情報であり、その友人となる別の登録ユーザのユーザIDを含んだものになっている。「フレンズ」には、複数のユーザIDを設定することも可能である。なお、このようなユーザ登録は、最初に通信カラオケサービスを利用する時、又は通信カラオケサービスを数回利用してからも随時に行うことが可能であり、ユーザ登録の際にユーザから入力される各種情報・データ等がユーザDB5へ格納されることになる。   FIG. 5 shows an outline of the contents of the user DB 6. The user DB 6 stores and stores information on karaoke users registered for the communication karaoke service provided by the karaoke server 2, and the contents of the user DB 5 change according to user registration or registered user withdrawal. The user DB 5 includes “user ID” for identifying a registered user, “name”, “nickname”, “birthplace”, “residence”, “age”, “gender”, “registration date” of the user. , “Usage history”, “Friends”, and the like are stored in association with each other. The “use history” includes information that associates the date and the song ID of the karaoke song when a certain karaoke song is designated. “Friends” is information indicating that another registered user different from a registered user is set as a friend, and includes a user ID of another registered user who becomes the friend. It is also possible to set a plurality of user IDs in “Friends”. Such user registration can be performed at any time when using the online karaoke service for the first time or even after using the online karaoke service several times, and is input by the user at the time of user registration. Various information, data, and the like are stored in the user DB 5.

図6は、アップロードDB7の中身の概要を示している。アップロードDB6は、カラオケ端末装置11等からカラオケサーバ2へアップロード(投稿)されてきた演奏データを蓄積して格納したものであり、演奏データがアップロードされるごとに、アップロードDB7の中身も追加されていく。アップロードDB7を説明するにあたり、先ず、アップロードされてくる演奏データを図7(a)(b)に基づき説明する。   FIG. 6 shows an outline of the contents of the upload DB 7. The upload DB 6 stores and stores performance data uploaded (posted) from the karaoke terminal device 11 or the like to the karaoke server 2, and the contents of the upload DB 7 are added each time the performance data is uploaded. Go. In describing the upload DB 7, first, the uploaded performance data will be described with reference to FIGS.

図7(a)(b)は、アップロードされてくる演奏データ9、9′の例を示しており、データ内容を概要的なフォーマットの形で示している。演奏データ9、9′は「曲ID」、「楽器演奏音」、「演奏者画像」、「楽器コード」、「ユーザID」、及び「独奏フレーズ」といった各種データ及び情報を含んだものになっている。まず、「曲ID」とは、演奏データが何のカラオケ楽曲に対応するものか識別する情報であり、対応するカラオケ楽曲の曲ID(図3のカラオケDB5で使用される曲IDと同じもの)を用いている。   FIGS. 7A and 7B show examples of performance data 9 and 9 'uploaded, and the data contents are shown in a schematic format. The performance data 9, 9 'includes various data and information such as "Song ID", "Musical Instrument Performance Sound", "Performer Image", "Musical Instrument Code", "User ID", and "Solo Phrase". ing. First, the “song ID” is information for identifying what karaoke song the performance data corresponds to, and the song ID of the corresponding karaoke song (the same as the song ID used in the karaoke DB 5 in FIG. 3). Is used.

「楽曲演奏音」とは、曲IDで識別されるカラオケ楽曲の一つの楽器パートに応じたユーザによる楽器演奏の音(楽器演奏音)が収録された楽器演奏データである。また「演奏者画像」とは、「楽曲演奏音」に係る楽器を演奏するユーザの楽器演奏状態が撮像された動画データである。さらに「楽器コード」とは、楽器演奏音に係る楽器パートに応じた楽器コードを示す情報であり、例えば、楽器演奏音が図4に示すカラオケ楽曲のギターパートデータ8aに応じたものである場合(図7(a)に示す演奏データ9の場合)、楽器コードには楽器としてギターを表す「1」という情報が設定され、また、楽器演奏音が図4に示すカラオケ楽曲のドラムパートデータ8cに応じたものである場合(図7(b)に示す演奏データ9′の場合)、楽器コードには楽器としてドラムを表す「3」という情報が設定される。   The “music performance sound” is instrument performance data in which the sound of an instrument performance by the user (instrument performance sound) corresponding to one instrument part of the karaoke music identified by the song ID is recorded. The “performer image” is moving image data in which the musical instrument performance state of the user who plays the musical instrument related to “music performance sound” is captured. Further, the “instrument chord” is information indicating an instrument chord corresponding to the instrument part related to the instrument performance sound. For example, the instrument performance sound corresponds to the guitar part data 8a of the karaoke piece shown in FIG. (In the case of performance data 9 shown in FIG. 7A), information “1” representing a guitar as a musical instrument is set in the instrument code, and the musical instrument performance sound is drum part data 8c of the karaoke music shown in FIG. In the case of the performance data (in the case of the performance data 9 'shown in FIG. 7B), information "3" representing a drum as an instrument is set in the instrument code.

さらにまた「ユーザID」とは、楽器演奏を行った登録ユーザのIDである(演奏データをアップロードするには、事前にユーザ登録をして、自身のユーザ情報を図5のユーザDB6に格納しておく必要がある)。最後に「独奏フレーズ」とは、楽器を演奏するユーザが、カラオケ楽曲を構成する複数のフレーズの中であるフレーズだけは、独奏的に演奏を、他のユーザに聞いてもらいたいことを希望する場合、そのフレーズ数を指定するものであり(独奏フレーズの指定に関する詳細は後述)、楽器演奏音に付帯する情報に相当する。図7(a)に示す演奏データ9の場合、「独奏フレーズ」として30フレーズ目を表す「30」が設定されている。また、図7(b)に示す演奏データ9′の場合、この演奏データ9′のユーザは独奏フレーズを希望していないことから、「なし」が設定されている。   Furthermore, the “user ID” is the ID of the registered user who performed the musical instrument performance (in order to upload performance data, user registration is performed in advance and the user information is stored in the user DB 6 in FIG. 5). Need to be kept). Lastly, “single phrase” means that the user who wants to play the instrument wants other users to listen to the phrase alone among the phrases that make up the karaoke piece. In this case, the number of phrases is specified (details regarding the specification of the solo phrase will be described later), which correspond to information incidental to the musical instrument performance sound. In the case of the performance data 9 shown in FIG. 7A, “30” representing the 30th phrase is set as the “single phrase”. In the case of the performance data 9 'shown in FIG. 7B, the user of the performance data 9' does not want a solo phrase, so "None" is set.

図6に戻り、アップロードDB7の中身について説明すると、アップロードDB7は、「演奏データID」に、「曲ID」、「楽器演奏音」、「演奏者画像」、「楽器コード」、「ユーザID」、「独奏フレーズ」、「アップロード日」、「再生回数」及び「評価」等と云った各項目に応じたデータ又は情報を対応付けて格納したものである。「演奏データID」とは、新たに演奏データがカラオケサーバ2へアップロードされると、その新たな演奏データを識別するために、カラオケサーバ2が発行するIDである。また、「曲ID」、「楽器演奏音」、「演奏者画像」、「楽器コード」、「ユーザID」及び「独奏フレーズ」は上述したように、図7(a)(b)に基づいて説明したものであり、アップロードされてくるデータ及び情報等である。   Returning to FIG. 6, the contents of the upload DB 7 will be described. The upload DB 7 includes “music ID”, “instrument performance sound”, “player image”, “instrument code”, “user ID” in the “performance data ID”. , Data or information corresponding to each item such as “single phrase”, “upload date”, “number of times of reproduction”, “evaluation”, and the like are stored in association with each other. The “performance data ID” is an ID issued by the karaoke server 2 in order to identify the new performance data when performance data is newly uploaded to the karaoke server 2. Further, as described above, “Song ID”, “Musical Instrument Performance Sound”, “Performer Image”, “Musical Instrument Code”, “User ID”, and “Solo Phrase” are based on FIGS. 7A and 7B. This is what has been explained, such as uploaded data and information.

「アップロード日時」とは、新たにアップロードされた演奏データを、カラオケサーバ2がアップロードDB7に格納した日時を記憶したものである。また「再生回数」とは、アップロードDB7に格納されている演奏データの楽器演奏音及び演奏者画像を、カラオケサーバ2がカラオケ端末装置11等へ送信した回数を記憶したものであり、送信ごとに数値が1ずつ増加する。さらに「評価」とは、楽器演奏音を聞いた他のユーザの評価の平均をカラオケサーバ2が算出した数値を記憶したものであり、後述するように評価は10段階でカラオケ端末装置11等からカラオケサーバ2へ送られてくることに応じて、カラオケサーバ2が平均値を随時算出し、その算出値を「評価」に格納する。   “Upload date and time” is the date and time when the karaoke server 2 stores newly uploaded performance data in the upload DB 7. The “number of times of reproduction” is the number of times the karaoke server 2 transmits the musical instrument performance sound and the player image of the performance data stored in the upload DB 7 to the karaoke terminal device 11 and the like. The number increases by one. Further, the “evaluation” is a value stored by the karaoke server 2 that is an average of evaluations of other users who have heard the musical instrument performance sound. As will be described later, the evaluation is performed from the karaoke terminal device 11 or the like in 10 stages. In response to being sent to the karaoke server 2, the karaoke server 2 calculates an average value as needed, and stores the calculated value in “evaluation”.

次に、図8、9の第1、2フローチャートに基づき、カラオケサーバ2のカラオケサービスプログラム4の本発明に係る特有の処理内容の詳細について説明する。まず、図8の第1フローチャートは、カラオケサーバ2へ新たな演奏データがアップロードされた場合についてのカラオケサーバ2(MPU2a)が行う処理手順を示すものである(カラオケ再生表示方法における一部の処理に該当)。   Next, based on the first and second flowcharts of FIGS. 8 and 9, the details of the specific processing contents according to the present invention of the karaoke service program 4 of the karaoke server 2 will be described. First, the first flowchart of FIG. 8 shows a processing procedure performed by the karaoke server 2 (MPU 2a) when new performance data is uploaded to the karaoke server 2 (part of processing in the karaoke playback display method). Fall under).

図8の第1フローチャートでは、まず、カラオケサーバ2のMPU2aが演奏データを受信したか否か(アップロードされたか否か)を判断する(S1)。演奏データを受信していない場合(S1:NO)、演奏データの受信待ちとなる。また、演奏データを受信した場合(S1:YES)、演奏データのチェックを行う(S2)。演奏データのチェックとは、受信した演奏データの中身が、図7(a)(b)に示すデータフォーマットになっているか、「楽器演奏音」に応じた楽器演奏データが含まれているか、「演奏者画像」に応じた動画データが含まれているか、「楽器コード」が設定されているか等を確認することである。   In the first flowchart of FIG. 8, it is first determined whether or not the MPU 2a of the karaoke server 2 has received performance data (whether or not it has been uploaded) (S1). If performance data has not been received (S1: NO), the reception of performance data is awaited. If performance data is received (S1: YES), the performance data is checked (S2). The performance data check means whether the content of the received performance data is in the data format shown in FIGS. 7A and 7B, whether instrument performance data corresponding to “instrument performance sound” is included, It is to confirm whether moving image data corresponding to the “player image” is included, “instrument code” is set, or the like.

チェック結果が問題なくOKの場合(S3:YES)、演奏データIDを発行して、受信した演奏データを図6に示すアップロードDB7に記憶(登録)する(S4)。なお、この際、格納した日時も「アップロード日時」として、発行した演奏データIDに対応づけて登録することになる。それから、アップロードされた演奏データの登録が完了した旨を、演奏データの受信履歴情報に含まれる送信元のアドレス情報を参照して、そのアドレス情報に応じたカラオケ端末装置11等へ送信する(S5)。   If the check result is OK with no problem (S3: YES), a performance data ID is issued and the received performance data is stored (registered) in the upload DB 7 shown in FIG. 6 (S4). At this time, the stored date / time is also registered as the “upload date / time” in association with the issued performance data ID. Then, the fact that the registration of the uploaded performance data has been completed is transmitted to the karaoke terminal device 11 or the like corresponding to the address information with reference to the address information of the transmission source included in the reception history information of the performance data (S5). ).

また、チェック結果に問題がある場合(S3:NO)、受信した演奏データを破棄し(S6)、アップロードされた演奏データの登録が、データ内容の不備により行えなかった旨を、演奏データの送信元のカラオケ端末装置11等へ送信する(S7)。このような第1フローチャートが規定する処理により、図6に示すアップロードDB7の中身は、アップロードされる演奏データにより随時、増強されていくようになっている。   If there is a problem in the check result (S3: NO), the received performance data is discarded (S6), and the performance data is transmitted to the effect that the uploaded performance data could not be registered due to incomplete data. It transmits to the original karaoke terminal device 11 etc. (S7). Through the processing defined by the first flowchart, the contents of the upload DB 7 shown in FIG. 6 are augmented as needed by the uploaded performance data.

また、図9の第2フローチャートでは、まず、カラオケサーバ2が、カラオケ端末装置11等から送信される楽曲指定情報を受信したか否かを判断する(S10)。なお、楽曲指定情報とは、カラオケ端末装置11等でユーザが希望したカラオケ楽曲を指定する情報であり(情報として曲IDを含むことでカラオケ楽曲を指定)、ユーザによるカラオケ楽曲の指定操作に応じて、カラオケ端末装置11等からカラオケサーバ2へ送信される。なお、後述するように、楽曲指定情報には、カラオケ楽曲の指定を行ったユーザを識別するユーザIDに加えて、演奏モードフラグ又は検索条件等が含まれる場合がある。   In the second flowchart of FIG. 9, first, it is determined whether or not the karaoke server 2 has received music designation information transmitted from the karaoke terminal device 11 or the like (S10). Note that the song designation information is information for designating a karaoke song desired by the user on the karaoke terminal device 11 or the like (a karaoke song is designated by including a song ID as information), and according to a karaoke song designation operation by the user. And transmitted from the karaoke terminal device 11 or the like to the karaoke server 2. As will be described later, the music designation information may include a performance mode flag or a search condition in addition to the user ID for identifying the user who designated the karaoke music.

楽曲指定情報を受信していない場合(S10:NO)、楽曲指定情報の受信待ちとなる。また、楽曲指定情報を受信した場合(S10:YES)、受信した楽曲指定情報に含まれる曲IDに合致するカラオケデータ(「カラオケ楽曲」、「カラオケ画像」、「楽曲歌詞」等を含むデータ)を図3のカラオケDB5から検索して抽出する(S11)。それから、受信した楽曲指定情報に演奏モードフラグが含まれるか否かを判断する(S12)。楽曲指定情報に演奏モードデータが含まれない場合(S12:NO)、一般的な通信カラオケの処理となり、S11の段階で抽出したカラオケデータを、楽曲指定情報の受信履歴情報に含まれる送信元のアドレス情報を参照して、そのアドレス情報に応じたカラオケ端末装置11等へ送信する(S20)。   If the music designation information has not been received (S10: NO), the reception of the music designation information is awaited. Further, when the music designation information is received (S10: YES), the karaoke data (data including “karaoke music”, “karaoke image”, “music lyrics”, etc.) that matches the music ID included in the received music designation information. Is extracted from the karaoke DB 5 shown in FIG. 3 (S11). Then, it is determined whether or not a performance mode flag is included in the received music designation information (S12). When performance mode data is not included in the music designation information (S12: NO), it becomes a general communication karaoke process, and the karaoke data extracted in the step S11 is the transmission source included in the reception history information of the music designation information. The address information is referred to and transmitted to the karaoke terminal device 11 or the like corresponding to the address information (S20).

また、受信した楽曲指定情報に演奏モードフラグが含まれる場合(S12:YES)、次に、受信した楽曲指定情報に検索条件が含まれるか否かを判断する(S13)。検索条件が含まれない場合(S13:NO)、楽曲指定情報が指定するカラオケ楽曲を識別する曲IDに対応付けて格納されている演奏データ(演奏データの楽器演奏音)を図6のアップロードDB7から検索する(S15)。また、受信した楽曲指定情報に検索条件が含まれる場合(S13:YES)、曲IDに対応付けて格納されている楽器演奏音の中で、楽曲指定情報に含まれる検索条件に合致するものを検索する(S14)。   If the performance specification flag is included in the received music designation information (S12: YES), it is next determined whether or not a search condition is included in the received music designation information (S13). If the search condition is not included (S13: NO), the performance data (instrument performance sound of performance data) stored in association with the song ID for identifying the karaoke song specified by the song designation information is uploaded to the upload DB 7 in FIG. (S15). If the received music designation information includes a search condition (S13: YES), the musical instrument performance sounds stored in association with the song ID are matched with the search condition included in the music designation information. Search is performed (S14).

なお、本実施形態における検索条件としては後述するように、「再生回数」、「フレンズ」、「評価」、「出身地」、「居住地」、「年齢」がある。「再生回数」とは、ユーザが検索に対して設定する回数以上のものを検索条件とするものであり、例えば、楽曲指定情報に検索条件として「再生回数:10」という情報が含まれていると、図6のアップロードDB7から、楽曲指定情報に含まれる曲IDに対応付けて格納されている楽器演奏音の中で、「再生回数」が10以上のものを検索することになる。   As will be described later, search conditions in the present embodiment include “number of reproductions”, “friends”, “evaluation”, “hometown”, “residence”, and “age”. “Number of playbacks” is a search condition that is greater than or equal to the number of times set by the user for the search. For example, information indicating “number of playbacks: 10” is included in the music designation information as a search condition. Then, from the upload DB 7 in FIG. 6, the musical instrument performance sounds stored in association with the song ID included in the song designation information are searched for those having “reproduction count” of 10 or more.

また、「フレンズ」とは、楽曲指定情報に含まれるユーザIDに応じたユーザのフレンズとなるユーザの演奏データを検索するものである。具体的には、楽曲指定情報に検索条件として「フレンズ」という情報が含まれていると、楽曲指定情報に含まれるユーザIDについて、図5のユーザDB6で「フレンズ」として設定されている他のユーザのユーザIDを特定し、図6のアップロードDB7から、楽曲指定情報に含まれる曲IDに対応付けて格納されている楽器演奏音の中で、その特定したユーザIDに応じたものを検索することになる。さらに、「評価」とは、ユーザが検索に対して設定する評価点以上のものを検索条件とするものであり、例えば、楽曲指定情報に検索条件として「評価:6.5」という情報が含まれていると、図6のアップロードDB7から、楽曲指定情報に含まれる曲IDに対応付けて格納されている楽器演奏音の中で、「評価」が6.5以上のものを検索することになる。   “Friends” is used to search performance data of a user who is a user's friends according to a user ID included in the music designation information. More specifically, if the music designation information includes the information “Friends” as a search condition, the user ID included in the music designation information is set as another “friends” in the user DB 6 of FIG. The user ID of the user is specified, and the musical instrument performance sound stored in association with the song ID included in the song designation information is searched from the upload DB 7 in FIG. 6 according to the specified user ID. It will be. Furthermore, “evaluation” is a search condition that is greater than or equal to the evaluation score set by the user for the search. For example, information “evaluation: 6.5” is included in the music specification information as the search condition. 6, the musical instrument performance sounds stored in association with the song ID included in the song designation information are searched from the upload DB 7 of FIG. 6 for those having an “evaluation” of 6.5 or more. Become.

さらにまた、「出身地」とは、楽曲指定情報に含まれるユーザIDの出身地と同じ、または各ユーザの出身地が全て異なるという条件を設定するものである。例えば、楽曲指定情報に検索条件として「出身地:同じ」という情報が含まれていると、楽曲指定情報に含まれるユーザIDについて、図5のユーザDB6で「出身地」として設定されている地域情報を特定しておき、図6のアップロードDB7から、楽曲指定情報に含まれる曲IDに対応付けて格納されている楽器演奏音に応じたユーザIDについて、図5のユーザDB6で「出身地」として設定されている地域情報を特定し、先に特定しておいた地域情報と一致するユーザIDだけを選び出し、その選び出したユーザIDに応じた楽器演奏音を検索することになる。また、楽曲指定情報に検索条件として「出身地:異なる」という情報が含まれていると、図6のアップロードDB7から、楽曲指定情報に含まれる曲IDに対応付けて格納されている楽器演奏音に応じたユーザIDについて、図5のユーザDB6で「出身地」として設定されている地域情報を特定し、その特定した地域情報が全て異なるように選び出したユーザIDに応じた楽器演奏音を検索することになる。   Furthermore, the “birthplace” is a condition for setting the same place as the place of birth of the user ID included in the music designation information, or the condition that all the places of birth of each user are different. For example, if the music designation information includes the information “Birthplace: Same” as a search condition, the user ID included in the music designation information is set as “Birthplace” in the user DB 6 of FIG. The user ID corresponding to the musical instrument performance sound stored in association with the song ID included in the song designation information from the upload DB 7 in FIG. 6 is identified in the user DB 6 in FIG. The region information set as is specified, only the user ID that matches the previously specified region information is selected, and the musical instrument performance sound corresponding to the selected user ID is searched. Further, if the music designation information includes information “birthplace: different” as a search condition, the musical instrument performance sound stored in association with the song ID included in the music designation information from the upload DB 7 in FIG. 6. For the user ID corresponding to the user ID, the area information set as “Birthplace” in the user DB 6 in FIG. 5 is specified, and the musical instrument performance sound corresponding to the user ID selected so that the specified area information is all different is searched. Will do.

また、「居住地」とは、楽曲指定情報に含まれるユーザIDの居住地と同じ、または各ユーザの居住地が全て異なるという条件を設定するものであり、楽曲指定情報に検索条件として「居住地:同じ」又は「居住地:異なる」という情報が含まれることになる。検索条件が「居住地:同じ」である場合は、上述した検索条件が「出身地:同じ」の場合の処理において、「出身地」を「居住地」として読み替えた処理内容になる。また、検索条件が「居住地:異なる」である場合は、上述した検索条件が「出身地:異なる」の場合の処理において、「出身地」を「居住地」として読み替えた処理内容になる。   “Residence” is a condition in which the user ID included in the music designation information is the same as the residence of the user ID, or a condition that each user's residence is completely different. The information of “location: same” or “residence: different” will be included. In the case where the search condition is “residence: same”, in the processing in the case where the search condition described above is “birthplace: same”, the processing content is obtained by replacing “birthplace” as “residence”. Further, when the search condition is “residence: different”, the processing contents are obtained by replacing “birthplace” as “residence” in the process when the search condition is “birthplace: different”.

さらに、「年齢」とは、楽器演奏音に係る楽器演奏を行ったユーザの年齢を検索条件とするものである。例えば、楽曲指定情報に検索条件として「年齢:20代」という情報が含まれていると、図6のアップロードDB7から、楽曲指定情報に含まれる曲IDに対応付けて格納されている楽器演奏音を先ず特定し、特定した楽器演奏音のユーザIDに応じた「年齢」が20代となるものを特定し、その特定した楽器演奏音を検索するというものである。   Furthermore, “age” is a search condition based on the age of the user who performed the musical instrument performance related to the musical instrument performance sound. For example, if the music designation information includes information “age: 20s” as a search condition, the musical instrument performance sound stored in association with the song ID included in the song designation information from the upload DB 7 in FIG. Are first identified, those whose “age” is in their 20s according to the user ID of the identified musical instrument performance sound are identified, and the identified musical instrument performance sound is retrieved.

上述したS14の段階又はS15の段階における検索を行って、該当する楽器演奏音があるか否かを判断する(S16)。検索に該当する楽器演奏音が無い場合(S16:NO)、この場合は送信できる楽器演奏音を含む演奏データが存在しないので、S11の段階で抽出したカラオケデータを、楽曲指定情報の送信元のカラオケ端末装置11等へ送信する(S20)。一方、該当する楽器演奏音が存在する場合(S16:YES)、次に、該当した楽器演奏音の数は20以上であるか否かを判断する(S17)。該当した楽器演奏音の数が20以上である場合(S17:YES)、カラオケ端末装置11等での再生処理が煩雑になりすぎるのを防止するため、該当した楽器演奏音の中からランダムに20の楽器演奏音を抽出する(S18)。なお、ランダムな抽出の仕方としては周知の技術を適用でき、例えば、検索で該当した20以上の演奏データの夫々に1から順番に番号を付し、乱数表を用いた演算結果による数値に応じた番号の演奏データを順次抽出する方法等が使用可能である。   The search in the above-described step S14 or S15 is performed to determine whether there is a corresponding musical instrument performance sound (S16). If there is no musical instrument performance sound corresponding to the search (S16: NO), in this case, there is no performance data including the musical instrument performance sound that can be transmitted. Therefore, the karaoke data extracted in step S11 is used as the transmission source of the music designation information. It transmits to the karaoke terminal device 11 grade | etc., (S20). On the other hand, if there is a corresponding musical instrument performance sound (S16: YES), it is next determined whether or not the number of the corresponding musical instrument performance sounds is 20 or more (S17). When the number of corresponding musical instrument performance sounds is 20 or more (S17: YES), in order to prevent the reproduction process in the karaoke terminal device 11 or the like from becoming too complicated, 20 random numbers are selected from the corresponding musical instrument performance sounds. The musical instrument performance sound is extracted (S18). In addition, a well-known technique can be applied as a random extraction method. For example, each of the 20 or more performance data corresponding to the search is numbered in order from 1, and according to a numerical value based on a calculation result using a random number table. It is possible to use a method of sequentially extracting the performance data having the same number.

S18の処理でデータ数を20に絞った楽器演奏音については、図6のアップロードDB7において、同一の演奏データIDとなる演奏者画像とペアにして、S11の段階で抽出したカラオケデータと共に、楽曲指定情報の送信元のカラオケ端末装置11等へ送信する(S19)。また、検索で該当した演奏データのデータ数が20を越えない場合(S17:NO)、検索で該当した演奏データ、及びS11の段階で抽出したカラオケデータと共に、楽曲指定情報の送信元のカラオケ端末装置11等へ送信する(S19)。上述した第2フローチャートに係る処理内容をカラオケサーバ2が行うことにより、アップロードDB7に格納された多数の演奏データ(楽器演奏音及び演奏者画像)の中から、カラオケ端末装置11等でユーザが希望するカラオケ楽曲に応じた楽器演奏音及び演奏者画像をユーザが使用するカラオケ端末装置11等へ送り届けることができる。   For musical instrument performance sounds whose number of data is reduced to 20 in the process of S18, in the upload DB 7 of FIG. 6, paired with the player image having the same performance data ID, along with the karaoke data extracted in the stage of S11, It transmits to the karaoke terminal device 11 etc. of the transmission source of designated information (S19). If the number of pieces of performance data corresponding to the search does not exceed 20 (S17: NO), the karaoke terminal that is the transmission source of the music designation information together with the performance data corresponding to the search and the karaoke data extracted in step S11. It transmits to the apparatus 11 etc. (S19). When the karaoke server 2 performs the processing contents according to the second flowchart described above, the user desires the karaoke terminal device 11 or the like from a large number of performance data (instrument performance sound and player image) stored in the upload DB 7. The musical instrument performance sound and the performer image corresponding to the karaoke music to be played can be sent to the karaoke terminal device 11 used by the user.

なお、上記以外の周辺的な処理として、カラオケサービスプログラム4は複数の処理内容を規定している。例えば、図9の第2フローチャートにおけるS19の段階で、カラオケデータと共に、楽器演奏音及び演奏者画像を送信すると、図6に示すアップロードDB7において、送信した楽器演奏音等に対応付けられた「再生回数」の数値に1を加える処理を行うことを、カラオケサービスプログラム4は規定している。また、カラオケサーバ2が、カラオケ端末装置11等から、演奏データIDに対応付けて、評価となる点数を受信すると、その演奏データIDに対応付けられた「評価」の点数(平均点)を、受信した点数を加えて新たな平均点を算出することを、カラオケサービスプログラム4は規定している。   As peripheral processing other than the above, the karaoke service program 4 defines a plurality of processing contents. For example, when the musical instrument performance sound and the player image are transmitted together with the karaoke data in the step S19 in the second flowchart of FIG. 9, in the upload DB 7 shown in FIG. 6, the “reproduction” associated with the transmitted musical instrument performance sound or the like is transmitted. The karaoke service program 4 stipulates that a process of adding 1 to the number of times is performed. Further, when the karaoke server 2 receives a score to be evaluated in association with the performance data ID from the karaoke terminal device 11 or the like, the score (average score) of “evaluation” associated with the performance data ID is The karaoke service program 4 stipulates that a new average score is calculated by adding the received score.

次に、カラオケ端末装置11等について説明する。カラオケ端末装置11、21、31等は、同等の構成であるため、代表してカラオケ端末装置11に基づき、その構成及び処理内容等を説明する。   Next, the karaoke terminal device 11 will be described. Since the karaoke terminal devices 11, 21, 31 and the like have the same configuration, the configuration, processing contents, and the like will be described based on the karaoke terminal device 11 as a representative.

図10は、カラオケ端末装置11の主要な内部構成を示すブロック図である。カラオケ端末装置11は、一種のコンピュータに相当する仕様になっており、後述する基本プログラム13及びカラオケプログラム14の規定内容に基づき全体的な制御及び各種処理を行うCPU11aに、各種デバイス等を内部接続線11kで接続している。各種デバイス等には、通信モジュール11b、RAM11c、ROM11d、音声入力デバイス11e、音声出力デバイス11f、映像出力デバイス11g、撮像デバイス11h、操作部19、赤外線の受光モジュール11i、記憶部(HDD)11j等がある。   FIG. 10 is a block diagram illustrating a main internal configuration of the karaoke terminal apparatus 11. The karaoke terminal device 11 has a specification corresponding to a kind of computer, and various devices and the like are internally connected to a CPU 11a that performs overall control and various processes based on the contents of a basic program 13 and a karaoke program 14 to be described later. They are connected by a line 11k. The various devices include a communication module 11b, RAM 11c, ROM 11d, audio input device 11e, audio output device 11f, video output device 11g, imaging device 11h, operation unit 19, infrared light receiving module 11i, storage unit (HDD) 11j, and the like. There is.

通信モジュール11bは、ネットワークNWとの接続デバイスに相当する通信手段であり、所要の通信規格に応じたものである(例えばLANデバイス)。通信モジュール11bは、所要の通信機器(図示は省略。例えばルータ等が該当)を介してネットワークNWと接続されており、CPU11aの制御により、カラオケサーバ2へ楽器演奏を行った演奏データ、ユーザがカラオケ楽曲を指定する旨の楽曲指定情報等を送信すると共に、カラオケサーバ2から送信されてくる各種データ等(カラオケデータ、楽器演奏音、演奏者画像等)を受信する処理を行う。   The communication module 11b is a communication unit corresponding to a device connected to the network NW, and conforms to a required communication standard (for example, a LAN device). The communication module 11b is connected to the network NW via a required communication device (not shown; for example, a router or the like), and performance data obtained by performing musical instrument performance on the karaoke server 2 under the control of the CPU 11a. In addition to transmitting music designation information for designating karaoke music, processing for receiving various data (karaoke data, musical instrument performance sound, player image, etc.) transmitted from the karaoke server 2 is performed.

RAM11cは、CPU11aの処理に伴う内容、ファイル等を一時的に記憶するものであり、本実施形態では画面データテーブル15に含まれる各種画面又はカラオケ画像等の表示処理に係るグラフィックメモリも含んだ総合的な一時記憶用メモリとしての機能を有する。ROM11dは、CPU11aの基本的な処理内容を規定したプログラム等を記憶すると共に、自己を識別するための端末ID等も記憶する。   The RAM 11c temporarily stores contents, files, and the like accompanying the processing of the CPU 11a. In this embodiment, the RAM 11c includes a graphic memory related to display processing of various screens or karaoke images included in the screen data table 15. It functions as a temporary memory for temporary storage. The ROM 11d stores a program that defines the basic processing contents of the CPU 11a, and also stores a terminal ID for identifying itself.

音声入力デバイス11eは、ユーザの歌唱音及び楽器の演奏音等を集音するマイク16が接続されるものである。なお、カラオケ楽曲をユーザが歌唱する場合、音声入力デバイス11eは、マイク16で集音された音声をスピーカ17から出力できるように、所要の音声入力処理等を行う。また、楽器の演奏音を収録する場合、音声入力デバイス11eは、上述した音声入力処理等に加えて、マイク16で集音した楽器演奏音を、所定の音声ファイルとしてRAM11cに記憶させるように、RAM11cへ楽曲演奏音を送る制御処理等も行う。音声出力デバイス11fは、ユーザの歌唱音及びカラオケ楽曲の再生音等の出力を行うスピーカ17が接続されるものであり、所要の増幅処理等を行う。   The voice input device 11e is connected to a microphone 16 that collects a user's singing sound and musical instrument performance sound. In addition, when a user sings karaoke music, the voice input device 11e performs a required voice input process so that the voice collected by the microphone 16 can be output from the speaker 17. When recording the performance sound of the musical instrument, the voice input device 11e stores the musical instrument performance sound collected by the microphone 16 in the RAM 11c as a predetermined voice file in addition to the voice input process described above. The control process etc. which send a music performance sound to RAM11c are also performed. The audio output device 11f is connected to a speaker 17 that outputs a user's singing sound and a reproduction sound of karaoke music, and performs a required amplification process.

映像出力デバイス11gは、表示パネル18a(表示部に相当)を有する表示装置18が接続されるものであり、表示装置18の表示パネル18aで、後述する各種画面及びカラオケ画像等を表示できるように、表示データの出力処理等を行う。撮像デバイス11hは、CCD又はCMOS等の撮像素子を含んだものであり、この撮像素子により静止画又は動画の画像をデジタルデータとして撮像できるようになっている。操作部19は、カラオケ端末装置11の本体に設けられたものであり、操作部19で受け付けたユーザの操作指示等をCPU11aへ伝える。なお、操作部19には電源オン/オフスイッチ、音量調整スイッチ、音程調整スイッチ、上下左右キー、決定キー等が設けられている。受光モジュール11iは、リモコン装置12から発せられる赤外光を受光し、その赤外光に含まれるユーザの操作指示(リモコン装置12で受け付けたユーザの操作指示)をCPU11aへ伝える。なお、リモコン装置12にも、操作部19と同様に上下左右キー、決定キー等が設けられている。   The video output device 11g is connected to a display device 18 having a display panel 18a (corresponding to a display unit), and can display various screens, karaoke images, and the like described later on the display panel 18a of the display device 18. Execute display data output processing. The image pickup device 11h includes an image pickup device such as a CCD or a CMOS, and a still image or a moving image can be picked up as digital data by the image pickup device. The operation unit 19 is provided in the main body of the karaoke terminal device 11, and transmits a user operation instruction received by the operation unit 19 to the CPU 11a. The operation unit 19 is provided with a power on / off switch, a volume adjustment switch, a pitch adjustment switch, up / down / left / right keys, an enter key, and the like. The light receiving module 11i receives infrared light emitted from the remote control device 12, and transmits a user operation instruction (user operation instruction received by the remote control device 12) included in the infrared light to the CPU 11a. The remote control device 12 is also provided with up / down / left / right keys, an enter key, and the like, similar to the operation unit 19.

記憶部11j(記憶手段に相当)は、カラオケ端末装置11がカラオケに関する各種機能を発揮するために必要なプログラム及び各種テーブル等を記憶するものであり、具体的には、基本プログラム13、カラオケプログラム14、画面テーブル15等を記憶する。   The storage unit 11j (corresponding to storage means) stores programs and various tables necessary for the karaoke terminal device 11 to perform various functions relating to karaoke. Specifically, the basic program 13, the karaoke program 14. The screen table 15 and the like are stored.

基本プログラム13は、コンピュータのオペレーティングシステムに相当する処理及びカラオケ端末装置11の入出力、表示、音声出力、通信等についての各種基本的な処理を規定したものであり、この規定内容に基づきCPU11aが基本的な各種処理を行う。   The basic program 13 defines various basic processes such as processing corresponding to the operating system of the computer and input / output, display, audio output, communication, etc. of the karaoke terminal device 11. Perform various basic processes.

カラオケプログラム14は、カラオケ端末装置11でカラオケ楽曲をユーザが楽しめるようにするための基本的な処理(従来から存在する処理)に加えて、本発明の特徴となる各種処理を規定したものである。本発明の特徴となる処理としては主に二種類あり、ユーザによる楽器演奏音を収録して、演奏データとしてカラオケサーバへアップロードする処理と、カラオケサーバ2からカラオケデータと共に、楽器演奏音及び演奏者画像を受信した場合の再生・表示処理であり、これらの各処理の詳細については後述する。なお、このようなカラオケプログラム14の規定する処理内容により、CPU11aが、カラオケ用の各種手段として機能することになる。   The karaoke program 14 defines various processes that characterize the present invention in addition to basic processes (processes that exist in the past) for allowing the user to enjoy karaoke music on the karaoke terminal device 11. . There are mainly two types of processing that are characteristic of the present invention, recording musical instrument performance sounds by a user, uploading the performance data to the karaoke server, and karaoke data from the karaoke server 2 together with musical instrument performance sounds and performers. This is reproduction / display processing when an image is received, and details of each processing will be described later. The CPU 11a functions as various means for karaoke depending on the processing contents defined by the karaoke program 14.

また、画面テーブル15は、カラオケサービスの進行に伴いユーザが適宜行う操作等に応じて、表示装置18の表示パネル18aに表示される画面内容に応じた複数の画面データを格納したものであり、CPU11aの制御により、所要の画面データを読み出すことで、図11〜15等に示す各種画面が表示される。以下、画面テーブル15が格納する複数の画面データによる画面の表示例について説明する。   Further, the screen table 15 stores a plurality of screen data corresponding to the screen contents displayed on the display panel 18a of the display device 18 in accordance with an operation or the like appropriately performed by the user as the karaoke service progresses. Various screens shown in FIGS. 11 to 15 and the like are displayed by reading necessary screen data under the control of the CPU 11a. Hereinafter, a display example of a screen using a plurality of screen data stored in the screen table 15 will be described.

図11(a)は、初期選択メニュー画面50を示している。この初期選択メニュー画面50は、ユーザがカラオケ端末装置11で演奏収録を行うか、又は通常のカラオケ歌唱を行うかを選択する段階で表示されるものである。そのため、初期選択メニュー画面50は、装置本体の操作部19又はリモコン装置12の上下キー及び決定キーの操作により選択可能な演奏収録ボタン50a、及びカラオケ歌唱ボタン50bを有しており、これらのボタンのいずれかがユーザ操作により選択されると、ボタンが選択された旨がCPU11aに伝えられて、選択されたボタン内容に応じた処理が進行するようになっている。   FIG. 11A shows an initial selection menu screen 50. The initial selection menu screen 50 is displayed when the user selects whether to perform performance recording with the karaoke terminal device 11 or to perform normal karaoke singing. Therefore, the initial selection menu screen 50 has a performance recording button 50a and a karaoke singing button 50b that can be selected by operating the up and down keys and the enter key of the operation unit 19 of the apparatus main body or the remote control device 12, and these buttons. Is selected by a user operation, the fact that the button has been selected is transmitted to the CPU 11a, and processing corresponding to the selected button content proceeds.

初期選択メニュー画面50において、演奏収録ボタン50aが選択されると、次にはカラオケ楽曲の選曲画面(従来のカラオケ楽曲の選択画面と同様なもの)が表示され、ユーザは演奏用のカラオケ楽曲の選曲操作を行うことになる。この場合、カラオケ端末装置11は、ユーザの選曲操作を受けると、選曲に係るカラオケ楽曲を識別する曲IDを含む楽曲指定情報をカラオケサーバ2へ送信し、カラオケサーバ2は、楽曲指定情報を受信すると、その楽曲指定情報に含まれる曲IDに応じたカラオケデータをカラオケDB5より抽出してカラオケ端末装置11へ送信することになる(カラオケ端末装置11は、受信したカラオケデータをRAM11cに記憶し、ユーザのスタート操作があると読み出す)。   When the performance recording button 50a is selected on the initial selection menu screen 50, a karaoke song selection screen (similar to the conventional karaoke song selection screen) is displayed next, and the user can select a karaoke song for performance. The music selection operation will be performed. In this case, when the karaoke terminal device 11 receives the user's music selection operation, the karaoke server 2 transmits music specification information including a music ID for identifying the karaoke music related to the music selection to the karaoke server 2, and the karaoke server 2 receives the music specification information. Then, karaoke data corresponding to the song ID included in the song designation information is extracted from the karaoke DB 5 and transmitted to the karaoke terminal device 11 (the karaoke terminal device 11 stores the received karaoke data in the RAM 11c, Read when there is a user start operation).

図11(b)は楽器パート選択画面51が表示された状態を示している。この楽器パート選択画面51は、初期選択メニュー画面50で演奏収録ボタン50aが選択されて、その後に表示されるカラオケ楽曲の選曲画面でカラオケ楽曲の選曲が完了してから表示されるものである。楽器パート選択画面51は上段に、選択された演奏用のカラオケ楽曲の曲名が配置される曲名配置スペース51aを設けており、その曲名配置スペース51aには、楽曲選択に応じた曲名のテキストが配置されるようになっている(図11(b)では、「9月のさよなら」という曲名が配置されている)。また、楽器パート選択画面51は、曲名配置スペース51aの下方に、移動可能なカーソル51cを備えた演奏楽器表51bを設けており、この演奏楽器表51bの各欄には、受信したカラオケデータに含まれるカラオケ楽曲のプロパティ情報(図4参照)を構成する楽器パート及び楽器名が順次配置される。   FIG. 11B shows a state in which the instrument part selection screen 51 is displayed. The instrument part selection screen 51 is displayed after the performance recording button 50a is selected on the initial selection menu screen 50 and the selection of karaoke music is completed on the karaoke music selection screen displayed thereafter. The instrument part selection screen 51 is provided with a song title arrangement space 51a in which the song title of the selected karaoke song for performance is arranged in the upper stage, and the song title text corresponding to the song selection is arranged in the song title arrangement space 51a. (In FIG. 11B, the song name "Goodbye of September" is arranged). The musical instrument part selection screen 51 is provided with a musical instrument table 51b having a movable cursor 51c below the song title arrangement space 51a. Each column of the musical instrument table 51b contains received karaoke data. The instrument parts and instrument names constituting the property information (see FIG. 4) of the included karaoke music are sequentially arranged.

図11(b)に示す例では、演奏楽器表51bの各欄に、図4に示す楽器パートのプロパティ情報が配置された状態を示している。配置されたプロパティ情報の各楽器コード及び楽器名は、カーソル51cを装置本体の操作部19又はリモコン装置12の上下キーを操作することで選択対象とすることができ、選択対象となった状態で操作部19又はリモコン装置12の決定キーが操作されると、カーソル51cの位置する楽器名の楽器がユーザにより選択されたことになり、その旨がCPU11aへ伝えられる。   The example shown in FIG. 11B shows a state in which the property information of the instrument part shown in FIG. 4 is arranged in each column of the performance instrument table 51b. Each instrument code and instrument name of the arranged property information can be selected by operating the cursor 51c by operating the operation unit 19 of the apparatus main body or the up / down key of the remote control device 12, and in the state of being selected. When the enter key of the operation unit 19 or the remote control device 12 is operated, the musical instrument having the name of the musical instrument where the cursor 51c is located is selected by the user, and this is notified to the CPU 11a.

図12(a)は、独奏フレーズ指定画面52を示している。独奏フレーズ指定画面52は、選択したカラオケ楽曲を演奏する際に、ユーザが独創的に演奏したいフレーズを指定するものであり、上述した図11(b)の楽器パート選択画面51で楽器選択が行われた後に表示される画面である。独奏フレーズ指定画面52は、楽器パート選択画面51と同様に、曲名配置スペース52aを上段に設けており、その曲名配置スペース52aに、曲名のテキストが配置される。   FIG. 12A shows a solo phrase designation screen 52. The solo phrase designation screen 52 is used for designating a phrase that the user wants to perform creatively when playing the selected karaoke piece. The instrument selection is performed on the instrument part selection screen 51 of FIG. 11B described above. This is a screen that is displayed after a break. Similar to the instrument part selection screen 51, the solo phrase designation screen 52 is provided with a song title arrangement space 52a in the upper stage, and the song title text is arranged in the song title arrangement space 52a.

また、独奏フレーズ指定画面52は、曲名配置スペース52aの下方に、独奏フレーズ数表示欄52b、数値変更ボタン52c、決定ボタン52d、なしボタン52eを有する。独奏フレーズ数表示欄52bは、選択されたカラオケ楽曲を構成する複数のフレーズの中から、ユーザが独奏を希望するフレーズ数を指定するものであり、デフォルトでは「1」が表示されるようになっている。独奏フレーズ数表示欄52bの数値は、隣の数値変更ボタン52cの上又は下矢印を操作部19又はリモコン装置12の上下左右キー及び決定キーの操作により変更でき、上矢印を選択するごとに数値は増加し、下矢印を選択するごとに数値は減少するようになっている。   The solo phrase designation screen 52 has a solo phrase number display field 52b, a numerical value change button 52c, a decision button 52d, and a none button 52e below the song title arrangement space 52a. The solo phrase number display field 52b is used for designating the number of phrases that the user desires to solo from among a plurality of phrases constituting the selected karaoke piece. By default, “1” is displayed. ing. The numerical value in the solo phrase number display field 52b can be changed by operating the up / down / right / left keys and the enter key of the operation unit 19 or the remote control device 12 with the up / down arrow of the adjacent value change button 52c. The value increases, and the value decreases each time the down arrow is selected.

決定ボタン52dは、上述した独奏フレーズ数表示欄52bで示される数値を、ユーザが独奏フレーズとして希望する場合に選択されるボタンであり、操作部19又はリモコン装置12での操作により選択されると、独奏フレーズ数表示欄52bで示される数値が独奏指定情報としてCPU11aへ伝えられ、CPU11aは、その伝えられた独奏指定情報を一時的にRAM11cに記憶する処理を行う。また、なしボタン52eは、ユーザが独奏フレーズを希望しない場合に選択されるボタンであり、操作部19又はリモコン装置12での操作により選択されると、なしボタン52eが選択された旨がCPU11aへ伝えらる。   The decision button 52d is a button that is selected when the user desires the numerical value shown in the above-described solo phrase number display field 52b as a solo phrase, and is selected by an operation on the operation unit 19 or the remote control device 12. The numerical value indicated in the solo phrase number display field 52b is transmitted to the CPU 11a as solo specification information, and the CPU 11a performs processing for temporarily storing the transmitted solo specification information in the RAM 11c. The none button 52e is a button that is selected when the user does not desire a solo phrase. When the user selects the none button 52e by operating the operation unit 19 or the remote control device 12, the CPU 11a indicates that the none button 52e has been selected. I tell you.

図12(b)は、スタート画面53が表示された状態を示している。スタート画面53は、上述した独奏フレーズ指定画面52で決定ボタン52d又はなしボタン52eのいずれかが操作されると、次に表示される画面である。スタート画面53も、楽器パート選択画面51等と同様に、曲名配置スペース53aを上段に設けている。その曲名配置スペース53aの下方には、スタートボタン53bが設けられており、操作部19又はリモコン装置12での操作により選択されると、RAM11cに記憶されていたカラオケデータが読み出され、カラオケ楽曲の再生と、カラオケ画像の表示が開始される。   FIG. 12B shows a state in which the start screen 53 is displayed. The start screen 53 is a screen that is displayed next when either the determination button 52d or the none button 52e is operated on the solo phrase designation screen 52 described above. Similarly to the instrument part selection screen 51 and the like, the start screen 53 also has a song title arrangement space 53a in the upper stage. A start button 53b is provided below the song title arrangement space 53a. When the start button 53b is selected by the operation of the operation unit 19 or the remote control device 12, the karaoke data stored in the RAM 11c is read out, and the karaoke song Playback and karaoke image display are started.

なお、カラオケ楽曲の再生の際、CPU11aは、図11(b)の楽器パート選択画面51で選択された楽器パートをミュートしてカラオケ楽曲を再生するように制御する。これにより、楽器を演奏音の収録を行うユーザは、カラオケ楽曲に含まれる演奏しようとする楽器と同じ楽器の楽器パート音に妨げられることなく、楽器を演奏することが可能となる。また、カラオケ楽曲の再生処理を開始すると、カラオケ端末装置11は、マイク16でユーザの楽器演奏音を集音して、集音した楽器演奏音を随時RAM11cにデジタルデータとして記憶していくと共に、撮像デバイス11hで動画の撮像を開始し、これによりユーザが演奏する姿の画像を動画のデジタルデータとしてRAM11cに記憶していく。   When reproducing the karaoke music, the CPU 11a controls to play the karaoke music by muting the instrument part selected on the instrument part selection screen 51 in FIG. Thereby, the user who records the performance sound of the musical instrument can play the musical instrument without being disturbed by the musical instrument part sound of the same musical instrument as the musical instrument to be performed included in the karaoke music. When the karaoke music piece reproduction process is started, the karaoke terminal apparatus 11 collects the musical instrument performance sound of the user with the microphone 16 and stores the collected musical instrument performance sound as digital data in the RAM 11c as needed. Imaging of a moving image is started by the imaging device 11h, and an image of the figure performed by the user is thereby stored in the RAM 11c as moving image digital data.

図13(a)は、収録確認画面54が表示された状態を示している。収録確認画面54は、楽器演奏を終えたユーザに、演奏データのアップロード(投稿)を行って良いかを確認するための画面であり、アップロードボタン54a及びやり直しボタン54bを有している。アップロードボタン54aが、操作部19又はリモコン装置12での操作により選択されると、カラオケ端末装置11は、RAM11cに記憶された楽器演奏音及び演奏者画像を演奏データとして、図7(a)(b)に示すようなフォーマットでカラオケサーバ11へ送信する。また、やり直しボタンが選択されると、カラオケ端末装置11は、図12(b)のスタート画面53を表示する段階へ戻り、再度の演奏収録を行えるようにしている。   FIG. 13A shows a state in which the recording confirmation screen 54 is displayed. The recording confirmation screen 54 is a screen for confirming whether or not performance data can be uploaded (posted) to the user who has finished playing the musical instrument, and includes an upload button 54a and a redo button 54b. When the upload button 54a is selected by an operation on the operation unit 19 or the remote control device 12, the karaoke terminal device 11 uses the musical instrument performance sound and the player image stored in the RAM 11c as performance data, as shown in FIG. It transmits to the karaoke server 11 in a format as shown in b). When the redo button is selected, the karaoke terminal apparatus 11 returns to the stage of displaying the start screen 53 in FIG. 12B so that the performance recording can be performed again.

また、図13(b)は、モード選択画面60を示している。このモード選択画面60は、図11(a)の初期選択メニュー画面50でカラオケ歌唱ボタン50bが選択されてから、表示される画面である。モード選択画面60は、通常モードボタン60a及び演奏モードボタン60bを有しており、通常モードとは、従来と同様に、カラオケデータを再生してユーザが歌唱を行うモードである。また、演奏モードとは、いずれかの楽器パートをミュートしながらカラオケデータを再生すると共に、そのミュートされた楽器パートについてはアップロードされている楽器演奏音を割り当てて再生を行うモードである。   FIG. 13B shows a mode selection screen 60. This mode selection screen 60 is a screen that is displayed after the karaoke singing button 50b is selected on the initial selection menu screen 50 of FIG. The mode selection screen 60 has a normal mode button 60a and a performance mode button 60b, and the normal mode is a mode in which the user sings by reproducing karaoke data as in the conventional case. The performance mode is a mode in which karaoke data is reproduced while muting any instrument part, and an uploaded instrument performance sound is assigned to the muted instrument part for reproduction.

そのため、通常モードボタン60aが選択されると、カラオケ楽曲の選曲画面(従来のカラオケ楽曲の選択画面と同様なもの)が表示されて、ユーザによるカラオケ楽曲の選曲操作に伴って、カラオケ端末装置11は選曲に係るカラオケ楽曲を指定する楽曲指定情報をカラオケサーバ2へ送信し、カラオケサーバ2は、楽曲指定情報を受信すると、その楽曲指定情報に応じたカラオケデータをカラオケDB5より抽出してカラオケ端末装置11へ送信し、それからカラオケ端末装置11でカラオケデータの再生が開始される。一方、演奏モードボタン60bが選択されると、次に図14(a)の検索メニュー画面61が表示される。   Therefore, when the normal mode button 60a is selected, a karaoke song selection screen (similar to the conventional karaoke song selection screen) is displayed, and the karaoke terminal device 11 is accompanied by a user's karaoke song selection operation. Transmits to the karaoke server 2 music designation information for designating the karaoke music related to the music selection. When the karaoke server 2 receives the music designation information, the karaoke terminal extracts the karaoke data corresponding to the music designation information from the karaoke DB 5. The data is transmitted to the device 11 and then the karaoke terminal device 11 starts to reproduce the karaoke data. On the other hand, when the performance mode button 60b is selected, the search menu screen 61 shown in FIG.

図14(a)は、検索メニュー画面61が表示された状態を示している。この検索メニュー画面61は、演奏モードにおいて、アップロードされた演奏データの楽器演奏音の検索の仕方をユーザが選択するための画面であり、ランダム検索ボタン61a及び条件検索ボタン61bを有している。ランダム検索ボタン61aは、ユーザが指定するカラオケ楽曲に対してアップロードされている楽器演奏音をランダムに検索することを、ユーザが希望する場合に選択されるものである。一方、条件検索ボタン61bは、ユーザが指定するカラオケ楽曲に対してアップロードされている中から、更に条件に応じた楽器演奏音の検索を行う場合に選択されるものである。   FIG. 14A shows a state where the search menu screen 61 is displayed. The search menu screen 61 is a screen for the user to select a method for searching for musical instrument performance sounds of uploaded performance data in the performance mode, and includes a random search button 61a and a condition search button 61b. The random search button 61a is selected when the user desires to randomly search for musical instrument performance sounds uploaded for karaoke music pieces designated by the user. On the other hand, the condition search button 61b is selected when searching for a musical instrument performance sound corresponding to a condition from among uploaded karaoke pieces specified by the user.

ランダム検索ボタン61aが選択されると、次にカラオケ楽曲の選曲画面(従来のカラオケ楽曲の選択画面と同様なもの)が表示され、ユーザは歌唱用のカラオケ楽曲の選曲操作を行うことになる。カラオケ端末装置11は、ユーザの選曲操作を受けると、選曲に係るカラオケ楽曲を識別する曲ID、演奏モードフラグ、及びカラオケ楽曲の歌唱を行うユーザのユーザID等を含む楽曲指定情報をカラオケサーバ2へ送信することになる。このような楽曲指定情報をカラオケサーバ2は受信すると、図9の第2フローチャートに示す処理手順により、カラオケサーバ2はカラオケデータ及び検索で該当した楽器演奏音及び演奏者画像をカラオケ端末装置11へ送信し、カラオケ端末装置11は、受信したカラオケデータ、楽器演奏音、演奏者画像をRAM11cに記憶し、ユーザのスタート操作があると読み出すことになる(図15(a)のモード選択スタート画面63を参照)。   When the random search button 61a is selected, a karaoke song selection screen (similar to the conventional karaoke song selection screen) is displayed, and the user performs a song selection operation for singing karaoke songs. When the karaoke terminal device 11 receives the user's music selection operation, the karaoke server 2 receives the music designation information including the music ID for identifying the karaoke music related to the music selection, the performance mode flag, and the user ID of the user who sings the karaoke music. Will be sent to. When the karaoke server 2 receives such music designation information, the karaoke server 2 sends the karaoke data and the musical instrument performance sound and player image corresponding to the search to the karaoke terminal apparatus 11 according to the processing procedure shown in the second flowchart of FIG. The karaoke terminal device 11 stores the received karaoke data, musical instrument performance sound, and performer image in the RAM 11c, and reads them when the user performs a start operation (the mode selection start screen 63 in FIG. 15A). See).

また、条件検索ボタン61bが選択されると、次に、図14(b)の検索条件選択画面62が表示される。この検索条件選択画面は、6種類の検索条件をユーザが選択するものであり、検索条件として選択可能な項目として、再生回数62a、フレンズ62b、評価62c、出身地62d、居住地62e、年齢62fが存在し、これらの検索条件の中のいずれか一つを、上下キーsの操作によるカーソル62fの移動及び決定キーの操作により選択できるようになっている。再生回数62aが選択されると、次に、検索条件に用いる再生回数の数値を設定する画面に切り替わり(図示せず)、その画面で数値を設定すると、以降は、上述したランダム検索ボタン61aが選択された場合と同様に、カラオケ楽曲の選曲画面が表示され、ユーザの選曲操作に応じて楽曲指定情報をカラオケサーバ2へ送信することになる。ただし、この場合、楽曲指定情報には曲ID、演奏モードフラグ、及びユーザID等に加えて、検索条件として「再生回数:設定した数値(例えば、10)」という情報が含まれる。   When the condition search button 61b is selected, the search condition selection screen 62 shown in FIG. 14B is then displayed. In this search condition selection screen, the user selects six types of search conditions. The items that can be selected as the search conditions include the number of reproductions 62a, friends 62b, evaluation 62c, birthplace 62d, residence 62e, and age 62f. Any one of these search conditions can be selected by moving the cursor 62f by operating the up / down key s and by operating the enter key. When the number of times of reproduction 62a is selected, the screen is then switched to a screen for setting the number of times of reproduction used for the search condition (not shown). As in the case of the selection, the karaoke music selection screen is displayed, and the music designation information is transmitted to the karaoke server 2 in accordance with the user's music selection operation. However, in this case, in addition to the song ID, performance mode flag, user ID, and the like, the music designation information includes information such as “number of reproductions: set numerical value (for example, 10)” as a search condition.

また、検索条件としてフレンズ62bが選択されると、カラオケ楽曲の選曲画面が表示され(図示せず)、ユーザの選曲操作に応じて楽曲指定情報をカラオケサーバ2へ送信することになる。この場合、楽曲指定情報には曲ID、演奏モードフラグ、及びユーザID等に加えて、検索条件として「フレンズ」という情報が含まれる。さらに、検索条件として、評価62cが選択されると、次に、検索条件に用いる点数を設定する画面に切り替わり(図示せず)、その画面で点数を設定すると、以降は、再生回数62aの場合と同様に、カラオケ楽曲の選曲画面が表示され、ユーザの選曲操作に応じて楽曲指定情報をカラオケサーバ2へ送信することになる。この場合、楽曲指定情報には曲ID、演奏モードフラグ、及びユーザID等に加えて、検索条件として「評価:設定した点数(例えば、6.5)」という情報が含まれる。   When friends 62b is selected as a search condition, a karaoke song selection screen is displayed (not shown), and song designation information is transmitted to the karaoke server 2 in accordance with the user's song selection operation. In this case, the music designation information includes information “friends” as a search condition in addition to the music ID, performance mode flag, user ID, and the like. Further, when the evaluation 62c is selected as a search condition, the screen is switched to a screen for setting the score used for the search condition (not shown), and the score is set on the screen. Similarly, the karaoke music selection screen is displayed, and the music designation information is transmitted to the karaoke server 2 in accordance with the user's music selection operation. In this case, the music designation information includes information such as “evaluation: set score (for example, 6.5)” as a search condition, in addition to the music ID, performance mode flag, user ID, and the like.

さらにまた、検索条件として出身地62dが選択されると、次に、検索条件に用いる出身地として「ユーザと同じ」又は「全て異なる」のいずれかを選択する画面に切り替わり(図示せず)、その画面でいずれかを選択すると、以降は、上述した再生回数62aの場合と同様に、カラオケ楽曲の選曲画面が表示され、ユーザの選曲操作に応じて楽曲指定情報がカラオケサーバ2へ送信されることになる。この場合、楽曲指定情報には曲ID、演奏モードフラグ、及びユーザID等に加えて、ユーザの選択内容に応じて「出身地:同じ」又は「出身地:異なる」という検索条件の情報が含まれる。なお、検索条件として居住地62eが選択された場合も、上述した出身地62dの場合と同様な流れとなり、楽曲指定情報には「居住地:同じ」又は「居住地:異なる」という検索条件の情報が含まれる。   Furthermore, when the birthplace 62d is selected as the search condition, the screen is changed to a screen for selecting either “same as the user” or “all different” as the birthplace used for the search condition (not shown). When any one is selected on the screen, the karaoke music selection screen is displayed and the music designation information is transmitted to the karaoke server 2 in accordance with the user's music selection operation. It will be. In this case, in addition to the song ID, performance mode flag, user ID, and the like, the music designation information includes information on a search condition of “Birthplace: Same” or “Birthplace: Different” according to the user's selection contents. It is. Note that when the residence 62e is selected as the search condition, the flow is the same as in the case of the birthplace 62d described above, and the music designation information includes the search condition “residence: same” or “residence: different”. Contains information.

そして、検索条件として、年齢62fが選択されると、次に、検索条件に用いる年齢の数値を設定する画面に切り替わり(図示せず)、その画面で数値を設定すると、以降は、上述した再生回数62aの場合と同様に、カラオケ楽曲の選曲画面が表示され、ユーザの選曲操作に応じて楽曲指定情報をカラオケサーバ2へ送信することになる。この場合、楽曲指定情報には曲ID、演奏モードフラグ、及びユーザID等に加えて、検索条件として「年齢:設定した数値(例えば、20代、又は20〜30代)」という情報が含まれる。   Then, when age 62f is selected as a search condition, the screen next switches to a screen for setting a numerical value of age used for the search condition (not shown). As in the case of the number of times 62a, a karaoke song selection screen is displayed, and song designation information is transmitted to the karaoke server 2 in accordance with the user's song selection operation. In this case, in addition to the song ID, performance mode flag, user ID, and the like, the music designation information includes information such as “age: set numerical value (for example, 20s or 20-30s)” as a search condition. .

なお、上述した検索条件の設定を経て、楽曲指定情報がカラオケサーバ2へ送信されると、ランダム検索ボタン61aが選択された場合と同様に、図9の第2フローチャートに示す処理手順により、カラオケサーバ2はカラオケデータ及び検索で該当した楽器演奏音、及び、その楽器演奏音に応じた演奏者画像(該当した楽器演奏音と同じ演奏データIDの演奏者画像)をカラオケ端末装置11へ送信し、カラオケ端末装置11は、受信したカラオケデータ、楽器演奏音、演奏者画像をRAM11cに記憶し、ユーザのスタート操作があると読み出す(図15(a)のモード選択スタート画面63を参照)。   In addition, when the music designation information is transmitted to the karaoke server 2 through the setting of the search conditions described above, the karaoke is performed according to the processing procedure shown in the second flowchart of FIG. 9 in the same manner as when the random search button 61a is selected. The server 2 transmits to the karaoke terminal device 11 the karaoke data and the musical instrument performance sound corresponding to the search and the player image corresponding to the musical instrument performance sound (performer image having the same performance data ID as the corresponding musical instrument performance sound). The karaoke terminal device 11 stores the received karaoke data, musical instrument performance sound, and performer image in the RAM 11c, and reads them when the user performs a start operation (see the mode selection start screen 63 in FIG. 15A).

図15(a)は、モード選択スタート画面63が表示された状態を示している。モード選択スタート画面6は、上述したカラオケ楽曲の選曲画面でユーザの選曲操作が完了すると、表示されるものである。モード選択スタート画面63は、選択された歌唱用のカラオケ楽曲の曲名が配置される曲名配置スペース63aを上段に設けており、その下方に、演奏モードスタートボタン63b、共演モードスタートボタン63cが設けられている。   FIG. 15A shows a state where the mode selection start screen 63 is displayed. The mode selection start screen 6 is displayed when the user's music selection operation is completed on the above-described karaoke music selection screen. The mode selection start screen 63 has a song title arrangement space 63a in which the song title of the selected singing karaoke song is arranged, and a performance mode start button 63b and a co-star mode start button 63c are provided below the song title arrangement space 63a. ing.

演奏モードスタートボタン63cが選択されると、カラオケ端末装置11は、RAM11cからカラオケデータ、楽器演奏音、演奏者画像を読み出し、読み出した楽器演奏音に係る楽器パートをミュートしてカラオケデータのカラオケ楽曲を再生すると共に、その楽器演奏音の再生を合わせて行い、さらには、読み出した演奏者画像を、カラオケ画像に重ねて表示する処理を行う(図16参照)。一方、共演モードスタートボタン63cが選択されると、カラオケ端末装置11は、上述した演奏モードスタートボタン63cが選択された場合の処理に加えて、撮像デバイス11hで、カラオケ楽曲を歌唱するユーザを撮像し、撮像した歌唱者画像を、演奏者画像と並べて、カラオケ画像に重ねて表示する処理を行う(図17参照)。   When the performance mode start button 63c is selected, the karaoke terminal apparatus 11 reads karaoke data, musical instrument performance sound, and player image from the RAM 11c, mutes the musical instrument part related to the read musical instrument performance sound, and karaoke music of karaoke data. , The musical instrument performance sound is also reproduced, and further, the read player image is displayed so as to be superimposed on the karaoke image (see FIG. 16). On the other hand, when the co-star mode start button 63c is selected, the karaoke terminal apparatus 11 captures a user who sings karaoke music with the imaging device 11h in addition to the processing when the performance mode start button 63c is selected. Then, the captured singer image is displayed side by side with the performer image and displayed on the karaoke image (see FIG. 17).

図15(b)は、カラオケ楽曲の再生が終了すると表示される演奏評価画面64を示している。演奏評価画面64は、演奏データに係る楽器演奏音の評価を、楽器演奏音を聞いたユーザ(カラオケ歌唱を行ったユーザ)が10段階で評価できるものである。演奏評価画面64は、再生されたカラオケ楽曲の曲名が配置される曲名配置スペース64aを上段に設けており、その下方に、カーソル64cを有する点数一覧表64b、及び評価しないボタン64dを有する。点数一覧表64bは、1〜10までの各点をカーソル64cの移動で選択対象とすることができ、カーソル64cがいずれかの点で位置した状態で、操作部19又はリモコン装置12の決定キーが操作されると、カーソル64cの位置する点及びカラオケ楽曲の曲IDがカラオケ端末装置11からカラオケサーバ2へ送信される。また、評価しないボタン64dが選択された場合、上述した一連の画面表示に係る処理が一旦、終了することになる。   FIG. 15B shows a performance evaluation screen 64 that is displayed when the reproduction of the karaoke music is completed. The performance evaluation screen 64 allows the user who listened to the musical instrument performance sound (the user who performed the karaoke song) to evaluate the musical instrument performance sound related to the performance data in 10 stages. The performance evaluation screen 64 is provided with a song title arrangement space 64a in which the titles of reproduced karaoke songs are arranged in the upper stage, and has a score list 64b having a cursor 64c and a non-evaluated button 64d below. In the score list 64b, each point from 1 to 10 can be selected by moving the cursor 64c. With the cursor 64c positioned at any point, the enter key of the operation unit 19 or the remote control device 12 is selected. Is operated, the point where the cursor 64c is located and the song ID of the karaoke song are transmitted from the karaoke terminal device 11 to the karaoke server 2. When the button 64d not to be evaluated is selected, the above-described processing related to the screen display is temporarily ended.

次に、図10に示されるカラオケ端末装置11のカラオケプログラム14が規定する処理内容について詳説する。カラオケプログラム14は、カラオケ端末装置11が一種のコンピュータと云える構成になっていることから、コンピュータプログラムに相当する。カラオケプログラム14が規定する基本的な処理(従来から存在する処理)としては、ユーザが歌唱を希望するカラオケ楽曲の選曲処理、希望楽曲の選曲に応じてカラオケデータをカラオケサーバから受信し、受信したカラオケデータに含まれるカラオケ楽曲を再生すると共に楽曲歌詞等を表示する処理等がある。また、カラオケプログラム14が規定する本発明の特徴である演奏データ(楽器演奏音及び演奏者画像)の収録・アップロード(投稿)に関する処理、及び楽器演奏音の再生・演奏者画像の表示に関する処理内容については、図18〜20の第3〜5フローチャートに基づいて説明する。   Next, the processing content prescribed | regulated by the karaoke program 14 of the karaoke terminal device 11 shown by FIG. 10 is explained in full detail. The karaoke program 14 corresponds to a computer program because the karaoke terminal device 11 is configured as a kind of computer. As a basic process defined by the karaoke program 14 (a process existing in the past), the karaoke data is received from the karaoke server according to the music selection process of the karaoke music that the user desires to sing, and received. There is a process for reproducing karaoke music included in karaoke data and displaying music lyrics and the like. Further, processing contents relating to recording / uploading (posting) of performance data (instrument performance sound and player image) and processing related to reproduction of instrument performance sound and display of player image, which are features of the present invention defined by the karaoke program 14 Will be described based on the third to fifth flowcharts of FIGS.

図18の第3フローチャートは、演奏データの収録・アップロード(投稿)に関する処理手順(カラオケ再生表示方法の一部に該当する処理手順)を示しており、図11(a)の初期選択メニュー画面50で演奏収録ボタン50aが選択されて、カラオケ楽曲の選曲画面が表示された状態からの処理を示している。第3フローチャートにおいて、カラオケ端末装置11のCPU11aは、まず、ユーザが演奏するカラオケ楽曲の選曲を受け付けることになり(S30)、それから、選曲に係るカラオケ楽曲の曲IDを含む楽曲指定情報をカラオケサーバ2へ送信する制御を行う(S31)。   The third flowchart of FIG. 18 shows a processing procedure (recording procedure corresponding to a part of the karaoke playback display method) relating to recording / uploading (posting) of performance data, and the initial selection menu screen 50 of FIG. The process from the state where the performance recording button 50a is selected and the music selection screen for karaoke music is displayed is shown. In the third flowchart, the CPU 11a of the karaoke terminal device 11 first accepts a song selection of a karaoke song played by the user (S30), and then sends song designation information including the song ID of the karaoke song related to the song selection to the karaoke server. 2 is controlled (S31).

次に、CPU11aは、楽曲指定情報の送信によりカラオケサーバ2から送られてくるカラオケデータを受信したか否かを判断し(S32)、カラオケデータを受信していな場合は(S32:NO)、受信待ちの状態となる。カラオケデータを受信した場合(S32:YES)、CPU11aは、受信したカラオケデータをRAM11cに記憶すると共に、図11(b)に示す楽器パート選択画面51を表示して、ユーザから楽器パートの選択を受け付ける(S33)。   Next, the CPU 11a determines whether or not the karaoke data sent from the karaoke server 2 is received by transmitting the music designation information (S32). If the karaoke data is not received (S32: NO), Waiting for reception. When the karaoke data is received (S32: YES), the CPU 11a stores the received karaoke data in the RAM 11c and displays the instrument part selection screen 51 shown in FIG. 11 (b) to select the instrument part from the user. Accept (S33).

そして、CPU11aは、図12(a)の独奏フレーズ指定画面52を表示し、ユーザが独奏フレーズを指定するか否かを判断する(S34)。独奏フレーズが指定された場合(S34:YES)、指定された独奏フレーズのフレーズ数を独奏指定情報としてRAM11cに記憶する(S35)。このS35の段階の処理の後、又は独奏フレーズが選択されなかった場合(S34:NO)、CPU11aは、図12(b)のスタート画面53を表示して、スタートボタン53bが選択されたか否かを判断する(S36)。   Then, the CPU 11a displays the solo phrase designation screen 52 of FIG. 12A, and determines whether or not the user designates a solo phrase (S34). When a solo phrase is designated (S34: YES), the number of phrases of the designated solo phrase is stored in the RAM 11c as solo designation information (S35). After the process of step S35, or when a solo phrase is not selected (S34: NO), the CPU 11a displays the start screen 53 of FIG. 12B and determines whether or not the start button 53b is selected. Is determined (S36).

スタートボタン53bが選択されていない場合(S36:NO)、スタートボタン53bの選択待ちの状態となる。また、スタートボタン53bが選択された場合(S36:YES)、CPU11aは、RAM11cに記憶していたカラオケデータを読み出して、カラオケ楽曲の再生、カラオケ画像と楽曲歌詞の表示を行うと共に、ユーザによる楽器演奏の収録処理を行う(S37)。なお、このS37の段階において、カラオケ楽曲の再生について、S33の段階で選択された楽器パートをミュートしてカラオケ楽曲を再生するように制御する。また、収録処理について、CPU11aは、マイク16で集音した音声データを楽器演奏音としてRAM11cに随時記憶していくと共に、撮像デバイス11hで撮像した動画内容を演奏者画像としてRAM11cに随時記憶していく制御を行う。このようなS37の段階の処理は、CPU11aより、カラオケデータ(カラオケ楽曲)の再生が終了するまで続けられる。   When the start button 53b is not selected (S36: NO), the selection of the start button 53b is awaited. When the start button 53b is selected (S36: YES), the CPU 11a reads the karaoke data stored in the RAM 11c, reproduces the karaoke music, displays the karaoke image and the music lyrics, and also plays the musical instrument by the user. A performance recording process is performed (S37). In step S37, the reproduction of the karaoke music is controlled so that the musical instrument part selected in step S33 is muted and the karaoke music is reproduced. As for the recording process, the CPU 11a stores the audio data collected by the microphone 16 as a musical instrument performance sound in the RAM 11c as needed, and stores the moving image content captured by the imaging device 11h as a performer image in the RAM 11c as needed. Control. Such processing in step S37 is continued until the reproduction of karaoke data (karaoke music) is completed by the CPU 11a.

カラオケデータの再生(収録処理)が終了すると、CPU11aは、図13(a)の収録確認画面54を表示し、アップロードボタン54a又はやり直しボタン54bのいずれのボタンがユーザにより選択されるかを判断する(S38)。やり直しボタン54bが選択された場合(S38:やり直し)、S36の段階に戻って、再度、図12(b)のスタート画面53を表示する。一方、アップロードボタン54aが選択された場合(S38:アップロード)、CPU11aは、RAM11cに記憶された楽器演奏音及び演奏者画像等を含む演奏データを、図7(a)(b)に示すようなフォーマット(ユーザが演奏したカラオケ楽曲の曲ID、ユーザが演奏した楽器の楽器コード、演奏を行ったユーザのユーザID、独奏指定情報等を含むフォーマット)でカラオケサーバ11へ送信する(S39)。   When the reproduction (recording process) of the karaoke data is completed, the CPU 11a displays the recording confirmation screen 54 of FIG. 13A, and determines which of the upload button 54a and the redo button 54b is selected by the user. (S38). When the redo button 54b is selected (S38: Redo), the process returns to the step S36 to display the start screen 53 of FIG. 12B again. On the other hand, when the upload button 54a is selected (S38: upload), the CPU 11a stores the performance data including the musical instrument performance sound and the player image stored in the RAM 11c as shown in FIGS. 7 (a) and 7 (b). The data is transmitted to the karaoke server 11 in a format (a format including the song ID of the karaoke song performed by the user, the instrument code of the musical instrument played by the user, the user ID of the user performing the performance, solo specification information, etc.) (S39).

カラオケプログラム14は、上述した図18の第3フローチャートの処理を規定することにより、演奏を行うユーザが納得できる楽器演奏音をアップロードできるようにしている。   The karaoke program 14 can upload musical instrument performance sounds that can be understood by the user performing the performance by defining the processing of the third flowchart of FIG. 18 described above.

図19に示す第4フローチャートは、ユーザが歌唱用のカラオケ楽曲を希望する場合の処理手順(カラオケ再生表示方法の一部に該当する処理手順)を示しており、図11(a)の初期選択メニュー画面50でカラオケ歌唱ボタン50bが選択されて、図13(b)のモード選択画面60が表示された状態からの処理を示している。CPU11aは、このモード選択画面60において、通常モードボタン60a又は演奏モードボタン60bに係るいずれのモードが選択されたかを判断する(S40)。   The fourth flowchart shown in FIG. 19 shows a processing procedure (processing procedure corresponding to a part of the karaoke playback display method) when the user desires a karaoke song for singing, and the initial selection in FIG. The process from the state where the karaoke singing button 50b is selected on the menu screen 50 and the mode selection screen 60 of FIG. 13B is displayed is shown. The CPU 11a determines which mode related to the normal mode button 60a or the performance mode button 60b is selected on the mode selection screen 60 (S40).

通常モードボタン60aが操作されて通受モードが選択された場合(S40:通常モード)、CPU11aは、カラオケ楽曲の選曲画面(従来のカラオケ楽曲の選択画面と同様なもの)を表示する制御を行って、ユーザによるカラオケ楽曲の選曲を受け付ける(S41)。そして、CPU11aは、選曲に係るカラオケ楽曲の曲ID及びカラオケ楽曲の歌唱を行うユーザのユーザID等を含む楽曲指定情報をカラオケサーバ2へ送信する制御を行う(S42)。   When the communication mode is selected by operating the normal mode button 60a (S40: normal mode), the CPU 11a performs control to display a karaoke song selection screen (similar to the conventional karaoke song selection screen). Then, the selection of karaoke music by the user is accepted (S41). And CPU11a performs control which transmits the music designation | designated information containing the music ID of the karaoke music which concerns on music selection, the user ID of the user who sings a karaoke music, etc. to the karaoke server 2 (S42).

一方、図13(b)のモード選択画面60において、演奏モードボタン60bが操作されて演奏モードが選択された場合(S40:演奏モード)、CPU11aは、次に図14(a)の検索メニュー画面61を表示する制御を行い、ユーザによりランダム検索ボタン61a又は条件検索ボタン61bのいずれのボタンが選択されたかを判断する(S43)。ランダム検索ボタン61aが選択された場合(S43:ランダム検索)、CPU11aは、カラオケ楽曲の選曲画面(従来のカラオケ楽曲の選択画面と同様なもの)を表示する制御を行って、ユーザによるカラオケ楽曲の選曲を受け付ける(S44)。そして、CPU11aは、選曲に係るカラオケ楽曲の曲ID、演奏モードフラグ、及びカラオケ楽曲の歌唱を行うユーザのユーザID等を含む楽曲指定情報をカラオケサーバ2へ送信する制御を行う(S45)。   On the other hand, when the performance mode is selected by operating the performance mode button 60b on the mode selection screen 60 of FIG. 13B (S40: performance mode), the CPU 11a next displays the search menu screen of FIG. 61 is controlled to determine which button of the random search button 61a or the condition search button 61b has been selected by the user (S43). When the random search button 61a is selected (S43: random search), the CPU 11a performs control to display a karaoke song selection screen (similar to the conventional karaoke song selection screen), and allows the user to select a karaoke song. A song selection is accepted (S44). And CPU11a performs control which transmits the music designation | designated information containing the music ID of the karaoke music which concerns on music selection, a performance mode flag, the user ID of the user who sings a karaoke music, etc. to the karaoke server 2 (S45).

また、図14(a)の検索メニュー画面61で条件検索ボタン61bが選択された場合(S43:条件検索)、CPU11aは、次に、図14(b)の検索条件選択画面62を表示する制御を行い、再生回数62a、フレンズ62b、評価62c、出身地62d、居住地62e、年齢62という中から検索条件の選択を受け付ける(S46)。なお、CPU11aは、検索条件として、再生回数62a、評価62c、又は年齢62のいずれかの選択を受け付けた場合、検索条件に係る数値もあわせて受け付けることになり、検索条件として、出身地62d又は居住地62eの選択を受け付けた場合、出身地62d又は居住地62eについて「同じ」又は「異なる」という条件を更に受け付けることになる。   Further, when the condition search button 61b is selected on the search menu screen 61 in FIG. 14A (S43: condition search), the CPU 11a next displays the search condition selection screen 62 in FIG. 14B. The selection of search conditions is accepted from the number of reproductions 62a, friends 62b, evaluation 62c, birthplace 62d, residence 62e, and age 62 (S46). When the CPU 11a accepts selection of the number of times of reproduction 62a, evaluation 62c, or age 62 as a search condition, the CPU 11a also accepts a numerical value related to the search condition. When the selection of the residence 62e is received, the condition “same” or “different” is further received for the birthplace 62d or the residence 62e.

それから、CPU11aは、カラオケ楽曲の選曲画面(従来のカラオケ楽曲の選択画面と同様なもの)を表示する制御を行って、ユーザによるカラオケ楽曲の選曲を受け付ける(S47)。そして、CPU11aは、選曲に係るカラオケ楽曲の曲ID、演奏モードフラグ、設定した検索条件、及びカラオケ楽曲の歌唱を行うユーザのユーザID等を含む楽曲指定情報をカラオケサーバ2へ送信する制御を行う(S48)。   Then, the CPU 11a performs control to display a karaoke song selection screen (similar to the conventional karaoke song selection screen), and accepts karaoke song selection by the user (S47). And CPU11a performs control which transmits the music designation | designated information containing the music ID of the karaoke music which concerns on music selection, a performance mode flag, the set search conditions, the user ID of the user who sings a karaoke music, etc. to the karaoke server 2. (S48).

カラオケプログラム14は、上述した図19の第4フローチャートの処理を規定することにより、ユーザ自身が望む状態でカラオケ歌唱を行えることを指示した情報を含む楽曲指定情報を、カラオケサーバ2へ送信できるようにしている。   The karaoke program 14 can transmit to the karaoke server 2 music specifying information including information instructing that the user can perform karaoke singing in a state desired by the user by defining the process of the fourth flowchart of FIG. 19 described above. I have to.

図20に示す第5フローチャートは、図19の第4フローチャートのS40の段階におけるモード選択画面60で演奏モードボタン60bが選択された場合のものであり、S45又はS48の段階で楽曲指定情報を送信した後のカラオケデータ、楽器演奏音、演奏者画像に関する処理手順(カラオケ再生表示方法の一部に該当する処理手順)を示している。なお、第4フローチャートのS40の段階におけるモード選択画面60で通常モードボタン60aが選択された場合、従来のカラオケデータの再生と相違しないので、この場合の処理手順の説明は省略する。   The fifth flowchart shown in FIG. 20 is a case where the performance mode button 60b is selected on the mode selection screen 60 in the step S40 of the fourth flowchart of FIG. 19, and the music designation information is transmitted in the step S45 or S48. The processing procedure (processing procedure corresponding to a part of the karaoke reproduction display method) regarding the karaoke data, the musical instrument performance sound, and the performer image is shown. Note that when the normal mode button 60a is selected on the mode selection screen 60 in the step S40 of the fourth flowchart, it is not different from the conventional reproduction of karaoke data, so the description of the processing procedure in this case is omitted.

第5フローチャートにおいて、CPU11aは、まず、カラオケサーバ2から送られるカラオケデータ、楽器演奏音、演奏者画像を受信したか否かを判断する(S50)。受信していない場合(S50:NO)、受信待ちの状態となる。また、受信した場合(S50:YES)、CPU11aは、受信したカラオケデータ、楽器演奏音、演奏者画像を一旦、RAM11cに記憶すると共に、図15(a)のモード選択スタート画面63を表示する制御を行って、ユーザによる演奏モードスタートボタン63b又は共演モードスタートボタン63cの選択により、いずれのモードでスタートするかを判断する(S51)。   In the fifth flowchart, the CPU 11a first determines whether or not karaoke data, musical instrument performance sound, and player image sent from the karaoke server 2 have been received (S50). When not receiving (S50: NO), it will be in the state of waiting for reception. If received (S50: YES), the CPU 11a temporarily stores the received karaoke data, musical instrument performance sound, and performer image in the RAM 11c, and displays the mode selection start screen 63 of FIG. 15A. In accordance with the selection of the performance mode start button 63b or the co-star mode start button 63c by the user, it is determined in which mode to start (S51).

演奏モードスタートボタン63bが選択された場合(S51:演奏モード)、CPU11aは、RAM11cからカラオケデータ、楽器演奏音、演奏者画像を読み出して、カラオケ楽曲及び楽器演奏音の再生処理、カラオケ画像と楽曲歌詞及び演奏者画像の表示処理を行う(S52)。その再生処理において、CPU11aは、楽器演奏音に係る楽器パートをミュートしてカラオケデータのカラオケ楽曲を再生すると共に、楽器演奏音の再生を合わせて行うように制御し、その表示処理において、カラオケ画像の表示を行うと共に、そのカラオケ画像に重ねて演奏者画像を表示するように制御を行う。   When the performance mode start button 63b is selected (S51: performance mode), the CPU 11a reads karaoke data, musical instrument performance sound, and player image from the RAM 11c, and reproduces karaoke music and musical instrument performance sound, karaoke image and music. Display processing of lyrics and player images is performed (S52). In the playback process, the CPU 11a controls to play the karaoke music of the karaoke data by muting the instrument part related to the instrument performance sound, and to play back the musical instrument performance sound together. In the display process, the karaoke image And a control is performed so that the player image is displayed over the karaoke image.

図16(a)は、S52の段階の表示装置18の表示パネル18aにおける表示画面の例であり、一つの楽器パート(ギターパート)についてユーザによる楽器演奏音がある場合のカラオケ楽曲再生時の表示内容を示している。この画面では、カラオケデータのカラオケ画像70a及び楽曲歌詞70bに加えて、演奏者画像71(ギターを演奏するユーザの画像)が表示されたものになっており、詳しくは、カラオケ画像70aは、表示画面18aに全画面的に表示され、楽曲歌詞70bは表示パネル18aの下方でカラオケ画像70bに重畳して表示される。そして、演奏者画像71は、カラオケ画像70aに重ねて表示される。このような表示により、カラオケを歌唱するユーザが、楽曲歌詞70bでカラオケ楽曲の歌詞を確認できるようにしながら、演奏者画像71を見ることができるようにして、通常のカラオケ楽曲の再生とは異なる演奏モードであることを把握できるようにしている。   FIG. 16A is an example of a display screen on the display panel 18a of the display device 18 in the stage of S52, and is a display during playback of karaoke music when there is a musical instrument performance sound by the user for one musical instrument part (guitar part). The contents are shown. In this screen, a player image 71 (image of a user who plays the guitar) is displayed in addition to the karaoke image 70a and the song lyrics 70b of the karaoke data. Specifically, the karaoke image 70a is displayed. The song lyrics 70b are displayed in full screen on the screen 18a, and are displayed superimposed on the karaoke image 70b below the display panel 18a. The performer image 71 is displayed so as to overlap the karaoke image 70a. With such a display, a user who sings karaoke can view the performer image 71 while allowing the user to check the lyrics of the karaoke music with the music lyrics 70b, and is different from normal karaoke music playback. It is possible to grasp that it is a performance mode.

図16(b)は、S52の段階の別の表示例であり、二つの楽器パート(ギターパート及びドラムパート)について二人のユーザによる楽器演奏音がある場合のカラオケ楽曲再生時の表示内容を示している。この画面では、第1の楽器演奏音(ギターの演奏音)に応じた演奏者画像71(ギターを演奏する第1のユーザの画像)及び第2の楽器演奏音(ドラムの演奏音)に応じた演奏者画像72(ドラムを演奏する第2のユーザの画像)が並べて表示されたものになっていると共に、これら演奏者画像71及び演奏者画像72はカラオケ画像70aに重ねられている。   FIG. 16B is another display example of the stage of S52, and the display contents at the time of karaoke music reproduction when there are instrument sounds by two users for two instrument parts (guitar part and drum part) are shown. Show. In this screen, the player image 71 (image of the first user who plays the guitar) corresponding to the first instrument performance sound (guitar performance sound) and the second instrument performance sound (drum performance sound) corresponding to the first instrument performance sound (guitar performance sound). The player image 72 (the image of the second user who plays the drum) is displayed side by side, and the player image 71 and the player image 72 are superimposed on the karaoke image 70a.

カラオケ歌唱を行うユーザは、図16(a)、(b)に示すような内容が、表示装置18の表示パネル18aに表示されるのを見ながら歌唱することになるので、演奏者画像71、72により、アップロードされた楽器演奏音の再生に応じた楽器演奏が行われている前で歌唱しているような雰囲気を味わうことができる。しかも、楽曲歌詞70bは演奏者画像71、72により隠されないので、歌唱すべき歌詞内容は従来と同様に確認することができる。なお、カラオケサーバ2から三つの楽器パート(例えば、ギターパート、ドラムパート、ベースパート))についての演奏データが送られると、計三つの演奏者画像が並べて表示されることになり、三つ以上の楽器パートについての演奏データが送られた場合も、それらの演奏者画像が並べて表示されることになる。   Since the user who performs karaoke singing sings while seeing the contents shown in FIGS. 16A and 16B displayed on the display panel 18a of the display device 18, the player image 71, By 72, it is possible to enjoy an atmosphere as if singing before the musical instrument performance is performed in accordance with the reproduction of the uploaded musical instrument performance sound. Moreover, since the song lyrics 70b are not hidden by the player images 71 and 72, the contents of the lyrics to be sung can be confirmed in the same manner as in the past. When performance data for three instrument parts (for example, guitar part, drum part, bass part) is sent from the karaoke server 2, a total of three player images are displayed side by side. Even if performance data for the musical instrument parts is sent, the player images are displayed side by side.

このようなS52の段階における再生・表示処理は、カラオケサーバ2での検索結果により送られてくる楽器演奏音及び演奏者画像の数、これらの中身の情報によって複数のパターンが生じる。これらのパターンの例を、図21(a)〜(d)のタイムチャートで示す。   In the reproduction / display processing in the stage of S52, a plurality of patterns are generated depending on the musical instrument performance sound and the number of player images sent as a result of the search in the karaoke server 2 and information on the contents thereof. Examples of these patterns are shown in the time charts of FIGS.

図21(a)は、カラオケサーバ2での検索に対して一つの楽器演奏音(例えば、ギターパートのギター演奏音)のみが該当した場合を示している(該当した楽器演奏音には独奏フレーズの指定が付帯していない場合)。この場合、カラオケ楽曲の開始から終了まで、CPU11aは、「(1)ギターパートをミュートしてカラオケ楽曲を再生」、「(2)検索で該当したギター演奏音を再生」、「(3)楽曲歌詞等(楽曲歌詞及びカラオケ画像)を表示」、及び「(4)検索で該当したギター演奏音に応じたギター演奏者画像を表示」という(1)〜(4)に関する制御を行うことになり、表示装置18の表示パネル18aには、図16(a)に示すような画面内容が表示される。   FIG. 21A shows a case where only one instrument performance sound (for example, guitar performance sound of a guitar part) corresponds to the search in the karaoke server 2 (the solo instrument phrase is included in the corresponding instrument performance sound). Is not attached). In this case, from the start to the end of the karaoke music, the CPU 11a “(1) mute the guitar part and play the karaoke music”, “(2) play the guitar performance sound corresponding to the search”, “(3) music” Controls related to (1) to (4), such as “display lyrics etc. (music lyrics and karaoke images)” and “(4) display guitar performer images according to the guitar performance sound corresponding to the search”. The screen content as shown in FIG. 16A is displayed on the display panel 18 a of the display device 18.

また、図21(b)は、カラオケサーバ2での検索に対して一つの楽器演奏音(例えば、ギターパートの演奏データ)のみが該当し、その楽器演奏音には独奏フレーズの指定(独奏指定情報)が付帯していた場合のものである。この場合、独奏指定情報で独奏フレーズとして第30フレーズ(30番目のフレーズ)が指定されていると、第30フレーズ以外は、図21(a)の場合と同様に、CPU11aは、「(1)ギターパートをミュートしてカラオケ楽曲を再生」、「(2)アップロードされたギター演奏音を再生」、「(3)楽曲歌詞等を表示」、及び「(4)アップロードされたギター演奏者画像を表示」という(1)〜(4)に関する制御を行うことになる。   In FIG. 21B, only one musical instrument performance sound (for example, performance data of the guitar part) corresponds to the search in the karaoke server 2, and the solo performance phrase designation (single performance designation) is applied to the musical instrument performance sound. Information) is incidental. In this case, if the 30th phrase (30th phrase) is designated as a solo phrase in the solo designation information, the CPU 11a, except for the 30th phrase, determines “(1) Play the karaoke music by muting the guitar part "," (2) Play the uploaded guitar performance "," (3) Display the song lyrics ", and" (4) Upload the guitar player image Control relating to (1) to (4), which is “display”, is performed.

そして、30番目のフレーズで、CPU11aは、上記(1)について、カラオケ楽曲の全ての楽器パートがミュートして再生する制御を行い、上記(2)〜(4)についてはは同様の制御を行う。それにより、30番目のフレーズでは、アップロードされたギターパートのギター演奏音のみが再生されることになり、ギターパートの独奏を含んだ内容でカラオケ楽曲を歌唱できるようになる。なお、表示装置18の表示パネル18aに表示される内容は終始、図16(a)に示すような画面内容であり、この点は図21(a)に示すパターンの場合と同じである。   Then, in the 30th phrase, the CPU 11a performs control to mute and reproduce all instrument parts of the karaoke music for the above (1), and performs the same control for the above (2) to (4). . Thereby, in the 30th phrase, only the guitar performance sound of the uploaded guitar part is played back, and the karaoke music can be sung with contents including the solo performance of the guitar part. Note that the content displayed on the display panel 18a of the display device 18 is always the screen content as shown in FIG. 16A, and this is the same as the case of the pattern shown in FIG.

さらに、図21(c)は、カラオケサーバ2での検索に対して異なる楽器パート(例えば、ギターパート及びドラムパート)で、二つの楽器演奏音(例えば、ギターパートのギター演奏音と、ドラムパートのドラム演奏音)が該当した場合を示している(該当した各楽器演奏音には独奏フレーズの指定が付帯していない場合)。この場合、カラオケ楽曲の開始から終了まで、CPU11aは、「(1)ギターパート及びドラムパートをミュートしてカラオケ楽曲を再生」、「(2)検索で該当した第1の楽器演奏音であるギター演奏音を再生」、「(3)楽曲歌詞等を表示」、「(4)検索で該当した第1の楽器演奏音に応じたギター演奏者画像を表示」に加えて、「(5)検索で該当した第2の楽器演奏音であるドラム演奏音を再生」及び「(6)検索で該当した第2の楽器演奏音に応じたドラム演奏者画像を表示」という(1)〜(6)に関する制御を行う。そして、表示装置18の表示パネル18aには、図16(b)に示すような画面内容が表示される。なお、該当した楽器演奏音に独奏フレーズの指定が付帯していると(例えば、ギターパートの楽器演奏音に第30フレーズを独奏とする指定が付帯)、楽器演奏音(ギター演奏音)のみが指定された独奏フレーズで再生され、他の楽器演奏音(ドラム演奏音)もミュートされる(もちろん、カラオケ楽曲は全ての楽器パートがミュートされる)。   Furthermore, FIG. 21C shows two musical instrument performance sounds (for example, guitar performance sound of the guitar part and drum performance parts) with different musical instrument parts (for example, guitar part and drum part) for the search in the karaoke server 2. (Drum performance sound) is shown (in the case where a solo phrase is not specified for each applicable musical instrument performance sound). In this case, from the start to the end of the karaoke song, the CPU 11a “(1) mute the guitar part and drum part to play the karaoke song”, “(2) the guitar that is the first instrument performance sound corresponding to the search. In addition to “Play performance sound”, “(3) Display song lyrics, etc.”, “(4) Display guitar player image corresponding to the first instrument performance sound corresponding to search”, “(5) Search (1) to (6) “reproduce drum performance sound corresponding to the second musical instrument performance sound” and “(6) display drum performer image corresponding to the second musical instrument performance sound corresponding to the search”. Control related to Then, the screen content as shown in FIG. 16B is displayed on the display panel 18 a of the display device 18. In addition, when the specification of the solo phrase is attached to the corresponding instrument performance sound (for example, the specification that the 30th phrase is solo is attached to the instrument performance sound of the guitar part), only the instrument performance sound (guitar performance sound) is included. It is played with the specified solo phrase, and other instrument performance sounds (drum performance sounds) are muted (of course, all instrument parts are muted for karaoke music).

さらにまた、図21(d)は、カラオケサーバ2での検索に対して複数の楽器演奏音(例えば、ギターパートのギター演奏音)が該当した場合を示している(該当した楽器演奏音には独奏フレーズの設定が付帯していない場合)。この場合、カラオケ楽曲の一定期間としてフレーズごとに、複数の楽器演奏音の中から、再生する楽器演奏音を切り替えると共に、複数の演奏者画像の中から、再生する楽器演奏音に応じた演奏者画像へ、表示する演奏者画像も切り替えるようにしている。具体的にCPU11aは、第1フレーズで「(1)ギターパートをミュートしてカラオケ楽曲を再生」、「(2)検索で該当した第1楽器演奏音(第1のギター演奏音)を再生」、「(3)楽曲歌詞等を表示」、及び「(4)検索で該当した第1楽器演奏音に応じたギター演奏者画像を表示」という(1)〜(4)に関する制御を行い、第2フレーズでは、(1)、(3)は上記と同じ制御を行うが、(2)について「検索で該当した第2楽器演奏音(第2のギター演奏音)を再生」、(4)について「検索で該当した第2楽器演奏音に応じたギター演奏者画像を表示」というように、楽器演奏音を第1楽器演奏音から第2楽器演奏音へと切り替えると共に、それに合わせて演奏者画像も第1演奏者画像から第2演奏者画像へと切り替える制御を行う。   Furthermore, FIG. 21D shows a case where a plurality of musical instrument performance sounds (for example, guitar performance sounds of a guitar part) correspond to the search in the karaoke server 2 (the relevant instrument performance sounds include If solo phrase setting is not included). In this case, as a certain period of the karaoke music, for each phrase, the musical instrument performance sound to be reproduced is switched from among the plural musical instrument performance sounds, and the player corresponding to the musical instrument performance sound to be reproduced is selected from the plurality of player images. The player image to be displayed is also switched to the image. Specifically, the CPU 11a uses the first phrase "(1) mute the guitar part and play the karaoke music", "(2) play the first instrument performance sound (first guitar performance sound) that was found by the search" , "(3) Display music lyrics, etc." and "(4) Display guitar player image corresponding to the first instrument performance sound corresponding to the search" are performed on (1) to (4). In 2 phrases, (1) and (3) perform the same control as above, but with respect to (2), “reproduces the second instrument performance sound (second guitar performance sound) that was found in the search”, and (4) The musical instrument performance sound is switched from the first musical instrument performance sound to the second musical instrument performance sound, such as “display guitar performer image corresponding to second musical instrument performance sound corresponding to search”, and the performer image is adjusted accordingly. The system also switches from the first player image to the second player image. It is carried out.

第3フレーズ以降においても、フレーズごとに、(1)、(3)は上記と同じ制御を行うが、(2)については、「検索で該当した第3楽器演奏音(第3のギター演奏音)を再生」から「検索で該当した第n楽器演奏音(第nのギター演奏音)を再生(nは3より大きい自然数)」へと順次切り替え、(4)についても「検索で該当した第3楽器演奏音に応じたギター演奏者画像を表示」から「検索で該当した第n楽器演奏音に応じたギター演奏者画像を表示(nは3より大きい自然数)」へと順次切り替える制御を行う。この場合の表示装置18の表示パネル18aの表示内容は、図16(a)に示すような画面内容になるが、演奏者画像71の中身が、フレーズごとに切り替わることになる。このような制御により、カラオケ楽曲を歌唱するユーザは、アップロードされた多くの楽器演奏音及び演奏者画像を随時楽しみながら、歌唱を行えるようになる。なお、切り替えに係る一定期間はフレーズに限定されるものではなく、所定の時間(例えば、10秒又は20秒)ごとに切り替えを行う仕様にしてもよい。   Even after the third phrase, (1) and (3) perform the same control as above for each phrase, but for (2), “3rd musical instrument performance sound (third guitar performance sound corresponding to the search) ) "To" Play the nth instrument performance sound (nth guitar performance sound) corresponding to the search (where n is a natural number greater than 3) ". Control is performed to sequentially switch from “Display guitar player image according to performance sound of three musical instruments” to “Display guitar player image according to nth musical instrument performance sound corresponding to search (n is a natural number greater than 3)”. . The display content of the display panel 18a of the display device 18 in this case is the screen content as shown in FIG. 16A, but the contents of the player image 71 are switched for each phrase. By such control, a user who sings karaoke music can sing while enjoying many uploaded musical instrument performance sounds and player images as needed. In addition, the fixed period concerning switching is not limited to a phrase, You may make it the specification which switches every predetermined time (for example, 10 seconds or 20 seconds).

なお、検索で該当した複数の楽器演奏音の中で、独奏フレーズの指定が付帯しているものがあれば、その独奏フレーズについては、図21(b)で説明したような制御をCPU11aは行うことになる。また、カラオケサーバ2での検索に対して異なる楽器パート(例えば、ギターパート及びドラムパート)のそれぞれで、楽器演奏音(例えば、ギターパートのギター演奏音と、ドラムパートのドラム演奏音)が複数該当した場合は、図21(c)と図21(d)を組み合わせた内容でCPU11aは制御を行うことになる。   If there is a plurality of musical instrument performance sounds that are specified in the search and a solo phrase is specified, the CPU 11a performs the control as described in FIG. 21B for the solo phrase. It will be. Also, there are a plurality of instrument performance sounds (for example, guitar performance sound of the guitar part and drum performance sound of the drum part) for each of the different instrument parts (for example, the guitar part and the drum part) with respect to the search in the karaoke server 2. If this is the case, the CPU 11a performs the control with the content combining FIG. 21 (c) and FIG. 21 (d).

図20の第5フローチャートに戻って説明を続けると、図15(a)のモード選択スタート画面63で共演モードスタートボタン63cが選択された場合(S51:共演モード)、CPU11aは、RAM11cからカラオケデータ、楽器演奏音、演奏者画像を読み出して、カラオケ楽曲及び楽器演奏音の再生処理、並びにカラオケ画像及び演奏者画像の表示処理を行うと共に、撮像デバイス11hで撮像した撮像画像(カラオケ楽曲を歌唱するユーザの歌唱者画像)の表示処理を行う(S53)。この再生・表示処理について、CPU11aが行う制御処理は、上述したS52の段階と同様であるが、S53の段階では歌唱を行うユーザの撮像、及びその撮像画像(歌唱者画像)の表示の処理が追加されたものになっている。   Returning to the fifth flowchart of FIG. 20, the description will be continued. When the co-star mode start button 63c is selected on the mode selection start screen 63 of FIG. 15A (S51: co-star mode), the CPU 11a reads the karaoke data from the RAM 11c. The musical instrument performance sound and the player image are read out, the karaoke musical piece and the musical instrument performance sound are reproduced, the karaoke image and the player image are displayed, and the captured image (singing the karaoke musical piece is sung by the imaging device 11h). The display process of a user's singer image is performed (S53). Regarding this reproduction / display processing, the control processing performed by the CPU 11a is the same as that in S52 described above, but in S53, imaging of the user who performs the singing and processing of displaying the captured image (singer image) are performed. It has been added.

図17(a)は、S53の段階の表示例であり、一つの楽器パート(ギターパート)についてユーザによる楽器演奏音がある場合のカラオケ楽曲再生時の表示画面を示している。この画面では、カラオケ画像70a、楽曲歌詞70b、演奏者画像71(ギターを演奏するユーザの画像)及び撮像画像80(ユーザの歌唱者画像)が表示されたものになっており、詳しくは、カラオケ画像70aに重ねて演奏者画像71及び撮像画像80が表示される(その他の点は、図16(b)と同じである)。   FIG. 17A is a display example at the stage of S53, and shows a display screen at the time of playing karaoke music when there is a musical instrument performance sound by the user for one musical instrument part (guitar part). On this screen, a karaoke image 70a, a song lyrics 70b, a performer image 71 (image of a user who plays the guitar) and a captured image 80 (user singer image) are displayed. A player image 71 and a captured image 80 are displayed over the image 70a (other points are the same as those in FIG. 16B).

図17(b)は、S53の段階の別の表示例であり、二つの楽器パート(ギターパート及びドラムパート)について二人のユーザによる楽器演奏音がある場合のカラオケ楽曲再生時の表示画面を示している。この画面では、第1の楽器演奏音に応じた演奏者画像71(ギターを演奏する第1のユーザの画像)、第2の楽器演奏音に応じた演奏者画像72(ドラムを演奏する第2のユーザの画像)、及び撮像画像80(ユーザの歌唱者画像)が並べて表示されたものになっていると共に、これら第1の演奏者画像71、第2の演奏者画像72及び撮像画像80はカラオケ画像70aに重ねられている。   FIG. 17B is another display example at the stage of S53, and shows a display screen at the time of karaoke music reproduction when there are instrument sounds by two users for two instrument parts (guitar part and drum part). Show. On this screen, a player image 71 (image of a first user who plays the guitar) corresponding to the first musical instrument performance sound, a player image 72 (second drum which plays the drum) corresponding to the second musical instrument performance sound. And the captured image 80 (user's singer image) are displayed side by side, and the first performer image 71, the second performer image 72, and the captured image 80 are displayed. It is superimposed on the karaoke image 70a.

カラオケ歌唱を行うユーザは、図17(a)、(b)に示すような内容が、表示装置18の表示パネル18aに表示されるのを見ながら歌唱することになるので、演奏者画像71等に加えて撮像画像80が存在することにより、演奏者と自身が共演しているようなイメージを味わうことができる。なお、カラオケサーバ2から三つ以上の楽器パートについての楽器演奏音及び演奏者画像が送られた場合も、それらの演奏者画像が並べて表示されることになる。   The user who performs the karaoke singing sings while watching the contents as shown in FIGS. 17A and 17B displayed on the display panel 18a of the display device 18, so that the player image 71 and the like. In addition, the presence of the picked-up image 80 makes it possible to enjoy an image of the performer and himself performing together. In addition, also when the musical instrument performance sound and player image about three or more musical instrument parts are sent from the karaoke server 2, those player images are displayed side by side.

また、図22(a)〜(d)のタイムチャートは、S53の段階における再生処理が、カラオケサーバ2での検索結果により送られてくる楽器演奏音及び演奏者画像によって複数のパターンが生じることを示すものである。これら図22(a)〜(d)のタイムチャートは、上述した図21(a)〜(d)のタイムチャートに対応するものであるので詳細な説明は省略するが、異なる点は「撮像画像の表示」が追加されていることである。   Further, in the time charts of FIGS. 22A to 22D, the reproduction process in the step S53 causes a plurality of patterns to be generated depending on the musical instrument performance sound and the player image sent as a result of the search in the karaoke server 2. Is shown. Since the time charts of FIGS. 22A to 22D correspond to the time charts of FIGS. 21A to 21D described above, detailed description thereof will be omitted. "Display" is added.

再度、図20の第5フローチャートに戻って説明を続けると、S52又はS53の段階の次に、CPU11aはカラオケ楽曲の再生が終了したか否かを判断しており(S54)、再生が終了していない場合(S54:NO)、S52又はS53の段階の処理を続けることになり、再生が終了した場合(S54:YES)、CPU11aは、図15(b)の演奏評価画面64を表示する制御を行う(S55)。   Referring back to the fifth flowchart of FIG. 20 again, the description will be continued. Next to the step S52 or S53, the CPU 11a determines whether or not the reproduction of the karaoke music has ended (S54), and the reproduction ends. If not (S54: NO), the processing at the stage of S52 or S53 will be continued, and if the reproduction has been completed (S54: YES), the CPU 11a controls to display the performance evaluation screen 64 of FIG. (S55).

CPU11aは、この演奏評価画面64で演奏データについて評価が行われたか否かを判断しており(S56)、評価が行われた場合(S56:評価あり)、その評価に係る点数をカラオケサーバ2へ送信する制御を行う(S57)。また、評価が行われなかった場合(S56:評価しない)、CPU11aは特に処理を行うことなく一連の処理を一旦終了する。   The CPU 11a determines whether or not the performance data has been evaluated on the performance evaluation screen 64 (S56). When the evaluation has been performed (S56: there is an evaluation), the score related to the evaluation is given to the karaoke server 2. To transmit to (S57). If the evaluation has not been performed (S56: not evaluated), the CPU 11a temporarily ends the series of processes without performing any particular process.

なお、本発明に係る内容は、上述した実施形態に限定されるものではなく、種々の変形例の適用が可能である。例えば、演奏データのアップロードにはカラオケ端末装置11等を使用する以外に、録音機能及び撮像機能を備えたコンピュータに、上述したカラオケプログラム14と同等のプログラムをインストールすることで、このようなコンピュータを用いてアップロードできるようにしてもよい。   The contents according to the present invention are not limited to the above-described embodiments, and various modifications can be applied. For example, in addition to using the karaoke terminal device 11 or the like for uploading performance data, such a computer can be installed by installing a program equivalent to the karaoke program 14 described above on a computer having a recording function and an imaging function. May be used for uploading.

また、仕様の簡易化を図る場合は、独奏フレーズの設定、検索条件の設定等は省略することも可能であり、更に仕様の簡易化を図る場合は、ユーザの歌唱者画像の撮像も省略してもよい。また、演奏者画像には、撮像デバイス11hで撮像した動画の画像を用いるのではなく、楽器を演奏する演奏者を撮像した静止画、演奏者を表すイラスト画像(演奏者を示すアバター画像も含む)、又はユーザを表すアイコン画像等を用いるようにしてもよく、このような例の各種演奏者画像には、予め画像ファイルとして存在するものを用いるようにしてもよい。   In addition, when simplifying the specification, it is possible to omit the setting of solo phrases, the setting of search conditions, etc., and when further simplifying the specification, imaging of the user's singer image is also omitted. May be. The player image does not use a moving image imaged by the imaging device 11h, but includes a still image obtained by imaging a player who plays a musical instrument, an illustration image representing the player (including an avatar image indicating the player). ), Or an icon image representing the user, or the like, and various player images in such an example may be used in advance as image files.

さらに、演奏者画像としては、予め画像ファイルとして存在するものを用いる場合、上述したように演奏データに含ませてカラオケサーバ2へアップロードする以外に、ユーザ登録の際又はユーザ登録している情報を変更する際、演奏者画像もユーザDB6へ登録しておき、後から、楽器演奏音を含む演奏データをアップロードする仕様にすることも可能である。   In addition, when using an image file that exists in advance as an image file, in addition to uploading it to the karaoke server 2 as described above, the information registered at the time of user registration or user registration is used. When changing, it is also possible to register the performer image in the user DB 6 and upload the performance data including the musical instrument performance sound later.

図23は、このような変形例に用いられるユーザDB6′を示しており、このユーザDB6′は、図5に示すユーザDB6に比べて、ユーザ画像が追加されていることが特徴になっている。このユーザ画像は、演奏者画像に相当する画像データであり、その中身としては、上述したように楽器を演奏するユーザを撮像した動画に加えて、静止画、イラスト画像、アイコン画像等を用いることが可能である。また、このようなユーザ画像(画像ファイル)は、周知のユーザ登録画面(カラオケサーバ2又は登録処理を行うサーバが提供する画面)において、演奏者画像に係る画像ファイルを指定することで、サーバへアップロードされて、ユーザDB6に格納されることになる。   FIG. 23 shows a user DB 6 ′ used in such a modification, and this user DB 6 ′ is characterized in that a user image is added as compared to the user DB 6 shown in FIG. . This user image is image data corresponding to a player image, and as its contents, a still image, an illustration image, an icon image, or the like is used in addition to a moving image of a user who plays a musical instrument as described above. Is possible. Further, such a user image (image file) is transmitted to the server by designating an image file related to the performer image on a well-known user registration screen (a screen provided by the karaoke server 2 or the server that performs the registration process). It is uploaded and stored in the user DB 6.

また、図24(a)(b)は、このような変形例で用いられる演奏データ89、89′を示しており、これらの演奏データ89、89′は、図7(a)(b)に示す演奏データ9、9′に比べて、演奏者画像が含まれていないことが特徴になっている。なお、このような変形例の演奏データ89、89′を生成するため、カラオケ端末装置11のCPU11aは、上述した図18の第3フローチャートにおけるS37の段階の収録処理で、マイク16で集音した音声データを楽器演奏音としてRAM11cに随時記憶していく制御のみを行い、撮像デバイス11hでの動画撮像は行わず、S39の段階では、図24(a)(b)に示すフォーマットの演奏データ89、89′を送信することになる。その結果、動画撮像を行わないという点でカラオケ端末装置11の処理負担及びユーザの撮像負担は低減されると共に、送信する演奏データのデータ量も削減できるというメリットがある。   FIGS. 24A and 24B show performance data 89 and 89 'used in such a modification, and these performance data 89 and 89' are shown in FIGS. 7A and 7B. Compared with the performance data 9 and 9 'shown, the player image is not included. In order to generate the performance data 89 and 89 ′ of such a modification, the CPU 11a of the karaoke terminal apparatus 11 collects sound with the microphone 16 in the recording process in the step S37 in the third flowchart of FIG. Only control for storing audio data as instrument performance sounds in the RAM 11c as needed is performed, and moving image imaging is not performed by the imaging device 11h. In the step S39, performance data 89 in the format shown in FIGS. , 89 '. As a result, there is an advantage that the processing load of the karaoke terminal apparatus 11 and the user's imaging load are reduced in that no moving image is captured, and the amount of performance data to be transmitted can be reduced.

さらに、図25は、このような変形例において、カラオケサーバ2で生成されるアップロードDB7′を示しており、このアップロードDB7′は、図6に示すアップロードDB7に比べて、演奏者画像が格納されていないことが特徴になっている。このような変形例のアップロードDB7′を生成するため、カラオケサーバ2は、図8の第1フローチャートのS2の段階の演奏データのチェックにおいて、演奏データに演奏者画像が含まれていなくても、チェック結果に問題がないものとして判断し(S3:YES)、演奏データに含まれる楽器演奏音等をアップロードDB7′に格納して蓄積していくことになる。その結果、カラオケサーバ2では、演奏データを受信しても、逐次「演奏者画像」を記憶する処理が省略されるので、カラオケサーバ2の処理負担も低減できるというメリットがある。   Further, FIG. 25 shows an upload DB 7 ′ generated by the karaoke server 2 in such a modification, and this upload DB 7 ′ stores a player image as compared with the upload DB 7 shown in FIG. 6. The feature is not. In order to generate the upload DB 7 ′ of such a modification, the karaoke server 2 checks the performance data at the stage S2 in the first flowchart of FIG. 8 even if the player image is not included in the performance data. It is determined that there is no problem in the check result (S3: YES), and musical instrument performance sounds and the like included in the performance data are stored and accumulated in the upload DB 7 ′. As a result, even if the karaoke server 2 receives the performance data, the process of sequentially storing the “performer image” is omitted, so that the processing load on the karaoke server 2 can be reduced.

さらにまた、カラオケサーバ2は、図9の第2フローチャートのS19の段階で、カラオケデータと共に、検索で該当した楽器演奏音と、その楽器演奏音に応じた演奏者画像を送信するために、検索結果に基づき送信対象となった楽器演奏音が対応付けられているユーザIDを図25のアップロードDB7′から特定し、その特定したユーザIDに対応付けられた演奏者画像(ユーザ画像)を図23のユーザDB6′から抽出して送信対象にする処理を行うことになる。   Furthermore, the karaoke server 2 performs a search in order to transmit the musical instrument performance sound corresponding to the search and the player image corresponding to the musical instrument performance sound together with the karaoke data in step S19 of the second flowchart of FIG. Based on the result, the user ID associated with the musical instrument performance sound to be transmitted is specified from the upload DB 7 'of FIG. 25, and the player image (user image) associated with the specified user ID is shown in FIG. Is extracted from the user DB 6 'and processed for transmission.

なお、このような処理を経て、カラオケデータと共に、楽器演奏音及び演奏者画像は、カラオケサーバ2からカラオケ端末装置11へ送信されることになり、これら送信されたものに対するカラオケ端末装置11での処理は、上記と同じである。以上のような変形例では、演奏者画像(ユーザ画像)はユーザDB6′に予め格納されているものを用いるので、各種処理を省略でき、ユーザの撮像負担も軽減されることから、より手軽に楽器演奏音を楽しむことが可能となる。   In addition, through such processing, the musical instrument performance sound and the player image are transmitted from the karaoke server 2 to the karaoke terminal device 11 together with the karaoke data, and the karaoke terminal device 11 with respect to these transmitted ones. The processing is the same as above. In the above modification, the player image (user image) is stored in the user DB 6 'in advance, so that various processes can be omitted, and the user's imaging burden is reduced. It is possible to enjoy the musical instrument performance.

また、更なる変形例としては、上述した演奏データに演奏者画像を含ませない変形例と、演奏データに演奏者画像を含ませる実施形態とを組み合わせた内容にすることも可能である。この更なる変形例においては、楽器の演奏を行うユーザは、図23に示すユーザDB7′のように、演奏者画像(ユーザ画像)を予め登録しておくことになる。そして、演奏データをアップロードする際は、演奏データに演奏者画像を含ませるか否かは、ユーザ自身の選択に任せることになる。そのため、アップロードされてくる演奏者データの中身は、図7(a)(b)に示すようなフォーマットになる場合(演奏者画像を含む場合)もあれば、図24(a)(b)に示すようなフォーマット(演奏者画像を含まない場合)になることもある。   Further, as a further modification, it is possible to combine the above-described modification in which the performer image is not included in the performance data and the embodiment in which the performer image is included in the performance data. In this further modification, a user who plays a musical instrument registers a performer image (user image) in advance as in a user DB 7 'shown in FIG. When the performance data is uploaded, whether or not to include the performer image in the performance data is left to the user's own selection. Therefore, the contents of the uploaded player data may be in the format shown in FIGS. 7A and 7B (including a player image), or in FIGS. 24A and 24B. It may be in the format shown (when the player image is not included).

図26は、この更なる変形例で、カラオケサーバ2で生成されるアップロードDB7″を示しており、このアップロードDB7″は、図6に示すアップロードDB7及び図25に示すアップロードDB7′に比べて、演奏データIDごとに、演奏者画像が格納されているものと、格納されていないものが存在していることが特徴になっている。すなわち、図7(a)(b)に示すようなフォーマットの演奏データ9、9′を格納する場合は、演奏者画像も格納されることになり、一方、図24(a)(b)に示すようなフォーマットの演奏データ89、89′を格納する場合は、演奏者画像は演奏データ89、89′に含まれないことから、アップロードDB7″に格納されないことになる。   FIG. 26 shows an upload DB 7 ″ generated by the karaoke server 2 as a further modification example, and this upload DB 7 ″ is different from the upload DB 7 shown in FIG. 6 and the upload DB 7 ′ shown in FIG. It is characterized in that there is a player image stored for each performance data ID and a player image stored for each performance data ID. That is, when performance data 9 and 9 'having a format as shown in FIGS. 7A and 7B is stored, a player image is also stored, while FIGS. 24A and 24B are stored. When the performance data 89 and 89 'in the format shown are stored, the performer image is not included in the performance data 89 and 89', and therefore is not stored in the upload DB 7 ".

そして、この更なる変形例において、カラオケサーバ2は、図9の第2フローチャートのS19の段階で、カラオケデータと共に、検索で該当した楽器演奏音と、その楽器演奏音に応じた演奏者画像を送信する際、検索で該当した楽器演奏音に応じた演奏者画像がアップロードDB7″に格納されているいるか否かを判断し、格納されている場合は、その格納されている演奏者画像を送信対象にする。また、検索で該当した楽器演奏音に応じた演奏者画像がアップロードDB7″に格納されていない場合は、上述した変形例のように、ユーザIDによるヒモ付けで、ユーザDB6′から、演奏者画像(ユーザ画像)を抽出して送信対象にする。このような更なる変形例では、表示する演奏者画像として、撮像したものを用いるか、又は予めユーザDB6′に登録しておいたものを用いるかをユーザの希望に応じて柔軟に対応できるメリットがある。   In this further modification, the karaoke server 2 obtains the musical instrument performance sound corresponding to the search and the player image corresponding to the musical instrument performance sound together with the karaoke data in step S19 of the second flowchart of FIG. When transmitting, it is determined whether or not a player image corresponding to the musical instrument performance sound corresponding to the search is stored in the upload DB 7 ″, and if stored, the stored player image is transmitted. In addition, when the performer image corresponding to the musical instrument performance sound corresponding to the search is not stored in the upload DB 7 ″, as in the above-described modification, the user DB 6 ′ adds the string by the user ID. The player image (user image) is extracted and set as a transmission target. In such a further modification, it is possible to flexibly respond to the user's desire whether to use a captured image as a player image to be displayed or to use a pre-registered user image in the user DB 6 '. There is.

また、図18、19に示す第3、4フローチャートに係る処理手順は、仕様に応じて適宜、順序を変更することも勿論可能である。例えば、上述した例で、図12(a)の独奏フレーズ指定画面52は、選択したカラオケ楽曲を演奏する際(演奏前)に表示するようにしていたが、演奏終了後に指定するようにしてもよい。このように演奏終了後に独奏フレーズを指定可能にした仕様では、演奏者自身が上手く演奏できたと感じたフレーズを演奏後に独奏フレーズとして指摘できるので好適である。なお、演奏前に独奏フレーズを指定する仕様の場合は、予め演奏者が独奏フレーズにしたいフレーズを決めている場合などに好適となる。   Moreover, it is of course possible to change the order of the processing procedures according to the third and fourth flowcharts shown in FIGS. 18 and 19 as appropriate according to the specifications. For example, in the above-described example, the solo phrase designation screen 52 in FIG. 12A is displayed when the selected karaoke piece is played (before the performance), but may be designated after the performance is completed. Good. In this way, the specification in which the solo phrase can be specified after the performance is finished is preferable because the phrase that the performer himself / herself was able to perform well can be pointed out as the solo phrase after the performance. Note that the specification of designating a solo phrase before the performance is suitable when the performer has previously decided a phrase to be a solo phrase.

図27に示す第6フローチャートは、演奏終了後に独奏フレーズを指定する変形例の場合の処理手順を示すものであり、上述した図18の第3フローチャートの替わりに用いることができる。図27の第6フローチャートのS60〜S63までは、図18の第3フローチャートのS30〜S33と同じである。また、第6フローチャートでは、S63の段階の後に、CPU11aが図12(b)のスタート画面53を表示して、スタートボタン53bが選択されたか否かを判断する(S64)。   A sixth flowchart shown in FIG. 27 shows a processing procedure in the case of a modification in which a solo phrase is designated after the performance is completed, and can be used instead of the above-described third flowchart of FIG. Steps S60 to S63 in the sixth flowchart in FIG. 27 are the same as steps S30 to S33 in the third flowchart in FIG. In the sixth flowchart, after step S63, the CPU 11a displays the start screen 53 of FIG. 12B and determines whether or not the start button 53b has been selected (S64).

スタートボタン53bが選択されていない場合(S64:NO)、スタートボタン53bの選択待ちの状態となり、スタートボタン53bが選択された場合(S64:YES)、CPU11aは、RAM11cに記憶していたカラオケデータを読み出して、カラオケ楽曲の再生、カラオケ画像と楽曲歌詞の表示を行うと共に、ユーザによる楽器演奏の収録処理を行う(S65)。なお、このようなS64、65の処理は、図18の第3フローチャートのS36、37の処理と同じである。   When the start button 53b is not selected (S64: NO), the selection of the start button 53b is awaited. When the start button 53b is selected (S64: YES), the CPU 11a stores the karaoke data stored in the RAM 11c. Is read, karaoke music is reproduced, karaoke images and music lyrics are displayed, and instrument performance is recorded by the user (S65). Note that the processing in S64 and S65 is the same as the processing in S36 and 37 in the third flowchart of FIG.

カラオケデータの再生(収録処理)が終了すると、CPU11aは、図28(a)の変形例の収録確認画面65を表示し、アップロードボタン65a、やり直しボタン65b、又はプレビューボタン65cのいずれのボタンがユーザにより選択されるかを判断する(S66)。なお、アップロードボタン65a又はやり直しボタン65aが選択された場合は、図18の第3フローチャートの処理と同じになる。   When the reproduction (recording process) of the karaoke data is completed, the CPU 11a displays the recording confirmation screen 65 of the modified example of FIG. 28A, and any of the upload button 65a, the redo button 65b, and the preview button 65c is the user. Is selected (S66). Note that when the upload button 65a or the redo button 65a is selected, the processing is the same as that of the third flowchart in FIG.

また、プレビューボタン65cが選択された場合(S66:プレビュー)、CPU11aは、カラオケ楽曲及び収録された楽器演奏音を再生すると共に、この再生中、図28(b)に示す変形例の独奏フレーズ指定画面66を表示パネル18aに表示する(S67)。なお、このときのカラオケ楽曲の再生も、一緒に再生される楽器演奏音に応じた楽器パートがミュート(消音)される。   When the preview button 65c is selected (S66: preview), the CPU 11a reproduces the karaoke music and the recorded musical instrument performance sound, and specifies the solo phrase of the modified example shown in FIG. 28B during the reproduction. The screen 66 is displayed on the display panel 18a (S67). At this time, the karaoke music piece is also muted (muted) according to the musical instrument performance sound played together.

図28(b)の独奏フレーズ指定画面66は、選択可能な独奏フレーズ指定ボタン66aを具備しており、プレビューによる再生中に独奏フレーズ指定ボタン66aが選択されると、その選択された時に再生されているカラオケ楽曲のフレーズが独奏フレーズに指定されたものとして、そのフレーズ数を、CPU11aが独奏指定情報としてRAM11cに記憶する制御処理を行う(S68)。なお、図28(b)の独奏フレーズ指定画面66は、プレビュー再生中であれば、何度でも独奏フレーズボタン66aを選択できるようにしており、それにより、容易に独奏フレーズを複数箇所で指定できるようにしている。   The solo phrase specification screen 66 in FIG. 28B includes a selectable solo phrase specification button 66a. When the solo phrase specification button 66a is selected during playback by preview, the solo phrase specification button 66a is played back. Assuming that the phrase of the karaoke piece being played is designated as a solo phrase, the CPU 11a performs control processing for storing the number of phrases in the RAM 11c as solo designation information (S68). Note that the solo phrase designation screen 66 in FIG. 28B allows the solo phrase button 66a to be selected any number of times as long as the preview is being played back, so that the solo phrase can be easily designated at a plurality of locations. I am doing so.

また、独奏フレーズを指定してプレビュー再生が終了すると、再度、図28(a)の収録確認画面65が表示される段階へ戻る(S66)。そして、独奏フレーズの指定後にアップロードボタン65aが選択された場合(S66:アップロード)、図18の第3フローチャートの場合と同様に、CPU11aは、記憶された楽器演奏音及び演奏者画像等を含む演奏データを、図7(a)(b)に示すようなフォーマットでカラオケサーバ11へ送信する(S69)。なお、複数箇所で独奏フレーズが指定された場合は、図7(a)(b)に示すフォーマットの「独奏フレーズ」という項目の中に複数のフレーズ数が設定されることになる。   When the solo phrase is designated and preview reproduction is completed, the process returns to the stage where the recording confirmation screen 65 shown in FIG. 28A is displayed again (S66). When the upload button 65a is selected after designating the solo phrase (S66: upload), as in the case of the third flowchart of FIG. 18, the CPU 11a performs the performance including the stored musical instrument performance sound and the player image. The data is transmitted to the karaoke server 11 in a format as shown in FIGS. 7A and 7B (S69). When a solo phrase is specified at a plurality of locations, a plurality of phrases are set in the item “single phrase” in the format shown in FIGS.

さらに、図19の第4フローチャートにおける処理手順に対しても、処理順序の変更が可能である。すなわち、図19の第4フローチャートでは、S40の段階の演奏モードの選択後に、S43の段階で検索の仕方を選んでから、S44又は47の段階でカラオケ楽曲を選択するようにしているが、モード選択の後にカラオケ楽曲を予約として選択してから、検索の仕方を選択することも可能であり、さらには、先にカラオケ楽曲を選択してから、その後にモード選択、検索の仕方の選択を順次行うようにすることも可能である。   Furthermore, the processing order can be changed for the processing procedure in the fourth flowchart of FIG. That is, in the fourth flowchart of FIG. 19, after selecting the performance mode in step S40, the search method is selected in step S43, and then the karaoke piece is selected in step S44 or 47. It is also possible to select a karaoke song as a reservation after selection and then select a search method. Furthermore, after selecting a karaoke song first, a mode selection and a search method selection are sequentially performed thereafter. It is also possible to do so.

図29に示す第7フローチャートは、図19の第4フローチャートの替わりに用いられる変形例の処理手順を示すものであり、モード選択の後にカラオケ楽曲を選択し、その後に検索の仕方を選択する処理手順になっている。この第7フローチャートは、最初のS70の段階で通常モードが選択され(S70:通常モード)、その後のS71、72へ進む処理については、図19の第4フローチャートのS40〜42と同じにしている。一方、最初のS70の段階で演奏モードが選択された場合(S70:演奏モード)、CPU11aは、カラオケ楽曲の選曲画面を表示する制御を行って、ユーザによるカラオケ楽曲の選曲を受け付け(S73)、受け付けたカラオケ楽曲を指定する楽曲指定情報をカラオケサーバ2へ送信する制御を行う(S74)。なお、カラオケサーバ2は、楽曲指定情報を受信すると、楽曲指定情報に応じたカラオケ楽曲の楽曲情報(カラオケ楽曲の曲名、歌手名・歌い出しを表す歌詞テキスト等)をカラオケ端末装置11へ送信することになり、カラオケ端末装置11は、このような楽曲情報を受信すると、選曲を受け付けたカラオケ楽曲を予約したことになり、予約に伴い、図30(a)に示す楽曲予約画面67を表示パネル18aに表示する(図29の第7フローチャートのS75)。   The seventh flowchart shown in FIG. 29 shows a processing procedure of a modified example used in place of the fourth flowchart of FIG. 19, and a process of selecting a karaoke piece after mode selection and then selecting a search method. It is a procedure. In the seventh flowchart, the normal mode is selected in the first stage of S70 (S70: normal mode), and the subsequent processing to S71 and 72 is the same as S40 to 42 in the fourth flowchart of FIG. . On the other hand, when the performance mode is selected in the first stage of S70 (S70: performance mode), the CPU 11a performs control to display a song selection screen for karaoke songs and accepts song selection of karaoke songs by the user (S73). Control is performed to transmit music designation information for designating the accepted karaoke music to the karaoke server 2 (S74). When the karaoke server 2 receives the song designation information, the karaoke server 2 transmits to the karaoke terminal device 11 the song information of the karaoke song corresponding to the song designation information (the song title of the karaoke song, the lyric text indicating the singer's name, singing, etc.). Therefore, when the karaoke terminal device 11 receives such music information, it has reserved the karaoke music for which the music selection has been accepted, and the music reservation screen 67 shown in FIG. 18a (S75 in the seventh flowchart of FIG. 29).

楽曲予約画面67は、選択可能なランダム検索ボタン67a及び条件検索ボタン67bを有しており、ランダム検索ボタン67aが選択されると、図29の第7フローチャートのS76の段階からランダム検索の方へ進むことになり(S76:ランダム検索)、また、条件検索ボタン67bが選択されると、S76の段階から条件検索の方へ進むことになる(S76:条件検索)。   The music reservation screen 67 has a selectable random search button 67a and a condition search button 67b. When the random search button 67a is selected, the process proceeds from step S76 in the seventh flowchart of FIG. 29 toward the random search. When the condition search button 67b is selected (S76: Conditional search), the process proceeds from the stage of S76 to the condition search (S76: Conditional search).

ランダム検索の方へ進んだ場合(S76:ランダム検索)、CPU11aは、予約に係る係るカラオケ楽曲の曲ID、演奏モードフラグ、及びカラオケ楽曲の歌唱を行うユーザのユーザID等を含む楽曲指定情報をカラオケサーバ2へ送信する制御を行う(S77)。また、条件検索の方へ進んだ場合(S76:条件検索)、図19の第4フローチャートのS46の段階の場合と同様に、CPU11aは、図14(b)の検索条件選択画面62を表示する制御を行い、検索条件の選択を受け付け(S78)、それから、予約に係るカラオケ楽曲の曲ID、演奏モードフラグ、設定した検索条件、及びカラオケ楽曲の歌唱を行うユーザのユーザID等を含む楽曲指定情報をカラオケサーバ2へ送信する制御を行うことになる(S79)。   When the process proceeds to the random search (S76: random search), the CPU 11a stores the song designation information including the song ID of the karaoke song related to the reservation, the performance mode flag, the user ID of the user who sings the karaoke song, and the like. Control to transmit to the karaoke server 2 is performed (S77). Further, when the process proceeds to the condition search (S76: condition search), the CPU 11a displays the search condition selection screen 62 in FIG. 14B as in the case of the step S46 in the fourth flowchart of FIG. Control is performed and selection of search conditions is accepted (S78), and then song designation including the song ID of the karaoke song related to the reservation, the performance mode flag, the set search condition, and the user ID of the user who sings the karaoke song Control to transmit information to the karaoke server 2 is performed (S79).

また、図31に示す第8フローチャートは、図19の第4フローチャートの替わりに用いられる別の変形例の処理手順を示すものであり、先にカラオケ楽曲を選択してから、モード選択、検索の仕方の選択を順次行う処理手順になっている。すなわち、最初にCPU11aが、ユーザによるカラオケ楽曲の選曲を受け付け(S80)、受け付けたカラオケ楽曲を指定する楽曲指定情報をカラオケサーバ2へ送信する制御を行い(S81)、この楽曲指定情報の送信により、カラオケ端末装置11は、カラオケサーバ2より送信される楽曲情報(楽曲指定情報に応じたカラオケ楽曲の楽曲情報)を受信して、選曲を受け付けたカラオケ楽曲を予約したことになる。そして、カラオケ端末装置11は、予約に伴い、図30(b)に示す楽曲予約画面68を表示パネル18aに表示する(S82)。   Further, the eighth flowchart shown in FIG. 31 shows a processing procedure of another modified example used in place of the fourth flowchart of FIG. 19. This is a processing procedure for sequentially selecting methods. That is, first, the CPU 11a receives a song selection of karaoke music by the user (S80), performs control to transmit the music specification information specifying the received karaoke music to the karaoke server 2 (S81), and transmits the music specification information. The karaoke terminal device 11 receives the music information (music information of the karaoke music corresponding to the music designation information) transmitted from the karaoke server 2 and reserves the karaoke music for which the music selection has been accepted. And the karaoke terminal device 11 displays the music reservation screen 68 shown in FIG.30 (b) on the display panel 18a with reservation (S82).

楽曲予約画面68は、選択可能な通常モードボタン68a及び演奏モードボタン68bを有しており、通常モードボタン68aが選択されると、図31の第8フローチャートのS83の段階から通常モードの方へ進むことになり(S83:通常モード)、また、演奏モードボタン68bが選択されると、S83の段階から演奏モードの方へ進むことになる(S83:演奏モード)。   The music reservation screen 68 has a selectable normal mode button 68a and a performance mode button 68b. When the normal mode button 68a is selected, the normal mode is shifted from the step S83 in the eighth flowchart of FIG. 31 to the normal mode. If the performance mode button 68b is selected (S83: performance mode), the process proceeds from the step S83 to the performance mode (S83: performance mode).

通常モードへ進んだ場合(S83:通常モード)、CPU11aは、予約に係るカラオケ楽曲の曲ID及びカラオケ楽曲の歌唱を行うユーザのユーザID等を含む楽曲指定情報をカラオケサーバ2へ送信する制御を行う(S84)。また、演奏モードへ進んだ場合(S83:演奏モード)、CPU11aは、次に図30(a)の楽曲予約画面67を表示パネル18aに表示し(S85)、この後のS86〜88の処理内容は、上述した図29の第7フローチャートのS77〜79と同じになる。以上のように、図19の第4フローチャートの処理手順は、図29、31の第7、8フローチャートに示す処理手順に変更することも可能であるので、本発明は様々な仕様に応じた処理手順に適応できる。   When proceeding to the normal mode (S83: normal mode), the CPU 11a performs control to transmit to the karaoke server 2 music designation information including the song ID of the karaoke song related to the reservation and the user ID of the user who sings the karaoke song. Perform (S84). When the performance mode has been entered (S83: performance mode), the CPU 11a next displays the music reservation screen 67 of FIG. 30A on the display panel 18a (S85), and the processing contents of S86 to 88 thereafter. Is the same as S77 to S79 in the seventh flowchart of FIG. 29 described above. As described above, the processing procedure of the fourth flowchart of FIG. 19 can be changed to the processing procedures shown in the seventh and eighth flowcharts of FIGS. 29 and 31, so that the present invention can perform processing according to various specifications. Can adapt to the procedure.

また、カラオケ楽曲の再生時に演奏者画像を表示する画面内容も、図16(a)に示す形態以外に、図32に示すように、演奏者画像71(ギターを演奏するユーザの画像)を表示パネル18aに全画面的に表示すると共に、表示パネル18aの下方で演奏者画像71に重畳して楽曲歌詞70bを表示するようにしてもよい。この図32に示す形態では、カラオケ画像(通常のカラオケの背景画像)が表示されないことから、カラオケサーバ2は、演奏者画像71をカラオケ端末装置11へ送信する場合、カラオケ画像の送信を省略して、送信に要するデータ量を削減し処理負担の低減を図ってもよい。なお、カラオケ画像の送信を省略することは、図16(b)、図17(a)(b)に示すように、複数の演奏者画像等を表示する場合にも適用でき、その場合には、各演奏者画像等の周囲は白一色又は黒一色等の表示にする。   In addition to the form shown in FIG. 16 (a), the screen content for displaying the player image during playback of karaoke music also displays a player image 71 (image of the user who plays the guitar) as shown in FIG. The music lyrics 70b may be displayed on the panel 18a in a full screen and superimposed on the performer image 71 below the display panel 18a. In the form shown in FIG. 32, since the karaoke image (ordinary karaoke background image) is not displayed, the karaoke server 2 omits the transmission of the karaoke image when the player image 71 is transmitted to the karaoke terminal device 11. Thus, the amount of data required for transmission may be reduced to reduce the processing load. Note that the transmission of karaoke images can also be applied when displaying a plurality of player images, as shown in FIGS. 16B, 17A, and 17B. The periphery of each player image is displayed in white or black.

さらにまた、カラオケ端末装置11が、いわゆるマルチディスプレイに対応し、例えば、図33に示すように、カラオケ端末装置11が変形例の映像出力デバイス11g′を具備し、この映像出力デバイス11g′が、第1表示装置18′及び第2表示装置19′との接続を可能にすると共に、各表示装置18′、19′へ異なる内容を出力できる仕様であれば、様々な表示形態を実現することができる。   Furthermore, the karaoke terminal apparatus 11 corresponds to a so-called multi-display. For example, as shown in FIG. 33, the karaoke terminal apparatus 11 includes a video output device 11g ′ of a modified example, and the video output device 11g ′ A variety of display modes can be realized as long as the specification enables the connection between the first display device 18 'and the second display device 19' and the output of different contents to the display devices 18 'and 19'. it can.

具体的には、第1表示装置18′に演奏者画像を表示すると共に、第2表示装置19′にカラオケ画像及び楽曲歌詞を表示する形態を提供することが可能である。また、それ以外にも、第1表示装置18′と第2表示装置19′の表示内容を同じにする形態、第1表示装置18′に演奏者画像を表示すると共に、第2表示装置19′に歌唱者画像を表示する形態(表示内容を逆にすることも勿論可能)も可能である。さらには、カラオケ楽曲の進行に合わせて、前奏時、間奏時、及び後奏等の歌唱時以外は第1表示装置18′に演奏者画像を表示すると共に、第2表示装置19′には歌唱者画像を表示しておき、再生が歌唱時に変わると、各表示装置18′、19′の表示内容を切り替え、第1表示装置18′に歌唱者画像を表示し、第2表示装置19′に演奏者画像を表示するようにしてもよい。   Specifically, it is possible to provide a form in which a player image is displayed on the first display device 18 ′ and a karaoke image and song lyrics are displayed on the second display device 19 ′. In addition, the display contents of the first display device 18 ′ and the second display device 19 ′ are the same, the player image is displayed on the first display device 18 ′, and the second display device 19 ′. It is also possible to display the singer image on the screen (the display content can be reversed, of course). Furthermore, in accordance with the progress of the karaoke music, the player image is displayed on the first display device 18 'except during the prelude, the interlude, and the follower, and the second display device 19' sings. If the player image is displayed and the playback changes during singing, the display contents of the display devices 18 'and 19' are switched, the singer image is displayed on the first display device 18 ', and the second display device 19' is displayed. A player image may be displayed.

さらにまた、表示すべき演奏者画像が複数ある場合で、カラオケ楽曲のフレーズ中で、主となって演奏する楽器パートがフレーズごとに適宜切り替わるときは、再生中のフレーズで主となる演奏に係る演奏者画像を第1表示装置18′に表示し、残りの演奏者画像は第2表示装置19′に表示し、主となる演奏に係る楽器パートが変わるごとに、第1表示装置18′の表示内容を主の演奏に係る演奏者画像に適宜切り替わるように表示制御を行うようにしてもよい。   Furthermore, when there are a plurality of player images to be displayed and the musical instrument part to be mainly played is switched appropriately for each phrase in the phrase of the karaoke piece, it relates to the main performance in the phrase being played back. The performer image is displayed on the first display device 18 ', the remaining performer images are displayed on the second display device 19', and each time the instrument part related to the main performance changes, the first display device 18 ' Display control may be performed so that the display content is appropriately switched to a player image related to the main performance.

なお、上述した第1表示装置18′及び第2表示装置19′は異なる画面サイズのものを用いることも可能であり、画面サイズが異なる場合は、小さい方の画面サイズのものを第2表示装置19′として用いるようにする。また、小さい方の画面サイズのものを第2表示装置19′として用いる場合には、カラオケ端末装置11の装置本体に取り付けられるタッチパネル式の表示装置を第2表示装置19′に利用することもでき、このようなタッチパネル式の表示装置はリモコン装置のように様々な操作をユーザから受け付けられると共に、カラオケ画像及び楽曲歌詞も表示可能にすることで、ユーザの手元で様々な内容を確認できるメリットがある。   The first display device 18 'and the second display device 19' described above can have different screen sizes. If the screen sizes are different, the smaller display size is used for the second display device. It is used as 19 '. Further, when a screen having a smaller screen size is used as the second display device 19 ', a touch panel display device attached to the main body of the karaoke terminal device 11 can be used as the second display device 19'. Such a touch panel type display device can receive various operations from the user like a remote control device, and can also display karaoke images and song lyrics so that various contents can be confirmed at the user's hand. is there.

さらに、上述した実施例及び変形例等におけるカラオケ楽曲の再生について、カラオケ端末装置11が、マイナスワン機能を働かせ、所定の楽曲パートをミュート(消音)する内容で説明したが、ミュート以外にも、その対象となる所定の楽曲パートの音量を他の楽器パートの音量より低下するように制御してもよい(マイナスワン的な機能に相当)。   Furthermore, about the reproduction | regeneration of the karaoke music in the Example, the modification, etc. which were mentioned above, the karaoke terminal device 11 demonstrated the content which makes a minus one function work and mute (mute) a predetermined music part. You may control so that the volume of the predetermined music part used as the object may fall below the volume of other musical instrument parts (it is equivalent to a minus one function).

すなわち、カラオケ端末装置11は、カラオケ楽曲に含まれる各楽器パートの音量を、通常、10段階のレベルにおける「8」のレベルで出力することをデフォルト(基準音量)にしている場合、対象となる楽曲パートの音量をミュートするのではなく、基準音量より下げた「1」〜「3」のレベルで出力するようにしてもよい。このように小音量で出力すれば、正規の楽器パートの楽器音がかすかに聞こえる状況となるので、収録時の案内的な楽器音として用いることができるので好適となる。そして、このようなマイナスワン的な機能を働かせる(ミュートせずに基準音量より小音量にする)のは、楽器演奏音の収録を行う場合のカラオケ楽曲の再生時、演奏モードにおけるカラオケ楽曲の再生時、検索により複数の楽器演奏音が該当して、それらの各楽器演奏音を再生する場合、独奏フレーズでカラオケ楽曲を再生する場合などに適用可能である。   That is, the karaoke terminal device 11 is a target when the volume (volume) of each instrument part included in the karaoke music is normally output at a level of “8” in 10 levels (reference volume). Instead of muting the volume of the music part, it may be output at a level of “1” to “3” that is lower than the reference volume. If the sound is output at such a small volume, the instrumental sound of the regular instrument part can be heard faintly, which is preferable because it can be used as a guiding instrumental sound during recording. And this minus one function works (the volume is lower than the standard volume without muting) when playing karaoke music when recording instrument performance sound, playing karaoke music in the performance mode. In some cases, a plurality of musical instrument performance sounds correspond to a search, and each of those musical instrument performance sounds is reproduced, or a karaoke piece is reproduced with a solo phrase.

本発明は、楽器演奏を楽しむユーザによる楽器演奏音を、カラオケ楽曲に組み入れてカラオケ楽曲を歌唱する場合に対して好適に利用可能である。   INDUSTRIAL APPLICABILITY The present invention can be suitably used when a musical instrument performance sound by a user who enjoys musical instrument performance is incorporated into karaoke music and singing karaoke music.

1 カラオケシステム
2 カラオケサーバ
4 カラオケサービスプログラム
5 カラオケDB
6 ユーザDB
7 アップロードDB
11、21、31 カラオケ端末装置
14 カラオケプログラム
NW ネットワーク
1 Karaoke system 2 Karaoke server 4 Karaoke service program 5 Karaoke DB
6 User DB
7 Upload DB
11, 21, 31 Karaoke terminal device 14 Karaoke program NW network

Claims (11)

複数の楽器パートを含むカラオケ楽曲及び前記カラオケ楽曲に係る楽曲歌詞を有するカラオケデータを複数記憶したカラオケサーバと、前記カラオケサーバへカラオケ楽曲を指定する旨の楽曲指定情報を送信することで、前記楽曲指定情報に応じたカラオケデータを前記カラオケサーバから受信してカラオケ楽曲の再生及び楽曲歌詞の表示を行うカラオケ端末装置とを備えるカラオケシステムにおいて、
前記カラオケサーバは、
カラオケ楽曲に含まれる複数の楽器パートの中の一つの楽器パートに応じた楽器演奏音及び前記楽器演奏音を演奏した演奏者に係る演奏者画像を記憶するようにしてあり、
前記カラオケ端末装置から送信されてきた楽曲指定情報を受信した場合、前記楽曲指定情報が指定するカラオケ楽曲に係る楽器演奏音の有無を記憶する中から検索する検索手段と、
検索に該当する楽器演奏音がある場合、該当した楽器演奏音、前記楽器演奏音に応じた演奏者画像、及び前記楽曲指定情報に応じたカラオケデータを前記カラオケ端末装置へ送信するデータ送信手段と
検索に該当する楽器演奏音がない場合、前記楽曲指定情報に応じたカラオケデータを前記カラオケ端末装置へ送信する手段と
を備え、
前記カラオケ端末装置は、
前記カラオケサーバから送信される楽器演奏音、演奏者画像、及びカラオケデータを受信する手段と、
受信したカラオケデータが有するカラオケ楽曲に含まれる複数の楽器パートの中で、受信した楽器演奏音に係る楽器パートをミュート、又は受信した楽器演奏音に係る楽器パートの音量を他の楽器パートより低下してカラオケ楽曲の再生を行うと共に、前記カラオケ楽曲の再生に合わせて、受信した楽器演奏音の再生を行う再生手段と、
前記再生手段の再生に合わせて、前記カラオケデータが有する楽曲歌詞及び受信した演奏者画像の表示を行う表示手段と
を備えることを特徴とするカラオケシステム。
A karaoke server storing a plurality of karaoke data having karaoke music pieces including a plurality of instrument parts and song lyrics related to the karaoke music pieces, and sending the music designation information indicating that the karaoke music pieces are designated to the karaoke server. In a karaoke system comprising a karaoke terminal device that receives karaoke data corresponding to specified information from the karaoke server and reproduces karaoke music and displays music lyrics,
The karaoke server
A musical instrument performance sound corresponding to one musical instrument part among a plurality of musical instrument parts included in the karaoke music piece and a player image related to the performer who performed the musical instrument performance sound are stored.
When receiving the music designation information transmitted from the karaoke terminal device, search means for searching from storing the presence or absence of the musical instrument performance sound related to the karaoke music designated by the music designation information;
Data transmitting means for transmitting to the karaoke terminal device karaoke data corresponding to the musical instrument performance sound, a player image corresponding to the musical instrument performance sound, and karaoke designation information when there is a musical instrument performance sound corresponding to the search; ,
Means for transmitting karaoke data corresponding to the music designation information to the karaoke terminal device when there is no musical instrument performance sound corresponding to the search ;
The karaoke terminal device
Means for receiving musical instrument performance sounds, performer images, and karaoke data transmitted from the karaoke server;
Among a plurality of instrument parts included in the karaoke music included in the received karaoke data, the instrument part related to the received instrument performance sound is muted, or the volume of the instrument part related to the received instrument performance sound is reduced compared to other instrument parts. And reproducing means for reproducing the musical instrument performance sound in accordance with the reproduction of the karaoke music,
A karaoke system comprising: display means for displaying the song lyrics of the karaoke data and the received player image in accordance with the reproduction of the reproduction means.
前記カラオケサーバは、
アップロードされてくる楽器演奏音及び演奏者画像を受信する手段を備え、
受信した楽器演奏音及び演奏者画像を記憶するようにしてある請求項1に記載のカラオケシステム。
The karaoke server
A means for receiving uploaded instrument performance sounds and performer images;
The karaoke system according to claim 1, wherein the received musical instrument performance sound and player image are stored.
前記カラオケサーバは、
カラオケユーザに係る情報を格納したユーザデータベースを記憶しており、
前記ユーザデータベースには予め、演奏者画像が格納してあり、
アップロードされてくる楽器演奏音を受信する手段を備え、
受信した楽器演奏音を記憶するようにしてある請求項1に記載のカラオケシステム。
The karaoke server
It stores a user database that stores information related to karaoke users,
A player image is stored in advance in the user database,
It has a means to receive uploaded instrument performances,
The karaoke system according to claim 1, wherein the received musical instrument performance sound is stored.
前記カラオケ端末装置は、撮像手段を備えており、
前記表示手段は、前記撮像手段が撮像した撮像画像を、前記楽曲歌詞及び前記演奏者画像と共に表示する請求項1乃至請求項3のいずれか1項に記載のカラオケシステム。
The karaoke terminal device includes an imaging means,
The karaoke system according to any one of claims 1 to 3, wherein the display unit displays a captured image captured by the imaging unit together with the music lyrics and the performer image.
検索に該当する楽器演奏音が複数ある場合、前記データ送信手段は、該当した複数の楽器演奏音及び前記複数の楽器演奏音に応じた複数の演奏者画像を送信するようにしてあり、
前記再生手段は、再生対象の楽器演奏音を、カラオケ楽曲の一定期間ごとに、前記複数の楽器演奏音の中から順次切り替えるようにしており、
前記表示手段は、表示対象の演奏者画像を、前記複数の演奏者画像の中から、前記再生手段が再生を行う楽器演奏音に応じた演奏者画像へと順次切り替えるようにしてある請求項1乃至請求項4のいずれか1項に記載のカラオケシステム。
When there are a plurality of musical instrument performance sounds corresponding to the search, the data transmission means transmits a plurality of musical instrument performance sounds and a plurality of player images corresponding to the plurality of musical instrument performance sounds,
The reproduction means is configured to sequentially switch the musical instrument performance sound to be reproduced from the plurality of musical instrument performance sounds for each predetermined period of karaoke music,
2. The display unit sequentially switches a player image to be displayed from the plurality of player images to a player image corresponding to a musical instrument performance sound reproduced by the reproduction unit. The karaoke system of any one of thru | or 4.
異なる楽器パートで検索に該当する楽器演奏音がある場合、前記データ送信手段は、該当した異なる各楽器パートの複数の楽器演奏音及び前記複数の楽器演奏音に応じた複数の演奏者画像を送信するようにしてあり、
前記再生手段は、カラオケデータが有するカラオケ楽曲に含まれる複数の楽器パートの中で、前記複数の楽器演奏音に応じた異なる楽器パートをミュート、又は前記異なる楽器パートの音量を他の楽器パートより低下してカラオケ楽曲の再生を行うと共に、前記カラオケ楽曲の再生に合わせて前記複数の楽器演奏音の再生を行うようにしてあり、
前記再生手段の再生に合わせて、カラオケデータが有する楽曲歌詞及び前記複数の演奏者画像の表示を行うようにしてある請求項1乃至請求項5のいずれか1項に記載のカラオケシステム。
When there are musical instrument performance sounds corresponding to the search in different musical instrument parts, the data transmission means transmits a plurality of musical instrument performance sounds of the corresponding different musical instrument parts and a plurality of performer images corresponding to the plurality of musical instrument performance sounds. And
The reproducing means is configured to mute different musical instrument parts corresponding to the musical instrument performance sounds among the plural musical instrument parts included in the karaoke music included in the karaoke data, or to set the volume of the different musical instrument parts from other musical instrument parts. The karaoke music is played back at a reduced rate, and the musical instrument performance sounds are played back in accordance with the playback of the karaoke music.
6. The karaoke system according to claim 1, wherein music lyrics included in karaoke data and the plurality of player images are displayed in accordance with reproduction by the reproduction unit.
前記楽器演奏音には、カラオケ楽曲の中の少なくとも一つの期間を独奏として指定する独奏指定情報が付帯しており、
前記再生手段は、前記独奏指定情報が指定するカラオケ楽曲の中の期間、カラオケデータが有するカラオケ楽曲に含まれる全ての楽器パートをミュート、又は前記全ての楽器パートの音量を基準音量より低下すると共に、前記楽器演奏音の再生を行うようにしてある請求項1乃至請求項6のいずれか1項に記載のカラオケシステム。
The instrument performance sound is accompanied by solo specification information that specifies at least one period of karaoke music as a solo,
The playback means mute all instrument parts included in the karaoke music included in the karaoke music included in the karaoke music specified by the solo specification information, or reduce the volume of all the instrument parts below a reference volume. The karaoke system according to any one of claims 1 to 6, wherein the musical instrument performance sound is reproduced.
前記カラオケ端末装置は、
検索条件を受け付ける受付手段と、
前記受付手段が受け付けた検索条件を前記カラオケサーバへ送信する手段と
を備え、
前記検索手段は、前記カラオケサーバへ送信されてきた検索条件に該当する楽器演奏音を検索するようにしてある請求項1乃至請求項7のいずれか1項に記載のカラオケシステム。
The karaoke terminal device
A receiving means for receiving search conditions;
Means for transmitting the search condition received by the receiving means to the karaoke server,
The karaoke system according to any one of claims 1 to 7, wherein the search means is configured to search for musical instrument performance sounds corresponding to a search condition transmitted to the karaoke server.
複数の楽器パートを含むカラオケ楽曲及び前記カラオケ楽曲に係る楽曲歌詞を有するカラオケデータを複数記憶したカラオケサーバへ、カラオケ端末装置がカラオケ楽曲を指定する旨の楽曲指定情報を送信することで、前記楽曲指定情報に応じたカラオケデータを前記カラオケサーバから受信してカラオケ楽曲の再生及び楽曲歌詞の表示を行うカラオケ再生表示方法において、
前記カラオケサーバは、
カラオケ楽曲に含まれる複数の楽器パートの中の一つの楽器パートに応じた楽器演奏音及び前記楽器演奏音を演奏した演奏者に係る演奏者画像を記憶しており、
前記カラオケ端末装置から送信されてきた楽曲指定情報を受信した場合、前記楽曲指定情報が指定するカラオケ楽曲に係る楽器演奏音の有無を記憶する中から検索するステップと、
検索に該当する楽器演奏音がある場合、該当した楽器演奏音、前記楽器演奏音に応じた演奏者画像、及び前記楽曲指定情報に応じたカラオケデータを前記カラオケ端末装置へ送信するステップと
検索に該当する楽器演奏音がない場合、前記楽曲指定情報に応じたカラオケデータを前記カラオケ端末装置へ送信するステップと
を備え、
前記カラオケ端末装置は、
前記カラオケサーバから送信される楽器演奏音、演奏者画像、及びカラオケデータを受信するステップと、
前記カラオケデータが有するカラオケ楽曲に含まれる複数の楽器パートの中で、受信した楽器演奏音に係る楽器パートをミュート、又は受信した楽器演奏音に係る楽器パートの音量を他の楽器パートより低下してカラオケ楽曲の再生を行うと共に、前記カラオケ楽曲の再生に合わせて、受信した楽器演奏音の再生を行うステップと、
前記再生に合わせて、前記カラオケデータが有する楽曲歌詞及び受信した演奏者画像の表示を行うステップと
を備えることを特徴とするカラオケ再生表示方法。
By transmitting song designation information indicating that the karaoke terminal device designates a karaoke song to a karaoke server that stores a plurality of karaoke data having karaoke songs including a plurality of instrument parts and song lyrics related to the karaoke song, the song In a karaoke playback display method for receiving karaoke data corresponding to specified information from the karaoke server and displaying karaoke music and displaying song lyrics,
The karaoke server
Storing a musical instrument performance sound corresponding to one musical instrument part of a plurality of musical instrument parts included in the karaoke music piece and a player image relating to the performer who performed the musical instrument performance sound;
When receiving the music designation information transmitted from the karaoke terminal device, the step of searching from storing the presence or absence of the musical instrument performance sound related to the karaoke music designated by the music designation information;
If there is a musical instrument performance sound corresponding to the search, transmitting the corresponding musical instrument performance sound, a player image corresponding to the musical instrument performance sound, and karaoke data corresponding to the music designation information to the karaoke terminal device ;
When there is no musical instrument performance sound corresponding to the search, the karaoke data according to the music designation information is transmitted to the karaoke terminal device ,
The karaoke terminal device
Receiving musical instrument performance sounds, performer images, and karaoke data transmitted from the karaoke server;
Among a plurality of musical instrument parts included in the karaoke music included in the karaoke data, the musical instrument part related to the received musical instrument performance sound is muted or the volume of the musical instrument part related to the received musical instrument performance sound is reduced compared to other musical instrument parts. Replaying the karaoke music and replaying the received musical instrument performance sound along with the karaoke music replay;
A karaoke playback display method comprising: displaying the song lyrics of the karaoke data and the received player image in accordance with the playback.
複数の楽器パートを含むカラオケ楽曲及び前記カラオケ楽曲に係る楽曲歌詞を有するカラオケデータを複数記憶する手段を備え、外部端末から送信されてくるカラオケ楽曲を指定する旨の楽曲指定情報を受信することで、前記楽曲指定情報に応じたカラオケデータを前記楽曲指定情報の送信元の外部端末へ送信するようにしてあるカラオケサーバにおいて、
カラオケ楽曲に含まれる複数の楽器パートの中の一つの楽器パートに応じた楽器演奏音及び前記楽器演奏音を演奏した演奏者に係る演奏者画像を記憶するようにしてあり、
外部端末から送信されてきた楽曲指定情報を受信した場合、前記楽曲指定情報が指定するカラオケ楽曲に係る楽器演奏音の有無を記憶する中から検索する検索手段と、
検索に該当する楽器演奏音がある場合、該当した楽器演奏音、前記楽器演奏音に応じた演奏者画像、及び前記楽曲指定情報に応じたカラオケデータを、前記楽曲指定情報の送信元の外部端末へ送信するデータ送信手段と
検索に該当する楽器演奏音がない場合、前記楽曲指定情報に応じたカラオケデータを、前記楽曲指定情報の送信元の外部端末へ送信する手段と
を備えることを特徴とするカラオケサーバ。
By means of storing a plurality of karaoke data having a karaoke song including a plurality of instrument parts and song lyrics related to the karaoke song, and receiving song designation information for designating a karaoke song transmitted from an external terminal In the karaoke server configured to transmit karaoke data corresponding to the music designation information to the external terminal that is the transmission source of the music designation information,
A musical instrument performance sound corresponding to one musical instrument part among a plurality of musical instrument parts included in the karaoke music piece and a player image related to the performer who performed the musical instrument performance sound are stored.
When receiving the music designation information transmitted from the external terminal, search means for searching from storing the presence or absence of the instrument performance sound related to the karaoke music designated by the music designation information;
If there is a musical instrument performance sound corresponding to the search, the corresponding musical instrument performance sound, a player image corresponding to the musical instrument performance sound, and karaoke data corresponding to the music specification information are sent to the external terminal that is the transmission source of the music specification information Data transmission means for transmitting to ,
A karaoke server comprising: means for transmitting karaoke data corresponding to the music designation information to an external terminal that is a transmission source of the music designation information when there is no musical instrument performance sound corresponding to the search .
通信デバイスと、複数の楽器パートを含むカラオケ楽曲及び前記カラオケ楽曲に係る楽曲歌詞を有するカラオケデータを記憶すると共に、カラオケ楽曲に含まれる複数の楽器パートの中の一つの楽器パートに応じた楽器演奏音及び前記楽器演奏音を演奏した演奏者に係る演奏者画像を記憶する記憶デバイスとを備えるコンピュータに、外部端末から送信されてくるカラオケ楽曲を指定する旨の楽曲指定情報を前記通信デバイスを通じて受信することで、前記楽曲指定情報に応じたカラオケデータを前記楽曲指定情報の送信元の外部端末へ前記通信デバイスを通じて送信する処理を行わせるためのコンピュータプログラムにおいて、
前記コンピュータを、
外部端末から送信されてきた楽曲指定情報を受信した場合、前記楽曲指定情報が指定するカラオケ楽曲に係る楽器演奏音の有無を記憶する中から検索する処理を行う手段と、
検索に該当する楽器演奏音がある場合、該当した楽器演奏音、前記楽器演奏音に応じた演奏者画像、及び前記楽曲指定情報に応じたカラオケデータを、前記楽曲指定情報の送信元の外部端末へ送信する処理を、前記通信デバイスを通じて行う手段と
検索に該当する楽器演奏音がない場合、前記楽曲指定情報に応じたカラオケデータを、前記楽曲指定情報の送信元の外部端末へ送信する処理を、前記通信デバイスを通じて行う手段として機能させることを特徴とするコンピュータプログラム。
A musical instrument performance corresponding to one musical instrument part among a plurality of musical instrument parts included in the karaoke musical piece, storing karaoke data having a karaoke musical composition including a communication device and a plurality of musical instrument parts, and music lyrics related to the karaoke musical composition Receiving music designation information for designating a karaoke song transmitted from an external terminal to a computer having a storage device for storing a player image relating to the player who played the sound and the musical instrument performance sound through the communication device In the computer program for causing the karaoke data according to the music designation information to be transmitted through the communication device to the external terminal that is the transmission source of the music designation information,
The computer,
Means for performing a process of searching from storing the presence / absence of musical instrument performance sound related to the karaoke song designated by the song designation information when the song designation information transmitted from the external terminal is received;
If there is a musical instrument performance sound corresponding to the search, the corresponding musical instrument performance sound, a player image corresponding to the musical instrument performance sound, and karaoke data corresponding to the music specification information are sent to the external terminal that is the transmission source of the music specification information Means for performing processing to transmit to the communication device ;
If there is no instrument performance sound corresponding to the search, the karaoke data corresponding to the music specification information, a process of transmitting to the transmission source of the external terminals of the track designation information, be made to function as a means for performing through the communication device A computer program characterized by the above.
JP2012049794A 2012-03-06 2012-03-06 Karaoke system, karaoke playback display method, karaoke server, and computer program Active JP5823320B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012049794A JP5823320B2 (en) 2012-03-06 2012-03-06 Karaoke system, karaoke playback display method, karaoke server, and computer program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012049794A JP5823320B2 (en) 2012-03-06 2012-03-06 Karaoke system, karaoke playback display method, karaoke server, and computer program

Publications (2)

Publication Number Publication Date
JP2013186208A JP2013186208A (en) 2013-09-19
JP5823320B2 true JP5823320B2 (en) 2015-11-25

Family

ID=49387703

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012049794A Active JP5823320B2 (en) 2012-03-06 2012-03-06 Karaoke system, karaoke playback display method, karaoke server, and computer program

Country Status (1)

Country Link
JP (1) JP5823320B2 (en)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014048471A (en) * 2012-08-31 2014-03-17 Brother Ind Ltd Server, and music reproduction system
JP2014048470A (en) * 2012-08-31 2014-03-17 Brother Ind Ltd Music reproduction device, music reproduction system, and music reproduction method
JP5800247B2 (en) * 2013-02-28 2015-10-28 ブラザー工業株式会社 Karaoke system and karaoke device
JP5803955B2 (en) * 2013-02-28 2015-11-04 ブラザー工業株式会社 Karaoke system and karaoke device
JP5803956B2 (en) * 2013-02-28 2015-11-04 ブラザー工業株式会社 Karaoke system and karaoke device
JP5725309B2 (en) * 2013-07-29 2015-05-27 ブラザー工業株式会社 Karaoke posting system, karaoke apparatus, and composite video creation method
JP6065226B2 (en) * 2013-09-30 2017-01-25 ブラザー工業株式会社 Karaoke device and karaoke program
JP6020830B2 (en) * 2013-11-26 2016-11-02 ブラザー工業株式会社 Karaoke device and karaoke host device
JP5715296B1 (en) * 2014-12-16 2015-05-07 行秘 大田 Akatsuki communication karaoke server and a karaoke communication karaoke system

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3568326B2 (en) * 1996-07-22 2004-09-22 株式会社河合楽器製作所 Electronic musical instrument
JP5331494B2 (en) * 2009-01-19 2013-10-30 株式会社タイトー Karaoke service system, terminal device
JP5275184B2 (en) * 2009-09-14 2013-08-28 株式会社エクシング Karaoke system, central apparatus and content data generation method
JP2012018282A (en) * 2010-07-07 2012-01-26 Cellius Inc Musical performance file management device, musical performance file reproduction device, and musical performance file reproduction method

Also Published As

Publication number Publication date
JP2013186208A (en) 2013-09-19

Similar Documents

Publication Publication Date Title
JP5823320B2 (en) Karaoke system, karaoke playback display method, karaoke server, and computer program
US7956900B2 (en) Video delivery device, video delivery method, video delivery program and recording medium
US8082502B2 (en) Display control apparatus, recording media, display control method, and display control program
JP2013231951A (en) Acoustic data processing device and acoustic data communication system
JP4177213B2 (en) Music player
JP5291031B2 (en) Karaoke system, karaoke system control method, and karaoke system control program
JP5498444B2 (en) Video information distribution system
JP3963514B2 (en) Karaoke equipment
JP5780258B2 (en) Portable terminal device, portable terminal program, server, and image browsing system
JP5046862B2 (en) Karaoke system with automatic selection function
JP4661219B2 (en) CONTENT DISTRIBUTION DEVICE, CONTENT DISTRIBUTION METHOD, CONTENT DISTRIBUTION PROGRAM, AND RECORDING MEDIUM CONTAINING THE SAME
JP5132394B2 (en) Digest data extraction system from karaoke performance recording data
JP5350306B2 (en) Karaoke music selection device, method for controlling karaoke music selection device, control program for karaoke music selection device, and information recording medium thereof
JP5429501B2 (en) Karaoke remote control device and karaoke system
JP5615115B2 (en) Karaoke device and karaoke system
JP5224508B2 (en) Karaoke recorder
JP5290822B2 (en) Karaoke device, karaoke device control method, and karaoke device control program
JP6601214B2 (en) Music selection device, karaoke system, and music selection program
JP4881747B2 (en) Karaoke system
JP6574697B2 (en) Karaoke system
JP4156555B2 (en) Karaoke system, karaoke remote control device, and karaoke device
WO2014147875A1 (en) Audio data processing device and audio data communications system
JP2017156478A (en) Music selection device, karaoke system and program for music selection
JP6642215B2 (en) Music selection device, karaoke system and music selection program
JP6520549B2 (en) Karaoke post system, karaoke apparatus and composite video creation method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140228

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150122

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150203

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150330

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151006

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151007

R150 Certificate of patent or registration of utility model

Ref document number: 5823320

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150