JP5498459B2 - Video information distribution system - Google Patents

Video information distribution system Download PDF

Info

Publication number
JP5498459B2
JP5498459B2 JP2011211496A JP2011211496A JP5498459B2 JP 5498459 B2 JP5498459 B2 JP 5498459B2 JP 2011211496 A JP2011211496 A JP 2011211496A JP 2011211496 A JP2011211496 A JP 2011211496A JP 5498459 B2 JP5498459 B2 JP 5498459B2
Authority
JP
Japan
Prior art keywords
information
video
moving image
control means
performance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2011211496A
Other languages
Japanese (ja)
Other versions
JP2012093734A (en
Inventor
貴信 原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xing Inc
Original Assignee
Xing Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xing Inc filed Critical Xing Inc
Priority to JP2011211496A priority Critical patent/JP5498459B2/en
Publication of JP2012093734A publication Critical patent/JP2012093734A/en
Application granted granted Critical
Publication of JP5498459B2 publication Critical patent/JP5498459B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明は、所定の通信回線を介して複数の通信端末装置に対する動画情報の配信を行う動画情報配信システムに関し、特に、その利便性を向上させて利用を促進するための改良に関する。   The present invention relates to a moving image information distribution system that distributes moving image information to a plurality of communication terminal devices via a predetermined communication line, and more particularly, to an improvement for improving the convenience and promoting the use.

所定の通信回線を介して複数の通信端末装置に対する動画情報の配信を行う動画情報配信システムが知られており、近年における通信技術の向上に伴いコンテンツビジネスの中核として更なる発展が期待されている。そのような動画情報配信システムにおいては、通常、所謂動画投稿サイトにおいて所定の通信端末装置から投稿(アップロード)された複数の動画情報が所定のデータベースに記憶され、任意の通信端末装置によりその動画投稿サイトを介してのアクセスが可能とされる。それにより、上記所定の通信端末装置により投稿された動画情報が、任意の通信端末装置により閲覧可能とされる。   A moving image information distribution system that distributes moving image information to a plurality of communication terminal devices via a predetermined communication line is known, and further development is expected as the core of the content business with recent improvements in communication technology. . In such a moving image information distribution system, a plurality of pieces of moving image information posted (uploaded) from a predetermined communication terminal device in a so-called moving image posting site is usually stored in a predetermined database, and the moving image posting is performed by an arbitrary communication terminal device. Access through the site is possible. Thereby, the moving image information posted by the predetermined communication terminal device can be browsed by any communication terminal device.

また、多数の演奏曲のうちから選択される演奏曲を出力させるのに併行して音声入力装置(マイクロフォン)により入力される音声を増幅して出力させるカラオケ装置が知られている。そのようなカラオケ装置において、音声入力装置から入力される音声情報に基づいて歌唱力等を評価(採点)する演奏評価機能を備えたものがある。例えば、特許文献1に記載されたカラオケ装置がそれである。このカラオケ装置によれば、音程、テンポ、音量等を基準として音声入力装置から入力される音声情報とカラオケ演奏曲の演奏情報とを予め定められた複数の区分毎に比較することで、入力される音声情報に応じて利用者の歌唱を区分毎に採点することができる。   Also, a karaoke apparatus is known that amplifies and outputs a sound input by a sound input device (microphone) in parallel with outputting a performance music selected from a large number of performance music. Some of such karaoke apparatuses have a performance evaluation function that evaluates (scores) singing ability and the like based on voice information input from a voice input device. For example, it is a karaoke apparatus described in Patent Document 1. According to this karaoke device, the voice information input from the voice input device with reference to the pitch, tempo, volume, etc. is compared with the performance information of the karaoke performance song for each of a plurality of predetermined categories. The user's song can be scored for each category according to the voice information.

特許第3261990号公報Japanese Patent No. 3261990

ところで、本出願人は、前記カラオケ装置を通信端末装置として前記動画情報配信システムに組み込み、そのカラオケ装置による所定の演奏曲の出力に際して撮像装置により撮影された映像情報及び音声入力装置により入力された音声情報の投稿を受け付けて閲覧可能とする技術を発案し、実用化している。また、この技術に関して、共通の演奏曲に関連付けられた複数の動画情報を組み合わせて共演動画情報を編集し、前記カラオケ装置のみならずパーソナルコンピュータ等の通信端末装置により閲覧可能とする共演動画(コラボ動画)のサービスを展開している。   By the way, the present applicant incorporated the karaoke device as a communication terminal device in the moving picture information distribution system, and was input by the video information and voice input device photographed by the imaging device when outputting the predetermined performance music by the karaoke device. A technology has been devised and put into practical use that makes it possible to receive and browse audio information. In addition, regarding this technique, a co-star video (collaboration) that can be viewed by not only the karaoke device but also a communication terminal device such as a personal computer by editing a plurality of video information associated with a common performance piece. Video) service.

しかし、従来の共演動画においては、その組み合わせの基となる動画情報の記録に係るカラオケ装置によるカラオケ演奏に際してその採点(演奏評価)を楽しむことはできるものの、パーソナルコンピュータ等の通信端末装置により共演動画を閲覧する際に各動画に対応する演奏を採点することはできず、共演相手のうち何れの演奏がうまいか等の評価結果を示すことはできなかった。また、前記従来の技術を応用すること等により共演動画に係る各動画に対応して演奏評価を行ったとしても、共演動画の出力に際してその評価結果を表示するだけでは面白みがなく、視聴者の満足を得られないことが考えられる。このため、複数の動画を組み合わせて同期出力させる共演動画において、エンターテイメント性の高い演奏評価を実現する動画情報配信システムの開発が求められていた。   However, in the conventional co-star video, although the scoring (performance evaluation) can be enjoyed during the karaoke performance by the karaoke device related to the recording of the video information that is the basis of the combination, the co-star video is performed by a communication terminal device such as a personal computer. The performance corresponding to each moving image could not be scored when browsing, and the evaluation results such as which performance among the co-op partners were good could not be shown. In addition, even if performance evaluation is performed corresponding to each video related to the co-star video by applying the above-mentioned conventional technology, it is not interesting to display the evaluation result when outputting the co-star video, and it is not interesting. It is thought that satisfaction cannot be obtained. For this reason, there has been a demand for the development of a moving image information distribution system that realizes performance evaluation with high entertainment characteristics in a co-starring moving image that is output in combination with a plurality of moving images.

本発明は、以上の事情を背景として為されたものであり、その目的とするところは、複数の動画を組み合わせて同期出力させる共演動画において、エンターテイメント性の高い演奏評価を実現する動画情報配信システムを提供することにある。   The present invention has been made against the background of the above circumstances, and the purpose of the present invention is to provide a moving picture information distribution system that realizes performance evaluation with high entertainment characteristics in a co-starred moving picture that is output in combination with a plurality of moving pictures. Is to provide.

斯かる目的を達成するために、本発明の要旨とするところは、所定の通信回線を介して複数の通信端末装置に対する動画情報の配信を行う動画情報配信システムであって、前記通信端末装置から投稿された情報を記憶するデータベースと、前記通信回線を介して前記通信端末装置から、予め定められた複数の楽曲データの何れかに対応する音声情報を含む動画情報の投稿を受け付け、その投稿された動画情報を対応する楽曲データと関連付けて前記データベースに記憶させる投稿受付制御手段と、その投稿受付制御手段により受け付けられる、共通の楽曲データに関連付けられた1対の動画情報を組み合わせて共演動画情報を編集し、その編集された共演動画情報をその共通の楽曲データと関連付けて前記データベースに記憶させる共演動画編集制御手段と、前記共演動画情報の組み合わせに係る1対の動画情報それぞれに含まれる音声情報に対応して、予め定められた関係から前記共通の楽曲データに基づいて各動画情報毎にその音声情報の演奏評価を行う演奏評価制御手段と、前記通信回線を介しての前記通信端末装置からの配信要求に応じて、前記データベースに記憶されたその配信要求に係る動画情報及び共演動画情報をその通信端末装置に配信する動画配信制御手段と、その動画配信制御手段により配信される共演動画情報の組み合わせに係る1対の動画情報を同期して出力させる動画出力制御手段と、その動画出力制御手段による前記共演動画情報の組み合わせに係る1対の動画情報の同期出力に際して、前記演奏評価制御手段による各動画情報に含まれる音声情報の演奏評価結果に基づいて、それら1対の動画情報が化体するプレイヤが相互に対戦する対戦ゲームを実行するゲーム実行制御手段とを、備えたことを特徴とするものである。   In order to achieve such an object, the gist of the present invention is a moving image information distribution system that distributes moving image information to a plurality of communication terminal devices via a predetermined communication line, from the communication terminal device. A database for storing posted information and a posting of video information including audio information corresponding to any of a plurality of predetermined pieces of music data from the communication terminal device via the communication line are accepted and posted. Posting reception control means for storing the stored video information in association with the corresponding music data and storing it in the database, and a pair of video information related to the common music data received by the posting reception control means, A co-star movie that stores the edited co-star video information in the database in association with the common music data In response to the audio information included in each of the pair of video information relating to the combination of the collection control means and the co-starring video information, the audio for each video information based on the common music data from a predetermined relationship Performance evaluation control means for performing performance evaluation of information, and in response to a distribution request from the communication terminal device via the communication line, the moving image information and the co-starring moving image information related to the distribution request stored in the database Movie distribution control means for distributing to a communication terminal device, movie output control means for synchronously outputting a pair of movie information related to the combination of co-starring movie information distributed by the movie distribution control means, and the movie output control means When the pair of moving image information related to the combination of the co-starring moving image information is synchronously output, the audio information included in each moving image information by the performance evaluation control means Based on the response rate evaluation results, in which their pair of video information the player that embodying the game execution control means for executing a competition game to play against each other, characterized by comprising.

このようにすれば、前記通信端末装置から投稿された情報を記憶するデータベースと、前記通信回線を介して前記通信端末装置から、予め定められた複数の楽曲データの何れかに対応する音声情報を含む動画情報の投稿を受け付け、その投稿された動画情報を対応する楽曲データと関連付けて前記データベースに記憶させる投稿受付制御手段と、その投稿受付制御手段により受け付けられる、共通の楽曲データに関連付けられた1対の動画情報を組み合わせて共演動画情報を編集し、その編集された共演動画情報をその共通の楽曲データと関連付けて前記データベースに記憶させる共演動画編集制御手段と、前記共演動画情報の組み合わせに係る1対の動画情報それぞれに含まれる音声情報に対応して、予め定められた関係から前記共通の楽曲データに基づいて各動画情報毎にその音声情報の演奏評価を行う演奏評価制御手段と、前記通信回線を介しての前記通信端末装置からの配信要求に応じて、前記データベースに記憶されたその配信要求に係る動画情報及び共演動画情報をその通信端末装置に配信する動画配信制御手段と、その動画配信制御手段により配信される共演動画情報の組み合わせに係る1対の動画情報を同期して出力させる動画出力制御手段と、その動画出力制御手段による前記共演動画情報の組み合わせに係る1対の動画情報の同期出力に際して、前記演奏評価制御手段による各動画情報に含まれる音声情報の演奏評価結果に基づいて、それら1対の動画情報が化体するプレイヤが相互に対戦する対戦ゲームを実行するゲーム実行制御手段とを、備えたものであることから、共演動画に係る1対の動画それぞれの演奏評価に応じて仮想的な対戦ゲームを実行することで、共演動画の新たな楽しみ方を提示できる。すなわち、複数の動画を組み合わせて同期出力させる共演動画において、エンターテイメント性の高い演奏評価を実現する動画情報配信システムを提供することができる。   If it does in this way, the audio | voice information corresponding to either of the some music data predetermined from the database which memorize | stores the information contributed from the said communication terminal device, and the said communication terminal device via the said communication line. A post acceptance control unit that accepts a post of video information including the post information and associates the posted video information with the corresponding music data and stores the post information in the database, and is associated with the common music data accepted by the post acceptance control unit A combination of the co-star video information and the co-star video information control means for editing the co-star video information by combining a pair of video information and storing the edited co-star video information in the database in association with the common music data. Corresponding to the audio information included in each of the pair of moving image information, the common music is determined from a predetermined relationship. Performance evaluation control means for performing performance evaluation of the audio information for each video information based on the data, and the distribution stored in the database in response to the distribution request from the communication terminal device via the communication line Synchronously output a pair of moving image information related to a combination of moving image distribution control means for distributing the requested moving image information and co-starring moving image information to the communication terminal device and the co-starring moving image information distributed by the moving image distribution control means. Based on the performance evaluation result of audio information included in each video information by the performance evaluation control means when the video output control means and the pair of video information related to the combination of the co-starring video information by the video output control means are synchronously output. And a game execution control means for executing a fighting game in which the players in which the pair of moving image information forms a fight against each other. Things from, by running a virtual fighting game in response to the performance evaluation of each pair of videos related to co-star video, can be presented a new way of enjoying co-star video. That is, it is possible to provide a moving picture information distribution system that realizes performance evaluation with high entertainment characteristics in a co-starring moving picture that is output in combination with a plurality of moving pictures.

ここで、好適には、前記演奏評価制御手段は、前記共演動画情報の組み合わせに係る1対の動画情報それぞれに含まれる音声情報が、予め定められた複数の技のうち何れかの成立条件を満たしているか否かを判定するものであり、前記ゲーム実行制御手段は、前記演奏評価制御手段により前記共演動画情報の組み合わせに係る一方の動画情報に含まれる音声情報が前記成立条件を満たしていると判定された場合には、その組み合わせに係る他方の動画情報が化体するプレイヤに対してその成立条件に係る技を適用するものである。このようにすれば、共演動画に係る仮想的な対戦ゲームに歌い方に応じた技の要素を加えることで、更なる攻略性とエンターテイメント性を持つ対戦ゲームを実現することができる。   Here, it is preferable that the performance evaluation control unit is configured such that the audio information included in each of the pair of moving image information related to the combination of the co-starring moving image information satisfies any of the predetermined conditions among a plurality of predetermined techniques. The game execution control means determines whether or not the audio information included in one moving picture information related to the combination of the co-starring moving picture information satisfies the establishment condition by the performance evaluation control means. If it is determined, the technique related to the establishment condition is applied to the player whose other moving image information related to the combination is realized. If it does in this way, the battle game with the further capture property and entertainment property is realizable by adding the element of the technique according to how to sing to the virtual battle game concerning a co-starring animation.

また、好適には、前記演奏評価制御手段は、前記共通の楽曲データにおいて予め定められた所定区間毎に前記音声情報の音程がその楽曲データを基準とする適切演奏範囲内に入っているか否かを判定し、その判定が肯定される場合には第1の技の成立条件を満たしていると判定するものである。このようにすれば、前記共演動画に係る仮想的な対戦ゲームにおいて、実用的な制御により歌い方に応じた技を対戦相手にかける処理を実現することができる。   Preferably, the performance evaluation control means determines whether or not the pitch of the audio information is within an appropriate performance range based on the music data for each predetermined section predetermined in the common music data. If the determination is affirmative, it is determined that the conditions for establishing the first technique are satisfied. If it does in this way, in the virtual battle game concerning the above-mentioned co-starring animation, processing which applies a technique according to how to sing to an opponent by practical control can be realized.

また、好適には、前記演奏評価制御手段は、前記共通の楽曲データにおいて予め定められたハーモニーパートにおいて前記音声情報に複数人分の音声が含まれているか否かを判定し、その判定が肯定される場合には第2の技の成立条件を満たしていると判定するものである。このようにすれば、前記共演動画に係る仮想的な対戦ゲームにおいて、実用的な制御により歌い方に応じた技を対戦相手にかける処理を実現することができる。   Preferably, the performance evaluation control means determines whether or not a plurality of voices are included in the voice information in a predetermined harmony part in the common music data, and the determination is affirmative. In the case of being performed, it is determined that the condition for establishing the second technique is satisfied. If it does in this way, in the virtual battle game concerning the above-mentioned co-starring animation, processing which applies a technique according to how to sing to an opponent by practical control can be realized.

また、好適には、前記演奏評価制御手段は、前記共通の楽曲データにおいて予め定められたデュエットパートにおいて前記音声情報がそのデュエットに係る適切演奏条件を満たすか否かを判定し、その判定が肯定される場合には第3の技の成立条件を満たしていると判定するものである。このようにすれば、前記共演動画に係る仮想的な対戦ゲームにおいて、実用的な制御により歌い方に応じた技を対戦相手にかける処理を実現することができる。   Preferably, the performance evaluation control means determines whether or not the audio information satisfies an appropriate performance condition related to the duet in a predetermined duet part in the common music data, and the determination is affirmative. If it is, it is determined that the condition for establishing the third technique is satisfied. If it does in this way, in the virtual battle game concerning the above-mentioned co-starring animation, processing which applies a technique according to how to sing to an opponent by practical control can be realized.

また、好適には、前記演奏評価制御手段は、予め定められた鳴り物の音が前記音声情報に含まれているか否かを判定し、その判定が肯定される場合には第4の技の成立条件を満たしていると判定するものである。このようにすれば、前記共演動画に係る仮想的な対戦ゲームにおいて、実用的な制御により歌い方に応じた技を対戦相手にかける処理を実現することができる。   Preferably, the performance evaluation control means determines whether or not a predetermined sound is included in the audio information, and if the determination is affirmative, the fourth technique is established. It is determined that the condition is satisfied. If it does in this way, in the virtual battle game concerning the above-mentioned co-starring animation, processing which applies a technique according to how to sing to an opponent by practical control can be realized.

また、好適には、前記演奏評価制御手段は、予め定められた歌唱方法に対応する音声が前記音声情報に含まれているか否かを判定し、その判定が肯定される場合には第5の技の成立条件を満たしていると判定するものである。このようにすれば、前記共演動画に係る仮想的な対戦ゲームにおいて、実用的な制御により歌い方に応じた技を対戦相手にかける処理を実現することができる。   Preferably, the performance evaluation control means determines whether or not a sound corresponding to a predetermined singing method is included in the sound information, and if the determination is affirmative, It is determined that the conditions for establishing the technique are satisfied. If it does in this way, in the virtual battle game concerning the above-mentioned co-starring animation, processing which applies a technique according to how to sing to an opponent by practical control can be realized.

また、好適には、前記通信端末装置による入力操作に応じて、前記データベースに記憶された各動画情報に対する投票を受け付ける投票受付制御手段を備え、前記ゲーム実行制御手段は、その投票受付制御手段により受け付けられる前記共演動画情報の組み合わせに係る各動画情報に対する投票結果を前記対戦ゲームにおけるそれぞれの動画情報が化体するプレイヤに反映するものである。このようにすれば、共演動画に係る仮想的な対戦ゲームに閲覧者の投票結果を反映することで、インタラクティブ性に優れた対戦ゲームを実現することができる。   Preferably, the game execution control means includes a vote acceptance control means for accepting a vote for each piece of moving picture information stored in the database in response to an input operation by the communication terminal device. The voting result for each piece of moving picture information relating to the combination of the co-starring moving picture information that is accepted is reflected on the player that each moving picture information in the battle game embodies. In this way, it is possible to realize a battle game with excellent interactiveness by reflecting the vote result of the viewer in the virtual battle game related to the co-starring video.

また、好適には、音声入力装置及び撮像装置を有し、多数の楽曲データのうちから選択される楽曲データに対応する演奏曲を出力させるのに併行して前記音声入力装置により入力される音声を増幅して出力させるカラオケ装置を前記通信端末装置として備え、前記動画配信制御手段は、前記カラオケ装置からの配信要求に応じて、前記データベースに記憶されたその配信要求に係る動画情報をそのカラオケ装置に配信するものであり、前記カラオケ装置は、前記動画配信制御手段により配信された動画情報の出力を制御する動画出力制御手段と、その動画出力制御手段による前記動画情報の出力と同期してその動画情報と関連付けられた楽曲データに対応する演奏曲を出力させる同期演奏制御手段と、その同期演奏制御手段による演奏曲の出力に際して前記撮像装置により撮影された映像情報及び前記音声入力装置により入力された音声情報を記録する演奏記録制御手段とを、備えたものであり、前記投稿受付制御手段は、その演奏記録制御手段により記録された映像情報及び音声情報の投稿を受け付け、前記同期演奏制御手段により出力された演奏曲に対応する楽曲データの識別情報と関連付けて前記データベースに記憶させるものであり、前記共演動画編集制御手段は、前記投稿受付制御手段により受け付けられる、共通の楽曲データに関連付けられた複数の動画情報を組み合わせて共演動画情報を編集し、その編集された共演動画情報をその楽曲データの識別情報と関連付けて前記データベースに記憶させるものである。このようにすれば、カラオケ装置により記録乃至投稿される複数の動画を組み合わせて同期出力させる共演動画において、エンターテイメント性の高い演奏評価を実現する動画情報配信システムを提供することができる。   Preferably, the audio input device and the imaging device are provided, and the audio input by the audio input device in parallel to output a performance song corresponding to the music data selected from a large number of music data. A karaoke device that amplifies and outputs the karaoke device as the communication terminal device, and the moving image distribution control means, in response to the distribution request from the karaoke device, displays the moving image information related to the distribution request stored in the database as the karaoke device. The karaoke apparatus synchronizes with the output of the moving picture information by the moving picture output control means and the moving picture output control means for controlling the output of the moving picture information distributed by the moving picture distribution control means. Synchronous performance control means for outputting a performance music corresponding to the music data associated with the moving picture information, and output of the performance music by the synchronous performance control means The performance recording control means for recording the video information photographed by the imaging device and the voice information input by the voice input device, the posting acceptance control means by the performance recording control means The recorded video information and audio information is received and stored in the database in association with the identification information of the music data corresponding to the performance music outputted by the synchronous performance control means, and the co-starring video editing control means Edits the co-star video information by combining a plurality of video information associated with the common music data accepted by the posting acceptance control means, and associates the edited co-star video information with the identification information of the music data It is stored in the database. In this way, it is possible to provide a moving picture information distribution system that realizes performance evaluation with high entertainment properties in a co-starring moving picture that is output in combination with a plurality of moving pictures recorded or posted by a karaoke apparatus.

本発明の一実施例である映像情報配信システムの構成を説明する図である。It is a figure explaining the structure of the video information delivery system which is one Example of this invention. 図1の映像情報配信システムに備えられたサーバ装置の構成を例示する図である。It is a figure which illustrates the structure of the server apparatus with which the video information delivery system of FIG. 1 was equipped. 図1の映像情報配信システムに備えられた通信端末装置であるパーソナルコンピュータの構成を例示する図である。It is a figure which illustrates the structure of the personal computer which is a communication terminal device with which the video information delivery system of FIG. 1 was equipped. 図1の映像情報配信システムに備えられた通信端末装置であるカラオケ装置の構成を例示する図である。It is a figure which illustrates the structure of the karaoke apparatus which is a communication terminal device with which the video information delivery system of FIG. 1 was equipped. 図2のサーバ装置のCPU、図3のパーソナルコンピュータのCPU、乃至図4のカラオケ装置のCPUに備えられた制御機能の要部を説明する機能ブロック線図である。FIG. 5 is a functional block diagram illustrating a main part of a control function provided in the CPU of the server device of FIG. 2, the CPU of the personal computer of FIG. 3, or the CPU of the karaoke device of FIG. 4. 図4のカラオケ装置による演奏曲の出力に際してビデオカメラにより撮影された映像情報を例示する図である。It is a figure which illustrates the video information image | photographed with the video camera at the time of the output of the performance music by the karaoke apparatus of FIG. 図4のカラオケ装置による共演映像に係る同期演奏制御において、図6の映像情報が背景映像として用いられる様子を説明する図である。FIG. 7 is a diagram for explaining how the video information of FIG. 6 is used as a background video in the synchronous performance control related to the co-star video by the karaoke apparatus of FIG. 4. 図3に示すパーソナルコンピュータ等の通信端末装置に表示された共演映像の一例を示す図である。It is a figure which shows an example of the co-starring image | video displayed on communication terminal devices, such as a personal computer shown in FIG. 図3に示すパーソナルコンピュータ等の通信端末装置に表示された対戦ゲーム映像の一例を示す図である。It is a figure which shows an example of the battle | competition game image | video displayed on communication terminal devices, such as a personal computer shown in FIG. 図9に示す対戦ゲーム映像に対応する対戦ゲームにおいて成立するコンボの種類とその成立条件等の一例を示す図である。It is a figure which shows an example of the kind of combo formed in the competitive game corresponding to the competitive game image shown in FIG. 図9に示す対戦ゲーム映像に対応する対戦ゲームにおいて、第1の演奏映像に対応する音声情報に関してコンボの成立が判定され、対戦相手である第2の演奏情報が化体するプレイヤに対してそのコンボが適用された様子を示している。In the battle game corresponding to the battle game video shown in FIG. 9, it is determined that the combo is established with respect to the audio information corresponding to the first performance video, and the second performance information that is the opponent is converted to the player. It shows how the combo is applied. 図3に示すパーソナルコンピュータ等の通信端末装置に表示された対戦ゲーム映像の他の一例を示す図である。It is a figure which shows another example of the battle | competition game image | video displayed on communication terminal devices, such as a personal computer shown in FIG. 図12に示す対戦ゲーム映像に対応する格闘型対戦ゲームにおいて成立するコンボの種類とその成立条件等の一例を示す図である。It is a figure which shows an example of the kind of combo formed in the fighting type | mold battle game corresponding to the battle game image | video shown in FIG. 図9乃至図12に示す対戦ゲーム映像に対応する対戦ゲームにおいて、各動画情報に対する投票結果に応じてそれぞれの動画情報が化体するプレイヤのライフゲージの初期値が設定される様子を例示する図である。The figure which illustrates a mode that the initial value of the life gauge of the player which each moving image information embodies is set according to the voting result with respect to each moving image information in the competitive game corresponding to the competitive game image shown in FIG. 9 thru | or FIG. It is. 図4のカラオケ装置のCPUによる第1の動画投稿制御の要部を説明するフローチャートである。It is a flowchart explaining the principal part of the 1st moving image contribution control by CPU of the karaoke apparatus of FIG. 図4のカラオケ装置のCPUによる第2の動画投稿制御の要部を説明するフローチャートである。It is a flowchart explaining the principal part of the 2nd moving image contribution control by CPU of the karaoke apparatus of FIG. 図16に示す制御におけるコラボ演奏動画投稿制御の要部を説明するフローチャートである。It is a flowchart explaining the principal part of the collaboration performance animation contribution control in the control shown in FIG. 図2のサーバ装置のCPUによる動画投稿受付制御の要部を説明するフローチャートである。It is a flowchart explaining the principal part of the animation posting acceptance control by CPU of the server apparatus of FIG. 図2のサーバ装置のCPUによる投票受付制御の要部を説明するフローチャートである。It is a flowchart explaining the principal part of the vote reception control by CPU of the server apparatus of FIG. 図2のサーバ装置のCPUによる動画配信/ゲーム実行制御の要部を説明するフローチャートである。It is a flowchart explaining the principal part of the moving image delivery / game execution control by CPU of the server apparatus of FIG. 図3のパーソナルコンピュータのCPUによる動画再生/投票制御の要部を説明するフローチャートである。4 is a flowchart for explaining a main part of moving image reproduction / voting control by a CPU of the personal computer of FIG. 3. 図3に示すパーソナルコンピュータ等の通信端末装置に表示された共演映像の他の一例を示す図である。It is a figure which shows another example of the co-star image displayed on communication terminal devices, such as a personal computer shown in FIG. 図3に示すパーソナルコンピュータ等の通信端末装置に表示された対戦ゲーム映像の更に別の一例を示す図である。It is a figure which shows another example of the battle | competition game image | video displayed on communication terminal devices, such as a personal computer shown in FIG. 図4のカラオケ装置におけるコマンダ本体に設けられたタッチパネルディスプレイについて説明する図である。It is a figure explaining the touchscreen display provided in the commander main body in the karaoke apparatus of FIG. 図24に示すタッチパネルディスプレイに演奏曲検索のための文字ボタンが表示された様子を示す図である。It is a figure which shows a mode that the character button for performance music search was displayed on the touchscreen display shown in FIG. 図4のカラオケ装置によるコラボ演奏動画に係るカラオケ演奏において、図24に示すタッチパネルディスプレイに演奏曲のデフォルトの背景映像が表示された様子を示す図である。It is a figure which shows a mode that the default background image | video of a performance music was displayed on the touchscreen display shown in FIG. 24 in the karaoke performance which concerns on the collaboration performance animation by the karaoke apparatus of FIG. 図4のカラオケ装置によるコラボ演奏動画に係るカラオケ演奏において、図26に示す背景映像の前面側に演奏曲の歌詞文字映像が表示された様子を示す図である。FIG. 27 is a diagram showing a state in which a lyric character video of a performance song is displayed on the front side of the background video shown in FIG. 図4のカラオケ装置による対戦ゲームにおいて、その対戦ゲームにおいてコンボが成立した場合にそのコンボの名称が図24に示すタッチパネルディスプレイに表示される様子を示す図である。FIG. 25 is a diagram showing how the name of the combo is displayed on the touch panel display shown in FIG. 24 when the combo is established in the battle game in the battle game of FIG. 4. 図4に示すカラオケ装置の映像表示装置に表示された共演映像の一例を示す図である。It is a figure which shows an example of the co-starring image | video displayed on the video display apparatus of the karaoke apparatus shown in FIG. 図29に示す共演映像において表示切替ボタンが押されることで、その共演映像に係る一方の動画情報が図26に示すタッチパネルディスプレイに表示される様子を示す図である。It is a figure which shows a mode that the one moving image information which concerns on the co-starring image | video is displayed on the touchscreen display shown in FIG. 26 by pushing a display switching button in the co-starring image | video shown in FIG. 図30に示すように共演映像に係る一方の動画情報が図26に示すタッチパネルディスプレイに表示された態様において、他方の動画情報が図4に示すカラオケ装置の映像表示装置に単独で表示される様子を示す図である。As shown in FIG. 30, in a mode in which one moving picture information related to the co-star video is displayed on the touch panel display shown in FIG. 26, the other moving picture information is displayed alone on the video display device of the karaoke apparatus shown in FIG. FIG. 図4のカラオケ装置による対戦ゲームにおいて、その対戦ゲームにおいて勝利したプレイヤに相当する動画情報がそのカラオケ装置の映像表示装置に表示される様子を示す図である。FIG. 5 is a diagram illustrating a state in which the moving image information corresponding to the player who has won the battle game is displayed on the video display device of the karaoke device in the battle game by the karaoke device of FIG. 4. 図4のカラオケ装置による対戦ゲームにおいて、その対戦ゲームにおいて敗北したプレイヤに相当する動画情報が図24に示すタッチパネルディスプレイに表示される様子を示す図である。It is a figure which shows a mode that the moving image information equivalent to the player defeated in the competitive game is displayed on the touch panel display shown in FIG. 24 in the competitive game by the karaoke apparatus of FIG. 図4に示すカラオケ装置の映像表示装置に表示された対戦ゲーム映像の更に別の一例を示す図である。It is a figure which shows another example of the battle | competition game image | video displayed on the video display apparatus of the karaoke apparatus shown in FIG. 図34に示す対戦ゲーム映像において、ライフゲージに係るライフ値が零となったプレイヤに相当する動画情報が閉め出される様子を示す図である。It is a figure which shows a mode that the moving image information corresponded to the player from which the life value which concerns on a life gauge became zero in the competitive game image | video shown in FIG. 図35に示す対戦ゲーム映像において閉め出された動画情報が図24に示すタッチパネルディスプレイに表示される様子を示す図である。It is a figure which shows a mode that the moving image information enclosed in the competitive game image | video shown in FIG. 35 is displayed on the touchscreen display shown in FIG.

以下、本発明の好適な実施例を図面に基づいて詳細に説明する。   Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the drawings.

図1は、本発明の一実施例である動画情報配信システム10の構成を説明する図である。この図1に示すように、本実施例の動画情報配信システム10は、情報配信サービス提供会社によって運営されるサーバ装置(センタ装置)12と、通信端末装置である複数(図1では2つを例示している)のパーソナルコンピュータ14(以下、PC14と称する)と、同じく通信端末装置である複数(図1では2つを例示している)の携帯電話機16と、所定の通信回線18とを、備えて構成されている。この通信回線18は、例えば公衆電話回線、ADSL回線、或いは光ファイバ回線等から構成されるWWW(World Wide Web)等のインターネットに接続されたものであり、上記サーバ装置12及びPC14は、何れも上記通信回線18に接続されることで、その通信回線18を介して相互に情報の通信が可能とされている。また、上記携帯電話機16は中継基地局20を介して上記通信回線18に接続されており、上記サーバ装置12とその携帯電話機16との間でも相互に情報の通信が可能とされている。   FIG. 1 is a diagram illustrating the configuration of a moving image information distribution system 10 according to an embodiment of the present invention. As shown in FIG. 1, a moving image information distribution system 10 of this embodiment includes a server device (center device) 12 operated by an information distribution service provider and a plurality of (two in FIG. A personal computer 14 (to be referred to as a PC 14 hereinafter), a plurality of (two are illustrated in FIG. 1) mobile phones 16 that are also communication terminal devices, and a predetermined communication line 18. , And is configured. The communication line 18 is connected to the Internet such as a WWW (World Wide Web) constituted by, for example, a public telephone line, an ADSL line, or an optical fiber line. The server device 12 and the PC 14 are both By being connected to the communication line 18, information can be communicated with each other via the communication line 18. The mobile phone 16 is connected to the communication line 18 via the relay base station 20 so that information can be communicated between the server device 12 and the mobile phone 16.

また、本実施例の動画情報配信システム10は、カラオケ装置を用いたカラオケシステム30を含んで構成されている。例えば、図1に示すように、カラオケボックス、スナック、旅館等の店舗32における複数の個室34a、34b、34c、・・・(以下、特に区別しない場合には単に個室34と称する)にそれぞれ1台乃至は複数台ずつ(図1では1台ずつ)カラオケ装置36a、36b、36c、・・・(以下、特に区別しない場合には単にカラオケ装置36と称する)が設置されている。これら複数のカラオケ装置36は、ルータ44を介して上記通信回線18に接続されており、上述のようにその通信回線18に接続されたサーバ装置12等との相互間でその通信回線18を介して情報の通信が可能とされている。すなわち、上記カラオケ装置36は、上記PC14及び携帯電話機16等と同様に、上記通信回線18に接続されて上記サーバ装置12との間で情報の通信を行う通信端末装置に対応する。   Moreover, the moving image information distribution system 10 of the present embodiment includes a karaoke system 30 using a karaoke device. For example, as shown in FIG. 1, each of a plurality of private rooms 34a, 34b, 34c,... In a store 32 such as a karaoke box, a snack, an inn, etc. Karaoke units 36a, 36b, 36c,... (Hereinafter simply referred to as karaoke units 36 unless otherwise distinguished) are installed. The plurality of karaoke apparatuses 36 are connected to the communication line 18 via the router 44, and the server apparatus 12 and the like connected to the communication line 18 as described above are connected to each other via the communication line 18. Communication of information is possible. That is, the karaoke device 36 corresponds to a communication terminal device that is connected to the communication line 18 and communicates information with the server device 12 in the same manner as the PC 14 and the mobile phone 16.

前記動画情報配信システム10に含まれるカラオケシステム30において、前記サーバ装置12は、カラオケ情報(楽曲データ)、背景映像情報、曲間情報等のデジタルコンテンツ(Digital Contents)の保管や入出力管理の基本的な制御を行うサーバとして機能し、前記通信回線18を介して上記カラオケ装置36に定期的にコンテンツの配信を行うと共に、そのカラオケ装置36からの要求に応じて所定の機能制御プログラムを送信する。また、上記カラオケシステム30は、複数の電子早見本装置38a、38b、38c、・・・(以下、特に区別しない場合には単に電子早見本装置38と称する)を備えており、上記カラオケ装置36の利用に際して、各利用者(グループ)毎に1台乃至数台ずつの電子早見本装置38が貸与され、各個室34において後述するように上記カラオケ装置36の遠隔操作装置として用いられるようになっている。上記店舗32内には上記複数のカラオケ装置36を相互に接続するLAN40が敷設されており、上記電子早見本装置38からのカラオケ装置36への入力は、所定のアクセスポイント42及びLAN40を介したLAN通信等により行われる。   In the karaoke system 30 included in the moving picture information distribution system 10, the server device 12 stores the digital contents (Digital Contents) such as karaoke information (music data), background video information, information between songs, and the basics of input / output management. It functions as a server that performs general control, periodically distributes content to the karaoke device 36 via the communication line 18, and transmits a predetermined function control program in response to a request from the karaoke device 36. . The karaoke system 30 includes a plurality of electronic quick sample devices 38a, 38b, 38c,... (Hereinafter simply referred to as an electronic quick sample device 38 unless otherwise distinguished). 1 to several electronic quick sample devices 38 are rented for each user (group) and are used as remote control devices for the karaoke device 36 in each private room 34 as will be described later. ing. A LAN 40 for connecting the plurality of karaoke devices 36 to each other is laid in the store 32, and an input to the karaoke device 36 from the electronic quick sample device 38 is made via a predetermined access point 42 and the LAN 40. This is performed by LAN communication or the like.

図2は、前記サーバ装置12の構成を例示する図である。このサーバ装置12は、中央演算処理装置であるCPU52により随時書込読出メモリであるRAM56の一時記憶機能を利用しつつ読出専用メモリであるROM54に予め記憶されたプログラムに従って信号処理を行う所謂ノイマン式コンピュータであり、ファイルの管理や入出力制御、上記通信回線18を介してのアクセス等の管理、その通信回線18を介しての通信制御等の各種制御を実行するサーバである。また、図2に示すように、例えばTFT(Thin Film Transistor Liquid Crystal)やPDP(Plasma Display Panel)等の映像表示装置58と、その映像表示装置58による映像の表示を制御するための映像表示制御装置であるビデオボード(グラフィックスボード)60と、キーボード等の入力装置62と、その入力装置62による入力を処理するための入力インターフェイス64と、上記CPU52等を前記通信回線18に接続するためのモデム66とを、備えて構成されている。   FIG. 2 is a diagram illustrating a configuration of the server device 12. This server device 12 is a so-called Neumann type that performs signal processing in accordance with a program stored in advance in a ROM 54 that is a read-only memory while using a temporary storage function of a RAM 56 that is a read / write memory by a CPU 52 that is a central processing unit. The computer is a server that performs various controls such as file management, input / output control, management of access via the communication line 18 and communication control via the communication line 18. Further, as shown in FIG. 2, for example, a video display device 58 such as a TFT (Thin Film Transistor Liquid Crystal) or a PDP (Plasma Display Panel), and a video display control for controlling the video display by the video display device 58. A video board (graphics board) 60, which is a device, an input device 62 such as a keyboard, an input interface 64 for processing input by the input device 62, and the CPU 52 and the like for connecting to the communication line 18 A modem 66 is provided.

また、前記サーバ装置12は、前記動画情報配信システム10及びカラオケシステム30に係る各種情報を記憶するデータベースとして、動画データベース68、利用者データベース70、及び楽曲データベース72をはじめとする各種データベースを備えている。これら動画データベース68、利用者データベース70、及び楽曲データベース72それぞれの記憶内容については、図5に示す各種制御機能の説明と併せて後述する。なお、図2に示すように、本実施例では上記動画データベース68、利用者データベース70、及び楽曲データベース72がそれぞれ異なる記憶装置に設けられた態様について説明するが、それらデータベースが同一の記憶装置に設けられたものであってもよい。一方、上記動画データベース68、利用者データベース70、及び楽曲データベース72がそれぞれ個別のサーバ装置に備えられ、それら複数のサーバ装置が相互に連繋して以下に説明する本実施例の制御を実行するものであってもよい。   The server device 12 includes various databases such as a moving image database 68, a user database 70, and a music database 72 as databases for storing various information related to the moving image information distribution system 10 and the karaoke system 30. Yes. The contents stored in the moving image database 68, the user database 70, and the music database 72 will be described later together with the description of various control functions shown in FIG. As shown in FIG. 2, in this embodiment, the moving image database 68, the user database 70, and the music database 72 are described in different storage devices. However, these databases are stored in the same storage device. It may be provided. On the other hand, the moving image database 68, the user database 70, and the music database 72 are provided in individual server devices, and the plurality of server devices are connected to each other to execute the control of this embodiment described below. It may be.

図3は、前記PC14の構成を例示する図である。このPC14は、中央演算処理装置であるCPU74により随時書込読出メモリであるRAM78の一時記憶機能を利用しつつ読出専用メモリであるROM76に予め記憶されたプログラムに従って信号処理を行う所謂ノイマン式コンピュータであり、一般にデスクトップパソコンやノートパソコン等と称される家庭用パーソナルコンピュータである。また、図3に示すように、映像表示部として機能するTFTやPDP等の映像表示装置80と、その映像表示装置80による映像の表示を制御するための映像表示制御装置であるビデオボード82と、キーボード84及びマウス86等の入力装置と、それら入力装置による入力を処理するための入力インターフェイス88と、上記CPU74等を前記通信回線18に接続するためのモデム90と、記憶装置であるハードディスク92とを、備えて構成されている。また、このPC14は、所謂WWW(World Wide Web)ウェブサイトの情報を表示させると共にそのウェブサイトに従って各種入力等を行うことができるブラウザ(WWWブラウザ)等の一般的なアプリケーションを機能的に備えたものである。   FIG. 3 is a diagram illustrating the configuration of the PC 14. The PC 14 is a so-called Neumann computer that performs signal processing in accordance with a program stored in advance in a ROM 76 that is a read-only memory while using a temporary storage function of a RAM 78 that is a read / write memory by a CPU 74 that is a central processing unit. There are home personal computers generally called desktop personal computers or notebook personal computers. Also, as shown in FIG. 3, a video display device 80 such as TFT or PDP that functions as a video display unit, and a video board 82 that is a video display control device for controlling display of video by the video display device 80, , An input device 88 such as a keyboard 84 and a mouse 86, an input interface 88 for processing input by these input devices, a modem 90 for connecting the CPU 74 and the like to the communication line 18, and a hard disk 92 as a storage device And is configured. The PC 14 is functionally equipped with a general application such as a browser (WWW browser) that displays information of a so-called WWW (World Wide Web) website and can perform various inputs according to the website. Is.

図4は、前記カラオケ装置36の構成を例示するブロック線図である。この図4に示すように、前記カラオケ装置36は、TFTやPDP等の映像表示装置100と、その映像表示装置100による映像の表示を制御するビデオボード等の映像出力制御部102と、映像情報デコーダ104と、ビデオミキサ106と、音源であるシンセサイザ108と、音声入力装置であるマイクロフォン110と、そのマイクロフォン110から入力される音声をディジタル信号に変換するためのA/Dコンバータ112と、アンプミキサ114と、スピーカ116と、操作パネル118と、その操作パネル118等からの入力信号を処理する入出力インターフェイス120と、撮像装置であるビデオカメラ122と、中央演算処理装置であるCPU124と、読出専用メモリであるROM126と、随時書込読出メモリであるRAM128と、記憶装置であるハードディスク130と、モデム132と、LANポート134と、前記電子早見本装置38やリモコン装置98等の入力装置からのリモコン信号を受信するためのリモコン受信部136とを、備えて構成されている。   FIG. 4 is a block diagram illustrating the configuration of the karaoke apparatus 36. As shown in FIG. 4, the karaoke device 36 includes a video display device 100 such as a TFT or PDP, a video output control unit 102 such as a video board that controls display of video by the video display device 100, and video information. A decoder 104, a video mixer 106, a synthesizer 108 as a sound source, a microphone 110 as an audio input device, an A / D converter 112 for converting audio input from the microphone 110 into a digital signal, and an amplifier mixer 114 A speaker 116, an operation panel 118, an input / output interface 120 that processes input signals from the operation panel 118, a video camera 122 that is an imaging device, a CPU 124 that is a central processing unit, and a read-only memory ROM 126, and a read / write memory as needed A RAM 128, a hard disk 130 as a storage device, a modem 132, a LAN port 134, and a remote control receiving unit 136 for receiving a remote control signal from an input device such as the electronic quick sample device 38 or the remote control device 98; It is prepared for.

前記映像出力制御部102は、前記CPU124において生成された歌詞文字映像等の文字映像(テロップ)を出力する文字映像出力装置として機能する他、前記映像表示装置100による種々の映像表示を制御する表示制御装置である。また、前記映像情報デコーダ104は、利用者が歌詞を参照しながら歌唱する際に前記ハードディスク130に記憶された背景映像情報に基づいて所定の背景映像を再生(デコード)する背景映像再生装置である。この背景映像情報は、例えば、MPEG(Moving Picture Experts Group)形式のデータであり、そのMPEGデータに基づいて前記映像情報デコーダ104により再生された背景映像は、前記ビデオミキサ106へ送られる。また、そのビデオミキサ106は、前記CPU124において生成され且つ前記映像出力制御部102から出力される文字映像と、前記映像情報デコーダ104により再生される背景映像とを合成して前記映像表示装置100に表示させる映像合成装置である。   The video output control unit 102 functions as a character video output device that outputs a character video (telop) such as a lyric character video generated by the CPU 124, and also displays for controlling various video displays by the video display device 100. It is a control device. The video information decoder 104 is a background video playback device that plays back (decodes) a predetermined background video based on background video information stored in the hard disk 130 when a user sings while referring to lyrics. . The background video information is, for example, MPEG (Moving Picture Experts Group) format data, and the background video reproduced by the video information decoder 104 based on the MPEG data is sent to the video mixer 106. The video mixer 106 synthesizes the character video generated by the CPU 124 and output from the video output control unit 102 with the background video reproduced by the video information decoder 104 to the video display device 100. This is a video composition device to be displayed.

前記シンセサイザ108は、前記ハードディスク130から読み出されて送られて来るカラオケ演奏曲の演奏情報に基づいて楽器の演奏信号等の音楽信号を生成する音源である。この演奏情報は、例えば、MIDI(Musical Instrument Digital Interface)形式のデータであり、そのMIDIデータに基づいて前記シンセサイザ108により生成された音楽信号は、アナログ信号に変換されて前記アンプミキサ114へ送られる。そのアンプミキサ114では、送られてきた音楽信号と前記マイクロフォン110を介して入力される利用者(演奏者)の歌声とがミキシングされ、それらの信号が電気的に増幅されて前記スピーカ116から出力される。また、前記A/Dコンバータ112は、音声入力装置である前記マイクロフォン110から入力されるアナログ信号としての音声情報をディジタル信号に変換して前記CPU124等へ供給する。   The synthesizer 108 is a sound source that generates a music signal such as a musical instrument performance signal based on performance information of a karaoke performance song read from the hard disk 130 and sent. The performance information is, for example, data in MIDI (Musical Instrument Digital Interface) format, and the music signal generated by the synthesizer 108 based on the MIDI data is converted into an analog signal and sent to the amplifier mixer 114. The amplifier mixer 114 mixes the transmitted music signal and the singing voice of the user (player) input via the microphone 110, and those signals are electrically amplified and output from the speaker 116. The The A / D converter 112 converts voice information as an analog signal input from the microphone 110 as a voice input device into a digital signal and supplies the digital signal to the CPU 124 and the like.

前記操作パネル118は、前記カラオケ装置36の利用者が歌いたいカラオケ演奏曲を選択したり、演奏曲の音程を調整したり、演奏と歌との音量バランスを調整したり、その他、エコー、音量、トーン等の各種調整を行うための操作ボタン(スイッチ)或いはつまみを備えた入力装置である。また、前記カラオケ装置36は、例えば図24に示すように、前記CPU124やシンセサイザ108等を格納するコマンダ本体37にタッチパネルディスプレイ119を備えたものであってもよい。このタッチパネルディスプレイ119は、画像(映像)を表示させると共に利用者の接触に応じて前記カラオケ装置36への入力を行うものであり、好適には、上記コマンダ本体37における表側の平面部(カラオケボックス等に設置される場合に、利用者側とされる面)に設けられる。斯かる態様において、上記タッチパネルディスプレイ119は、前記映像表示装置100とは別に第2の映像表示装置として機能すると共に、前記カラオケ装置36の利用者が歌いたいカラオケ演奏曲を選択したり、演奏曲の音程を調整したり、演奏と歌との音量バランスを調整したり、その他、エコー、音量、トーン等の各種調整を行うための操作パネルとして機能する。例えば、図25に示すように、上記タッチパネルディスプレイ119における所定の操作に応じてそれぞれ個別の文字(例えば、五十音の文字やアルファベット等)を示す複数の文字ボタン212がそのタッチパネルディスプレイ119に表示され、このタッチパネルディスプレイ119に表示された文字ボタン212(タッチパネルにおける文字ボタン212に対応する相対位置)に対する利用者の指や備え付けのペン等による接触操作に応じて、それら文字ボタン212によって示される文字乃至文字列が入力される。そして、斯かる操作により入力された文字乃至文字列に基づいて、それらの文字乃至文字列に前方一致する歌手名乃至曲名が検索される等、前記カラオケ装置36の利用者が歌いたいカラオケ演奏曲の検索乃至選曲入力が上記タッチパネルディスプレイ119を介して行われる。   The operation panel 118 allows the user of the karaoke device 36 to select a karaoke performance song that the user wants to sing, adjust the pitch of the performance song, adjust the volume balance between the performance and the song, and perform other operations such as echo and volume. , An input device provided with operation buttons (switches) or knobs for performing various adjustments such as tone. In addition, the karaoke device 36 may include a touch panel display 119 in a commander main body 37 that stores the CPU 124, the synthesizer 108, and the like, as shown in FIG. The touch panel display 119 displays an image (video) and inputs to the karaoke device 36 in response to a user's contact. Preferably, the front side flat portion (karaoke box) of the commander main body 37 is used. Etc., the surface on the user side). In such an embodiment, the touch panel display 119 functions as a second video display device separately from the video display device 100, and the user of the karaoke device 36 selects a karaoke performance song to be sung or a performance song. It functions as an operation panel for adjusting the tone pitch, adjusting the volume balance between performance and song, and making various adjustments such as echo, volume, and tone. For example, as shown in FIG. 25, a plurality of character buttons 212 indicating individual characters (for example, a Japanese character or alphabet) are displayed on the touch panel display 119 in response to a predetermined operation on the touch panel display 119. Characters indicated by the character buttons 212 in response to a touch operation with a user's finger or a pen provided on the character buttons 212 (relative positions corresponding to the character buttons 212 on the touch panel) displayed on the touch panel display 119 A character string is input. A karaoke performance song that the user of the karaoke apparatus 36 wants to sing, such as searching for a singer name or song name that matches the character or character string forward, based on the character or character string input by such an operation. The search or music selection input is performed via the touch panel display 119.

また、前記カラオケ装置36には、前記操作パネル118の一部機能を遠隔で実行するための入力装置として機能するリモコン装置98が備えられており、前記リモコン受信部136は、そのリモコン装置98から送信されるリモコン信号を受信して前記CPU124へ供給する。また、前記カラオケ装置36と電子早見本装置38との対応付け(くくりつけ)処理も前記リモコン受信部136を介して行われ、そのようにして前記カラオケ装置36に対応付けられた電子早見本装置38も同様に入力装置として機能する。なお、本実施例においては、前記カラオケ装置36に備えられたリモコン装置98や対応付け処理の行われた電子早見本装置38等の入力装置もそのカラオケ装置36の一部を構成するものであるとして以下の説明を行う。   The karaoke device 36 is provided with a remote control device 98 that functions as an input device for remotely executing a part of the functions of the operation panel 118, and the remote control receiving unit 136 is connected to the remote control device 98. A remote control signal to be transmitted is received and supplied to the CPU 124. In addition, the association (sticking) process between the karaoke device 36 and the electronic quick sample device 38 is also performed via the remote control receiving unit 136, and thus the electronic quick sample device associated with the karaoke device 36. Similarly, 38 functions as an input device. In the present embodiment, an input device such as the remote control device 98 provided in the karaoke device 36 or the electronic quick sample device 38 subjected to the association processing also constitutes a part of the karaoke device 36. The following will be described.

前記ビデオカメラ122は、例えばCCD(charge coupled device)等の撮像素子及びレンズを備え、そのレンズから入射される映像をCCDにより検知し、その映像を電子情報(映像データ)として取得する所謂デジタルビデオカメラであり、少なくとも動画(時間の経過に従い変化する動きのある映像)を撮影し得るものであるが、必要に応じて静止画(スチル写真)を撮影できるように構成されたものであってもよい。このビデオカメラ122により撮影された映像情報は、図示しないビデオ端子等のインターフェイスを介して前記CPU124等へ供給され、例えばAVI(Audio-Video Interleaved)形式、MPEG(Moving Picture Experts Group)形式、FLV(Flash Video)形式等の映像ファイルとして前記RAM54等に記憶される。なお、このビデオカメラ112は、必ずしも前記カラオケ装置36の一部として備えられたものでなくともよく、例えば前記個室34における所定位置に固設された別体のビデオカメラ乃至前記携帯電話機16に備えられた撮像装置等により撮影された映像が所定のインターフェイスを介して前記カラオケ装置36に入力される態様も考えられる。   The video camera 122 includes an imaging element such as a CCD (charge coupled device) and a lens, for example, so-called digital video that detects an image incident from the lens by the CCD and acquires the image as electronic information (image data). A camera that can shoot at least moving images (moving images that change over time), but can be configured to shoot still images (still photos) as needed Good. Video information photographed by the video camera 122 is supplied to the CPU 124 and the like via an interface such as a video terminal (not shown). For example, AVI (Audio-Video Interleaved) format, MPEG (Moving Picture Experts Group) format, FLV (FLV) Flash video) is stored in the RAM 54 or the like as a video file. The video camera 112 is not necessarily provided as a part of the karaoke device 36. For example, the video camera 112 is provided in a separate video camera or the mobile phone 16 fixed at a predetermined position in the private room 34. A mode is also conceivable in which an image captured by the image capturing apparatus or the like is input to the karaoke apparatus 36 via a predetermined interface.

前記CPU124は、前記RAM128の一時記憶機能を利用しつつ前記ROM126に予め記憶された所定のプログラムに基づいて電子情報を処理・制御する所謂マイクロコンピュータであり、前記カラオケ装置36に係る各種制御を実行する。すなわち、前記電子早見本装置38やリモコン装置98等により所定のカラオケ演奏曲が選曲された場合、その選曲されたカラオケ演奏曲を前記RAM128に設けられた予約曲テーブルに登録する選曲予約制御、その予約曲テーブルの演奏順に従って前記ハードディスク130から前記RAM128に選曲されたカラオケ演奏曲の演奏情報及び歌詞情報(楽曲データ)を読み出す楽曲データ読出制御、カラオケ演奏曲の演奏が進行するのに応じてそのRAM128から前記シンセサイザ108へ演奏情報を送信する演奏出力制御、その演奏出力制御に際して前記RAM128に展開された歌詞情報に基づいて歌詞文字映像を生成して前記映像出力制御部102へ送信する歌詞文字映像出力制御、上記演奏出力制御に際して前記映像情報デコーダ104を制御して所定の背景映像を再生させる背景映像出力制御、カラオケ演奏が行われていない間すなわち曲間において、新譜情報、選曲ランキング、店舗広告等の曲間情報を出力させる曲間情報出力制御、及び前記通信回線18を介した前記サーバ装置12との間の情報通信制御等の基本的な制御に加えて、後述する本実施例の同期演奏制御や演奏記録制御等の各種制御を実行する。   The CPU 124 is a so-called microcomputer that processes and controls electronic information based on a predetermined program stored in the ROM 126 while using the temporary storage function of the RAM 128, and executes various controls related to the karaoke device 36. To do. That is, when a predetermined karaoke performance song is selected by the electronic quick sample device 38, the remote control device 98, etc., the song selection reservation control for registering the selected karaoke performance song in the reserved song table provided in the RAM 128, Music data read control for reading performance information and lyrics information (music data) of the karaoke performance music selected from the hard disk 130 in the RAM 128 according to the performance order of the reserved music table, and as the performance of the karaoke performance music progresses Performance output control for transmitting performance information from the RAM 128 to the synthesizer 108, and a lyric character image generated based on the lyric information developed in the RAM 128 and transmitted to the video output control unit 102 during the performance output control In the output control and the performance output control, the video information deco Background image output control for controlling the background image 104 to reproduce a predetermined background image, inter-song information for outputting inter-song information such as new music information, music selection ranking, store advertisement, etc. while karaoke performance is not performed, that is, between songs In addition to basic control such as output control and information communication control with the server device 12 via the communication line 18, various controls such as synchronous performance control and performance recording control of this embodiment described later are performed. Run.

前記モデム132は、前記カラオケ装置36を前記通信回線18に接続するための装置であり、前記CPU124から出力されるディジタル信号をアナログ信号に変換して前記通信回線18に送り出すと共に、その通信回線18を介して伝送されるアナログ信号をディジタル信号に変換して前記CPU124に供給する処理を行う。なお、前記店舗32に備えられた複数のカラオケ装置36のうち何れかのカラオケ装置36が前記ルータ44の機能を備えてマスターコマンダとして前記通信回線18に接続される態様も考えられ、その場合、前記モデム132はそのマスターコマンダとして機能するカラオケ装置36には必要とされるが、そのマスターコマンダを介して前記サーバ装置12との間で情報の通信を行う他のカラオケ装置36には必ずしも設けられなくともよい。   The modem 132 is a device for connecting the karaoke device 36 to the communication line 18, converts a digital signal output from the CPU 124 into an analog signal and sends it to the communication line 18. The analog signal transmitted via the digital signal is converted into a digital signal and supplied to the CPU 124. In addition, the aspect by which any karaoke apparatus 36 is provided with the function of the said router 44 among the several karaoke apparatuses 36 with which the said store 32 was equipped, and is connected to the said communication line 18 as a master commander, In that case, The modem 132 is required for the karaoke device 36 that functions as the master commander, but is not necessarily provided for other karaoke devices 36 that communicate information with the server device 12 via the master commander. Not necessary.

前記LANポート134は、前記カラオケ装置36をLAN40を介して他のカラオケ装置36や電子早見本装置38等の他の機器に接続するための接続器であり、前記カラオケ装置36は、そのようにLAN40を介して接続されることで、他のカラオケ装置36や電子早見本装置38等の他の機器との間で情報の送受信が可能とされる。例えば、前記アクセスポイント42を介して受信される前記電子早見本装置38からの選曲入力を受け付けて前記RAM128に設けられた予約曲テーブルに記憶したり、そのアクセスポイント42を介して前記カラオケ装置36から電子早見本装置38へ所定の情報を送信したりというように、電波を介して前記カラオケ装置36と電子早見本装置38との間における相互の情報のやりとりが実行される。   The LAN port 134 is a connector for connecting the karaoke device 36 to another device such as another karaoke device 36 or an electronic quick sample device 38 via the LAN 40, and the karaoke device 36 is By being connected via the LAN 40, information can be transmitted and received with other devices such as the other karaoke device 36 and the electronic quick sample device 38. For example, the music selection input from the electronic quick sample device 38 received via the access point 42 is received and stored in a reserved music table provided in the RAM 128, or the karaoke device 36 via the access point 42. Thus, mutual exchange of information between the karaoke device 36 and the electronic quick sample device 38 is executed via radio waves, such as transmitting predetermined information to the electronic quick sample device 38.

前記ハードディスク130には、カラオケ演奏曲を出力させるための多数の楽曲データ(カラオケデータ)を記憶する楽曲データベース138(図5を参照)をはじめとする各種データベースが設けられている。この楽曲データベース138は、前記カラオケ装置36により出力可能な演奏曲にそれぞれ対応する多数(例えば、数万曲分)の楽曲データ(カラオケデータ)を記憶する。この楽曲データは、前記シンセサイザ108により所定の楽器の演奏音を生成するためのMIDIデータ等の演奏情報と、歌詞文字映像(歌詞テロップ)を生成するための歌詞情報と、その歌詞情報に基づいて生成された歌詞文字映像を演奏の進行に合わせて順次色替わりさせてゆくための歌詞色替情報とを、含むものであり、コンテンツIDである各演奏曲に固有の選曲番号により識別される。また、上記楽曲データには、その演奏曲の曲名、アーティスト名(歌手名)、発表年月日、ジャンル、曲調等の情報が関連づけられて記憶されている。   The hard disk 130 is provided with various databases including a music database 138 (see FIG. 5) for storing a large number of music data (karaoke data) for outputting karaoke performance music. The music database 138 stores a large number (for example, tens of thousands of music data) of music data (karaoke data) corresponding to performance music that can be output by the karaoke device 36. The music data is based on performance information such as MIDI data for generating a performance sound of a predetermined instrument by the synthesizer 108, lyrics information for generating a lyrics character image (lyric telop), and the lyrics information. It includes lyrics color change information for sequentially changing the color of the generated lyric character video in accordance with the progress of the performance, and is identified by a music selection number unique to each performance song that is a content ID. In addition, information such as the song name, artist name (singer name), date of publication, genre, and tone of the performance song is stored in association with the song data.

前記サーバ装置12に備えられた前記楽曲データベース72は、前記カラオケシステム30に備えられた前記カラオケ装置36に配信するための楽曲データを記憶するものであり、新しく作成された楽曲データはこの楽曲データベース72に蓄積される。カラオケボックス等の店舗32にそれぞれ備えられた複数のカラオケ装置36のうち所定のカラオケ装置36例えば前記カラオケ装置36aは、前記モデム132を介して前記通信回線18に接続されており、前記複数のカラオケ装置36によって常に新しい曲が演奏可能とされるように、随時新たな楽曲データ等が前記サーバ装置12の楽曲データベース72から前記通信回線18を介して配信され、前記ハードディスク130の楽曲データベース138等に記憶される。また、そのようにして前記サーバ装置12から情報を取得したカラオケ装置36aとその他のカラオケ装置36との間で前記LAN40を介した通信が行われることにより、各カラオケ装置36のハードディスク130に記憶される情報が共有され、上記楽曲データベース138等の内容が等価なものとされる。   The music database 72 provided in the server device 12 stores music data to be distributed to the karaoke device 36 provided in the karaoke system 30, and newly created music data is stored in the music database. 72. Of a plurality of karaoke devices 36 provided in a store 32 such as a karaoke box, a predetermined karaoke device 36, for example, the karaoke device 36a is connected to the communication line 18 via the modem 132, and the plurality of karaoke devices 36a. New music data and the like are distributed from the music database 72 of the server device 12 via the communication line 18 as needed so that new music can be played by the device 36 and is sent to the music database 138 of the hard disk 130 and the like. Remembered. In addition, communication is performed via the LAN 40 between the karaoke device 36 a that has acquired the information from the server device 12 and the other karaoke devices 36, and is stored in the hard disk 130 of each karaoke device 36. Information is shared, and the contents of the music database 138 and the like are equivalent.

前記サーバ装置12に備えられた動画データベース68は、通信端末装置としての前記カラオケ装置36、或いは前記PC14や携帯電話機16等から投稿すなわち前記通信回線18を介してアップロードされた複数の動画情報(映像情報)を記憶する。この動画情報は、例えばAVI(Audio-Video Interleaved)形式、MPEG(Moving Picture Experts Group)形式、FLV(Flash Video)形式等の動画ファイル(映像ファイル)であり、例えば投稿順に定められた所定の識別番号(コンテンツID)をインデックスとして前記動画データベース68に記憶される。なお、この動画情報は、複数枚の静止画像が所定の時間間隔で切替表示される所謂パラパラアニメーションや、映像が一時的に停止する静止画部分を含むものであってもよい。また、その動画データベース68には、投稿者の識別情報(ユーザID)、投稿者の名前(ニックネーム)、投稿時(投稿日時)、投稿に相前後して投稿者により設定(入力)された映像のタイトル、投稿者のコメント、削除用のパスワード、再生回数、投稿コメント数、閲覧者からの投票結果(得票数)、対応する演奏曲の識別情報(選曲番号)、曲名、アーティスト名、及び演奏評価結果(採点結果)等の情報が各動画情報毎にその動画情報と関連づけられて記憶されるようになっている。   The moving image database 68 provided in the server device 12 includes a plurality of pieces of moving image information (videos) posted from the karaoke device 36 serving as a communication terminal device, the PC 14, the mobile phone 16, or the like, that is, uploaded via the communication line 18. Information). This moving image information is, for example, a moving image file (video file) in AVI (Audio-Video Interleaved) format, MPEG (Moving Picture Experts Group) format, FLV (Flash Video) format, etc., for example, a predetermined identification defined in the order of posting The number (content ID) is stored in the moving image database 68 as an index. The moving image information may include a so-called flip animation in which a plurality of still images are switched and displayed at a predetermined time interval, or a still image portion in which the video is temporarily stopped. Also, in the moving image database 68, the poster's identification information (user ID), the poster's name (nickname), the posting time (posting date), and the video set (input) by the contributor before and after the posting Title, contributor's comment, deletion password, playback count, post comment count, vote result from viewer (number of votes), corresponding performance song identification information (music selection number), song title, artist name, and performance Information such as evaluation results (scoring results) is stored in association with the moving image information for each moving image information.

また、前記サーバ装置12に備えられた前記利用者データベース70は、本実施例の動画情報配信システム10の利用者の情報を記憶する。例えば、各利用者の識別情報(ユーザID)をインデックスとして、前記動画情報配信システム10を利用するためのパスワード、投稿者の名前(ニックネーム)、生年月日、性別、住所、メールアドレス、電話番号、血液型、星座、アバタ(利用者に対応する人型映像)に関する情報、パスワードを忘れたときのための質問及び解答、動画情報の閲覧履歴、動画情報のブックマーク、過去に投稿した動画情報の投稿履歴、及び過去に投稿した共演動画情報の投稿履歴等の情報が各利用者毎にその利用者と関連づけられて記憶されるようになっている。なお、本実施例においては、前記動画データベース68と利用者データベース70とを個別のデータベースとして備えた態様について説明するが、それらは単一のデータベースとして構成されたものであってもよく、例えば、前記利用者データベース70に記憶された各利用者に対応する情報として、その利用者が投稿した動画情報乃至後述する共演動画情報等が記憶されるものであってもよい。   Further, the user database 70 provided in the server device 12 stores information on the user of the moving picture information distribution system 10 of the present embodiment. For example, using each user's identification information (user ID) as an index, a password for using the video information distribution system 10, a name of the poster (nickname), date of birth, sex, address, e-mail address, telephone number , Information about blood types, constellations, avatars (humanoid images corresponding to users), questions and answers for forgotten passwords, video information browsing history, video information bookmarks, video information posted in the past Information such as a posting history and a posting history of co-star video information posted in the past is stored for each user in association with the user. In the present embodiment, a mode in which the moving image database 68 and the user database 70 are provided as separate databases will be described. However, they may be configured as a single database, for example, As information corresponding to each user stored in the user database 70, moving picture information posted by the user or co-starring moving picture information described later may be stored.

また、前記利用者データベース70には、各利用者の前記カラオケシステム30に係る情報が記憶される。例えば、各利用者が過去に利用したカラオケ装置36に対応する店舗32(そのカラオケ装置36が設置された店舗32)に関する情報である来店履歴、各利用者が前記カラオケ装置36によるカラオケ演奏において十八番曲として登録した演奏曲(簡易な操作により選曲入力を行い得るように設定された演奏曲)に関する情報、各利用者が過去に前記カラオケ装置36によるカラオケ演奏において選曲した選曲履歴(カラオケ装置36において過去に選曲された演奏曲の履歴)としての演奏曲に関する情報、各利用者が前記カラオケ装置36によるカラオケ演奏において過去に行った演奏評価の評価結果に関する情報、及び各利用者がフレンドとして登録した他の利用者に関する情報等が、各利用者毎にその利用者の識別情報(ユーザID)と関連付けられて記憶されるようになっている。なお、本実施例においては、前記動画情報配信システム10とカラオケシステム30とで共通の識別情報及びパスワードを用い、それら動画情報配信システム10及びカラオケシステム30に関する各利用者の情報を共通の利用者データベース70に蓄積する態様について説明するが、前記動画情報配信システム10及びカラオケシステム30それぞれに対応して個別の利用者データベース(顧客データベース)が設けられたものであってもよく、また、それら動画情報配信システム10及びカラオケシステム30それぞれに対応して個別の識別情報及びパスワードが設定されるものであってもよい。   The user database 70 stores information related to the karaoke system 30 of each user. For example, the store visit history, which is information on the store 32 corresponding to the karaoke device 36 used by each user in the past (the store 32 where the karaoke device 36 is installed), and each user in the karaoke performance by the karaoke device 36 is eighteenth. Information related to a performance song registered as a song (a performance song set so that a song selection input can be performed by a simple operation), a song selection history (in the karaoke device 36) that each user has previously selected in a karaoke performance by the karaoke device 36 Information on performance music (history of performance music selected in the past), information on evaluation results of performance evaluation performed by users in the past in karaoke performance by the karaoke device 36, and each user registered as friends Information about other users, etc., for each user, the identification information of the user (user ID It is adapted to be stored in association with. In addition, in a present Example, the identification information and password which are common in the said moving image information delivery system 10 and the karaoke system 30 are used, and the information of each user regarding these moving image information delivery system 10 and the karaoke system 30 is shared. Although an aspect of storing in the database 70 will be described, an individual user database (customer database) may be provided corresponding to each of the moving image information distribution system 10 and the karaoke system 30, and those moving images may be provided. Individual identification information and a password may be set corresponding to each of the information distribution system 10 and the karaoke system 30.

図5は、前記サーバ装置12のCPU52、前記PC14のCPU74、乃至前記カラオケ装置36のCPU124に備えられた制御機能の要部を説明する機能ブロック線図である。この図5に示す例において、投稿受付制御手段152、動画配信制御手段158、共演動画編集制御手段164、投票受付制御手段172、及びゲーム実行制御手段174は前記サーバ装置12のCPU52に、演奏記録制御手段150、検索制御手段154、配信要求制御手段156、動画出力制御手段160、及び同期演奏制御手段162は前記カラオケ装置36のCPU124に、配信要求制御手段166、動画出力制御手段168、及び投票制御手段170は前記PC14のCPU74に、それぞれ機能的に備えられたものである。なお、上記配信要求制御手段166、動画出力制御手段168、及び投票制御手段170は前記携帯電話機16のCPUにも好適に備えられるものである。また、上記検索制御手段154、配信要求制御手段156、及び動画出力制御手段160等は、前記カラオケ装置36に備えられて(対応付けられて)その一部を構成する前記電子早見本装置38のCPUに備えられたものであってもよい。   FIG. 5 is a functional block diagram illustrating a main part of control functions provided in the CPU 52 of the server device 12, the CPU 74 of the PC 14, or the CPU 124 of the karaoke device 36. In the example shown in FIG. 5, the posting acceptance control means 152, the moving picture distribution control means 158, the co-starring moving picture editing control means 164, the vote acceptance control means 172, and the game execution control means 174 are recorded in the CPU 52 of the server device 12 in the performance recording. The control means 150, the search control means 154, the distribution request control means 156, the moving image output control means 160, and the synchronous performance control means 162 are sent to the CPU 124 of the karaoke apparatus 36, the distribution request control means 166, the moving image output control means 168, and the vote. The control means 170 is functionally provided in the CPU 74 of the PC 14. The distribution request control unit 166, the moving image output control unit 168, and the voting control unit 170 are also preferably provided in the CPU of the mobile phone 16. The search control means 154, the distribution request control means 156, the moving image output control means 160, etc. are provided in the karaoke apparatus 36 (corresponding to each other) and constitute part of the electronic quick sample apparatus 38. A CPU may be provided.

本実施例の動画情報配信システム10は、図5に示す各種制御機能により各利用者からの動画情報の投稿を受け付けると共に、投稿された動画情報を前記通信回線18を介して配信する投稿受付制御及び映像配信制御を実行する。また、この投稿受付制御に関して、それぞれ態様の異なる第1の投稿受付制御(第1の動画投稿制御)及び第2の投稿受付制御(第2の動画投稿制御)を選択的に実行するように構成されている。すなわち、第1の投稿受付制御において、前記通信回線18を介して前記カラオケ装置36等の通信端末装置からの動画情報の投稿(アップロード)を受け付け、その投稿された動画情報を前記動画データベース68に蓄積する処理を行う。一方、第2の投稿受付制御において、既に前記動画データベース68に蓄積されている動画情報に対して、共演動画(コラボ動画)に係る組み合わせ対象となる動画情報の投稿を受け付け、その投稿された動画情報を前記動画データベース68に蓄積すると共に共演動画情報として組み合わせる編集処理を行う。以下、これら第1の投稿受付制御及び第2の投稿受付制御それぞれにおける各制御機能の動作を個別に説明する。   The moving picture information distribution system 10 according to the present embodiment accepts posting of moving picture information from each user by various control functions shown in FIG. 5, and posts acceptance control for distributing the posted moving picture information via the communication line 18. And video distribution control. In addition, regarding the posting acceptance control, the first posting acceptance control (first moving image posting control) and the second posting acceptance control (second moving image posting control) having different aspects are selectively executed. Has been. That is, in the first posting acceptance control, the posting (uploading) of moving image information from a communication terminal device such as the karaoke device 36 is received via the communication line 18, and the posted moving image information is stored in the moving image database 68. Perform accumulation processing. On the other hand, in the second posting acceptance control, for the moving picture information already accumulated in the moving picture database 68, the posting of moving picture information to be combined related to the co-starring moving picture (collaboration moving picture) is accepted, and the posted moving picture The information is stored in the moving image database 68 and is edited in combination with the co-starring moving image information. Hereinafter, the operation of each control function in each of the first posting acceptance control and the second posting acceptance control will be described individually.

先ず、上記第1の投稿受付制御及び第2の投稿受付制御において共通の前記演奏記録制御手段150、投稿受付制御手段152、配信要求制御手段156、166、及び動画配信制御手段158それぞれの動作について説明する。前記演奏記録制御手段150は、前記カラオケ装置36による演奏曲の出力に際して、撮像装置である前記ビデオカメラ122により撮影された映像情報及び音声入力装置であるマイクロフォン110により入力された音声情報を記録する。好適には、前記ビデオカメラ122により撮影された映像情報と、音声入力装置であるマイクロフォン110により入力されて前記A/Dコンバータ112によりディジタル信号に変換された音声情報とを、例えばAVI形式、MPEG形式、FLV形式等のファイル形式にて統合し、映像情報及び音声情報を含む動画情報(動画ファイル)として記録する。図6は、前記演奏記録制御手段150により記録された、前記カラオケ装置36による演奏曲の出力に際して前記ビデオカメラ122により撮影された動画情報である第1の演奏映像180を例示している。なお、図5に示す各制御手段は、映像情報及び音声情報をそれぞれ個別の情報(ファイル)として記録、送受信、乃至蓄積等するものであってもよいが、本実施例においてはそれらを統合して動画ファイルとして記録、送受信、乃至蓄積等する態様について説明する。すなわち、以下の説明において特に言及しない場合には、本実施例における動画情報は、映像情報及びその再生に際して出力される音声に対応する音声情報を含むものである。   First, regarding the operations of the performance recording control means 150, the posting acceptance control means 152, the distribution request control means 156 and 166, and the moving picture distribution control means 158, which are common in the first posting acceptance control and the second posting acceptance control. explain. The performance recording control means 150 records video information captured by the video camera 122 as an imaging device and audio information input by the microphone 110 as an audio input device when the performance music is output by the karaoke device 36. . Preferably, the video information captured by the video camera 122 and the audio information input by the microphone 110 as an audio input device and converted into a digital signal by the A / D converter 112 are, for example, AVI format, MPEG It is integrated in a file format such as a format or FLV format and recorded as moving image information (moving image file) including video information and audio information. FIG. 6 exemplifies a first performance image 180 which is moving image information captured by the video camera 122 when the performance karaoke device 36 outputs the performance tune recorded by the performance recording control means 150. Each control unit shown in FIG. 5 may record, transmit / receive, or store video information and audio information as individual information (file), but in the present embodiment, they are integrated. A mode of recording, transmission / reception, storage, and the like as a moving image file will be described. That is, unless otherwise specified in the following description, the moving image information in the present embodiment includes video information and audio information corresponding to audio output at the time of reproduction.

前記投稿受付制御手段152は、前記通信回線18を介して前記カラオケ装置36等の通信端末装置からの動画情報の投稿を受け付け、その投稿された動画情報を前記動画データベース68に記憶させる。好適には、前記カラオケ装置36による所定の演奏曲の出力に際して前記演奏記録制御手段150により記録された映像情報及び音声情報に対応する動画情報(動画ファイル)の投稿を受け付け、対象となる演奏曲(映像情報及び音声情報の記録に際して出力された演奏曲)の識別情報である選曲番号及び投稿の主体となる利用者の識別情報(ユーザID)等と関連付けて前記動画データベース68に記憶させる。   The posting acceptance control means 152 accepts posting of moving image information from a communication terminal device such as the karaoke device 36 via the communication line 18 and stores the posted moving image information in the moving image database 68. Preferably, posting of moving picture information (moving picture file) corresponding to video information and audio information recorded by the performance recording control means 150 when the karaoke apparatus 36 outputs a predetermined performance piece is accepted, and the target performance piece is played. It is stored in the moving image database 68 in association with the music selection number, which is the identification information of the (musical performance output when recording the video information and audio information), the identification information (user ID) of the user who is the subject of the posting, and the like.

前記配信要求制御手段156、166は、前記動画データベース68に記憶された所定の動画情報の配信要求を、前記通信回線18を介して前記サーバ装置12へ送信する。斯かる配信要求制御手段156、166による配信要求は、例えば、前記動画情報配信システム10を運営する情報配信サービス提供会社により管理されるWWWウェブサイト(所謂動画投稿サイト)にアクセスして動画情報を選択乃至識別情報(コンテンツID)を入力すること等によって行われる。すなわち、前記配信要求制御手段156、166は、好適には、前記通信回線18を介して閲覧可能とされたWWWウェブサイトの情報を表示させると共にそのWWWウェブサイトに従って各種入力等を行うことができるWWWブラウザにおける一機能に対応する。   The distribution request control means 156 and 166 transmit a distribution request for predetermined moving image information stored in the moving image database 68 to the server device 12 via the communication line 18. The distribution request by such distribution request control means 156, 166 is, for example, accessed to a WWW website (so-called video posting site) managed by an information distribution service provider that operates the video information distribution system 10 to obtain video information. This is performed by selecting or inputting identification information (content ID). In other words, the distribution request control means 156, 166 can preferably display information on the WWW website that can be browsed via the communication line 18, and can perform various inputs according to the WWW website. This corresponds to one function in the WWW browser.

前記動画配信制御手段158は、前記PC14、携帯電話機16、或いはカラオケ装置36等の通信端末装置から前記配信要求制御手段156、166等による配信要求があった場合には、その配信要求に応じて前記動画データベース68に記憶されたその配信要求に係る動画情報を要求元である通信端末装置に前記通信回線18を介して配信する。この動画配信制御手段158により各通信端末装置に配信された動画情報は、後述する動画出力制御手段160、168等によりその通信端末装置の表示部(映像表示装置)に表示される。   When there is a distribution request from the communication terminal device such as the PC 14, the mobile phone 16, or the karaoke apparatus 36 by the distribution request control means 156, 166, the video distribution control means 158 responds to the distribution request. The moving image information related to the distribution request stored in the moving image database 68 is distributed to the requesting communication terminal device via the communication line 18. The moving image information distributed to each communication terminal device by the moving image distribution control unit 158 is displayed on the display unit (video display device) of the communication terminal device by the moving image output control units 160 and 168 described later.

次に、第2の投稿受付制御における前記演奏記録制御手段150、投稿受付制御手段152、検索制御手段154、配信要求制御手段156、動画配信制御手段158、動画出力制御手段160、同期演奏制御手段162、及び共演動画編集制御手段164それぞれの動作について説明する。前記検索制御手段154は、前記カラオケ装置36により出力可能な前記多数の演奏曲から所定の条件を満たす単数乃至複数の演奏曲を検索する。例えば、前記楽曲データベース138に記憶された多数の演奏曲(楽曲データ)のうち、前記電子早見本装置38やリモコン装置98等を介して入力される文字乃至は文字列によって示される条件に基づいて、単数乃至は複数の演奏曲を検索する曲名検索処理を実行する。例えば、入力された文字乃至文字列に少なくとも一部が一致する曲名の演奏曲(楽曲データ)を前記楽曲データベース138に記憶された多数の演奏曲から抽出する。また、好適には、前記楽曲データベース138に記憶された多数の演奏曲に係るアーティスト名(歌手名)に関して、前記電子早見本装置38やリモコン装置98等を介して入力される文字乃至は文字列によって示される条件に基づいて、単数乃至は複数のアーティスト名を検索する歌手名検索処理を実行する。例えば、入力された文字乃至文字列に少なくとも一部が一致するアーティスト名を、前記楽曲データベース138に記憶された多数の演奏曲の属性情報としてのアーティスト名から抽出する。   Next, the performance recording control means 150, the posting acceptance control means 152, the search control means 154, the distribution request control means 156, the moving picture distribution control means 158, the moving picture output control means 160, and the synchronous performance control means in the second posting acceptance control. The operations of 162 and the co-starring movie editing control means 164 will be described. The search control means 154 searches for a single or a plurality of performance songs that satisfy a predetermined condition from the large number of performance songs that can be output by the karaoke apparatus 36. For example, out of a large number of performance songs (music data) stored in the music database 138, based on conditions indicated by characters or character strings input via the electronic quick sample device 38, the remote control device 98, etc. Then, a song name search process for searching for one or a plurality of performance songs is executed. For example, performance music (music data) having a song name that at least partially matches the input character or character string is extracted from a large number of performance music stored in the music database 138. Preferably, characters or character strings input through the electronic quick sample device 38, the remote control device 98, etc., with respect to artist names (singer names) related to a large number of performance songs stored in the music database 138. The singer name search process for searching for one or more artist names is executed based on the condition indicated by. For example, an artist name that at least partially matches the input character or character string is extracted from artist names as attribute information of a number of performance songs stored in the song database 138.

また、前記検索制御手段154は、前記動画データベース68に記憶された複数の動画情報から所定の条件を満たす単数乃至複数の動画情報を検索する。好適には、上記曲名検索処理により検索された演奏曲に関連付けられた単数乃至複数の動画情報を前記動画データベース68に記憶された複数の動画情報から抽出する。また、好適には、上記歌手名検索処理により検索されたアーティスト名を属性情報とする演奏曲に関連付けられた単数乃至複数の動画情報を前記動画データベース68に記憶された複数の動画情報から抽出する。また、好適には、前記電子早見本装置38やリモコン装置98等を介して入力される文字乃至は文字列によって示される条件に基づいて、単数乃至は複数の動画情報を検索する。例えば、入力された文字乃至文字列に少なくとも一部が一致する投稿者の名前(ニックネーム)に関連付けられた単数乃至複数の動画情報を前記動画データベース68に記憶された複数の動画情報から抽出する。   Further, the search control means 154 searches for a plurality of pieces of moving picture information satisfying a predetermined condition from a plurality of pieces of moving picture information stored in the moving picture database 68. Preferably, one or a plurality of pieces of moving picture information associated with the performance music searched by the music name search process are extracted from the plurality of moving picture information stored in the moving picture database 68. Preferably, one or more pieces of moving picture information associated with a performance song having the artist name searched by the singer name searching process as attribute information are extracted from the plurality of moving picture information stored in the moving picture database 68. . Preferably, one or more pieces of moving image information are searched based on a character or a character string input via the electronic quick sample device 38, the remote control device 98, or the like. For example, one or more pieces of moving picture information associated with the names (nicknames) of posters that at least partially match the input characters or character strings are extracted from the plurality of pieces of moving picture information stored in the moving picture database 68.

前記動画出力制御手段160は、前記動画配信制御手段158により配信された動画情報の出力を制御する。すなわち、前記サーバ12から前記通信回線18を介してダウンロードされた動画情報を再生して前記映像表示装置100に表示させる。ここで、前記カラオケ装置36においては、前記映像情報デコーダ104が斯かる動画出力制御手段160として機能するものであってもよい。また、前記同期演奏制御手段162は、前記動画出力制御手段160による動画情報の出力と同期してその動画情報と関連付けられた演奏曲を出力させる。例えば、前記動画出力制御手段160により対象となる動画情報の出力(再生)が行われる際に、その動画情報と関連付けられた演奏曲(動画データベース68において関連付けられていた選曲番号に対応する演奏曲)の楽曲データを前記楽曲データベース138から読み出し、動画情報の出力が開始されるのと同期して(同時に)その楽曲データに対応するカラオケ演奏制御を開始する。所定の演奏曲と関連付けられた動画情報は、前記演奏記録制御手段150によりその演奏曲の出力に際して前記ビデオカメラ122により撮影された動画情報を記録したものであるため、その動画情報の出力と同期して対応する演奏曲のカラオケ演奏制御を行うことで、あたかもその動画情報の歌い手と同時に歌っているような共演演奏(コラボ演奏)を実現できる。   The moving image output control unit 160 controls the output of the moving image information distributed by the moving image distribution control unit 158. That is, the moving image information downloaded from the server 12 via the communication line 18 is reproduced and displayed on the video display device 100. Here, in the karaoke apparatus 36, the video information decoder 104 may function as the moving image output control means 160. Further, the synchronous performance control means 162 outputs a performance tune associated with the moving picture information in synchronization with the output of the moving picture information by the moving picture output control means 160. For example, when the moving image output control means 160 outputs (reproduces) the target moving image information, the musical composition associated with the moving image information (the musical composition corresponding to the music selection number associated with the moving image database 68) ) Is read from the music database 138, and karaoke performance control corresponding to the music data is started in synchronization with (simultaneously) the output of the moving image information. The moving image information associated with the predetermined performance music is recorded by recording the video information taken by the video camera 122 when the performance recording control means 150 outputs the performance music, and is synchronized with the output of the video information. By performing karaoke performance control of the corresponding performance song, it is possible to realize a co-performance performance (collaboration performance) as if singing simultaneously with the singer of the video information.

前記動画出力制御手段160は、好適には、前記同期演奏制御手段162による演奏曲の出力と同期してその演奏曲と関連付けられた動画情報を出力させる際に、その動画情報に含まれる音声情報は非出力すなわちミュートとする。換言すれば、音声情報を含む映像情報においてその映像情報のみを出力させる。なお、必ずしも音声情報を非出力としなくともよく、対応する映像情報の音声情報を出力させてもよい。また、前記同期演奏制御手段162は、好適には、前記動画出力制御手段160による動画情報の出力と同期してその動画情報と関連付けられた演奏曲を出力させる際に、同期再生されるその動画情報をカラオケ演奏における背景映像として前記映像表示装置100に表示させる。例えば、前述した図6に示す第1の演奏映像180の出力と同期してその第1の演奏映像180と関連付けられた演奏曲(第1の演奏映像180の記録に際して出力された演奏曲)を出力させる場合、図7に示すように、前記動画出力制御手段160により再生される第1の演奏映像180の前面側に、出力される演奏曲の歌詞情報に基づいて生成される歌詞文字映像182を前記ビデオミキサ106により合成して前記映像表示装置100に表示させる。なお、前記同期演奏制御手段162は、前記動画出力制御手段160による動画情報の出力と同期してその動画情報と関連付けられた演奏曲を出力させる際に、その演奏曲の歌詞文字映像は表示させずその動画情報のみを前記映像表示装置100に表示させるものであってもよい。また、後述するビデオカメラ122により撮影される映像を前記映像表示装置100に表示させると共に、上記第1の演奏映像180を前記コマンダ本体37に設けられたタッチパネルディスプレイ119に表示させるものであってもよい。   Preferably, the moving image output control means 160 outputs audio information included in the moving picture information when outputting the moving picture information associated with the performance music in synchronization with the output of the performance music by the synchronous performance control means 162. Is non-output or muted. In other words, only the video information is output in the video information including audio information. Note that the audio information does not necessarily have to be output, and the audio information of the corresponding video information may be output. The synchronized performance control means 162 is preferably synchronized with the moving image output when the performance information associated with the moving image information is output in synchronization with the output of the moving image information by the moving image output control means 160. Information is displayed on the video display device 100 as a background video in karaoke performance. For example, a performance tune associated with the first performance video 180 in synchronization with the output of the first performance video 180 shown in FIG. 6 described above (a performance tune output when recording the first performance video 180). In the case of outputting, as shown in FIG. 7, the lyrics character image 182 generated on the front side of the first performance image 180 reproduced by the moving image output control means 160 based on the lyrics information of the performance music to be output. Are combined by the video mixer 106 and displayed on the video display device 100. When the synchronized performance control means 162 outputs the performance song associated with the moving picture information in synchronization with the output of the moving picture information by the moving picture output control means 160, the lyric character video of the performance music is displayed. Instead, only the moving image information may be displayed on the video display device 100. In addition, the video captured by the video camera 122 (to be described later) is displayed on the video display device 100, and the first performance video 180 is displayed on the touch panel display 119 provided in the commander body 37. Good.

また、前記同期演奏制御手段162による演奏曲の出力と同期して図7に示すような第1の演奏映像180を背景映像とするカラオケ演奏映像を前記映像表示装置100に表示させる態様において、そのカラオケ演奏に係る演奏曲に予め関連付けられたデフォルトの背景映像(例えば、その演奏曲に係るプロモーションビデオ映像)214を、図26に示すように前記コマンダ本体37に設けられたタッチパネルディスプレイ119に表示させるものであってもよい。また、前記映像表示装置100には歌詞文字映像182を表示(合成)させない図6に示すような第1の演奏映像180を表示させ、図27に示すようにその歌詞文字映像182を上記背景映像214の前面側に合成して前記タッチパネルディスプレイ119に表示させる態様も考えられる。更に、前記映像表示装置100に表示された図7に示すような映像と、前記タッチパネルディスプレイ119に表示された図27に示すような映像とが所定の操作に応じて切り替え可能とされるものであってもよい。すなわち、前記第1の演奏映像180を含むカラオケ演奏映像と、出力に係る演奏曲のデフォルトの背景映像214とを、前記タッチパネルディスプレイ119等を介しての入力操作に応じて前記映像表示装置100及びタッチパネルディスプレイ119に選択的に表示させる制御を行うものであってもよい。   Further, in the aspect in which the video display device 100 displays the karaoke performance video having the first performance video 180 as a background video as shown in FIG. 7 in synchronization with the output of the performance music by the synchronous performance control means 162, A default background video (for example, a promotion video video related to the performance song) 214 previously associated with the performance song related to the karaoke performance is displayed on the touch panel display 119 provided in the commander main body 37 as shown in FIG. It may be a thing. Further, the video display device 100 displays a first performance video 180 as shown in FIG. 6 in which the lyric character video 182 is not displayed (synthesized), and the lyric character video 182 is displayed as the background video as shown in FIG. A mode in which the image is combined with the front surface of 214 and displayed on the touch panel display 119 is also conceivable. Furthermore, the video as shown in FIG. 7 displayed on the video display device 100 and the video as shown in FIG. 27 displayed on the touch panel display 119 can be switched according to a predetermined operation. There may be. That is, the karaoke performance video including the first performance video 180 and the default background video 214 of the performance tune to be output are input to the video display device 100 and the video display device 100 according to the input operation via the touch panel display 119 or the like. Control for selectively displaying on the touch panel display 119 may be performed.

前記演奏記録制御手段150は、前記動画出力制御手段160による動画情報の出力と同期して前記同期演奏制御手段162によりその動画情報と関連付けられた演奏曲を出力させる同期演奏制御に際して、撮像装置である前記ビデオカメラ122により撮影された映像情報及び音声入力装置であるマイクロフォン110により入力された音声情報を記録する。好適には、前記ビデオカメラ122により撮影された動画情報と、音声入力装置であるマイクロフォン110により入力されて前記A/Dコンバータ112によりディジタル信号に変換された音声情報とを、例えばAVI形式、MPEG形式、FLV形式等のファイル形式にて統合し、映像情報及び音声情報を含む動画情報(動画ファイル)として記録する。   The performance recording control unit 150 is an imaging device that performs synchronous performance control in which the synchronized performance control unit 162 outputs a performance tune associated with the moving image information in synchronization with the output of the moving image information by the moving image output control unit 160. Video information captured by the video camera 122 and audio information input by the microphone 110 which is an audio input device are recorded. Preferably, moving image information captured by the video camera 122 and audio information input by the microphone 110 as an audio input device and converted into a digital signal by the A / D converter 112 are, for example, AVI format, MPEG It is integrated in a file format such as a format or FLV format and recorded as moving image information (moving image file) including video information and audio information.

前記投稿受付制御手段152は、前記同期演奏制御手段162による所定の演奏曲の出力に際して前記演奏記録制御手段150により記録された映像情報及び音声情報に対応する動画情報の投稿を受け付け、対象となる演奏曲(同期演奏制御手段162により出力された演奏曲)の識別情報、投稿の主体となる利用者の識別情報(ユーザID)、及び共演演奏に係る動画情報の識別情報(コンテンツID)と関連付けて前記動画データベース68に記憶させる。   The posting acceptance control means 152 accepts posting of moving picture information corresponding to the video information and audio information recorded by the performance recording control means 150 when the predetermined performance tune is output by the synchronous performance control means 162 and is targeted. Associate with identification information of performance music (performance music output by synchronized performance control means 162), identification information (user ID) of user who is the main subject of posting, and identification information (content ID) of moving picture information related to co-star performance And stored in the moving image database 68.

前記共演動画編集制御手段164は、前記投稿受付制御手段152により受け付けられる複数の動画情報を組み合わせて共演動画情報を編集し、その編集された共演動画情報を前記動画データベース68に記憶させる。好適には、前記投稿受付制御手段152により受け付けられる、共通の演奏曲に関連付けられた複数の動画情報を組み合わせて共演動画情報を編集し、その編集された共演動画情報をその演奏曲の識別情報(コンテンツID)と関連付けて前記動画データベース68に記憶させる。この共演動画情報とは、上記組み合わせに係る複数(好適には1対)の動画情報を同期して(同時に)出力させるための情報であり、好適には、前記動画データベース68にそれぞれ個別に(独立した動画ファイルとして)記憶された組み合わせに係る複数の動画情報を読み出し、それら動画情報を共演映像として同期出力させるための組み合わせ情報に相当する。また、好適には、その共演動画情報の属性情報として、対象となる演奏曲の識別情報(選曲番号)、その演奏曲の曲名、アーティスト名、演奏時間、組み合わせに係る各動画情報の投稿者の識別情報(ユーザID)、各投稿者の名前(ニックネーム)、各投稿者のコメント、共演映像のタイトル、及び各動画情報に対応する演奏評価結果(採点結果)等が対象となる共演動画情報と関連付けられて前記動画データベース68に記憶される。   The co-star video editing control unit 164 edits the co-star video information by combining a plurality of video information received by the posting reception control unit 152, and stores the edited co-star video information in the video database 68. Preferably, the co-star video information is edited by combining a plurality of pieces of video information associated with a common musical piece accepted by the posting acceptance control means 152, and the edited co-star video information is used as identification information for the musical piece. It is stored in the moving image database 68 in association with (content ID). This co-starring movie information is information for outputting (preferably a pair) of movie information related to the above combination in synchronization (simultaneously), and preferably each of the movie database 68 individually ( It corresponds to combination information for reading a plurality of pieces of moving image information related to the stored combination (as independent moving image files) and synchronously outputting the moving image information as a co-star video. Preferably, the attribute information of the co-starring video information includes the identification information (music selection number) of the target performance song, the song title of the performance song, the artist name, the performance time, and the contributor of each video information related to the combination. Co-starring video information for which identification information (user ID), name of each contributor (nickname), comment of each contributor, title of co-starring video, performance evaluation result (scoring result) corresponding to each video information, etc. It is associated and stored in the moving image database 68.

前記動画配信制御手段158は、前記通信回線18を介しての前記PC14や携帯電話機16等の通信端末装置からの配信要求に応じて、前記動画データベース68に記憶されたその配信要求に係る共演動画情報をその通信端末装置に配信する。好適には、共演動画情報の配信と相前後してその共演動画情報に係る組み合わせの対象となる複数の動画情報を前記動画データベース68から読み出し、その共演動画情報と共に上記配信要求元である通信端末装置に配信する。この動画配信制御手段158により配信された共演動画情報に係る複数の動画情報は、各通信端末装置に備えられた動画出力制御手段160、168等によりその通信端末装置の表示部(映像表示装置)に表示される。   In response to a distribution request from a communication terminal device such as the PC 14 or the mobile phone 16 via the communication line 18, the moving image distribution control means 158 is a co-starred moving image related to the distribution request stored in the moving image database 68. Information is distributed to the communication terminal device. Preferably, a plurality of video information to be combined with the co-star video information is read from the video database 68 before and after the distribution of the co-star video information, and the communication terminal that is the distribution request source together with the co-star video information Deliver to the device. A plurality of pieces of moving image information related to the co-starring moving image information distributed by the moving image distribution control unit 158 is displayed on the display unit (video display device) of the communication terminal device by the moving image output control units 160 and 168 provided in each communication terminal device. Is displayed.

前記動画出力制御手段168は、前記動画配信制御手段158により配信された動画情報の出力を制御する。すなわち、前記サーバ12から前記通信回線18を介してダウンロードされた動画情報を再生して前記映像表示装置80に表示させる。ここで、前記PC14のCPU74に備えられた動画出力制御手段168は、好適には、前記動画配信制御手段158により配信された動画情報をWWWブラウザ上で出力(再生)可能とするものであり、例えばMPEGデコーダやフラッシュプレイヤ等、動画ファイルの形式に応じて種々の動画再生ソフトウェア(プラグイン)が適宜用いられる。   The moving image output control unit 168 controls the output of the moving image information distributed by the moving image distribution control unit 158. That is, the moving image information downloaded from the server 12 via the communication line 18 is reproduced and displayed on the video display device 80. Here, the moving image output control means 168 provided in the CPU 74 of the PC 14 preferably allows the moving image information distributed by the moving image distribution control means 158 to be output (reproduced) on a WWW browser, For example, various moving image playback software (plug-in) such as an MPEG decoder or a flash player is appropriately used depending on the format of the moving image file.

図8は、前記PC14や携帯電話機16等の通信端末装置に表示された共演映像186の一例を示す図である。この共演映像186においては、前述した図6に示す第1の演奏映像180と、前記動画出力制御手段160及び同期演奏制御手段162によりその第1の演奏映像180の出力と同期して実行されたカラオケ演奏の出力に際して前記演奏記録制御手段150により記録された第2の演奏映像184とが、所定のWWWウェブサイト上において同期して(同時に)出力される例を示している。この図8に示すWWWウェブサイトは、例えば、前記動画情報配信システム10を運営する情報配信サービス提供会社により管理される所謂動画投稿サイトに相当するものであり、一般的なWWWブラウザにより前記PC14や携帯電話機16等の通信端末装置において閲覧可能とされる。このWWWウェブサイト上においては、出力される共演映像に係る共通の演奏曲の曲名及びアーティスト名が表示されると共に、再生/停止ボタン188、頭出しボタン190、再生位置決定つまみ192、音量設定つまみ194、及び表示画面の全画面表示乃至等倍表示を切り替える表示切替ボタン196等が表示され、各ボタン乃至つまみにより共演映像の出力に係る各種操作が可能とされている。また、各動画情報に対応して非表示ボタン198が表示され、その非表示ボタン198が押されることで共演映像に係る2つの動画情報の何れか一方を非表示とすることができるようになっている。更に、各動画情報に対応して投票ボタン200が表示され、その投票ボタン200が押されることで後述する投票制御手段170により各動画情報に対する閲覧者の投票が可能とされている。   FIG. 8 is a diagram illustrating an example of the co-star video 186 displayed on the communication terminal device such as the PC 14 or the mobile phone 16. In this co-star video 186, the first performance video 180 shown in FIG. 6 described above and the video output control means 160 and the synchronous performance control means 162 were executed in synchronization with the output of the first performance video 180. In this example, the second performance video 184 recorded by the performance recording control means 150 is output synchronously (simultaneously) on a predetermined WWW website when a karaoke performance is output. The WWW website shown in FIG. 8 corresponds to, for example, a so-called moving image posting site managed by an information distribution service provider that operates the moving image information distribution system 10. It can be viewed on a communication terminal device such as a mobile phone 16. On this WWW website, the names and artist names of common performance songs related to the output co-star video are displayed, and a play / stop button 188, a cue button 190, a playback position determination knob 192, and a volume setting knob. 194 and a display switching button 196 for switching between full-screen display and same-size display on the display screen are displayed, and various operations relating to the output of the co-star video can be performed by each button or knob. In addition, a non-display button 198 is displayed corresponding to each piece of moving image information, and by pressing the non-display button 198, one of the two pieces of moving image information related to the co-star video can be hidden. ing. Furthermore, a voting button 200 is displayed corresponding to each moving picture information, and when the voting button 200 is pressed, a viewer can vote for each moving picture information by the voting control means 170 described later.

図8に示すWWWウェブサイトが前記PC14、携帯電話機16、及びカラオケ装置36等の通信端末装置におけるWWWブラウザに表示された状態において、各通信端末装置の操作部により上記WWWウェブサイトにおける再生/停止ボタン188が押される等の操作が行われた場合、上記共演映像186の出力すなわち前記第1の演奏映像180及び第2の演奏映像184の同期出力が開始される。この共演映像186の出力においては、前記第1の演奏映像180及び第2の演奏映像184が同期して再生されると共に、それら第1の演奏映像180及び第2の演奏映像184それぞれに含まれる音声情報も同期して出力される。この音声情報の出力に関して、前記第1の演奏映像180に対応する音声情報が左のスピーカから出力される一方、前記第2の演奏映像184に対応する音声情報が右のスピーカから出力されるといった制御を行うものであってもよいし、それらの音声情報を合成してステレオ出力させるものであってもよい。このように、共演動画情報の組み合わせに係る複数の動画情報及びその音声情報が同期して出力されることで、あたかも各動画情報の演奏者が同時に演奏を行っているような共演映像(コラボ動画)の出力が可能とされる。   When the WWW website shown in FIG. 8 is displayed on the WWW browser in the communication terminal device such as the PC 14, the mobile phone 16, and the karaoke device 36, playback / stop on the WWW website is performed by the operation unit of each communication terminal device. When an operation such as pressing the button 188 is performed, output of the co-star video 186, that is, synchronous output of the first performance video 180 and the second performance video 184 is started. In the output of the co-star video 186, the first performance video 180 and the second performance video 184 are reproduced in synchronization with each other and are included in the first performance video 180 and the second performance video 184, respectively. Audio information is also output in synchronization. Regarding the output of the audio information, the audio information corresponding to the first performance video 180 is output from the left speaker, while the audio information corresponding to the second performance video 184 is output from the right speaker. Control may be performed, or the audio information may be synthesized and output in stereo. In this way, a plurality of video information related to the combination of the co-star video information and the audio information thereof are output synchronously, so that the co-star video (collaboration video as if the performers of each video information are playing simultaneously) ) Can be output.

また、上記共演映像186が通信端末装置としての前記カラオケ装置36の映像表示装置100に表示される態様においては、図29に示すように、各動画情報に対応して表示切替ボタン218が表示され、その表示切替ボタン218が押された側の動画情報(本実施例では第1の演奏映像180)が図30に示すように前記タッチパネルディスプレイ119に表示されるものであってもよい。ここで、上記表示切替ボタン218が押された場合、斯かる操作が行われた側の動画情報は前記映像表示装置100に表示されなくなる(非表示にされる)と共に、斯かる操作が行われなかった側の動画情報(本実施例では第2の演奏映像184)が単独で前記映像表示装置100に表示される。そして、前記タッチパネルディスプレイ119に表示された第1の演奏映像180と、前記映像表示装置100に表示された第2の演奏映像184とが同期して出力されることにより、同一の画面内でそれらの映像が同期して出力されるものと同様の前記共演映像186が実現される。また、図30に示すように、前記タッチパネルディスプレイ119に表示された動画情報の一部に上記表示切替ボタン218が表示され、その表示切替ボタン218が押されることでそのタッチパネルディスプレイ119に表示された動画情報が再び前記映像表示装置100に表示され、図29に示すような共演映像186がその映像表示装置100に表示されると共に前記タッチパネルディスプレイ119に表示された動画情報が非表示とされるように制御するものであってもよい。   Further, in the aspect in which the co-star video 186 is displayed on the video display device 100 of the karaoke device 36 as a communication terminal device, as shown in FIG. 29, a display switching button 218 is displayed corresponding to each video information. The moving image information on the side on which the display switching button 218 is pressed (the first performance image 180 in this embodiment) may be displayed on the touch panel display 119 as shown in FIG. Here, when the display switching button 218 is pressed, the moving image information on the side on which such operation is performed is not displayed (not displayed) on the video display device 100, and such operation is performed. The missing video information (second performance video 184 in this embodiment) is displayed on the video display device 100 alone. Then, the first performance video 180 displayed on the touch panel display 119 and the second performance video 184 displayed on the video display device 100 are output in synchronism with each other in the same screen. The co-star video 186 similar to the one that is output in synchronization with the other video is realized. Further, as shown in FIG. 30, the display switching button 218 is displayed on a part of the moving image information displayed on the touch panel display 119, and the display switching button 218 is pressed to display the touch panel display 119. The moving image information is displayed again on the video display device 100, and the co-star video 186 as shown in FIG. 29 is displayed on the video display device 100, and the moving image information displayed on the touch panel display 119 is hidden. It may be one that controls.

図5に示す投票制御手段170は、前記PC14に備えられた前記キーボード84乃至マウス86等の入力装置による操作に応じて、前記動画データベース68に記憶された各動画情報に対する投票処理を実行する。例えば、図8に示す共演映像186における第1の演奏映像180乃至第2の演奏映像184に対応して表示された投票ボタン200にカーソルが合わせられた状態における前記マウス86のクリック操作等に応じて、前記第1の演奏映像180乃至第2の演奏映像184に対する投票に関する情報を前記サーバ装置12へ送信する。また、前記投票受付制御手段172は、前記通信端末装置における上記投票制御手段170による投票処理に応じて、前記動画データベース68に記憶された各動画情報に対する投票を受け付ける。すなわち、前記動画データベース68において投票対象となる動画情報に関連付けて記憶された投票結果(得票数)を更新すなわち得票数に1を加算する処理を行う。なお、上記投票制御手段170及び投票受付制御手段172は、必ずしも共演動画情報の組み合わせに係る1対の動画情報の出力時に投票処理乃至投票受付処理を行うものでなくともよく、例えば、前記動画データベース68に記憶された動画情報の単独出力(通常出力)に相前後してその動画情報に対する投票処理乃至投票受付処理を行うものであってもよい。   The voting control means 170 shown in FIG. 5 executes a voting process for each piece of moving picture information stored in the moving picture database 68 in response to an operation by an input device such as the keyboard 84 to the mouse 86 provided in the PC 14. For example, in response to a click operation of the mouse 86 in a state where the cursor is placed on the voting button 200 displayed corresponding to the first performance video 180 to the second performance video 184 in the co-star video 186 shown in FIG. Then, information relating to voting for the first performance video 180 to the second performance video 184 is transmitted to the server device 12. The voting acceptance control means 172 accepts voting for each piece of moving picture information stored in the moving picture database 68 in accordance with the voting process by the voting control means 170 in the communication terminal device. That is, the voting result (number of votes) stored in the moving picture database 68 in association with the moving picture information to be voted is updated, that is, a process of adding 1 to the number of votes obtained is performed. Note that the voting control unit 170 and the voting reception control unit 172 do not necessarily perform a voting process or a voting reception process when outputting a pair of moving image information related to a combination of co-starring moving image information. For example, the moving image database Alternatively, the voting process or the voting acceptance process may be performed on the moving image information before or after the single output (normal output) of the moving image information stored in 68.

図5に示すゲーム実行制御手段174は、前記動画出力制御手段160、168等による前記共演動画情報の組み合わせに係る1対の動画情報の同期出力に際して、それら1対の動画情報が化体するプレイヤが相互に対戦する対戦ゲームを実行する。また、この対戦ゲームに関して、前記共演動画情報の組み合わせに係る1対の動画情報それぞれに含まれる音声情報の演奏評価を行う演奏評価制御手段176を含んでいる。以下、図9〜図14等を参照して上記ゲーム実行制御手段174による対戦ゲーム実行制御及びその対戦ゲーム実行制御に係る演奏評価制御手段176による演奏評価制御について説明する。   The game execution control means 174 shown in FIG. 5 is a player in which the pair of moving image information is embodied when the pair of moving image information related to the combination of the co-starring moving image information is output by the moving image output control means 160, 168, etc. Execute a battle game in which each other battles against each other. In addition, with respect to this competitive game, performance evaluation control means 176 for performing performance evaluation of audio information included in each of the pair of moving image information related to the combination of the co-starring moving image information is included. Hereinafter, the battle game execution control by the game execution control unit 174 and the performance evaluation control by the performance evaluation control unit 176 related to the battle game execution control will be described with reference to FIGS.

上記演奏評価制御手段176は、前記共演動画情報の組み合わせに係る1対の動画情報それぞれに含まれる音声情報に対応して、予め定められた関係から前記共通の楽曲データに基づいて各動画情報毎にその音声情報の演奏評価を行う。例えば、各動画情報に含まれる音声情報と、前記楽曲データベース138から読み出される前記共通の楽曲データすなわちその音声情報(歌唱)に対応する演奏曲の演奏情報(MIDIデータ)とを時系列で比較し、メロディなどの基本音程と各動画情報に含まれる音声情報から抽出される音程との相対的なずれやその音声の絶対的な声量などを基準として採点を行う。この採点は、好適には、対象となる演奏曲の演奏開始から演奏終了までの間、予め定められた所定区間毎(例えば、一定の時間が経過する毎)に定期的に実行される。また、この採点の態様としては、例えば、千点満点中何点というように数値的に採点を行うものであってもよいし、可(評価が予め定められた閾値以上)乃至不可(評価が予め定められた閾値未満)の何れに当てはまるかを判定するというように簡易なものであってもよい。なお、斯かる演奏評価制御手段176による演奏評価は、必ずしも上記ゲーム実行制御手段174による対戦ゲーム実行制御に際してリアルタイムで行われるものでなくともよく、前記対戦ゲーム実行制御に先立って行われた演奏評価結果を記憶しておき、その対戦ゲーム実行制御に際してその演奏評価結果を読み出して用いるものであっても構わない。   The performance evaluation control means 176 corresponds to each piece of moving picture information based on the common music data from a predetermined relationship corresponding to the audio information included in each pair of moving picture information relating to the combination of the co-starring moving picture information. The performance evaluation of the audio information is performed. For example, the audio information included in each video information and the performance information (MIDI data) of performance music corresponding to the common music data read from the music database 138, that is, the audio information (singing), are compared in time series. In addition, scoring is performed on the basis of a relative shift between a basic pitch such as a melody and a pitch extracted from voice information included in each moving picture information, an absolute volume of the voice, or the like. This scoring is preferably executed periodically at predetermined intervals (for example, every time a certain time elapses) from the start to the end of the performance of the target performance piece. In addition, as a mode of this scoring, for example, scoring may be performed numerically, such as how many points out of a thousand points, or acceptable (evaluation is equal to or higher than a predetermined threshold) or impossible (evaluation is not possible). It may be as simple as determining which one falls below a predetermined threshold value). Note that the performance evaluation by the performance evaluation control means 176 does not necessarily have to be performed in real time during the battle game execution control by the game execution control means 174, and the performance evaluation performed prior to the battle game execution control. The result may be stored, and the performance evaluation result may be read and used in the battle game execution control.

前記ゲーム実行制御手段174は、予め定められた関係から、前記演奏評価制御手段176による各動画情報に含まれる音声情報の演奏評価結果に基づいて、前記共演動画情報の組み合わせに係る1対の動画情報が化体するプレイヤが相互に対戦する対戦ゲームを実行する。すなわち、前記共演動画情報の組み合わせに係る1対の動画情報それぞれを対戦ゲームのプレイヤとみなして、それらのプレイヤ(=動画情報)を相互に対戦させる。図9は、前記PC14や携帯電話機16等の通信端末装置に表示された対戦ゲーム映像202の一例を示す図である。この図9に示す対戦ゲーム映像202は、前述した図8に示す共演映像186に対戦ゲームに係る表示を付加したものであり、例えば、各動画情報が化体するプレイヤに対応してライフゲージ(Life Gauge)204が表示される。この図9に示すように、前記ゲーム実行制御手段174は、好適には、前記通信端末装置それぞれにおける動画出力制御手段160、168等による前記共演映像186の同期出力に際して、その共演映像186に対戦ゲームに係る表示を付加的に併行出力することで前記対戦ゲームを実現する。なお、図9においては、対戦ゲームスタート時(共演演奏開始時)において各動画情報が化体するプレイヤに対応するライフゲージ204が何れもマックスすなわち最大値である状態を示している。また、図9に示すように、上記対戦ゲーム映像202において、好適には、前記共演映像186において表示されていた非表示ボタン198及び投票ボタン200は消去される。   Based on a performance evaluation result of audio information included in each piece of moving image information by the performance evaluation control unit 176, the game execution control unit 174 has a pair of moving images related to the combination of the co-starring moving image information. A battle game in which players whose information is embodied battles each other is executed. That is, each pair of moving image information related to the combination of the co-starring moving image information is regarded as a player of the battle game, and these players (= moving image information) are played against each other. FIG. 9 is a diagram showing an example of a battle game image 202 displayed on a communication terminal device such as the PC 14 or the mobile phone 16. The battle game video 202 shown in FIG. 9 is obtained by adding a display related to the battle game to the above-described co-star video 186 shown in FIG. 8. For example, a life gauge ( Life Gauge) 204 is displayed. As shown in FIG. 9, the game execution control means 174 preferably matches the co-star video 186 when the co-star video 186 is synchronously output by the video output control means 160, 168, etc. in each of the communication terminal devices. The battle game is realized by additionally outputting a display related to the game. Note that FIG. 9 shows a state in which the life gauges 204 corresponding to the players that each moving picture information forms at the time of the start of the battle game (at the start of the co-star performance) are maximum, that is, the maximum value. Further, as shown in FIG. 9, in the battle game video 202, preferably, the non-display button 198 and the voting button 200 displayed in the co-star video 186 are deleted.

前記ゲーム実行制御手段174は、好適には、前記対戦ゲームにおいて、前記演奏評価制御手段176による各動画情報に含まれる音声情報の演奏評価結果に基づいて、前記共演動画情報の組み合わせに係る1対の動画情報それぞれに対応して表示されたライフゲージ204に係るライフ値(プレイヤの生命力)を減少させてゆく制御を実行する。換言すれば、前記演奏評価制御手段176による各動画情報に含まれる音声情報の演奏評価結果に基づいて、対戦相手のライフ値にダメージを与える処理を実行する。例えば、前記演奏評価制御手段176による所定区間毎(予め定められた評価タイミング毎)の演奏評価結果に関して、各動画情報に対応する演奏評価結果の差分値を算出し、演奏評価結果が低かった動画情報に対応するプレイヤに対してその差分値に相当するダメージ(例えば、差分値に比例する値)を与える。換言すれば、演奏評価結果が低かった動画情報に対応するプレイヤのライフ値を上記差分値に相当する値だけ減少させる処理を行う。また、前記演奏評価制御手段176による評価結果が可乃至不可を判定するものである態様においては、前記1対の動画情報に対応するプレイヤ両者共に評価結果が可乃至不可であった場合にはダメージ無しとするが、一方のプレイヤの評価結果が可であり他方のプレイヤの評価結果が不可であった場合にはその不可の評価結果に対応するプレイヤに対して予め定められた一定のダメージを与える(ライフ値を一定値減少させる)等の処理を行うものであってもよい。以上のような制御により、前記演奏評価制御手段176による演奏評価が行われる毎に前記1対の動画情報それぞれに対応するライフゲージ204のライフ値が減ってゆく。そして、一方の動画情報に対応するプレイヤのライフ値が零となった場合、或いは前記1対の動画情報の同期出力終了をもって前記対戦ゲームが終了させられ、その時点での残存ライフ値が大きかった方のプレイヤが勝利、小さかった方のプレイヤが敗北とされる。   Preferably, the game execution control means 174 is a pair related to the combination of the co-starring video information based on the performance evaluation result of the audio information included in each video information by the performance evaluation control means 176 in the competitive game. Control for decreasing the life value (the life force of the player) related to the life gauge 204 displayed corresponding to each of the moving image information is executed. In other words, processing for damaging the opponent's life value is executed based on the performance evaluation result of the audio information included in each moving picture information by the performance evaluation control means 176. For example, with respect to performance evaluation results for each predetermined section (every predetermined evaluation timing) by the performance evaluation control means 176, a difference value of performance evaluation results corresponding to each video information is calculated, and a video with low performance evaluation results Damage corresponding to the difference value (for example, a value proportional to the difference value) is given to the player corresponding to the information. In other words, a process for reducing the life value of the player corresponding to the moving image information having a low performance evaluation result by a value corresponding to the difference value is performed. Further, in the aspect in which the evaluation result by the performance evaluation control means 176 determines whether or not the evaluation result is acceptable, if both the players corresponding to the pair of moving image information have the evaluation result acceptable or not, damage is caused. No, but if the evaluation result of one player is acceptable and the evaluation result of the other player is not possible, a predetermined fixed damage is given to the player corresponding to that evaluation result Processing such as reducing the life value by a certain value may be performed. With the control as described above, the life value of the life gauge 204 corresponding to each of the pair of moving image information decreases each time performance evaluation by the performance evaluation control means 176 is performed. Then, when the life value of the player corresponding to one of the moving image information becomes zero, or when the match output of the pair of moving image information ends, the battle game is ended, and the remaining life value at that time is large. One player wins and the smaller player loses.

また、前記演奏評価制御手段176は、好適には、前記共演動画情報の組み合わせに係る1対の動画情報それぞれに含まれる音声情報が、予め定められた複数の技のうち何れかの成立条件を満たしているか否かを判定する。また、前記ゲーム実行制御手段174は、好適には、前記演奏評価制御手段176により前記共演動画情報の組み合わせに係る一方の動画情報に含まれる音声情報が前記成立条件を満たしていると判定された場合には、その組み合わせに係る他方の動画情報が化体するプレイヤに対してその成立条件に係る技を適用する。ここで、上記技とは、例えば前述した所定区間毎の演奏評価結果に応じたダメージ(差分値に基づくライフ減少値)よりも大きなダメージを相手に与える(減少させるライフ値が大きい)処理であり、一般的な格闘ゲームにおいてコンボ(Combo:複合技)と称されるものである。以下、前記演奏評価制御手段176によりコンボの成立条件を満たしているか否かを判定すると共に、前記ゲーム実行制御手段174によりその判定結果に応じてコンボを対戦相手に適用する具体例を説明する。   Further, the performance evaluation control means 176 preferably has audio information included in each of a pair of moving image information relating to the combination of the co-starring moving image information satisfying any one of a plurality of predetermined conditions. It is determined whether it is satisfied. In addition, the game execution control unit 174 is preferably determined by the performance evaluation control unit 176 that the audio information included in one video information related to the combination of the co-starring video information satisfies the establishment condition. In such a case, the technique related to the establishment condition is applied to the player who realizes the other video information related to the combination. Here, the technique is, for example, a process of giving damage (a life value to be reduced is large) to the opponent more than the damage (life reduction value based on the difference value) according to the performance evaluation result for each predetermined section described above. In a general fighting game, this is called a combo (Combo). Hereinafter, a specific example in which the performance evaluation control means 176 determines whether or not a condition for establishing a combo is satisfied and the game execution control means 174 applies the combo to the opponent according to the determination result will be described.

図10は、前記ゲーム実行制御手段174による対戦ゲームにおいて成立するコンボの種類とその成立条件等の一例を示す図である。前記演奏評価制御手段176は、前記共演動画情報の組み合わせに係る1対の動画情報それぞれに含まれる音声情報が、例えばこの図10に示す成立条件の何れかを満たしているか否かを判定する。好適には、前記共通の楽曲データにおいて予め定められた所定区間毎に前記音声情報の音程がその楽曲データを基準とする適切演奏範囲内に入っているか否かを判定し、その判定が肯定される場合には第1の技の成立条件を満たしていると判定する。この適切演奏範囲とは、例えば、前記共通の楽曲データにおけるガイドメロディに対応する音程を中心として所定の音程幅(音域幅)を有する範囲であり、評価の対象となる音声情報がその範囲内に含まれる場合には上記適切演奏範囲内に入っていると判定される。図10に示す例においては、コンボA−1、A−2、A−3、A−4、A−5が斯かる第1の技に相当する。例えば、前記演奏評価制御手段176は、前記共通の楽曲データにおいて8分音符以下の音符が8個以上続く区間に対応する前記音声情報の音程がその楽曲データを基準とする適切演奏範囲内に入っていると判定された場合には、その音声情報に関してコンボA−1の成立を判定する。   FIG. 10 is a diagram showing an example of types of combos established in the battle game by the game execution control means 174, conditions for establishing them, and the like. The performance evaluation control means 176 determines whether or not the audio information included in each of the pair of moving image information related to the combination of the co-starring moving image information satisfies any one of the establishment conditions shown in FIG. Preferably, it is determined whether or not the pitch of the audio information is within an appropriate performance range with reference to the music data for each predetermined section determined in advance in the common music data, and the determination is affirmed. If it is, it is determined that the conditions for establishing the first technique are satisfied. The appropriate performance range is, for example, a range having a predetermined pitch range (sound range) centered on the pitch corresponding to the guide melody in the common music data, and the audio information to be evaluated is within the range. If it is included, it is determined that it is within the appropriate performance range. In the example shown in FIG. 10, the combos A-1, A-2, A-3, A-4, and A-5 correspond to the first technique. For example, the performance evaluation control means 176 may include a pitch of the audio information corresponding to a section where eight or more eighth notes or less in the common music data are within an appropriate performance range based on the music data. If it is determined that the combo A-1 is established, the voice information is determined.

また、前記演奏評価制御手段176は、好適には、前記共通の楽曲データにおいて予め定められたハーモニーパートにおいて前記音声情報に複数人分の音声が含まれているか否かを判定し、その判定が肯定される場合には第2の技の成立条件を満たしていると判定する。この判定は、評価対象となる音声情報の周波数解析等により行われ、その音声情報に複数人分の音声に対応する周波数が含まれているか否かが判定される。図10に示す例においては、コンボB−1が斯かる第2の技に相当する。例えば、前記演奏評価制御手段176は、評価対象となる音声情報において1つのマクロフォン110に対して複数人分の音声が入力されている部分があると判定された場合には、その音声情報に関してコンボB−1の成立を判定する。   Further, the performance evaluation control means 176 preferably determines whether or not voice information for a plurality of persons is included in the voice information in a predetermined harmony part in the common music data. If the determination is affirmative, it is determined that the condition for establishing the second technique is satisfied. This determination is performed by frequency analysis or the like of voice information to be evaluated, and it is determined whether or not the voice information includes frequencies corresponding to the voices of a plurality of people. In the example shown in FIG. 10, combo B-1 corresponds to such a second technique. For example, if the performance evaluation control unit 176 determines that there is a portion in which sound for a plurality of persons is input to one macrophone 110 in the sound information to be evaluated, The establishment of combo B-1 is determined.

また、前記演奏評価制御手段176は、好適には、前記共通の楽曲データにおいて予め定められたデュエットパートにおいて前記音声情報がそのデュエットに係る適切演奏条件を満たすか否かを判定し、その判定が肯定される場合には第3の技の成立条件を満たしていると判定する。このデュエットパートとは、例えば男女複数(好適には1対の男女)の演奏者(歌唱者)が交互に歌うように定められた部分であり、例えば評価の対象となる音声情報が斯かるデュエットパートを通してガイドメロディに対応する音程を中心とする所定の音程幅(音域幅)を有する範囲内に含まれる場合には上記適切演奏条件を満たしていると判定される。また、好適には、評価の対象となる音声情報において男声乃至女声が周波数解析等により判定され、上記デュエットパートにおける男声パートにおいて男声が、女声パートにおいて女声がそれぞれ歌唱しているか否かを判定し、該判定が肯定される場合には上記適切演奏条件を満たしていると判定される。図10に示す例においては、コンボC−2が斯かる第3の技に相当する。例えば、前記演奏評価制御手段176は、評価対象となる男女デュエットパートを有する演奏曲に対応する音声情報で、2本のマイクロフォン110によりそのデュエットパートの発声タイミングが合っていると判定された場合には、その音声情報に関してコンボC−2の成立を判定する。   The performance evaluation control means 176 preferably determines whether or not the audio information satisfies an appropriate performance condition related to the duet in a predetermined duet part in the common music data, and the determination is made. If the determination is affirmative, it is determined that the condition for establishing the third technique is satisfied. The duet part is, for example, a part that is determined so that a plurality of men and women (preferably a pair of men and women) performers (singers) sing alternately. For example, the audio information to be evaluated is such a duet. When it is included in a range having a predetermined pitch range (sound range width) centering on the pitch corresponding to the guide melody through the part, it is determined that the appropriate performance condition is satisfied. Preferably, the male voice or female voice is determined by frequency analysis or the like in the audio information to be evaluated, and it is determined whether or not the male voice is singing in the male voice part and the female voice in the female voice part. If the determination is affirmative, it is determined that the appropriate performance condition is satisfied. In the example shown in FIG. 10, combo C-2 corresponds to the third technique. For example, the performance evaluation control means 176 is audio information corresponding to a performance song having a male and female duet part to be evaluated, and when the two microphones 110 determine that the duet timing of the duet part is correct. Determines the establishment of the combo C-2 for the voice information.

また、前記演奏評価制御手段176は、好適には、予め定められた鳴り物の音が前記音声情報に含まれているか否かを判定し、その判定が肯定される場合には第4の技の成立条件を満たしていると判定する。この判定は、例えば評価対象となる音声情報の周波数解析等により行われ、その音声情報に前記カラオケ装置36の備品の鳴り物(例えば、タンバリン)の演奏音に対応する周波数が含まれているか否かが判定される。図10に示す例においては、コンボDが斯かる第4の技に相当する。例えば、前記演奏評価制御手段176は、評価対象となる音声情報において備え付けの鳴り物の音が前記マイクロフォン110に入力されたと判定された場合には、その音声情報に関してコンボDの成立を判定する。   The performance evaluation control means 176 preferably determines whether or not a predetermined sound is included in the audio information, and if the determination is affirmative, It is determined that the condition is satisfied. This determination is performed by, for example, frequency analysis of voice information to be evaluated, and whether or not the voice information includes a frequency corresponding to the performance sound of the equipment of the karaoke device 36 (for example, a tambourine). Is determined. In the example shown in FIG. 10, the combo D corresponds to the fourth technique. For example, when it is determined that the sound of a sounding instrument provided in the audio information to be evaluated has been input to the microphone 110, the performance evaluation control unit 176 determines whether the combo D is established with respect to the audio information.

また、前記演奏評価制御手段176は、好適には、予め定められた歌唱方法に対応する音声が前記音声情報に含まれているか否かを判定し、その判定が肯定される場合には第5の技の成立条件を満たしていると判定する。例えば、評価対象となる音声情報にシャウト、ビブラート、及びこぶしの何れかの歌唱方法に対応する音声が含まれているか否かを判定する。このシャウトとは、演奏曲の盛り上がりの頂点等において瞬間的に叫ぶような歌い方をする歌唱技法であり、例えば評価対象となる音声情報の音量(ベロシティ)が所定時間内に規定値以上増加した場合(音量の時間変化量が規定値以上であった場合)にその音声情報にシャウトが含まれていると判定される。また、ビブラートとは、フレーズの最後等において音声を細かく震わせる歌唱技法であり、例えば評価対象となる音声情報において所定区間の音程が一定以上の周期で上下させられる場合にその音声情報にビブラートが含まれていると判定される。また、こぶしとは、演歌等の歌い始めにおいて低音から高音に向かって持ち上げるように歌う、所謂小節をきかせるに相当する歌唱技法であり、例えば評価対象となる音声情報において演奏開始から所定区間の音程が低音から高音へ連続的に変化している場合にその音声情報にこぶしが含まれていると判定される。図10に示す例においては、コンボE−1、E−2、E−3が斯かる第5の技に相当する。例えば、前記演奏評価制御手段176は、評価対象となる音声情報においてシャウトが判定された場合には、その音声情報に関してコンボE−1の成立を判定する。   The performance evaluation control means 176 preferably determines whether or not a voice corresponding to a predetermined singing method is included in the voice information. It is determined that the conditions for establishing the technique are satisfied. For example, it is determined whether or not audio corresponding to any one of shout, vibrato, and fist singing methods is included in the audio information to be evaluated. This shout is a singing technique that screams instantaneously at the peak of a performance song. For example, the volume (velocity) of audio information to be evaluated has increased more than a specified value within a predetermined time. In the case (when the amount of time change in volume is greater than or equal to the specified value), it is determined that the audio information includes shout. Vibrato is a singing technique in which the voice is shaken finely at the end of a phrase. For example, when the pitch of a predetermined section is raised or lowered at a certain cycle or more in the voice information to be evaluated, the voice information includes vibrato. It is determined that The fist is a singing technique equivalent to a so-called bar measure that is sung from the low to high at the beginning of singing, such as enka.For example, in the audio information to be evaluated, the pitch of a predetermined section from the start of the performance Is continuously changing from a low tone to a high tone, it is determined that the audio information includes a fist. In the example shown in FIG. 10, the combos E-1, E-2, and E-3 correspond to the fifth technique. For example, when the shout is determined in the audio information to be evaluated, the performance evaluation control unit 176 determines whether the combo E-1 is established for the audio information.

また、前記演奏評価制御手段176は、評価対象となる音声情報の音程、音量、及び発声タイミング等に基づいて、図10に示す各種コンボの成立条件を満たしているか否かを判定する。例えば、評価対象となる音声情報において前記マイクロフォン110に対する入力音量が予め定められた閾値を超えたと判定された場合には、その音声情報に関してコンボB−2の成立を判定する。また、評価対象となるハモリパート(ハーモニーパート)を有する演奏曲に対応する音声情報で、2本のマイクロフォン110によりそのハモリパートにおけるガイドメロディがそれぞれ適切に歌われたと判定された場合には、その音声情報に関してコンボC−1の成立を判定する。   Further, the performance evaluation control means 176 determines whether or not the conditions for establishing various combos shown in FIG. 10 are satisfied, based on the pitch, volume, and utterance timing of the audio information to be evaluated. For example, when it is determined that the input sound volume for the microphone 110 in the audio information to be evaluated exceeds a predetermined threshold, the establishment of the combo B-2 is determined for the audio information. In addition, when it is determined that the guide melody in the sound part is appropriately sung by the two microphones 110 in the sound information corresponding to the performance piece having the sound part (harmonic part) to be evaluated, It is determined whether or not combo C-1 is established for the voice information.

前記ゲーム実行制御手段174は、前記演奏評価制御手段176により前記共演動画情報の組み合わせに係る一方の動画情報に含まれる音声情報において何れかのコンボの成立が判定された場合には、その組み合わせに係る他方の動画情報が化体するプレイヤに対してそのコンボを適用する。例えば、図10に示すコンボ表示内容に相当する表示効果を他方の動画情報(対戦相手であるプレイヤに対応する動画情報)に適用すると共に、規定のダメージポイント(Point)をその動画情報に対応するプレイヤに与える(ライフ値からそのポイントを減少させる)処理を行う。図11は、前記第1の演奏映像180に対応する音声情報に関してコンボA−2の成立が判定され、対戦相手である前記第2の演奏情報184が化体するプレイヤに対してそのコンボA−2が適用された様子を示している。図11に示すように、前記第1の演奏映像180と第2の演奏映像186とが同期出力される共演映像186に係る対戦ゲームにおいて、前記第1の演奏映像180に対応する音声情報に関してコンボA−2の成立が判定された場合には、対戦相手である前記第2の演奏情報184に対してそのコンボA−2の表示内容である「正確に歌った区間の音符+HIT!の文字を相手方に表示させる」表示制御が行われると共に、その第2の演奏情報184が化体するプレイヤのライフ値が規定のポイント「20pt」減少させられる。なお、図11に示す対戦ゲーム映像202においては、図9に示すゲームスタート時に対応する対戦ゲーム映像202から各動画情報が化体するプレイヤに対応するライフ値が減っており、前記第1の演奏映像180に対応するプレイヤのライフ値よりも前記第2の演奏映像186に対応するプレイヤのライフ値の方が低くなっていることがわかる。ここで、前記対戦ゲーム映像202が前記カラオケ装置36の映像表示装置100に表示される態様において、その対戦ゲーム映像202係る対戦ゲームにおいて上記コンボの成立が判定された場合に、図28に示すようにそのコンボの名称を示す文字映像216を前記コマンダ本体37のタッチパネルディスプレイ119に表示させるものであってもよい。この場合、前記映像表示装置100に表示された対戦ゲーム映像202には必ずしも成立したコンボの名称を表示させなくともよい。   When the performance evaluation control unit 176 determines that any combo is established in the audio information included in one video information related to the combination of the co-starring video information, the game execution control unit 174 determines that combination. The combo is applied to the player who embodies the other video information. For example, the display effect corresponding to the combo display content shown in FIG. 10 is applied to the other moving image information (moving image information corresponding to the opponent player), and a specified damage point (Point) corresponds to the moving image information. A process of giving to the player (decreasing the point from the life value) is performed. FIG. 11 shows that the combo A-2 is determined for the audio information corresponding to the first performance image 180, and that the combo A- 2 shows a state where 2 is applied. As shown in FIG. 11, in the competitive game related to the co-star video 186 in which the first performance video 180 and the second performance video 186 are synchronously output, combo regarding audio information corresponding to the first performance video 180 is performed. If it is determined that A-2 is established, the display content of the combo A-2 with respect to the second performance information 184 that is the opponent is “the note of the accurately sung section + HIT! The “display to the other party” display control is performed, and the life value of the player embodied by the second performance information 184 is reduced by a specified point “20 pt”. In the battle game video 202 shown in FIG. 11, the life value corresponding to the player in which each moving image information is embodied is reduced from the battle game video 202 corresponding to the start of the game shown in FIG. It can be seen that the life value of the player corresponding to the second performance image 186 is lower than the life value of the player corresponding to the image 180. Here, in the aspect in which the battle game video 202 is displayed on the video display device 100 of the karaoke device 36, when it is determined that the combo is established in the battle game related to the battle game video 202, as shown in FIG. The character image 216 indicating the name of the combo may be displayed on the touch panel display 119 of the commander main body 37. In this case, the name of the established combo is not necessarily displayed on the battle game video 202 displayed on the video display device 100.

また、前記ゲーム実行制御手段174は、好適には、前記対戦ゲームに係る対戦ゲーム映像202を前記カラオケ装置36の映像表示装置100に表示させる態様において、その対戦ゲーム映像202に係る共演映像186における第1の演奏映像180及び第2の演奏映像184を、前記映像表示装置100及びタッチパネルディスプレイ119にそれぞれ表示させるものであってもよい。すなわち、それら映像表示装置100及びタッチパネルディスプレイ119を所謂デュアルディスプレイ(マルチモニター)として用いることで、前記共演映像186に係る対戦ゲーム映像202を実現するものであってもよい。ここで、好適には、前記映像表示装置100に表示される側の動画情報と、前記タッチパネルディスプレイ119に表示される側の動画情報とで、それぞれ異なるコンボを設定してもよい。すなわち、前述した図10に示すようなコンボがそれぞれ独立に定められ、前記映像表示装置100側の表示に係るプレイヤと、前記タッチパネルディスプレイ119側の表示に係るプレイヤとで、それぞれ異なる技が繰り出せるような対戦ゲームを実現するものであってもよい。更には、前記映像表示装置100側の表示に係るプレイヤと、前記タッチパネルディスプレイ119側の表示に係るプレイヤとで共通のコンボを適用する態様においても、各コンボに対応してそれぞれ異なるエフェクトが反映される等の制御を行うものであってもよい。   In addition, the game execution control means 174 preferably displays the battle game video 202 related to the battle game on the video display device 100 of the karaoke apparatus 36 in the co-star video 186 related to the battle game video 202. The first performance video 180 and the second performance video 184 may be displayed on the video display device 100 and the touch panel display 119, respectively. That is, the battle game video 202 related to the co-starring video 186 may be realized by using the video display device 100 and the touch panel display 119 as a so-called dual display (multi-monitor). Here, preferably, different combos may be set for the moving image information on the side displayed on the video display device 100 and the moving image information on the side displayed on the touch panel display 119. That is, the combo as shown in FIG. 10 described above is determined independently, so that different techniques can be performed by the player related to the display on the video display device 100 side and the player related to the display on the touch panel display 119 side. A real battle game may be realized. Further, even in a mode in which a common combo is applied to the player related to the display on the video display device 100 side and the player related to the display on the touch panel display 119 side, different effects are reflected corresponding to each combo. It is also possible to perform control such as

また、前記ゲーム実行制御手段174は、好適には、前記対戦ゲームに係る対戦ゲーム映像202を前記カラオケ装置36の映像表示装置100に表示させる態様において、斯かる対戦ゲームの終了時に、その対戦ゲームにおいて勝利したプレイヤに対応する動画情報を前記映像表示装置100に表示させる(その映像表示装置100の画面内に残す)と共に、敗北したプレイヤに対応する動画情報を前記コマンダ本体37に設けられたタッチパネルディスプレイ119に表示させる。例えば、図9乃至図11等に示す対戦ゲーム映像202において、前記第2の演奏映像184に対応するプレイヤが勝利し、前記第1の演奏映像180に対応するプレイヤが敗北した場合には、図32に示すように前記第2の演奏映像184を単独で前記映像表示装置100に表示させる(第1の演奏映像180を非表示とする)と共に、図33に示すように前記第1の演奏映像180を前記コマンダ本体37に設けられたタッチパネルディスプレイ119に表示させる。このようにすることで、前記対戦ゲームにおける勝者及び敗者を視覚的且つ直感的に確認することができる。   Further, the game execution control means 174 preferably displays the battle game video 202 related to the battle game on the video display device 100 of the karaoke apparatus 36 at the end of the battle game. Is displayed on the video display device 100 (remains in the screen of the video display device 100), and moving image information corresponding to the defeated player is provided on the commander body 37. It is displayed on the display 119. For example, when the player corresponding to the second performance video 184 wins and the player corresponding to the first performance video 180 is defeated in the battle game video 202 shown in FIGS. 32, the second performance video 184 is displayed alone on the video display device 100 (the first performance video 180 is not displayed), and the first performance video is displayed as shown in FIG. 180 is displayed on the touch panel display 119 provided in the commander main body 37. By doing so, it is possible to visually and intuitively confirm the winners and losers in the battle game.

図12は、前記ゲーム実行制御手段174による対戦ゲームにおいて、前記PC14や携帯電話機16等の通信端末装置に表示される対戦ゲーム映像の他の一例を示す図である。この図12に示す対戦ゲーム映像206においては、各動画情報が化体するプレイヤに対応して、それぞれ人型映像であるアバタ208が、各動画に対応する表示部分にその動画の前面側に表示される。すなわち、前記ゲーム実行制御手段174は、好適には、予め定められた関係から、前記演奏評価制御手段176による各動画情報に含まれる音声情報の演奏評価結果に基づいて、前記共演動画情報の組み合わせに係る1対の動画情報が化体するアバタ208が相互に対戦する対戦ゲームを実行する。すなわち、前記演奏評価制御手段176による各動画情報に含まれる音声情報の演奏評価結果に基づいて、一方の動画情報に対応するアバタ208が他方の動画情報に対応するアバタ208にパンチやキック等の打撃を加えたり、プロレス技をかけたりといった格闘を行うと共に、各プレイヤに対応して表示されたライフゲージ204に係るライフ値を減少させてゆく格闘型対戦ゲームを実行する。このアバタ208は、好適には、前記利用者データベース70において各利用者に関連付けられて記憶されたアバタに関する情報に基づいて出力されるものであり、例えばその情報に基づいて各アバタ208の性別、顔、髪型、服装、持ち物等が決定される。なお、図12に示す例においては、簡略化のため各動画情報に共通してボクサーに扮した(服装としてボクサーパンツとグローブを着用した)アバタ208を例示している。また、図12に示す対戦ゲーム映像206おいては、各動画情報すなわち前記第1の演奏映像180及び第2の演奏映像184それぞれの前面側に上記アバタ208を表示させる例を示しているが、動画情報(映像情報)を非表示として各動画情報が化体するアバタ208のみを表示させるものであってもよい。   FIG. 12 is a diagram showing another example of the battle game image displayed on the communication terminal device such as the PC 14 or the mobile phone 16 in the battle game by the game execution control means 174. In the battle game image 206 shown in FIG. 12, the avatar 208, which is a humanoid image, is displayed on the display portion corresponding to each moving image on the front side of the moving image corresponding to the player that each moving image information forms. Is done. In other words, the game execution control unit 174 preferably has a predetermined relationship based on the performance evaluation result of the audio information included in each video information by the performance evaluation control unit 176, and the combination of the co-star video information. The avatar 208 in which the pair of moving image information related to the above game is played against each other. That is, based on the performance evaluation result of the audio information included in each moving picture information by the performance evaluation control means 176, the avatar 208 corresponding to one moving picture information is changed to the avatar 208 corresponding to the other moving picture information such as punch or kick. A fighting battle game is executed in which a fight is performed such as hitting or a professional wrestling technique is applied, and the life value related to the life gauge 204 displayed corresponding to each player is decreased. The avatar 208 is preferably output based on information related to the avatar stored in association with each user in the user database 70. For example, the gender of each avatar 208, Face, hairstyle, clothes, belongings, etc. are determined. In the example shown in FIG. 12, an avatar 208 dressed as a boxer (wearing boxer shorts and gloves as clothes) is shown in common for each piece of moving picture information for simplification. Also, in the battle game image 206 shown in FIG. 12, the avatar 208 is displayed on the front side of each moving image information, that is, the first performance image 180 and the second performance image 184, respectively. Only the avatar 208 in which each piece of moving picture information is converted may be displayed without moving picture information (video information) being displayed.

また、前記ゲーム実行制御手段174は、好適には、前記対戦ゲームに係る図12に示すような対戦ゲーム映像206を前記カラオケ装置36の映像表示装置100に表示させる態様において、その対戦ゲーム映像206に含まれるアバタ208を異なる角度(アングル)から視た対戦ゲーム映像206を前記コマンダ本体37に設けられたタッチパネルディスプレイ119に表示させる。例えば、正面を向いた姿勢の前記アバタ208を含む対戦ゲーム映像206が前記映像表示装置100に表示されている場合には、横を向いた姿勢(或いは背中を見せた姿勢)の前記アバタ208を含む対戦ゲーム映像206を前記タッチパネルディスプレイ119に表示させる。前記ゲーム実行制御手段174による前記対戦ゲームの進行に伴い、それぞれアバタ208の姿勢が異なる前記映像表示装置100及びタッチパネルディスプレイ119にそれぞれ表示された対戦ゲーム映像206を連動して制御することで、更にダイナミックな対戦ゲームを実現できる。   Further, the game execution control means 174 preferably displays the battle game video 206 in the aspect in which the battle game video 206 related to the battle game as shown in FIG. 12 is displayed on the video display device 100 of the karaoke device 36. Is displayed on the touch panel display 119 provided in the commander main body 37. The battle game image 206 is obtained by viewing the avatar 208 included in the commander main body 37 from different angles. For example, when the battle game image 206 including the avatar 208 in a front-facing posture is displayed on the video display device 100, the avatar 208 in a side-by-side posture (or a posture showing the back) is displayed. The battle game image 206 including the image is displayed on the touch panel display 119. As the battle execution by the game execution control means 174 progresses, the battle game video 206 displayed on the video display device 100 and the touch panel display 119, each having a different attitude of the avatar 208, is controlled in conjunction with each other, and further A dynamic battle game can be realized.

前記演奏評価制御手段176は、図12に示す対戦ゲーム映像206に対応する態様においても同様に、前記共演動画情報の組み合わせに係る1対の動画情報それぞれに含まれる音声情報が、予め定められた複数の技のうち何れかの成立条件を満たしているか否かを判定する。図13は、図12に示す対戦ゲーム映像206に対応する格闘型対戦ゲームにおいて成立するコンボの種類とその成立条件等の一例を示す図である。この図13に示す各種コンボについて、成立条件及び相手に与えるダメージポイント(Point)は前述した図10に示すものと同じであるが、各コンボに対応する表示内容が異なる。すなわち、図13に示す表示内容は自己アバタ208が相手アバタ208に対してかける格闘技に相当するものであり、前記ゲーム実行制御手段174は、前記演奏評価制御手段176により前記共演動画情報の組み合わせに係る一方の動画情報に含まれる音声情報において何れかのコンボの成立が判定された場合には、その動画情報が化体するアバタ208により他方の動画情報が化体するアバタ208に対してそのコンボを適用する。例えば、前記第1の演奏映像180と第2の演奏映像186とが同期出力される共演映像186に係る対戦ゲームにおいて、前記第1の演奏映像180に対応する音声情報に関してコンボA−2の成立が判定された場合には、その第1の演奏映像180が化体するアバタ208により対戦相手である前記第2の演奏情報184が化体するアバタ208に対してコンボA−2の表示内容である「相手アバタに対して連続パンチ」に相当する表示制御が行われると共に、その第2の演奏情報184が化体するプレイヤのライフ値が規定のポイント「20pt」減少させられる。   Similarly, in the aspect corresponding to the battle game video 206 shown in FIG. 12, the performance evaluation control means 176 has predetermined audio information included in each pair of moving image information related to the combination of the co-starring moving image information. It is determined whether or not any of the plurality of techniques is satisfied. FIG. 13 is a diagram illustrating an example of the types of combos established in the fighting battle game corresponding to the battle game image 206 shown in FIG. For the various combos shown in FIG. 13, the conditions for establishment and the damage points (Points) given to the opponent are the same as those shown in FIG. 10, but the display contents corresponding to each combo are different. That is, the display content shown in FIG. 13 corresponds to the martial art that the self-avatar 208 applies to the opponent avatar 208, and the game execution control means 174 uses the performance evaluation control means 176 to combine the co-starring video information. When it is determined that any combo is established in the audio information included in the one moving image information, the combo of the avatar 208 that the moving image information is realized by the avatar 208 that the moving image information is realized Apply. For example, in the battle game related to the co-star video 186 in which the first performance video 180 and the second performance video 186 are synchronously output, the combo A-2 is established for the audio information corresponding to the first performance video 180. Is determined by the avatar 208 that the first performance image 180 is converted to the avatar 208 that the second performance information 184 that is an opponent is converted to the display content of the combo A-2. The display control corresponding to a certain “continuous punch against the opponent avatar” is performed, and the life value of the player embodied by the second performance information 184 is decreased by a predetermined point “20 pt”.

また、前記ゲーム実行制御手段174は、好適には、前記投票受付制御手段172により受け付けられる前記共演動画情報の組み合わせに係る各動画情報に対する投票結果を前記対戦ゲームにおけるそれぞれの動画情報が化体するプレイヤに反映する。好適には、各動画情報に対する投票結果を、前記対戦ゲームにおけるそれぞれの動画情報が化体するプレイヤのライフゲージ204すなわちライフ値に反映する。図14は、前記ゲーム実行制御手段174による対戦ゲームにおいて、各動画情報に対する投票結果に応じてそれぞれの動画情報が化体するプレイヤのライフゲージ204の初期値が設定される様子を例示する図である。この図14に示すように、前記ゲーム実行制御手段174は、例えば、前記投票受付制御手段172により受け付けられる前記共演動画情報の組み合わせに係る各動画情報に対する投票結果(得票数)に比例するライフ値(図14に示す例においては得票数の10倍のポイント)を算出し、前記対戦ゲームにおけるそれぞれの動画情報が化体するプレイヤのライフゲージ204の初期値としてその算出されたライフ値を適用する。すなわち、図14に示す例では、前記第1の演奏映像180に対応する得票数236に対してライフ値2360ポイントがその第1の演奏映像180が化体するプレイヤに付与される一方、前記第2の演奏映像184に対応する得票数302に対してライフ値3020ポイントがその第2の演奏映像184が化体するプレイヤに付与されている。また、好適には、各動画情報に対する投票結果を前記対戦ゲームにおけるそれぞれの動画情報が化体するプレイヤに反映する他の実施例としては、前記対戦ゲームにおいてゲーム開始から所定時間が経過した段階で、各動画情報に対する投票結果に応じてそれぞれの動画情報が化体するプレイヤのライフ値を回復させる制御を行う態様や、対象となる対戦ゲーム実行中にリアルタイムで閲覧者から受け付けられた投票結果に応じて各動画情報が化体するプレイヤのライフ値を回復させる制御を行うといった態様も考えられる。   In addition, the game execution control unit 174 preferably converts each video information in the competitive game into a voting result for each video information related to the combination of the co-starring video information received by the vote reception control unit 172. Reflect to the player. Preferably, the result of voting for each piece of moving image information is reflected in the life gauge 204 of the player, that is, the life value of each moving image information in the battle game. FIG. 14 is a diagram illustrating a state in which an initial value of the life gauge 204 of the player who embodies each moving picture information is set according to a voting result for each moving picture information in the battle game by the game execution control means 174. is there. As shown in FIG. 14, the game execution control unit 174 is, for example, a life value proportional to the voting result (number of votes) for each piece of video information related to the combination of the co-starring video information received by the vote reception control unit 172. (In the example shown in FIG. 14, the number of points is 10 times the number of votes), and the calculated life value is applied as the initial value of the life gauge 204 of the player that each moving image information in the battle game forms. . In other words, in the example shown in FIG. 14, a life value of 2360 points is given to the player who embodies the first performance video 180 with respect to the number of votes 236 corresponding to the first performance video 180, while A life value of 3020 points is given to a player who embodies the second performance video 184 with respect to the number of votes 302 corresponding to the second performance video 184. Preferably, as another embodiment in which the result of voting for each moving picture information is reflected on the player who the respective moving picture information in the battle game embodies, when a predetermined time has elapsed from the start of the game in the battle game. According to the voting results received from the viewer in real time during the execution of the target battle game, the aspect of performing the control for recovering the life value of the player that each video information embodies according to the voting results for each video information Accordingly, a mode in which control is performed to recover the life value of the player that each moving picture information embodies is also conceivable.

また、前記ゲーム実行制御手段174は、好適には、それぞれ1対の動画情報が組み合わされた共演動画情報(コラボ動画)を更に1対の共演動画情報として組み合わせ、それら1対の共演動画情報(2対の動画情報)を同期出力させると共に、その1対の共演動画情報の同期出力に際して、前記演奏評価制御手段による各動画情報に含まれる音声情報の演奏評価結果に基づいて、それら1対の共演動画情報が化体するプレイヤが相互に対戦する対戦ゲームを実行する。換言すれば、1対のコラボ動画同士が組み合わされた共演動画情報それぞれに対応する1対のコラボ動画が化体するチーム(それぞれ1対のプレイヤから成る2組のチーム)が相互に対戦するタッグマッチ対戦ゲームを実行する。   Further, the game execution control means 174 preferably further combines the co-starring video information (collaboration video), each of which is a combination of a pair of video information, as a pair of co-starring video information. 2 pairs of moving image information) and the pair of co-starring moving image information at the time of synchronous output, based on the performance evaluation results of the audio information included in each moving image information by the performance evaluation control means. A battle game in which the players whose co-starring video information is embodied battles each other is executed. In other words, a team (two teams each consisting of a pair of players) that a pair of collaborative videos corresponding to each of the co-starring video information in which a pair of collaborative videos are combined is a tag that the two teams play against each other. Run a match-up game.

図23は、前記ゲーム実行制御手段174による対戦ゲームにおいて、前記PC14や携帯電話機16等の通信端末装置に表示される対戦ゲーム映像の更に別の一例を示す図である。この図23に示す対戦ゲーム映像210は、前述した図8に示す共演映像186と、図22に示す共演映像186′との間で実行される対戦ゲームに相当するものである。この図22に示す共演映像186′は、第1の演奏映像180′と、前記動画出力制御手段160及び同期演奏制御手段162によりその第1の演奏映像180′の出力と同期して実行されたカラオケ演奏の出力に際して前記演奏記録制御手段150により記録された第2の演奏映像184′とが、所定のWWWウェブサイト上において同期して(同時に)出力される例を示している。この共演映像186′は、前述した図8に示す共演映像186と共通の楽曲データに対応するものである。   FIG. 23 is a diagram showing still another example of the battle game video displayed on the communication terminal device such as the PC 14 or the mobile phone 16 in the battle game by the game execution control means 174. The battle game video 210 shown in FIG. 23 corresponds to a battle game executed between the co-star video 186 shown in FIG. 8 and the co-star video 186 ′ shown in FIG. The co-star video 186 ′ shown in FIG. 22 is executed in synchronism with the first performance video 180 ′ and the output of the first performance video 180 ′ by the moving image output control means 160 and the synchronous performance control means 162. In this example, the second performance video 184 'recorded by the performance recording control means 150 is output synchronously (simultaneously) on a predetermined WWW website when the karaoke performance is output. This co-star video 186 'corresponds to music data common to the co-star video 186 shown in FIG.

図23に示す対戦ゲーム映像210においては、前述した図8に示す共演映像186と、図22に示す共演映像186′とが組み合わされる(縦組みされる)と共に、対戦ゲームに係る表示が付加され、各共演動画情報が化体するプレイヤから成るチーム(タッグチーム)それぞれに対応してライフゲージ(Life Gauge)204が表示される。なお、図23においては、対戦ゲームスタート時(共演演奏開始時)において各共演動画情報が化体するチームに対応するライフゲージ204が何れもマックスすなわち最大値である状態を示している。前記ゲーム実行制御手段174は、好適には、図23に示す対戦ゲーム映像210に対応する対戦ゲームにおいて、前記演奏評価制御手段176による各動画情報に含まれる音声情報の演奏評価結果に基づいて、前記1対の共演動画情報それぞれに対応して表示されたライフゲージ204に係るライフ値(チームの生命力)を減少させてゆく制御を実行する。換言すれば、前記演奏評価制御手段176による各動画情報に含まれる音声情報の演奏評価結果に基づいて、対戦相手のライフ値にダメージを与える処理を実行する。   23, the co-star video 186 shown in FIG. 8 and the co-star video 186 ′ shown in FIG. 22 are combined (vertically assembled), and a display related to the battle game is added. A life gauge 204 is displayed corresponding to each team (tag team) composed of players that each co-starring moving picture information forms. Note that FIG. 23 shows a state in which the life gauges 204 corresponding to the teams in which each piece of co-starring video information is embodied at the start of the battle game (at the start of the co-starring performance) are maximum, that is, the maximum value. The game execution control means 174 is preferably based on the performance evaluation result of the audio information included in each video information by the performance evaluation control means 176 in the battle game corresponding to the battle game video 210 shown in FIG. Control is performed to reduce the life value (team vitality) related to the life gauge 204 displayed corresponding to each of the pair of co-starring moving picture information. In other words, processing for damaging the opponent's life value is executed based on the performance evaluation result of the audio information included in each moving picture information by the performance evaluation control means 176.

例えば、前記演奏評価制御手段176による所定区間毎(予め定められた評価タイミング毎)の演奏評価結果に関して、各チームに属する動画情報に対応する演奏評価結果の平均値を算出すると共に、チーム相互間における平均値の差分値を算出し、演奏評価結果が低かった共演動画情報に対応するチームに対してその差分値に相当するダメージ(例えば、差分値に比例する値)を与える。換言すれば、演奏評価結果の平均値が低かった共演動画情報に対応するチームのライフ値を上記差分値に相当する値だけ減少させる処理を行う。この対戦に係る共演映像186、186′は共通の楽曲データに対応するものであり、同期出力された場合には各共演映像186、186′に含まれる2対の演奏映像180、180′、184、184′が共通の楽曲データの演奏進行に合わせて歌うものとなるので、その楽曲データに係る演奏のテンポ(リズム)に併せて演奏評価を行うことができるのである。斯かる制御により、前記演奏評価制御手段176による演奏評価が行われる毎に前記1対の共演動画情報それぞれに対応するライフゲージ204のライフ値が減ってゆく。そして、一方の共演動画情報に対応するチームのライフ値が零となった場合、或いは前記1対の共演動画情報の同期出力終了をもって前記対戦ゲームが終了させられ、その時点での残存ライフ値が大きかった方のチームが勝利、小さかった方のチームが敗北とされる。   For example, with respect to performance evaluation results for each predetermined section (every predetermined evaluation timing) by the performance evaluation control means 176, an average value of performance evaluation results corresponding to video information belonging to each team is calculated, and between teams The difference value of the average value is calculated, and damage corresponding to the difference value (for example, a value proportional to the difference value) is given to the team corresponding to the co-starring moving picture information having a low performance evaluation result. In other words, a process of reducing the life value of the team corresponding to the co-starring moving image information whose average value of the performance evaluation results is low by a value corresponding to the difference value is performed. The co-star images 186 and 186 ′ related to the battle correspond to the common music data, and when they are synchronously output, the two pairs of performance videos 180, 180 ′ and 184 included in the co-star images 186 and 186 ′. , 184 'sing along with the progress of the performance of the common music data, the performance evaluation can be performed in accordance with the tempo (rhythm) of the performance related to the music data. By such control, every time performance evaluation is performed by the performance evaluation control means 176, the life value of the life gauge 204 corresponding to each of the pair of co-starring moving image information decreases. Then, when the life value of the team corresponding to one of the co-starring video information becomes zero, or when the match game is ended with the synchronous output of the pair of co-starring video information, the remaining life value at that time is The larger team wins and the smaller team loses.

また、前記演奏評価制御手段176は、好適には、図23に示すような対戦ゲーム映像210に係る対戦ゲームにおいて、前記1対の共演動画情報それぞれの組み合わせに係る動画情報に含まれる音声情報が、予め定められた複数の技のうち何れかの成立条件を満たしているか否かを判定する。また、前記ゲーム実行制御手段174は、好適には、前記演奏評価制御手段176により一方の共演動画情報の組み合わせに係る動画情報に含まれる音声情報が前記成立条件を満たしていると判定された場合には、その他方の共演動画情報が化体するチームに対してその成立条件に係る技を適用する。例えば、前記第1の演奏映像180及び第2の演奏映像184のハモリやタイミングがぴったりである等して、共演映像186が予め定められたコンボ成立条件を満たしていると判定された場合には、対戦相手である共演映像186′が化体するチームに対して、前記第1の演奏映像180及び第2の演奏映像184が化体するプレイヤの合わせ技(例えば、肩車からかかと落とし等の合体攻撃)が行われ、そのコンボに係るダメージが共演映像186′が化体するチームに対応するライフゲージ204に反映される。更に、各共演映像186、186′の組み合わせに係る何れかの演奏映像に含まれる音声情報が前述した図10に示すコンボ成立条件を満たした場合には、相手チームにそのコラボを適用する等の制御が行われるものであってもよい。   Further, the performance evaluation control means 176 preferably has audio information included in the moving image information relating to each combination of the pair of co-starring moving image information in the competitive game related to the competitive game image 210 as shown in FIG. Then, it is determined whether or not a fulfillment condition of any of a plurality of predetermined techniques is satisfied. In addition, the game execution control unit 174 is preferably configured such that the performance evaluation control unit 176 determines that the audio information included in the moving image information related to the combination of one of the co-starring moving image information satisfies the establishment condition. Is applied to the team in which the other person's co-starring video information is embodied. For example, when it is determined that the co-starring video 186 satisfies a predetermined combo establishment condition, for example, because the timing and timing of the first performance video 180 and the second performance video 184 are perfect. , For the team that the co-starring video 186 ′ that is the opponent is embodied, the player's combined technique that the first performance video 180 and the second performance video 184 are embodying (for example, heel drop from the shoulder wheel, etc. Attack) is performed, and the damage related to the combo is reflected in the life gauge 204 corresponding to the team that the co-starring video 186 'is embodied. Furthermore, when the audio information included in any performance video related to the combination of the co-starring videos 186 and 186 ′ satisfies the above-described combo formation condition shown in FIG. 10, the collaboration is applied to the opponent team, etc. Control may be performed.

また、前記ゲーム実行制御手段174は、好適には、前述した図8に示す共演映像186と、図22に示す共演映像186′との組み合わせに係る対戦ゲームにおいて、図34に示すように、各動画情報が化体するプレイヤそれぞれに対応してライフゲージ(Life Gauge)204を表示させる。なお、図34においては、対戦ゲームスタート時(共演演奏開始時)において各動画情報が化体するプレイヤに対応するライフゲージ204が何れもマックスすなわち最大値である状態を示している。前記ゲーム実行制御手段174は、好適には、図34に示す対戦ゲーム映像210に対応する対戦ゲームにおいて、前記演奏評価制御手段176による各動画情報に含まれる音声情報の演奏評価結果に基づいて、その対戦ゲームにおける動画情報それぞれに対応して表示されたライフゲージ204に係るライフ値を減少させてゆく制御を実行する。換言すれば、前記演奏評価制御手段176による各動画情報に含まれる音声情報の演奏評価結果に基づいて、対戦相手のライフ値にダメージを与える処理を実行する。例えば、図34に示す対戦ゲーム映像210において、各チームでそれぞれ対向するように配置された動画情報相互間での対戦(動画情報180対180′、184対184′の対戦)が行われる。   In addition, the game execution control means 174 is preferably used in the battle game relating to the combination of the co-star video 186 shown in FIG. 8 and the co-star video 186 ′ shown in FIG. 22, as shown in FIG. A Life Gauge 204 is displayed corresponding to each player whose video information is embodied. Note that FIG. 34 shows a state in which the life gauges 204 corresponding to the players to which each moving picture information is embodied at the start of the battle game (at the start of the co-star performance) are maximum, that is, the maximum value. The game execution control means 174 is preferably based on the performance evaluation result of the audio information included in each video information by the performance evaluation control means 176 in the battle game corresponding to the battle game video 210 shown in FIG. Control is performed to decrease the life value related to the life gauge 204 displayed corresponding to each moving picture information in the battle game. In other words, processing for damaging the opponent's life value is executed based on the performance evaluation result of the audio information included in each moving picture information by the performance evaluation control means 176. For example, in the battle game image 210 shown in FIG. 34, a battle between moving image information arranged so as to face each other (matches of moving image information 180 vs. 180 ′, 184 vs. 184 ′) is performed.

また、前記ゲーム実行制御手段174は、好適には、図34に示すような対戦ゲーム映像210に係る対戦ゲームにおいて、ライフゲージ204に係るライフ値が零となったプレイヤに相当する動画情報を、その対戦ゲーム(対戦ゲーム映像210)から閉め出す制御を行う。例えば、図35に示すように、前記第1の演奏映像180′に相当するプレイヤのライフゲージ204に係るライフ値が零となった時点で、その第1の演奏映像180′を対戦ゲーム映像210から閉め出す(非表示とする)と共に、その第1の演奏映像180′が表示されていた場所に対象となる動画情報が敗退したことを示すシャッタ映像220を表示させる。前記ゲーム実行制御手段174は、好適には、そのように各チームにおける一方の動画情報に相当するプレイヤが敗退した場合、残る一方のプレイヤが対戦相手であるチームのプレイヤ全員(図35に示す例では演奏映像180、184)と対戦するように対戦ゲームを制御する。すなわち、前記演奏映像184に相当するプレイヤがコンボを成立させた場合のみならず、対角に配置された前記演奏映像180に相当するプレイヤがコンボを成立させた場合にも前記演奏映像184′に相当するプレイヤがそのダメージを受けることになる一方、その演奏映像184′の攻撃は当初通り対向する前記演奏映像184に相当するプレイヤにしか適用されないため、不利になる。また、前記ゲーム実行制御手段174は、好適には、図34に示すような対戦ゲーム映像210に係る対戦ゲームにおいて、ライフゲージ204に係るライフ値が零となりその対戦ゲームから閉め出された動画情報を、図36に示すように前記コマンダ本体37に設けられた前記タッチパネルディスプレイ119に表示させる。   In addition, the game execution control means 174 preferably displays video information corresponding to a player whose life value related to the life gauge 204 is zero in a battle game related to the battle game image 210 as shown in FIG. Control to close out from the battle game (battle game video 210) is performed. For example, as shown in FIG. 35, when the life value related to the life gauge 204 of the player corresponding to the first performance image 180 ′ becomes zero, the first performance image 180 ′ is used as the battle game image 210. The shutter image 220 indicating that the target moving image information has been lost is displayed at the place where the first performance image 180 ′ was displayed. The game execution control means 174 is preferably configured so that when the player corresponding to one video information in each team loses, all the players of the team whose remaining one player is the opponent (example shown in FIG. 35). Then, the battle game is controlled so as to play against the performance images 180 and 184). That is, not only when the player corresponding to the performance video 184 establishes a combo, but also when the player corresponding to the performance video 180 arranged diagonally establishes a combo, the performance video 184 ′ is displayed. While the corresponding player receives the damage, the attack of the performance video 184 'is disadvantageous because the attack of the performance video 184' can be applied only to the player corresponding to the performance video 184 that is opposed to the original. In addition, the game execution control means 174 preferably displays the moving picture information closed from the battle game when the life value related to the life gauge 204 becomes zero in the battle game related to the battle game image 210 as shown in FIG. 36, the touch panel display 119 provided in the commander main body 37 is displayed.

図15は、前記カラオケ装置36のCPU124による第1の動画投稿制御の要部を説明するフローチャートであり、所定の周期で繰り返し実行されるものである。   FIG. 15 is a flowchart for explaining a main part of the first moving image posting control by the CPU 124 of the karaoke apparatus 36, which is repeatedly executed at a predetermined cycle.

先ず、ステップ(以下、ステップを省略する)SA1において、演奏動画撮影すなわち前記カラオケ装置36による演奏曲の出力に際しての前記ビデオカメラ122により撮影された映像情報及びマイクロフォン110により入力された音声情報の記録が開始されたか否かが判断される。このSA1の判断が否定される場合には、それをもって本ルーチンが終了させられるが、SA1の判断が肯定される場合には、SA2において、演奏動画撮影の対象となる楽曲データが前記楽曲データベース138から読み出され、その楽曲データに基づくカラオケ演奏制御が開始される。次に、SA3において、前記ビデオカメラ122により撮影された映像情報及び前記マイクロフォン110により入力された音声情報の記録処理が実行される。   First, in step (hereinafter, step is omitted) SA1, recording of video information taken by the video camera 122 and audio information inputted by the microphone 110 at the time of performance video shooting, that is, output of a performance tune by the karaoke device 36. It is determined whether or not has been started. If the determination at SA1 is negative, the routine is terminated accordingly. If the determination at SA1 is affirmative, at SA2, the music data to be subjected to performance video shooting is stored in the music database 138. Karaoke performance control based on the music data is started. Next, in SA3, recording processing of video information photographed by the video camera 122 and audio information inputted by the microphone 110 is executed.

次に、SA4において、カラオケ演奏終了であるか否かが判断される。このSA4の判断が否定される場合には、SA3以下の処理が再び実行されるが、SA4の判断が肯定される場合には、SA5において、SA3にて記録された映像情報及び音声情報に対応する動画の視聴が行われるか否かが判断される。このSA5の判断が否定される場合には、SA8以下の処理が実行されるが、SA5の判断が肯定される場合には、SA6において、SA3にて記録された映像情報及び音声情報に対応する動画が前記映像情報デコーダ104等により再生されて前記映像表示装置100に表示される。   Next, in SA4, it is determined whether or not the karaoke performance is over. When the determination at SA4 is negative, the processing after SA3 is executed again. When the determination at SA4 is positive, the video information and audio information recorded at SA3 are handled at SA5. It is determined whether or not the moving image to be viewed is to be performed. When the determination at SA5 is negative, the processing after SA8 is executed. When the determination at SA5 is positive, at SA6, the video information and audio information recorded at SA3 are handled. The moving image is reproduced by the video information decoder 104 or the like and displayed on the video display device 100.

次に、SA7において、SA3にて記録された映像情報及び音声情報に対応する動画の再生終了であるか否かが判断される。このSA7の判断が否定される場合には、SA6以下の処理が再び実行されるが、SA7の判断が肯定される場合には、SA8において、SA3にて記録された映像情報及び音声情報に対応する動画情報の投稿が行われるか否かが判断される。このSA8の判断が否定される場合には、それをもって本ルーチンが終了させられるが、SA8の判断が肯定される場合には、SA9において、SA3にて記録された映像情報及び音声情報に対応する動画情報が、投稿主体である利用者の識別情報(ユーザID)及びSA2にて出力された演奏曲の識別情報(選曲番号)等と関連付けられてホスト装置すなわち前記サーバ装置12へアップロードされ、それをもって本ルーチンが終了させられる。   Next, in SA7, it is determined whether or not the reproduction of the moving image corresponding to the video information and audio information recorded in SA3 has ended. When the determination at SA7 is negative, the processing after SA6 is executed again. When the determination at SA7 is affirmative, the video information and audio information recorded at SA3 are handled at SA8. It is determined whether or not video information to be posted is to be posted. If the determination at SA8 is negative, the routine is terminated accordingly. If the determination at SA8 is affirmative, at SA9, the routine corresponds to the video information and audio information recorded at SA3. The video information is uploaded to the host device, that is, the server device 12 in association with the identification information (user ID) of the user who is the posting subject and the identification information (music selection number) of the performance song output at SA2. This routine is terminated.

図16は、前記カラオケ装置36のCPU124による第2の動画投稿制御の要部を説明するフローチャートであり、所定の周期で繰り返し実行されるものである。   FIG. 16 is a flowchart for explaining a main part of the second moving image posting control by the CPU 124 of the karaoke apparatus 36, and is repeatedly executed at a predetermined cycle.

先ず、SB1において、コラボ動画検索すなわち共演動画情報の投稿に係る検索処理が開始されるか否かが判断される。このSB1の判断が否定される場合には、それをもって本ルーチンが終了させられるが、SB1の判断が肯定される場合には、SB2において、共演演奏の対象となる演奏曲の曲名、歌手名、及び共演相手となる利用者の名前(ニックネーム)等に基づいて、前記動画データベース68に記憶された複数の動画情報から条件を満たす単数乃至複数の動画情報(コラボ相手の候補)が検索される。次に、SB3において、SB2にて検索された動画情報に対応して、共演演奏の相手(コラボ相手)を募集している利用者(動画情報)のサムネイルが前記映像表示装置100に選択可能に表示される。   First, in SB1, it is determined whether or not a search process for collaborative video search, that is, posting of co-star video information is started. If the determination of SB1 is negative, the routine is terminated accordingly. If the determination of SB1 is affirmative, in SB2, the song title, singer name, On the basis of the name (nickname) of the user who will be the co-starring partner, a single or a plurality of pieces of moving image information (collaboration partner candidates) satisfying the conditions are searched from the plurality of moving image information stored in the moving image database 68. Next, in SB3, the video display device 100 can select thumbnails of users (moving image information) recruiting co-starring partners (collaboration partners) corresponding to the moving image information searched in SB2. Is displayed.

次に、SB4において、SB3にて表示されたサムネイルの何れかを選択する操作が前記電子早見本装置38等により行われたか否かが判断される。このSB4の判断が否定される場合には、SB3以下の処理が再び実行されるが、SB4の判断が肯定される場合には、SB5において、選択されたサムネイルに対応する動画情報(演奏映像)が前記サーバ装置12からダウンロードされる。次に、SB6において、SB5にてダウンロードされた動画の視聴が行われるか否かが判断される。このSB6の判断が否定される場合には、SB9以下の処理が実行されるが、SB6の判断が肯定される場合には、SB7において、SB5にてダウンロードされた共演演奏相手の動画が前記映像情報デコーダ104等により再生されて前記映像表示装置100に表示される。次に、SB8において、共演演奏相手の動画の再生終了であるか否かが判断される。このSB8の判断が否定される場合には、SB7以下の処理が再び実行されるが、SB8の判断が肯定される場合には、SB9において、コラボ演奏動画すなわち共演動画情報に係る動画の記録(撮影)が開始されるか否かが判断される。このSB9の判断が否定される場合には、SB6以下の処理が再び実行されるが、SB9の判断が肯定される場合には、SBSにおいて、図17に示すコラボ演奏動画投稿処理が実行された後、本ルーチンが終了させられる。   Next, in SB4, it is determined whether or not an operation for selecting any of the thumbnails displayed in SB3 has been performed by the electronic quick sample device 38 or the like. When the determination at SB4 is negative, the processing after SB3 is executed again. When the determination at SB4 is affirmative, at SB5, the video information (performance video) corresponding to the selected thumbnail is displayed. Is downloaded from the server device 12. Next, in SB6, it is determined whether or not the video downloaded in SB5 is to be viewed. If the determination at SB6 is negative, the processing from SB9 is executed. If the determination at SB6 is affirmative, at SB7, the video of the co-starring performance partner downloaded at SB5 is the video. It is reproduced by the information decoder 104 and displayed on the video display device 100. Next, in SB8, it is determined whether or not the reproduction of the co-starring partner's moving image has ended. When the determination at SB8 is negative, the processing after SB7 is executed again. However, when the determination at SB8 is affirmative, at SB9, the recording of the video related to the collaboration performance video, that is, the co-star video information ( It is determined whether or not (shooting) is started. When the determination at SB9 is negative, the processing after SB6 is executed again, but when the determination at SB9 is affirmative, the collaboration performance moving image posting processing shown in FIG. 17 is executed at SBS. Thereafter, this routine is terminated.

図17は、図16に示す制御におけるコラボ演奏動画投稿制御の要部を説明するフローチャートである。先ず、SBS1において、前記映像情報デコーダ104等により共演演奏の相手(コラボ相手)の動画の再生が開始されると共に、その動画と関連付けられた演奏曲すなわち共演動画情報に係る共通の演奏曲のカラオケ演奏が開始される。次に、SBS2において、前記ビデオカメラ122により撮影された映像情報及び前記マイクロフォン110により入力された音声情報の記録処理が実行される。次に、SBS3において、カラオケ演奏終了であるか否かが判断される。このSBS3の判断が否定される場合には、SBS2以下の処理が再び実行されるが、SBS3の判断が肯定される場合には、SBS4において、コラボ映像すなわち共演演奏相手の動画とSBS2にて記録された動画との同期出力映像の視聴が行われるか否かが判断される。このSBS4の判断が否定される場合には、SBS7以下の処理が実行されるが、SBS4の判断が肯定される場合には、SBS5において、コラボ動画すなわち共演演奏相手の動画とSBS2にて記録された動画との同期出力映像が前記映像情報デコーダ104等により再生されて前記映像表示装置100に表示される。   FIG. 17 is a flowchart for explaining a main part of the collaboration performance moving image posting control in the control shown in FIG. First, in SBS 1, the video information decoder 104 or the like starts reproduction of the video of the partner of the co-starring performance (collaboration partner), and the karaoke of the performance song associated with the video, that is, the common performance song related to the co-star video information The performance starts. Next, in the SBS 2, recording processing of video information photographed by the video camera 122 and audio information input by the microphone 110 is executed. Next, in SBS3, it is determined whether or not the karaoke performance is over. When the determination of SBS3 is denied, the processing after SBS2 is executed again. However, when the determination of SBS3 is affirmed, recording is performed at SBS4 with the collaborative video, that is, the moving image of the co-starring partner and SBS2. It is determined whether or not the synchronized output video with the moving image is viewed. If the determination of SBS4 is denied, the processing from SBS7 is executed. If the determination of SBS4 is affirmed, it is recorded in SBS5 in the collaboration video, that is, the co-starring partner's video and SBS2. The video output synchronized with the moving image is reproduced by the video information decoder 104 and displayed on the video display device 100.

次に、SBS6において、コラボ動画のの再生終了であるか否かが判断される。このSBS6の判断が否定される場合には、SBS5以下の処理が再び実行されるが、SBS6の判断が肯定される場合には、SBS7において、SBS2にて記録(撮影)された動画が投稿されるか否かが判断される。このSBS7の判断が否定される場合には、それをもって本ルーチンが終了させられるが、SBS7の判断が肯定される場合には、SBS8において、SBS2にて記録された映像情報及び音声情報に対応する動画が、投稿主体である利用者の識別情報(ユーザID)、共演相手である動画情報の識別情報、及びSBS1にて出力された演奏曲の識別情報(選曲番号)等と関連付けられて前記サーバ装置12へアップロードされ、それをもって図16に示すメインルーチンへ復帰させられる。   Next, in SBS6, it is determined whether or not the reproduction of the collaboration video has been completed. When the determination of SBS6 is denied, the processing after SBS5 is executed again. However, when the determination of SBS6 is affirmed, a moving image recorded (captured) at SBS2 is posted at SBS7. It is determined whether or not. If the determination of SBS7 is negative, the routine is terminated accordingly. If the determination of SBS7 is affirmative, SBS8 corresponds to the video information and audio information recorded in SBS2. The server in which the video is associated with the identification information (user ID) of the user who is the posting subject, the identification information of the video information that is the co-starring partner, and the identification information (music selection number) of the performance song output at SBS1 The data is uploaded to the device 12 and returned to the main routine shown in FIG.

図18は、前記サーバ装置12のCPU52による動画投稿受付制御の要部を説明するフローチャートであり、所定の周期で繰り返し実行されるものである。   FIG. 18 is a flowchart for explaining a main part of the moving image posting acceptance control by the CPU 52 of the server device 12, and is repeatedly executed at a predetermined cycle.

先ず、SC1において、前記カラオケ装置36等の通信端末装置から前記通信回線18を介して所定の動画情報(動画ファイル)のアップロードがあったか否かが判断される。このSC1の判断が否定される場合には、それをもって本ルーチンが終了させられるが、SC1の判断が肯定される場合には、SC2において、アップロードされた動画情報が投稿主体である利用者の識別情報(ユーザID)及び演奏曲の識別情報(選曲番号)等と関連付けられて前記動画データベース68に記憶される。次に、SC3において、アップロードされた動画情報はコラボ動画すなわち共演動画情報に係る組み合わせの対象となる動画情報であるか否かが判断される。このSC3の判断が否定される場合には、それをもって本ルーチンが終了させられるが、SC3の判断が肯定される場合には、SC4において、アップロードされた動画情報及びその共演相手である動画情報に基づいてコラボ動画すなわちそれらの動画を同期して出力させるための組み合わせ情報としての共演動画情報が編集され、その組み合わせに係る各動画情報の識別情報、各動画情報の投稿主体である利用者の識別情報(ユーザID)、及び共通の演奏曲の識別情報(選曲番号)等と関連付けられて前記動画データベース68に記憶された後、本ルーチンが終了させられる。   First, in SC1, it is determined whether or not predetermined moving image information (moving image file) has been uploaded via the communication line 18 from a communication terminal device such as the karaoke device 36 or the like. If the determination at SC1 is negative, the routine is terminated accordingly. If the determination at SC1 is affirmative, at SC2, the uploaded video information is identified as the posting subject. The information is stored in the moving image database 68 in association with information (user ID), identification information (music selection number), etc. Next, in SC3, it is determined whether or not the uploaded moving image information is moving image information to be a combination target related to the collaboration moving image, that is, the co-starring moving image information. If the determination at SC3 is negative, this routine is terminated. If the determination at SC3 is affirmative, at SC4, the uploaded video information and the video information that is its co-starring partner are displayed. Based on this, the collaborative video, that is, the co-starring video information as the combination information for outputting the videos synchronously is edited, the identification information of each video information related to the combination, the identification of the user who is the posting subject of each video information After being stored in the moving image database 68 in association with information (user ID), common performance music identification information (music selection number), etc., this routine is terminated.

図19は、前記サーバ装置12のCPU52による投票受付制御の要部を説明するフローチャートであり、所定の周期で繰り返し実行されるものである。   FIG. 19 is a flowchart for explaining a main part of vote acceptance control by the CPU 52 of the server device 12, and is repeatedly executed at a predetermined cycle.

先ず、SD1において、前記PC14や携帯電話機16等の通信端末装置から前記通信回線18を介して所定の動画情報に対する投票(投票情報の送信)があったか否かが判断される。このSD1の判断が否定される場合には、それをもって本ルーチンが終了させられるが、SD1の判断が肯定される場合には、SD2において、前記動画データベース68において投票対象となる動画情報に関連付けて記憶された閲覧者からの投票結果(得票数)を更新すなわち得票数に1を加算する処理が実行された後、本ルーチンが終了させられる。   First, in SD1, it is determined whether or not a voting (sending voting information) has been made for predetermined moving image information from the communication terminal device such as the PC 14 or the mobile phone 16 via the communication line 18. If the determination of SD1 is negative, this routine is terminated accordingly. If the determination of SD1 is affirmative, in SD2, the routine is associated with the video information to be voted in the video database 68. After executing the process of updating the stored vote result (number of votes obtained), that is, adding 1 to the number of votes obtained, this routine is terminated.

図20は、前記サーバ装置12のCPU52による動画配信/ゲーム実行制御の要部を説明するフローチャートであり、所定の周期で繰り返し実行されるものである。   FIG. 20 is a flowchart for explaining a main part of the moving image distribution / game execution control by the CPU 52 of the server device 12, and is repeatedly executed at a predetermined cycle.

先ず、SE1において、前記PC14、携帯電話機16、及びカラオケ装置36等の通信端末装置から前記通信回線18を介して所定の動画情報(動画ファイル)乃至共演動画情報の配信要求があったか否かが判断される。このSE1の判断が否定される場合には、それをもって本ルーチンが終了させられるが、SE1の判断が肯定される場合には、SE2において、配信要求された動画情報はコラボ動画すなわち共演動画情報に係る組み合わせの対象となる動画情報であるか否かが判断される。このSE2の判断が否定される場合には、SE3において、前記通信回線18を介しての前記通信端末装置からの配信要求に応じて、前記動画データベース68に記憶されたその配信要求に係る動画情報が要求元である通信端末装置へ配信された後、本ルーチンが終了させられるが、SE2の判断が肯定される場合には、SE4以下の処理が実行される。   First, in SE1, it is determined whether there is a request for distribution of predetermined moving image information (moving image file) or co-starring moving image information from the communication terminal device such as the PC 14, the mobile phone 16, and the karaoke device 36 via the communication line 18. Is done. If the determination at SE1 is negative, the routine is terminated accordingly. If the determination at SE1 is affirmative, at SE2, the video information requested for distribution is changed to collaboration video, that is, co-star video information. It is determined whether or not the video information is a target of such combination. When the determination of SE2 is negative, in SE3, the moving image information related to the distribution request stored in the moving image database 68 in response to the distribution request from the communication terminal device via the communication line 18 Is distributed to the requesting communication terminal device, this routine is terminated. However, if the determination in SE2 is affirmative, processing from SE4 onward is executed.

SE4においては、対戦モードすなわち前記共演動画情報に基づく1対の動画情報の同期出力に際してそれら1対の動画情報が化体するプレイヤが相互に対戦する対戦ゲームを実行する設定であるか否かが判断される。このSE4の判断が否定される場合には、SE5において、前記通信回線18を介しての前記通信端末装置からの配信要求に応じて、前記動画データベース68に記憶されたその配信要求に係る動画情報及び共演動画情報が要求元である通信端末装置へ配信された後、本ルーチンが終了させられるが、SE4の判断が肯定される場合には、SE6において、配信要求された共演動画情報の組み合わせに係る1対の動画情報それぞれに対する投票結果(得票数)が前記動画データベース68から読み出され、その投票結果に応じて対戦ゲームにおけるそれぞれの動画情報が化体するプレイヤのライフ値(ライフポイント)が付与される。   In SE4, whether or not it is set to execute a battle game in which the players in which the pair of moving image information forms a battle with each other when the pair of moving image information is synchronously output based on the battle mode, that is, the co-starring moving image information. To be judged. If the determination in SE4 is negative, in SE5, the moving image information related to the distribution request stored in the moving image database 68 in response to the distribution request from the communication terminal device via the communication line 18 The routine is terminated after the co-star video information is distributed to the requesting communication terminal device. If the determination in SE4 is affirmative, the combination of the co-star video information requested for distribution is selected in SE6. The voting result (number of votes) for each pair of moving image information is read out from the moving image database 68, and the life value (life point) of the player who embodies each moving image information in the battle game according to the voting result. Is granted.

次に、SE7において、前記通信回線18を介しての前記通信端末装置からの配信要求に応じて、前記動画データベース68に記憶されたその配信要求に係る動画情報及び共演動画情報が要求元である通信端末装置へ配信され、その共演動画情報の組み合わせに係る1対の動画情報の同期出力が開始される。次に、SE8において、予め定められた所定区間に対応する演奏評価タイミングであるか否かが判断される。このSE8の判断が否定される場合には、SE8の判断が繰り返されることにより待機させられるが、SE8の判断が肯定される場合には、SE9において、前記共演動画情報の組み合わせに係る1対の動画情報それぞれに含まれる音声情報に対応して、予め定められた関係から共通の楽曲データに基づいて各動画情報毎にその音声情報の演奏評価が実行される。次に、SE10において、SE9にて行われた演奏評価結果が比較され、演奏評価結果が低かった動画情報に対応するプレイヤに対してその差分値に相当するダメージが付与される。   Next, in SE7, in response to the distribution request from the communication terminal device via the communication line 18, the video information and the co-star video information related to the distribution request stored in the video database 68 is the request source. Synchronous output of a pair of moving image information related to the combination of the co-starring moving image information is started. Next, in SE8, it is determined whether or not it is a performance evaluation timing corresponding to a predetermined section. When the determination of SE8 is denied, the process is waited by repeating the determination of SE8. However, when the determination of SE8 is affirmed, at SE9, a pair of the associated performance information information is combined. Corresponding to the audio information included in each moving image information, performance evaluation of the audio information is executed for each moving image information based on the common music data from a predetermined relationship. Next, in SE10, the performance evaluation results performed in SE9 are compared, and damage corresponding to the difference value is given to the player corresponding to the moving image information whose performance evaluation results were low.

次に、SE11において、SE9にて行われた何れかの動画情報に対応する演奏評価結果が、予め定められた複数のコンボのうち何れかの成立条件を満たしているか否かが判断される。このSE11の判断が否定される場合には、SE13以下の処理が実行されるが、SE11の判断が肯定される場合には、SE12において、組み合わせに係る他方の動画情報が化体するプレイヤに対して成立が判定されたコンボが適用される。次に、SE13において、演奏終了すなわち前記共演動画情報の組み合わせに係る1対の動画情報の同期出力終了であるか、或いはそれら動画情報が化体するプレイヤ何れかのライフ値が零になったか否かが判断される。このSE13の判断が否定される場合には、SE8以下の処理が再び実行されるが、SE13の判断が肯定される場合には、SE14において、前記通信回線18を介して対戦ゲームの結果が前記配信要求に係る通信端末装置へ配信されると共に、前記共演動画情報の組み合わせに係る1対の動画情報の同期出力が終了させられ、それをもって本ルーチンが終了させられる。   Next, in SE11, it is determined whether or not the performance evaluation result corresponding to any of the moving image information performed in SE9 satisfies any establishment condition among a plurality of predetermined combos. When the determination at SE11 is negative, the processing after SE13 is executed. When the determination at SE11 is affirmative, at SE12, the other moving image information relating to the combination is informed to the player. The combo determined to be established is applied. Next, in SE13, whether or not the performance has ended, that is, the synchronous output of a pair of moving image information related to the combination of the co-starring moving image information has ended, or the life value of any player that the moving image information has become zero has become zero. Is judged. When the determination at SE13 is negative, the processing after SE8 is executed again. However, when the determination at SE13 is affirmative, at SE14, the result of the battle game is obtained via the communication line 18. While being distributed to the communication terminal device related to the distribution request, the synchronous output of the pair of moving image information related to the combination of the co-starring moving image information is terminated, and this routine is terminated accordingly.

図21は、前記PC14のCPU74による動画再生/投票制御の要部を説明するフローチャートであり、所定の周期で繰り返し実行されるものである。   FIG. 21 is a flowchart for explaining a main part of the moving image reproduction / voting control by the CPU 74 of the PC 14, and is repeatedly executed at a predetermined cycle.

先ず、SF1において、前記動画データベース68に記憶された動画情報を閲覧するためのWWWウェブサイト(動画投稿サイト)にて前記キーボード84やマウス86等により所定の動画乃至共演動画の配信を要求するための操作が行われたか否かが判断される。このSF1の判断が否定される場合には、SF4以下の処理が実行されるが、SF1の判断が肯定される場合には、SF2において、操作に係る動画乃至共演動画の配信要求が前記通信回線18を介して前記サーバ装置12へ送信される。次に、SF3において、前記通信回線18を介して前記サーバ装置12から配信された、配信要求に係る動画情報乃至共演動画情報に基づいて、前記ビデオボード82等を介して前記映像表示装置80に動画乃至共演動画が表示される。次に、SF4において、前記動画データベース68に記憶された動画情報を閲覧するためのWWWウェブサイトにて前記キーボード84やマウス86等により所定の動画に対して投票を行うための操作が行われたか否かが判断される。このSF4の判断が否定される場合には、それをもって本ルーチンが終了させられるが、SF4の判断が肯定される場合には、SF5において、操作に係る投票に関する情報が投票対象となる動画と関連付けられて前記通信回線18を介して前記サーバ装置12へ送信された後、本ルーチンが終了させられる。   First, in SF1, a request for distribution of a predetermined moving image or a co-starring moving image is made with the keyboard 84, mouse 86, etc. on the WWW website (moving image posting site) for browsing moving image information stored in the moving image database 68. It is determined whether or not the above operation has been performed. When the determination of SF1 is negative, the processing after SF4 is executed, but when the determination of SF1 is positive, the distribution request for the moving image or the co-starring moving image related to the operation is transmitted in SF2. 18 to the server device 12. Next, in SF3, on the video display device 80 via the video board 82 or the like based on the moving image information or the co-starring moving image information related to the distribution request distributed from the server device 12 via the communication line 18. Movie or co-star movie is displayed. Next, in SF4, has an operation for voting for a predetermined moving image performed by the keyboard 84, mouse 86, etc. on the WWW website for browsing moving image information stored in the moving image database 68? It is determined whether or not. If the determination of SF4 is negative, the routine is terminated accordingly, but if the determination of SF4 is affirmative, in SF5, information relating to the voting related to the operation is associated with the video to be voted. After being transmitted to the server device 12 via the communication line 18, this routine is terminated.

以上、図15〜図21に示す制御において、SA3及びSBS2が前記演奏記録制御手段150の動作に、SC1〜SC4が前記投稿受付制御手段152の動作に、SB2が前記検索制御手段154の動作に、SB5が前記配信要求制御手段156の動作に、SE3、SE5、及びSE7が前記動画配信制御手段158の動作に、SA6、SB7、SBS1、及びSBS5が前記動画出力制御手段160の動作に、SBS1が前記同期演奏制御手段162の動作に、SC4が前記共演動画編集制御手段164の動作に、SF1及びSF2が前記配信要求制御手段166の動作に、SF3が前記動画出力制御手段168の動作に、SF4及びSF5が前記投票制御手段170の動作に、SD1及びSD2が前記投票受付制御手段172の動作に、SE8〜SE14が前記ゲーム実行制御手段174の動作に、SE9が前記演奏評価制御手段176の動作に、それぞれ対応する。   15 to 21, SA3 and SBS2 are the operations of the performance recording control means 150, SC1 to SC4 are the operations of the posting acceptance control means 152, and SB2 is the operations of the search control means 154. , SB5 is the operation of the distribution request control unit 156, SE3, SE5, and SE7 are the operation of the moving image distribution control unit 158, SA6, SB7, SBS1, and SBS5 are the operation of the moving image output control unit 160, and SBS1 Is the operation of the synchronized performance control means 162, SC4 is the operation of the co-starring video editing control means 164, SF1 and SF2 are the operations of the distribution request control means 166, SF3 is the operation of the video output control means 168, SF4 and SF5 are the operations of the voting control means 170, and SD1 and SD2 are the operations of the voting acceptance control means 172. SE8~SE14 the operation of the game execution control unit 174, the SE9 operation of the performance evaluation control unit 176, respectively corresponding.

このように、本実施例によれば、前記カラオケ装置36等の通信端末装置から投稿された情報を記憶する動画データベース68と、前記通信回線18を介して前記通信端末装置から、予め定められた複数の楽曲データの何れかに対応する音声情報を含む動画情報の投稿を受け付け、その投稿された動画情報を対応する楽曲データと関連付けて前記動画データベース68に記憶させる投稿受付制御手段152(SC1〜SC4)と、その投稿受付制御手段152により受け付けられる、共通の楽曲データに関連付けられた1対の動画情報を組み合わせて共演動画情報を編集し、その編集された共演動画情報をその共通の楽曲データと関連付けて前記動画データベース68に記憶させる共演動画編集制御手段164(SC4)と、前記共演動画情報の組み合わせに係る1対の動画情報それぞれに含まれる音声情報に対応して、予め定められた関係から前記共通の楽曲データに基づいて各動画情報毎にその音声情報の演奏評価を行う演奏評価制御手段176(SE9)と、前記通信回線18を介しての前記通信端末装置からの配信要求に応じて、前記動画データベース68に記憶されたその配信要求に係る動画情報及び共演動画情報をその通信端末装置に配信する動画配信制御手段158(SE3、SE5、及びSE7)と、その動画配信制御手段158により配信される共演動画情報の組み合わせに係る1対の動画情報を同期して出力させる動画出力制御手段160(SA6、SB7、SBS1、及びSBS5)、168(SF3)と、その動画出力制御手段160、168による前記共演動画情報の組み合わせに係る1対の動画情報の同期出力に際して、前記演奏評価制御手段176による各動画情報に含まれる音声情報の演奏評価結果に基づいて、それら1対の動画情報が化体するプレイヤが相互に対戦する対戦ゲームを実行するゲーム実行制御手段174(SE8〜SE14)とを、備えたものであることから、共演動画に係る1対の動画それぞれの演奏評価に応じて仮想的な対戦ゲームを実行することで、共演動画の新たな楽しみ方を提示できる。すなわち、複数の動画を組み合わせて同期出力させる共演動画において、エンターテイメント性の高い演奏評価を実現する動画情報配信システム10を提供することができる。   Thus, according to the present embodiment, the video database 68 storing information posted from the communication terminal device such as the karaoke device 36 and the communication terminal device through the communication line 18 are predetermined. Post acceptance control means 152 (SC1 to SC1) that accepts posting of video information including audio information corresponding to any of a plurality of music data and stores the posted video information in association with the corresponding music data in the video database 68 SC4) and a pair of video information associated with the common music data received by the posting reception control means 152 are combined to edit the co-star video information, and the edited co-star video information is used as the common music data. And co-starring video editing control means 164 (SC4) stored in the video database 68 in association with Performance evaluation control for performing performance evaluation of the audio information for each video information based on the common music data from a predetermined relationship corresponding to the audio information included in each pair of video information related to the combination In response to a distribution request from the communication terminal device via the means 176 (SE9) and the communication line 18, the communication terminal stores the video information and the co-star video information related to the distribution request stored in the video database 68. Video output control for synchronously outputting a pair of video information related to a combination of video distribution control means 158 (SE3, SE5, and SE7) distributed to the apparatus and co-starring video information distributed by the video distribution control means 158 The means 160 (SA6, SB7, SBS1, and SBS5), 168 (SF3) and the moving image output control means 160, 168 When synchronously outputting a pair of video information related to a combination of performance video information, the pair of video information is embodied based on a performance evaluation result of audio information included in each video information by the performance evaluation control means 176. Since the game execution control means 174 (SE8 to SE14) for executing a battle game in which the players play against each other is provided, the virtual execution is performed according to the performance evaluation of each of the pair of moving images related to the co-starring moving images. By running the battle game, you can present a new way to enjoy the co-star video. That is, it is possible to provide the moving picture information distribution system 10 that realizes performance evaluation with high entertainment properties in a co-starring moving picture that is output in combination with a plurality of moving pictures.

また、前記演奏評価制御手段176は、前記共演動画情報の組み合わせに係る1対の動画情報それぞれに含まれる音声情報が、予め定められた複数の技のうち何れかの成立条件を満たしているか否かを判定するものであり、前記ゲーム実行制御手段174は、前記演奏評価制御手段176により前記共演動画情報の組み合わせに係る一方の動画情報に含まれる音声情報が前記成立条件を満たしていると判定された場合には、その組み合わせに係る他方の動画情報が化体するプレイヤに対してその成立条件に係る技を適用するものであるため、共演動画に係る仮想的な対戦ゲームに歌い方に応じた技の要素を加えることで、更なる攻略性とエンターテイメント性を持つ対戦ゲームを実現することができる。   In addition, the performance evaluation control unit 176 determines whether or not the audio information included in each of the pair of moving image information related to the combination of the co-starring moving image information satisfies any of the conditions for establishment among a plurality of predetermined techniques. The game execution control unit 174 determines that the audio information included in one video information related to the combination of the co-starring video information satisfies the establishment condition by the performance evaluation control unit 176. If this is the case, the technique related to the establishment condition is applied to the player that the other video information related to the combination forms, so depending on how to sing in the virtual battle game related to the co-starring video By adding the elements of the technique, it is possible to realize a battle game with further capture and entertainment.

また、前記演奏評価制御手段176は、前記共通の楽曲データにおいて予め定められた所定区間毎に前記音声情報の音程がその楽曲データを基準とする適切演奏範囲内に入っているか否かを判定し、その判定が肯定される場合には第1の技の成立条件を満たしていると判定するものであるため、前記共演動画に係る仮想的な対戦ゲームにおいて、実用的な制御により歌い方に応じた技を対戦相手にかける処理を実現することができる。   In addition, the performance evaluation control means 176 determines whether or not the pitch of the audio information is within an appropriate performance range based on the music data for each predetermined section determined in advance in the common music data. If the determination is affirmative, it is determined that the conditions for establishment of the first technique are satisfied. Therefore, in the virtual battle game related to the co-starring video, depending on how to sing by practical control. The processing which applies the technique which is done to the opponent can be realized.

また、前記演奏評価制御手段176は、前記共通の楽曲データにおいて予め定められたハーモニーパートにおいて前記音声情報に複数人分の音声が含まれているか否かを判定し、その判定が肯定される場合には第2の技の成立条件を満たしていると判定するものであるため、前記共演動画に係る仮想的な対戦ゲームにおいて、実用的な制御により歌い方に応じた技を対戦相手にかける処理を実現することができる。   Further, the performance evaluation control means 176 determines whether or not a plurality of voices are included in the voice information in a predetermined harmony part in the common music data, and the determination is affirmed. Since it is determined that the conditions for establishing the second technique are satisfied, in the virtual battle game related to the co-starring video, the process of applying the technique according to the way of singing to the opponent by practical control Can be realized.

また、前記演奏評価制御手段176は、前記共通の楽曲データにおいて予め定められたデュエットパートにおいて前記音声情報がそのデュエットに係る適切演奏条件を満たすか否かを判定し、その判定が肯定される場合には第3の技の成立条件を満たしていると判定するものであるため、前記共演動画に係る仮想的な対戦ゲームにおいて、実用的な制御により歌い方に応じた技を対戦相手にかける処理を実現することができる。   The performance evaluation control means 176 determines whether or not the sound information satisfies an appropriate performance condition related to the duet in a predetermined duet part in the common music data, and the determination is affirmed Since it is determined that the condition for establishing the third technique is satisfied, in the virtual battle game related to the co-starring video, the process of applying the technique according to the way of singing to the opponent by practical control Can be realized.

また、前記演奏評価制御手段176は、予め定められた鳴り物の音が前記音声情報に含まれているか否かを判定し、その判定が肯定される場合には第4の技の成立条件を満たしていると判定するものであるため、前記共演動画に係る仮想的な対戦ゲームにおいて、実用的な制御により歌い方に応じた技を対戦相手にかける処理を実現することができる。   In addition, the performance evaluation control means 176 determines whether or not a sound of a predetermined sounding object is included in the audio information. If the determination is affirmative, the condition for establishing the fourth technique is satisfied. Therefore, in the virtual battle game related to the co-starring moving image, it is possible to realize a process of applying a technique according to the way of singing to the opponent by practical control.

また、前記演奏評価制御手段176は、予め定められた歌唱方法に対応する音声が前記音声情報に含まれているか否かを判定し、その判定が肯定される場合には第5の技の成立条件を満たしていると判定するものであるため、前記共演動画に係る仮想的な対戦ゲームにおいて、実用的な制御により歌い方に応じた技を対戦相手にかける処理を実現することができる。   Further, the performance evaluation control means 176 determines whether or not a sound corresponding to a predetermined singing method is included in the sound information, and if the determination is affirmed, the fifth technique is established. Since it is determined that the condition is satisfied, in the virtual battle game related to the co-starring moving image, it is possible to realize a process of applying a technique according to the way of singing to the opponent by practical control.

また、前記通信端末装置による入力操作に応じて、前記動画データベース68に記憶された各動画情報に対する投票を受け付ける投票受付制御手段172(SD1及びSD2)を備え、前記ゲーム実行制御手段174は、その投票受付制御手段172により受け付けられる前記共演動画情報の組み合わせに係る各動画情報に対する投票結果を前記対戦ゲームにおけるそれぞれの動画情報が化体するプレイヤに反映するものであるため、共演動画に係る仮想的な対戦ゲームに閲覧者の投票結果を反映することで、インタラクティブ性に優れた対戦ゲームを実現することができる。   The game execution control means 174 includes voting acceptance control means 172 (SD1 and SD2) for accepting a vote for each piece of moving picture information stored in the moving picture database 68 in response to an input operation by the communication terminal device. Since the voting result for each video information related to the combination of the co-star video information received by the voting reception control means 172 is reflected on the player that each video information in the battle game embodies, the virtual By reflecting the voting result of the viewer in a competitive game, it is possible to realize a battle game with excellent interactiveness.

また、音声入力装置であるマイクロフォン110及び撮像装置であるビデオカメラ122を有し、多数の楽曲データのうちから選択される楽曲データに対応する演奏曲を出力させるのに併行して前記マイクロフォン110により入力される音声を増幅して出力させるカラオケ装置36を前記通信端末装置として備え、前記動画配信制御手段158は、前記カラオケ装置36からの配信要求に応じて、前記動画データベース68に記憶されたその配信要求に係る動画情報をそのカラオケ装置36に配信するものであり、そのカラオケ装置36は、前記動画配信制御手段158により配信された動画情報の出力を制御する動画出力制御手段160と、その動画出力制御手段160による前記動画情報の出力と同期してその動画情報と関連付けられた楽曲データに対応する演奏曲を出力させる同期演奏制御手段162(SBS1)と、その同期演奏制御手段162による演奏曲の出力に際して前記ビデオカメラ122により撮影された映像情報及び前記マイクロフォン110により入力された音声情報を記録する演奏記録制御手段150(SA3及びSBS2)とを、備えたものであり、前記投稿受付制御手段152は、その演奏記録制御手150段により記録された映像情報及び音声情報を含む動画情報の投稿を受け付け、前記同期演奏制御手段162により出力された演奏曲に対応する楽曲データの識別情報と関連付けて前記動画データベース68に記憶させるものであり、前記共演動画編集制御手段164は、前記投稿受付制御手段152により受け付けられる、共通の楽曲データに関連付けられた複数の動画情報を組み合わせて共演動画情報を編集し、その編集された共演動画情報をその楽曲データの識別情報と関連付けて前記動画データベース68に記憶させるものであるため、カラオケ装置36により記録乃至投稿される複数の動画を組み合わせて同期出力させる共演動画において、エンターテイメント性の高い演奏評価を実現する動画情報配信システム10を提供することができる。   The microphone 110 is an audio input device and the video camera 122 is an imaging device. The microphone 110 simultaneously outputs a musical piece corresponding to music data selected from a large number of music data. A karaoke device 36 that amplifies and outputs input audio is provided as the communication terminal device, and the moving image distribution control means 158 is stored in the moving image database 68 in response to a distribution request from the karaoke device 36. The video information related to the distribution request is distributed to the karaoke device 36, and the karaoke device 36 controls the output of the video information distributed by the video distribution control unit 158 and the video output control unit 160. In synchronization with the output of the moving picture information by the output control means 160, the moving picture information is associated with the moving picture information. Synchronous performance control means 162 (SBS1) for outputting a performance music corresponding to the music data, and video information photographed by the video camera 122 and the microphone 110 when the performance music is output by the synchronous performance control means 162. Performance recording control means 150 (SA3 and SBS2) for recording audio information is provided, and the posting acceptance control means 152 includes video information and audio information recorded by the performance recording control unit 150. The posting of moving picture information is received and stored in the moving picture database 68 in association with the identification information of the music data corresponding to the musical piece outputted by the synchronous performance control means 162. The co-starring moving picture editing control means 164 includes: Common music data accepted by the posting acceptance control means 152 The karaoke device 36 edits the co-starring video information by combining a plurality of associated video information, and stores the edited co-star video information in the video database 68 in association with the identification information of the music data. It is possible to provide a moving picture information distribution system 10 that realizes performance evaluation with high entertainment characteristics in a co-starring moving picture that is output in combination with a plurality of recorded or posted moving pictures.

以上、本発明の好適な実施例を図面に基づいて詳細に説明したが、本発明はこれに限定されるものではなく、更に別の態様においても実施される。   The preferred embodiments of the present invention have been described in detail with reference to the drawings. However, the present invention is not limited to these embodiments, and may be implemented in other modes.

例えば、前述の実施例において、前記投稿受付制御手段152、動画配信制御手段158、共演動画編集制御手段164、投票受付制御手段172、及びゲーム実行制御手段174は前記サーバ装置12のCPU52に、前記演奏記録制御手段150、検索制御手段154、配信要求制御手段156、動画出力制御手段160、及び同期演奏制御手段162は前記カラオケ装置36のCPU124に、前記配信要求制御手段166、動画出力制御手段168、及び投票制御手段170は前記PC14のCPU74に、それぞれ機能的に備えられたものであったが、本発明はこれに限定されるものではなく、例えば、前記検索制御手段154に係る制御を実質的に前記サーバ装置12側で実行する構成においては、その検索制御手段154は前記サーバ装置12のCPU52に備えられたものであってもよいし、前記投票制御手段170は前記カラオケ装置36のCPU124にも好適に備えられるというように、図5に示す各制御機能を備える装置はシステムの構成に応じて適宜変更され得る。   For example, in the above-described embodiment, the posting acceptance control means 152, the moving picture distribution control means 158, the co-starring moving picture editing control means 164, the vote acceptance control means 172, and the game execution control means 174 are sent to the CPU 52 of the server device 12 by the The performance recording control means 150, the search control means 154, the distribution request control means 156, the moving picture output control means 160, and the synchronous performance control means 162 are sent to the CPU 124 of the karaoke apparatus 36 by the distribution request control means 166 and the moving picture output control means 168. The voting control means 170 is functionally provided in the CPU 74 of the PC 14, but the present invention is not limited to this. For example, the control related to the search control means 154 is substantially performed. In particular, in the configuration executed on the server device 12 side, the search control means 154 5 may be provided in the CPU 52 of the server device 12, or the voting control means 170 may be suitably provided in the CPU 124 of the karaoke device 36. It can be appropriately changed according to the system configuration.

例えば、前述の実施例において、前記共演動画編集制御手段164は、前記サーバ装置12のCPU52に機能的に備えられたものであり、前記カラオケ装置36等の通信端末装置からアップロードされる複数の動画情報を組み合わせて共演動画情報を編集し、その編集された共演動画情報を前記動画データベース68に記憶させるものであったが、例えば前記カラオケ装置36において共演動画情報に係る組み合わせの対象となる動画情報(演奏動画)の記録が完了した段階において、そのカラオケ装置36のCPU124によりその動画情報と共演相手である動画情報とを組み合わせる共演動画情報を編集し、その編集された共演動画情報を前記サーバ装置12へアップロードして前記動画データベース68に記憶させるものであってもよい。すなわち、前記共演動画編集制御手段164は、実質的に前記カラオケ装置36のCPU124に機能的に備えられたものであってもよい。   For example, in the above-described embodiment, the co-starring moving image editing control unit 164 is functionally provided in the CPU 52 of the server device 12, and a plurality of moving images uploaded from a communication terminal device such as the karaoke device 36. The co-star video information is edited by combining the information, and the edited co-star video information is stored in the video database 68. For example, the karaoke device 36 uses the video information that is the target of the combination related to the co-star video information. At the stage when the recording of the (performance video) is completed, the CPU 124 of the karaoke device 36 edits the co-star video information that combines the video information and the video information that is the co-starring partner, and the edited co-star video information is used as the server device. 12 to be stored in the moving image database 68 There. That is, the co-starring moving image editing control means 164 may be substantially functionally provided in the CPU 124 of the karaoke apparatus 36.

また、前述の実施例において、前記ゲーム実行制御手段174は、前記サーバ装置12のCPU52に機能的に備えられたものであり、通信端末装置による前記共演動画情報の組み合わせに係る1対の動画情報の同期出力に際して、それら1対の動画情報が化体するプレイヤが相互に対戦する対戦ゲーム映像202等を生成して対象となる通信端末装置へ配信するものであったが、例えば、前記PC14やカラオケ装置36等の通信端末装置の側において、前記共演動画情報の組み合わせに係る1対の動画情報それぞれに含まれる音声情報に対応して、予め定められた関係から前記共通の楽曲データに基づいて各動画情報毎にその音声情報の演奏評価を行うと共に、その演奏評価結果に基づいて、それら1対の動画情報が化体するプレイヤが相互に対戦する対戦ゲームを実行するものであってもよい。すなわち、前記演奏評価制御手段176及びゲーム実行制御手段174は、前記PC14やカラオケ装置36等の通信端末装置側に備えられたものであってもよい。   In the above-described embodiment, the game execution control means 174 is functionally provided in the CPU 52 of the server device 12, and a pair of moving image information related to the combination of the co-starring moving image information by the communication terminal device. In the synchronized output, the player who forms a pair of the moving image information generates a battle game video 202 or the like that battles each other and distributes it to the target communication terminal device. On the communication terminal device side such as the karaoke device 36, based on the common music data from a predetermined relationship corresponding to the audio information included in each of the pair of moving image information related to the combination of the co-starring moving image information. The player evaluates the performance of the audio information for each moving image information, and based on the performance evaluation result, the player who embodies the pair of moving image information Each other may be the one to run a competitive game to play against. That is, the performance evaluation control means 176 and the game execution control means 174 may be provided on the communication terminal device side such as the PC 14 or the karaoke device 36.

また、前述の実施例において、前記共演動画編集制御手段164は、前記動画データベース68にそれぞれ独立した動画情報として記憶された組み合わせに係る動画情報を読み出し、それら動画情報を共演動画として同期出力させるための組み合わせ情報としての共演動画情報を編集するものであったが、それら組み合わせに係る複数の動画情報を合成し、単一の動画情報(動画ファイル)としての共演動画情報を作成して前記動画データベース68に記憶するものであってもよい。すなわち、前記共演動画編集制御手段164により編集される共演動画情報は、複数の動画情報を共演動画として同期出力させるための組み合わせ情報であってもよいし、組み合わせに係る複数の動画情報が合成された結果としての動画情報そのものであってもよい。また、組み合わせに係る複数の動画情報を合成し、単一の共演動画情報を作成する態様においては、その作成の基となった複数の動画情報は、共演動画情報が作成された時点で前記動画データベース68から削除されるものであってもよい。   In the above-described embodiment, the co-star video editing control unit 164 reads the video information related to the combination stored as independent video information in the video database 68 and synchronously outputs the video information as a co-star video. The video database is a combination of a plurality of pieces of video information relating to the combination, and creating a piece of co-star video information as a single video information (video file). 68 may be stored. That is, the co-star video information edited by the co-star video editing control means 164 may be combination information for synchronously outputting a plurality of video information as a co-star video, or a plurality of video information related to the combination is synthesized. It may be the moving image information itself as a result. Further, in the aspect of synthesizing a plurality of pieces of video information related to the combination and creating a single co-star video information, the plurality of video information that is the basis of the creation is the video when the co-star video information is created. It may be deleted from the database 68.

また、前述の実施例において、前記共演動画編集制御手段164は、前記カラオケ装置36に備えられた動画出力制御手段160による共演相手である動画情報の出力と同期しての、前記同期演奏制御手段162による演奏曲の出力に際して記録された動画情報を、その共演相手である動画情報と組み合わせる共演動画情報を編集するものであったが、例えば前記PC14からアップロードされた複数の動画情報を組み合わせて共演動画情報を編集するものであってもよい。すなわち、前記カラオケ装置36によるカラオケ演奏に際して記録された動画情報のみならず、前記PC14に備えられたウェブカメラやマイクロフォン等により記録された動画情報(動画ファイル)も本発明の共演動画情報の編集対象となり得るものである。   In the above-described embodiment, the co-starring moving image editing control means 164 is synchronized with the output of moving picture information as a co-starring partner by the moving picture output control means 160 provided in the karaoke apparatus 36. The video information recorded at the time of the output of the musical piece by 162 is edited with the video information that is combined with the video information that is the co-starring partner. For example, a plurality of video information uploaded from the PC 14 is combined and co-starred. The video information may be edited. That is, not only the moving image information recorded at the time of the karaoke performance by the karaoke device 36 but also the moving image information (moving image file) recorded by the web camera or the microphone provided in the PC 14 is the editing target of the co-starring moving image information of the present invention. It can be.

また、前述の実施例においては、前記ゲーム実行制御手段174によるゲーム実行制御に関して、図10等に定められた関係に基づいてコンボを判定する態様について説明したが、本発明の対戦ゲームに係る技すなわちコンボとしては、斯かるものに限定されず、種々の態様が考えられることは言うまでもない。更に、対象となる動画情報に含まれる音声情報が所定の成立条件を満たしていると判定された場合、前記利用者データベース70においてフレンドとして登録された利用者のアバタが加勢し、合体攻撃が可能になる等の制御が行われるものであってもよく、本発明の対戦ゲームには種々の変更が加えられ得るものである。   In the above-described embodiment, the aspect of determining the combo based on the relationship defined in FIG. 10 and the like regarding the game execution control by the game execution control means 174 has been described. That is, as a combo, it is not limited to such a thing, and it cannot be overemphasized that various aspects can be considered. Furthermore, when it is determined that the audio information included in the target video information satisfies a predetermined establishment condition, a user avatar registered as a friend in the user database 70 is energized, and a combined attack is possible It is also possible to perform control such as becoming, and various changes can be added to the battle game of the present invention.

また、前述の実施例では特に言及していないが、前記動画情報配信システム10には、前記通信回線18を介して前記PC14等の通信端末装置によるコメントの投稿を受け付け、前記動画配信制御手段158による動画情報或いは共演動画情報に係る動画の配信に際して、それら動画情報或いは共演動画情報に対して過去に投稿された複数のコメントを同期して配信する等の制御を行うものであってもよい。すなわち、本発明の動画情報配信システムは、前述の実施例に加えて種々のインタラクティブな機能が追加されて構成されるものである。   Although not particularly mentioned in the above-described embodiment, the moving image information distribution system 10 receives posting of a comment by a communication terminal device such as the PC 14 via the communication line 18, and the moving image distribution control unit 158. When distributing the moving image information related to the video information or the co-starring moving image information, control may be performed such that a plurality of comments posted in the past are synchronously distributed with respect to the moving image information or the co-starring moving image information. That is, the moving picture information distribution system of the present invention is configured by adding various interactive functions to the above-described embodiment.

その他、一々例示はしないが、本発明はその趣旨を逸脱しない範囲内において種々の変更が加えられて実施されるものである。   In addition, although not illustrated one by one, the present invention is implemented with various modifications within a range not departing from the gist thereof.

10:動画情報配信システム、14:パーソナルコンピュータ(通信端末装置)、16:携帯電話機(通信端末装置)、18:通信回線、36:カラオケ装置(通信端末装置)、68:動画データベース、110:マイクロフォン(音声入力装置)、122:ビデオカメラ(撮像装置)、150:演奏記録制御手段、152:投稿受付制御手段、158:動画配信制御手段、160、168:動画出力制御手段、162:同期演奏制御手段、164:共演動画編集制御手段、172:投票受付制御手段、174:ゲーム実行制御手段、176:演奏評価制御手段   10: Movie information distribution system, 14: Personal computer (communication terminal device), 16: Mobile phone (communication terminal device), 18: Communication line, 36: Karaoke device (communication terminal device), 68: Movie database, 110: Microphone (Voice input device), 122: video camera (imaging device), 150: performance recording control means, 152: posting acceptance control means, 158: moving picture distribution control means, 160, 168: moving picture output control means, 162: synchronous performance control Means 164: Co-star video editing control means 172: Voting acceptance control means 174: Game execution control means 176: Performance evaluation control means

Claims (9)

所定の通信回線を介して複数の通信端末装置に対する動画情報の配信を行う動画情報配信システムであって、
前記通信端末装置から投稿された情報を記憶するデータベースと、
前記通信回線を介して前記通信端末装置から、予め定められた複数の楽曲データの何れかに対応する音声情報を含む動画情報の投稿を受け付け、該投稿された動画情報を対応する楽曲データと関連付けて前記データベースに記憶させる投稿受付制御手段と、
該投稿受付制御手段により受け付けられる、共通の楽曲データに関連付けられた1対の動画情報を組み合わせて共演動画情報を編集し、該編集された共演動画情報を該共通の楽曲データと関連付けて前記データベースに記憶させる共演動画編集制御手段と、
前記共演動画情報の組み合わせに係る1対の動画情報それぞれに含まれる音声情報に対応して、予め定められた関係から前記共通の楽曲データに基づいて各動画情報毎に該音声情報の演奏評価を行う演奏評価制御手段と、
前記通信回線を介しての前記通信端末装置からの配信要求に応じて、前記データベースに記憶された該配信要求に係る動画情報及び共演動画情報を該通信端末装置に配信する動画配信制御手段と、
該動画配信制御手段により配信される共演動画情報の組み合わせに係る1対の動画情報を同期して出力させる動画出力制御手段と、
該動画出力制御手段による前記共演動画情報の組み合わせに係る1対の動画情報の同期出力に際して、前記演奏評価制御手段による各動画情報に含まれる音声情報の演奏評価結果に基づいて、それら1対の動画情報が化体するプレイヤが相互に対戦する対戦ゲームを実行するゲーム実行制御手段と
を、備えたものであることを特徴とする動画情報配信システム。
A video information distribution system that distributes video information to a plurality of communication terminal devices via a predetermined communication line,
A database for storing information posted from the communication terminal device;
Accepting posting of moving image information including audio information corresponding to any of a plurality of predetermined music data from the communication terminal device via the communication line, and associating the posted moving image information with corresponding music data Posting acceptance control means to be stored in the database,
The database that is received by the posting reception control means is combined with a pair of moving image information associated with common music data to edit co-starring moving image information, and the edited co-starring moving image information is associated with the common music data. Co-starring video editing control means to be stored in,
Corresponding to the audio information included in each of the pair of moving image information related to the combination of the co-starring moving image information, performance evaluation of the audio information is performed for each moving image information based on the common music data from a predetermined relationship. Performing performance evaluation control means,
In response to a distribution request from the communication terminal device via the communication line, a moving image distribution control means for distributing the moving image information and the co-starring moving image information related to the distribution request stored in the database to the communication terminal device;
Video output control means for synchronously outputting a pair of video information related to the combination of the co-starring video information distributed by the video distribution control means;
When the pair of moving image information related to the combination of the co-starring moving image information is output by the moving image output control means, based on the performance evaluation result of the audio information included in each moving image information by the performance evaluation control means, the pair of moving image information A video information distribution system comprising: a game execution control means for executing a battle game in which video information is converted into players.
前記演奏評価制御手段は、前記共演動画情報の組み合わせに係る1対の動画情報それぞれに含まれる音声情報が、予め定められた複数の技のうち何れかの成立条件を満たしているか否かを判定するものであり、
前記ゲーム実行制御手段は、前記演奏評価制御手段により前記共演動画情報の組み合わせに係る一方の動画情報に含まれる音声情報が前記成立条件を満たしていると判定された場合には、該組み合わせに係る他方の動画情報が化体するプレイヤに対して該成立条件に係る技を適用するものである
請求項1に記載の動画情報配信システム。
The performance evaluation control means determines whether or not the audio information included in each of the pair of moving image information relating to the combination of the co-starring moving image information satisfies any formation condition among a plurality of predetermined techniques. Is what
The game execution control means, when it is determined by the performance evaluation control means that the audio information included in one moving picture information related to the combination of the co-starring moving picture information satisfies the establishment condition, The moving image information distribution system according to claim 1, wherein the technique related to the establishment condition is applied to a player who embodies the other moving image information.
前記演奏評価制御手段は、前記共通の楽曲データにおいて予め定められた所定区間毎に前記音声情報の音程が該楽曲データを基準とする適切演奏範囲内に入っているか否かを判定し、該判定が肯定される場合には第1の技の成立条件を満たしていると判定するものである請求項2に記載の動画情報配信システム。   The performance evaluation control means determines whether or not the pitch of the audio information is within an appropriate performance range based on the music data for each predetermined section determined in advance in the common music data, and the determination The moving image information distribution system according to claim 2, wherein if the result is affirmative, it is determined that the condition for establishing the first technique is satisfied. 前記演奏評価制御手段は、前記共通の楽曲データにおいて予め定められたハーモニーパートにおいて前記音声情報に複数人分の音声が含まれているか否かを判定し、該判定が肯定される場合には第2の技の成立条件を満たしていると判定するものである請求項2又は3に記載の動画情報配信システム。   The performance evaluation control means determines whether or not voice information for a plurality of people is included in the voice information in a predetermined harmony part in the common music data, and if the determination is affirmative, The moving image information distribution system according to claim 2 or 3, wherein the moving image information distribution system is determined to satisfy a condition for establishing the technique of 2. 前記演奏評価制御手段は、前記共通の楽曲データにおいて予め定められたデュエットパートにおいて前記音声情報が該デュエットに係る適切演奏条件を満たすか否かを判定し、該判定が肯定される場合には第3の技の成立条件を満たしていると判定するものである請求項2から4の何れか1項に記載の動画情報配信システム。   The performance evaluation control means determines whether or not the audio information satisfies an appropriate performance condition related to the duet in a predetermined duet part in the common music data, and if the determination is affirmative, 5. The moving image information distribution system according to claim 2, wherein the moving image information distribution system is determined to satisfy a condition for establishing technique 3. 前記演奏評価制御手段は、予め定められた鳴り物の音が前記音声情報に含まれているか否かを判定し、該判定が肯定される場合には第4の技の成立条件を満たしていると判定するものである請求項2から5の何れか1項に記載の動画情報配信システム。   The performance evaluation control means determines whether or not a predetermined sound is included in the audio information, and if the determination is affirmative, the condition for establishing the fourth technique is satisfied. The moving image information distribution system according to any one of claims 2 to 5, which is to be determined. 前記演奏評価制御手段は、予め定められた歌唱方法に対応する音声が前記音声情報に含まれているか否かを判定し、該判定が肯定される場合には第5の技の成立条件を満たしていると判定するものである請求項2から6の何れか1項に記載の動画情報配信システム。   The performance evaluation control means determines whether or not sound corresponding to a predetermined singing method is included in the sound information, and if the determination is affirmed, satisfies a condition for establishing the fifth technique. The moving image information distribution system according to any one of claims 2 to 6, wherein the moving image information distribution system according to any one of claims 2 to 6 is determined. 前記通信端末装置による入力操作に応じて、前記データベースに記憶された各動画情報に対する投票を受け付ける投票受付制御手段を備え、
前記ゲーム実行制御手段は、該投票受付制御手段により受け付けられる前記共演動画情報の組み合わせに係る各動画情報に対する投票結果を前記対戦ゲームにおけるそれぞれの動画情報が化体するプレイヤに反映するものである
請求項1から7の何れか1項に記載の動画情報配信システム。
In response to an input operation by the communication terminal device, voting reception control means for receiving a vote for each moving image information stored in the database,
The game execution control unit reflects a voting result for each piece of moving image information related to the combination of the co-starring moving image information received by the voting reception control unit to a player who embodies each moving image information in the battle game. Item 8. The moving image information distribution system according to any one of Items 1 to 7.
音声入力装置及び撮像装置を有し、多数の楽曲データのうちから選択される楽曲データに対応する演奏曲を出力させるのに併行して前記音声入力装置により入力される音声を増幅して出力させるカラオケ装置を前記通信端末装置として備え、
前記動画配信制御手段は、前記カラオケ装置からの配信要求に応じて、前記データベースに記憶された該配信要求に係る動画情報を該カラオケ装置に配信するものであり、
前記カラオケ装置は、
前記動画配信制御手段により配信された動画情報の出力を制御する動画出力制御手段と、
該動画出力制御手段による前記動画情報の出力と同期して該動画情報と関連付けられた楽曲データに対応する演奏曲を出力させる同期演奏制御手段と、
該同期演奏制御手段による演奏曲の出力に際して前記撮像装置により撮影された映像情報及び前記音声入力装置により入力された音声情報を記録する演奏記録制御手段と
を、備えたものであり、
前記投稿受付制御手段は、該演奏記録制御手段により記録された映像情報及び音声情報の投稿を受け付け、前記同期演奏制御手段により出力された演奏曲に対応する楽曲データの識別情報と関連付けて前記データベースに記憶させるものであり、
前記共演動画編集制御手段は、前記投稿受付制御手段により受け付けられる、共通の楽曲データに関連付けられた複数の動画情報を組み合わせて共演動画情報を編集し、該編集された共演動画情報を該楽曲データの識別情報と関連付けて前記データベースに記憶させるものである
請求項1から8の何れか1項に記載の動画情報配信システム。
A voice input device and an imaging device are provided, and in parallel with outputting performance music corresponding to music data selected from a large number of music data, the voice input by the voice input device is amplified and output. A karaoke device is provided as the communication terminal device,
The moving image distribution control means distributes the moving image information related to the distribution request stored in the database to the karaoke device in response to the distribution request from the karaoke device,
The karaoke device
Video output control means for controlling the output of the video information distributed by the video distribution control means;
Synchronous performance control means for outputting performance music corresponding to music data associated with the video information in synchronization with the output of the video information by the video output control means;
Performance recording control means for recording video information photographed by the imaging device and sound information inputted by the voice input device when the performance music is outputted by the synchronous performance control means, and
The posting acceptance control means accepts postings of video information and audio information recorded by the performance recording control means, and associates the database with identification information of music data corresponding to the performance music output by the synchronous performance control means. To remember
The co-star video editing control unit edits the co-star video information by combining a plurality of video information associated with common music data, which is received by the posting reception control unit, and the edited co-star video information is used as the music data. The moving image information distribution system according to claim 1, wherein the moving image information distribution system is stored in the database in association with the identification information.
JP2011211496A 2010-09-30 2011-09-27 Video information distribution system Active JP5498459B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011211496A JP5498459B2 (en) 2010-09-30 2011-09-27 Video information distribution system

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010222217 2010-09-30
JP2010222217 2010-09-30
JP2011211496A JP5498459B2 (en) 2010-09-30 2011-09-27 Video information distribution system

Publications (2)

Publication Number Publication Date
JP2012093734A JP2012093734A (en) 2012-05-17
JP5498459B2 true JP5498459B2 (en) 2014-05-21

Family

ID=46387072

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011211496A Active JP5498459B2 (en) 2010-09-30 2011-09-27 Video information distribution system

Country Status (1)

Country Link
JP (1) JP5498459B2 (en)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5706718B2 (en) * 2011-03-02 2015-04-22 Kddi株式会社 Movie synthesis system and method, movie synthesis program and storage medium thereof
JP5727979B2 (en) * 2012-09-25 2015-06-03 株式会社コナミデジタルエンタテインメント GAME PROCESSING DEVICE, GAME PROCESSING DEVICE CONTROL METHOD, AND PROGRAM
JP6095202B2 (en) * 2012-09-29 2017-03-15 株式会社第一興商 Collaboration singing system
JP5946133B2 (en) * 2012-10-31 2016-07-05 株式会社エクシング Karaoke device and karaoke program
JP6185416B2 (en) * 2014-03-27 2017-08-23 株式会社エクシング Karaoke device, program and karaoke system
JP6317609B2 (en) * 2014-03-31 2018-04-25 株式会社エクシング COMMUNICATION TERMINAL DEVICE, SERVER DEVICE, PROGRAM, DATA PROVIDING METHOD, AND KARAOKE SYSTEM
JP6663752B2 (en) * 2016-03-04 2020-03-13 株式会社コシダカホールディングス Karaoke baseball game
JP2019012973A (en) * 2017-06-30 2019-01-24 株式会社Nttぷらら Video distribution system, communication device, video distribution server, and video distribution method
JP6990138B2 (en) * 2018-03-28 2022-01-12 株式会社第一興商 Karaoke equipment
WO2019216146A1 (en) 2018-05-08 2019-11-14 グリー株式会社 Moving picture delivery system for delivering moving picture including animation of character object generated based on motions of actor, moving picture delivery method, and moving picture delivery program
JP6492212B1 (en) * 2018-05-31 2019-03-27 株式会社Quantum Bank Battle distribution system
JP7093006B2 (en) * 2018-07-25 2022-06-29 株式会社ミクシィ Information processing equipment, video distribution method and video distribution program
JP7193702B2 (en) * 2018-07-25 2022-12-21 株式会社Mixi Information processing device, video distribution method, and video distribution program
JP7311815B2 (en) * 2018-07-25 2023-07-20 株式会社Mixi Information processing device, video distribution method, and video distribution program
US11044535B2 (en) 2018-08-28 2021-06-22 Gree, Inc. Video distribution system for live distributing video containing animation of character object generated based on motion of distributor user, distribution method, and storage medium storing video distribution program
JP6701416B1 (en) * 2019-06-28 2020-05-27 グリー株式会社 Video distribution system, server, video distribution method for server, video distribution program, and video distribution method for user device
JP7001737B2 (en) * 2020-05-01 2022-01-20 グリー株式会社 Video data processing method, video data processing program, video data processing method, server
US11496807B2 (en) 2019-06-28 2022-11-08 Gree, Inc. Video distribution system, video distribution method, information processing device, and video viewing program
JP6709317B1 (en) * 2019-08-05 2020-06-10 グリー株式会社 Video distribution system, video distribution method, video viewing program, video viewing method, and video distribution program
JP7021785B2 (en) * 2019-09-03 2022-02-17 株式会社ワンダラービル Servers, server control methods, server control programs, and terminal control programs
JP7272993B2 (en) * 2020-05-15 2023-05-12 グリー株式会社 Video data processing program, video data processing method, information processing apparatus, and information processing method

Also Published As

Publication number Publication date
JP2012093734A (en) 2012-05-17

Similar Documents

Publication Publication Date Title
JP5498459B2 (en) Video information distribution system
JP5422593B2 (en) Video information distribution system
JP6209118B2 (en) Karaoke device, karaoke system, and program
JP2011075708A (en) Device and method for retrieval of moving picture content
JP5269829B2 (en) Karaoke system, karaoke system control method, karaoke system control program, and information recording medium thereof
JP5713048B2 (en) Karaoke system
JP5937988B2 (en) Video information distribution system
JP5461354B2 (en) Video information distribution system
JP5739369B2 (en) Karaoke equipment
JP5498444B2 (en) Video information distribution system
JP5014927B2 (en) Karaoke system on request
JP2011175170A (en) Communication karaoke system
JP2010175819A (en) Karaoke network system
JP6561729B2 (en) Karaoke system and karaoke device
JP2016071087A (en) Moving image information delivery system and server
JP2007121550A (en) Karaoke contest system capable of reproducing and hearing singing voice of high order prizewinner, karaoke system, and contest server
JP3621904B2 (en) Karaoke performance terminal that can select karaoke video works
JP3621906B2 (en) Karaoke performance device for karaoke video work contests
JP5823313B2 (en) Karaoke equipment
JP5873035B2 (en) Video information distribution system
JP6289331B2 (en) Karaoke system and server
JP5981867B2 (en) Karaoke system
JP4444069B2 (en) A communication karaoke system that accepts submissions of karaoke video works and enables playback during karaoke performance
JP6053007B2 (en) Online karaoke system
WO2020121624A1 (en) Music posting device and music posting program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130327

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140221

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140304

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140307

R150 Certificate of patent or registration of utility model

Ref document number: 5498459

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150