JP4915403B2

JP4915403B2 - Karaoke equipment, karaoke system, set-top box

Info

Publication number: JP4915403B2
Application number: JP2008199038A
Authority: JP
Inventors: 正哉奥村
Original assignee: Brother Industries Ltd
Current assignee: Brother Industries Ltd
Priority date: 2008-07-31
Filing date: 2008-07-31
Publication date: 2012-04-11
Anticipated expiration: 2028-07-31
Also published as: JP2010039008A

Description

本発明は、歌唱者の映像を記録することができるカラオケ装置、カラオケシステム、セットトップボックス等に関するものである。 The present invention relates to a karaoke apparatus, a karaoke system, a set top box, and the like that can record a video of a singer.

従来、歌唱者の歌唱内容を記録することができるカラオケ装置が提案されている。例えば、下記特許文献１には、歌唱者の歌声を伴奏音楽と共に記録する点が開示されている。また、伴奏音楽のみを記録することを禁止する点が開示されている。 2. Description of the Related Art Conventionally, a karaoke apparatus that can record a singer's singing content has been proposed. For example, Patent Document 1 below discloses that a singer's singing voice is recorded together with accompaniment music. Further, it is disclosed that recording only accompaniment music is prohibited.

特開２００３−１６７５９２号公報Japanese Patent Laid-Open No. 2003-167582

歌唱内容の記録に関し、歌唱者の歌声のみならず歌唱者の歌唱の様子を撮影し映像として記録することにより、カラオケサービスの多様化、充実化を図ることができる。このようなサービスを提供することは、カラオケ事業者にとっては、集客力の向上という観点から好ましいと考えられる。 Regarding the recording of singing contents, it is possible to diversify and enhance the karaoke service by photographing not only the singing voice of the singer but also the state of the singing of the singer and recording it as a video. Providing such a service is considered preferable for karaoke operators from the viewpoint of improving the ability to attract customers.

通常のカラオケシステムにおいて、歌唱者は、ディスプレイに表示された歌詞テロップを見ながら歌唱を行う。また、楽曲の再生中、所定の背景映像が前記ディスプレイに表示される。ここで、歌唱者の歌唱の様子を撮影する場合、歌唱者とともに前記ディスプレイの内容が撮影・記録されることが想定される。この点、歌詞テロップや背景映像の記録が禁止されているコンテンツを用いてカラオケ歌唱が行われる場合には、当該歌詞テロップや背景映像が記録されないための構成が必要である。 In a normal karaoke system, a singer sings while watching the lyrics telop displayed on the display. In addition, a predetermined background image is displayed on the display during the reproduction of the music. Here, when the state of a singer's singing is image | photographed, it is assumed that the content of the said display is image | photographed and recorded with a singer. In this regard, when karaoke singing is performed using content for which recording of lyrics telop or background video is prohibited, a configuration is required so that the lyrics telop and background video are not recorded.

本発明は、上記問題点を解決するためになされたものであり、記録が禁止されているカラオケコンテンツを用いた場合であっても、歌唱者の歌唱の様子を撮影し映像として記録することができるカラオケ装置等を提供することを目的とする。 The present invention has been made to solve the above-described problems, and even when karaoke content for which recording is prohibited is used, the state of singing a singer can be photographed and recorded as a video. An object is to provide a karaoke device that can be used.

本発明の一側面である請求項１に係る発明は、ディスプレイ、カメラ、記録手段、映像出力制御手段、音声出力手段、画像処理手段、とを備えるカラオケ装置であって、前記音声出力手段は、カラオケデータに含まれる楽音情報に基いて音声信号を出力し、前記記録手段は、前記カメラが撮影した映像信号を記録し、前記画像処理手段は、前記カラオケデータに含まれる映像信号と前記カメラが撮影した映像信号とを比較し、該比較結果を結果信号として出力し、前記カラオケデータには、背景映像及び歌詞テロップが含まれており、前記映像出力制御手段は、前記カラオケデータに含まれる映像信号を前記ディスプレイに出力可能であり、前記カラオケデータに対する制御フラグを取得し、前記結果信号を受信し、前記制御フラグ及び前記結果信号に基いて、前記歌詞テロップ及び／または前記背景映像を前記ディスプレイに出力するか否かを制御することを特徴とする。 The invention according to claim 1, which is an aspect of the present invention, is a karaoke apparatus comprising a display, a camera, a recording unit, a video output control unit, an audio output unit, and an image processing unit, wherein the audio output unit includes: An audio signal is output based on musical tone information included in karaoke data, the recording means records a video signal photographed by the camera, and the image processing means includes a video signal included in the karaoke data and the camera The captured video signal is compared, and the comparison result is output as a result signal. The karaoke data includes a background video and a lyrics telop, and the video output control means includes the video included in the karaoke data. A signal can be output to the display, a control flag for the karaoke data is obtained, the result signal is received, the control flag and the Based on result signal, the lyrics telop and / or the background image and controlling whether to output to the display.

上記カラオケ装置によれば、再生するカラオケデータに対する制御フラグ及び画像処理の結果に応じて、前記カラオケデータに含まれる映像信号をディスプレイに出力するか否かを制御する。これにより、映像の記録が禁止されている場合に、当該映像が記録されることを効率的に防止することができる。 According to the karaoke apparatus, whether to output the video signal included in the karaoke data to the display is controlled according to the control flag for the karaoke data to be reproduced and the result of the image processing. Thereby, when video recording is prohibited, it is possible to efficiently prevent the video from being recorded.

更に、上記カラオケ装置によれば、再生するカラオケデータに対する制御フラグ及び画像処理の結果に応じて、前記カラオケデータに含まれる歌詞テロップや背景映像をディスプレイに出力するか否かを制御する。これにより、歌詞テロップや背景映像の記録が禁止されている場合に、当該歌詞テロップや背景映像が記録されることを効率的に防止することができる。 Further, according to the karaoke apparatus, whether to output the lyrics telop or the background video included in the karaoke data to the display is controlled according to the control flag for the karaoke data to be reproduced and the result of the image processing. Thereby, when the recording of the lyrics telop and the background video is prohibited, it is possible to efficiently prevent the lyrics telop and the background video from being recorded.

本発明の一側面である請求項２に係る発明は、請求項１のカラオケ装置において、前記結果信号は、前記カメラによって撮影された映像信号の中に前記カラオケデータに含まれる映像信号が含まれるか否かを示すものであることを特徴とする。 The invention according to claim 2 which is an aspect of the present invention is the karaoke apparatus according to claim 1 , wherein the result signal includes a video signal included in the karaoke data in a video signal photographed by the camera. It is characterized by indicating whether or not.

上記カラオケ装置によれば、前記カメラによって撮影された映像信号の中に前記カラオケデータに含まれる映像信号が含まれるか否かの情報を利用して、前記カラオケデータに含まれる映像信号をディスプレイに出力するか否かを制御する。これにより、映像の記録が禁止されている場合に、当該映像が記録されることを効率的に防止することができる。 According to the karaoke apparatus, the video signal included in the karaoke data is displayed on the display using the information on whether or not the video signal included in the karaoke data is included in the video signal photographed by the camera. Controls whether to output. Thereby, when video recording is prohibited, it is possible to efficiently prevent the video from being recorded.

本発明の一側面である請求項３に係る発明は、請求項１または請求項２のカラオケ装置において、前記制御フラグは、前記カラオケデータに含まれる映像信号の記録を許可するか否かを示すものであり、前記映像出力制御手段は、前記制御フラグ及び前記比較信号に基いて、前記カラオケデータに含まれる映像信号が前記カメラによって撮影されており、かつ、当該映像信号の記録が禁止されていると判断したときに、当該禁止されている映像信号を前記ディスプレイに出力しないことを特徴とする。 According to a third aspect of the present invention which is one aspect of the present invention, in the karaoke apparatus according to the first or second aspect, the control flag indicates whether or not recording of a video signal included in the karaoke data is permitted. The video output control means is based on the control flag and the comparison signal, and the video signal included in the karaoke data is captured by the camera, and recording of the video signal is prohibited. When it is determined that there is a video signal, the prohibited video signal is not output to the display.

上記カラオケ装置によれば、制御フラグ及び結果信号に基いて、カラオケデータに含まれる映像信号がカメラによって撮影され、かつ、当該映像信号の記録が禁止されていると判断したときに、当該禁止されている映像信号を前記ディスプレイに出力しない。これにより、記録が禁止されている映像が記録されることを効率的に防止することができる。 According to the karaoke apparatus, the video signal included in the karaoke data is captured by the camera based on the control flag and the result signal, and the video signal is prohibited when recording is determined to be prohibited. The video signal is not output to the display. As a result, it is possible to efficiently prevent the recording of the prohibited video.

本発明の一側面である請求項４に係る発明は、コマンダ及びセットトップボックスからなるカラオケシステムであって、前記セットトップボックスは、カメラに接続され、前記カメラが撮影した映像信号を記憶する記憶手段を有し、前記コマンダは、ディスプレイに接続され、カラオケデータに含まれる映像信号を前記ディスプレイに出力可能であり、前記ディスプレイに出力された映像信号を、前記セットトップボックスに出力し、さらに、前記セットトップボックスは、前記カメラが撮影した映像信号に前記コマンダが出力した映像信号が含まれるか否かを判断し、該判断結果を結果信号として出力し、前記コマンダは、前記結果信号を受信したときに、前記カラオケデータに対する制御フラグを取得し、前記制御フラグ及び前記結果信号に基いて、前記カラオケデータに含まれる映像信号が前記カメラによって撮影されており、かつ、当該映像信号の記録が禁止されていると判断したときに、当該禁止されている映像信号を前記ディスプレイに出力しないことを特徴とする。 The invention according to claim 4 , which is an aspect of the present invention, is a karaoke system including a commander and a set-top box, and the set-top box is connected to a camera and stores a video signal captured by the camera The commander is connected to a display and can output a video signal included in karaoke data to the display, and outputs the video signal output to the display to the set top box; The set top box determines whether the video signal captured by the camera includes the video signal output by the commander, and outputs the determination result as a result signal. The commander receives the result signal. A control flag for the karaoke data is acquired, and the control flag and the result signal are acquired. When the video signal included in the karaoke data is captured by the camera and it is determined that recording of the video signal is prohibited, the prohibited video signal is displayed on the display. It is characterized by not outputting.

上記カラオケシステムによれば、制御フラグ及び結果信号に基いて、カラオケデータに含まれる映像信号がカメラによって撮影され、かつ、当該映像信号の記録が禁止されていると判断したときに、当該禁止されている映像信号を前記ディスプレイに出力しない。これにより、記録が禁止されている映像が記録されることを効率的に防止することができる。さらに、コマンダに対し、セットトップボックスを外部接続することができるため、既存のコマンダを利用することができる。 According to the karaoke system, the video signal included in the karaoke data is captured by the camera based on the control flag and the result signal, and the video signal is prohibited when recording is determined to be prohibited. The video signal is not output to the display. As a result, it is possible to efficiently prevent the recording of the prohibited video. Furthermore, since the set top box can be externally connected to the commander, an existing commander can be used.

本発明の一側面である請求項５に係る発明は、ディスプレイに接続され、カラオケデータに含まれる映像信号を前記ディスプレイに出力可能であり、前記ディスプレイに出力された映像信号を、カラオケシステムを構成するセットトップボックスに出力し、前記セットトップボックスからの結果信号を受信したときに、前記カラオケデータに対する制御フラグを取得し、前記制御フラグ及び前記結果信号に基いて、前記カラオケデータに含まれる映像信号が前記カメラによって撮影されており、かつ、当該映像信号の記録が禁止されていると判断したときに、当該禁止されている映像信号を前記ディスプレイに出力しないように制御するコマンダに接続され、前記カラオケシステムを構成するセットトップボックスにおいて、カメラに接続され、前記カメラが撮影した映像信号を記憶する記憶手段を有し、前記カメラが撮影した映像信号に前記コマンダが出力した映像信号が含まれるか否かを判断し、該判断結果を前記結果信号として前記コマンダに出力する、ことを特徴とする。 The invention according to claim 5 , which is one aspect of the present invention, is connected to a display and can output a video signal included in karaoke data to the display, and the video signal output to the display constitutes a karaoke system. When the result signal from the set top box is received, the control flag for the karaoke data is acquired, and the video included in the karaoke data is obtained based on the control flag and the result signal. When a signal is captured by the camera and it is determined that recording of the video signal is prohibited, it is connected to a commander that controls not to output the prohibited video signal to the display, in the set-top box constituting the karaoke system, it is connected to the camera , Having a storage means for storing a video signal taken by the camera, judging whether the video signal taken by the commander is included in the video signal taken by the camera, and using the judgment result as the result signal It outputs to the said commander, It is characterized by the above-mentioned.

上記セットトップボックスによれば、前記カメラが撮影した映像信号に前記コマンダが出力した映像信号が含まれるか否かを判断し、該判断結果を結果信号として前記コマンダに出力する。これにより、コマンダを介してディスプレイへの映像信号の制御を行うことができる。さらに、コマンダに対し、セットトップボックスを外部接続することができるため、既存のコマンダを利用することができる。 According to the set top box, it is determined whether or not the video signal captured by the camera includes the video signal output by the commander, and the determination result is output to the commander as a result signal. Thereby, the video signal to the display can be controlled via the commander. Furthermore, since the set top box can be externally connected to the commander, an existing commander can be used.

本発明によれば、記録が禁止されているカラオケコンテンツを用いた場合であっても、歌唱者の歌唱の様子を撮影し映像として記録することができるので、カラオケ事業におけるサービスの多様化・充実化を図ることが可能となる。 According to the present invention, even when using karaoke content for which recording is prohibited, it is possible to shoot a singer's state of singing and record it as a video, so the diversification and enhancement of services in the karaoke business Can be achieved.

以下、本発明の一実施形態について説明する。 Hereinafter, an embodiment of the present invention will be described.

（システム構成）
図１は、本発明の一実施形態におけるカラオケシステムのネットワーク構成を示した図である。
本実施形態のカラオケシステムは、各地のカラオケ店舗等に設置されたカラオケ装置１００と、通信網と、サーバ６００と、基本的に構成される。
カラオケ装置１００は、カラオケ店舗の客室ごとに設置されている。
カラオケ装置１００とサーバ６００とは、例えば、カラオケ店舗内に設置されるルータを介して、通信網によって接続される。ここで、通信網としては、有線、無線、併用どのような形態でもよく、また、インターネットを利用したＶＰＮ（Virtual Private Network）であってもよい。 (System configuration)
FIG. 1 is a diagram showing a network configuration of a karaoke system in an embodiment of the present invention.
The karaoke system of the present embodiment basically includes a karaoke apparatus 100 installed in karaoke stores and the like in various places, a communication network, and a server 600.
The karaoke apparatus 100 is installed for each guest room of the karaoke store.
The karaoke apparatus 100 and the server 600 are connected by a communication network through a router installed in a karaoke store, for example. Here, the communication network may be wired, wireless, or any combination, or may be a VPN (Virtual Private Network) using the Internet.

（サーバの構成）
まず、サーバ６００について説明する。
サーバ６００は、カラオケデータベース６１０、動画データベース６２０を有している。カラオケデータベース６１０には、カラオケ楽曲の再生に用いられるカラオケデータが記憶されている。カラオケデータには、カラオケ楽曲の生成起源となる楽音データ、歌詞テロップ、カラオケ楽曲の再生中に表示される背景映像（動画、静止画）の生成起源となる背景データが含まれる。また、カラオケデータベース６１０に記憶されているカラオケデータは、各カラオケ店舗に配信される。 (Server configuration)
First, the server 600 will be described.
The server 600 has a karaoke database 610 and a moving image database 620. The karaoke database 610 stores karaoke data used for reproducing karaoke music. The karaoke data includes musical sound data that is a generation origin of karaoke music, lyrics telop, and background data that is a generation origin of a background video (moving image, still image) that is displayed during playback of the karaoke music. The karaoke data stored in the karaoke database 610 is distributed to each karaoke store.

動画データベース６２０には、カラオケ装置１００からアップロードされた撮影データ（後述）が記憶されている。また、動画データベース６２０は、所定の条件によりパソコン等からもアクセスすることができる。 The moving image database 620 stores shooting data (described later) uploaded from the karaoke apparatus 100. The moving image database 620 can also be accessed from a personal computer or the like under predetermined conditions.

（カラオケ装置の構成）
次に、カラオケ装置１００について説明する。
カラオケ装置１００は、カラオケ店舗の各客室に設置される。
カラオケ装置１００は、コマンダ２００、ＳＴＢ（セットトップボックス、Set Top Box）３００、カメラ４１０、ディスプレイ４２１、ディスプレイ４２２、マイク４３０、アンプ４４０、スピーカ４５０、リモコン５００、から構成されている。 (Composition of karaoke equipment)
Next, the karaoke apparatus 100 will be described.
The karaoke apparatus 100 is installed in each guest room of the karaoke store.
The karaoke apparatus 100 includes a commander 200, an STB (Set Top Box) 300, a camera 410, a display 421, a display 422, a microphone 430, an amplifier 440, a speaker 450, and a remote controller 500.

リモコン５００は、ＣＰＵ、ＲＯＭ、ＲＡＭ、表示部、操作部、赤外線通信Ｉ／Ｆ、電波通信Ｉ／Ｆ、から基本的に構成される。 The remote controller 500 basically includes a CPU, ROM, RAM, display unit, operation unit, infrared communication I / F, and radio wave communication I / F.

リモコン５００のＣＰＵは、種々のプログラムを実行する。リモコン５００のＲＯＭは、種々のデータを記憶する。リモコン５００のＲＡＭは、種々のデータを一時的に記憶する。リモコン５００の表示部は、種々の情報を表示する。リモコン５００の操作部は、表示部の表面にタッチパネルとして実現することができ、ユーザがリモコン５００を操作する際に用いられる。リモコン５００の赤外線通信Ｉ／Ｆ及び電波通信Ｉ／Ｆは、コマンダ２００との通信の際に用いられる。リモコン５００で受け付けた各種操作信号は、コマンダ２００に送信される。 The CPU of the remote controller 500 executes various programs. The ROM of the remote controller 500 stores various data. The RAM of the remote controller 500 temporarily stores various data. The display unit of the remote controller 500 displays various information. The operation unit of the remote controller 500 can be realized as a touch panel on the surface of the display unit, and is used when the user operates the remote controller 500. The infrared communication I / F and radio wave communication I / F of the remote controller 500 are used when communicating with the commander 200. Various operation signals received by the remote controller 500 are transmitted to the commander 200.

コマンダ２００は、ＣＰＵ、ＲＯＭ、ＲＡＭ、赤外線通信Ｉ／Ｆ、電波通信Ｉ／Ｆ、補助記憶手段映像再生手段、音声再生手段、から基本的に構成される。 The commander 200 basically includes a CPU, a ROM, a RAM, an infrared communication I / F, a radio wave communication I / F, auxiliary storage means, video reproduction means, and audio reproduction means.

コマンダ２００のＣＰＵは、種々のプログラムを実行する。コマンダ２００のＲＯＭは、種々のデータを記憶する。コマンダ２００のＲＡＭは、種々のデータを一時的に記憶する。コマンダ２００の赤外線通信Ｉ／Ｆ及び電波通信Ｉ／Ｆは、リモコン５００との通信の際に用いられる。また、種々の情報がコマンダ２００からリモコン５００に送信される。 The CPU of the commander 200 executes various programs. The ROM of the commander 200 stores various data. The RAM of the commander 200 temporarily stores various data. The infrared communication I / F and radio wave communication I / F of the commander 200 are used when communicating with the remote controller 500. Various information is transmitted from the commander 200 to the remote controller 500.

リモコン５００及びコマンダ２００の赤外線通信Ｉ／Ｆは、赤外線を媒体とする無線通信（以下、「赤外線通信」という。）を行うためのインタフェースである。
リモコン５００及びコマンダ２００の電波通信Ｉ／Ｆは、電波を媒体とする無線通信（以下、「電波通信」という。）を行うためのインタフェースである。 The infrared communication I / F of the remote controller 500 and the commander 200 is an interface for performing wireless communication using infrared as a medium (hereinafter referred to as “infrared communication”).
The radio communication I / F of the remote controller 500 and the commander 200 is an interface for performing radio communication using radio waves as a medium (hereinafter referred to as “radio wave communication”).

また、リモコン５００及びコマンダ２００の電波通信Ｉ／Ｆを用いることにより、ホストとの間で種々の情報を送受信することも可能である。
また、リモコン５００及びコマンダ２００とは、アクセスポイントを介して無線通信を行ってもよい。また、赤外線通信と無線通信とは、送受信される情報の種類等に応じて適宜切り替えて用いることができる。 Further, by using the radio communication I / F of the remote controller 500 and the commander 200, various information can be transmitted and received with the host.
The remote controller 500 and the commander 200 may perform wireless communication via an access point. Infrared communication and wireless communication can be switched appropriately according to the type of information to be transmitted and received.

また、リモコン５００及びコマンダ２００がイーサネット（登録商標）等で接続されている場合は、それぞれの機器に対して固有のＩＰアドレスが付されている。また、ＩＰアドレスは、それぞれの機器が有する識別番号及び所定の生成式に基いて算出することができる。 When the remote controller 500 and the commander 200 are connected by Ethernet (registered trademark) or the like, a unique IP address is assigned to each device. Further, the IP address can be calculated based on the identification number of each device and a predetermined generation formula.

なお、複数のリモコン５００が、コマンダ２００と通信可能となるように構成してもよい。 A plurality of remote controllers 500 may be configured to be communicable with the commander 200.

コマンダ２００の補助記憶手段には、例えば、楽曲の再生に必要な音声データ（楽音信号）及び映像データ等が記憶される。また、コマンダ２００の補助記憶手段には、ゲーム等のアプリケーションデータが記憶される。これらのデータは、サーバ６００のカラオケデータベース６１０からダウンロードすることができる。また、ダウンロードには、図示しないルータを用いてもよい。 The auxiliary storage means of the commander 200 stores, for example, audio data (musical sound signal) and video data necessary for music reproduction. The auxiliary storage means of the commander 200 stores application data such as games. These data can be downloaded from the karaoke database 610 of the server 600. Further, a router (not shown) may be used for downloading.

コマンダ２００の映像音声再生手段は、楽曲の再生及び映像の再生を行う。また、図示しないホストから送信されたデータに基いてストリーミング再生を行うことも可能である。 The video / audio playback means of the commander 200 performs playback of music and playback of video. It is also possible to perform streaming playback based on data transmitted from a host (not shown).

また、リクエストされた楽曲は、リクエスト毎にサーバ６００のカラオケデータベース６１０からダウンロードしてもよく、また、ホストまたはコマンダ２００に一時的に記憶しておくように構成してもよい。また、一度ダウンロードした楽曲を所定時間のみ記憶するようにしてもよい。 The requested music may be downloaded from the karaoke database 610 of the server 600 for each request, or may be configured to be temporarily stored in the host or the commander 200. Moreover, the music downloaded once may be stored only for a predetermined time.

マイク４３０は、コマンダ２００に接続されている。歌唱者は、マイク４３０を用いてカラオケ歌唱を行う。マイク４３０に入力されたマイク音声信号は、コマンダ２００に入力される。なお、マイク４３０の個数は適宜設定可能である。
コマンダ２００は、楽音信号とマイク４３０からのマイク音声信号を混合し、混合した音声信号（以下、「混合音声信号」という。）を所定の機器に出力することができる。また、マイク４３０からのマイク音声信号を、所定の機器に出力することができる。 The microphone 430 is connected to the commander 200. The singer performs karaoke singing using the microphone 430. The microphone audio signal input to the microphone 430 is input to the commander 200. The number of microphones 430 can be set as appropriate.
The commander 200 can mix the musical sound signal and the microphone audio signal from the microphone 430 and output the mixed audio signal (hereinafter referred to as “mixed audio signal”) to a predetermined device. Further, the microphone audio signal from the microphone 430 can be output to a predetermined device.

アンプ４４０は、コマンダ２００に接続されている。アンプ４４０は、コマンダ２００から出力された音声信号を増幅する。
スピーカ４５０は、アンプ４４０に接続されている。スピーカ４５０は、アンプ４４０で増幅された音声信号を出力する。 The amplifier 440 is connected to the commander 200. The amplifier 440 amplifies the audio signal output from the commander 200.
The speaker 450 is connected to the amplifier 440. The speaker 450 outputs the audio signal amplified by the amplifier 440.

ディスプレイ４２１、４２２は、コマンダ２００に接続されている。コマンダ２００が出力した映像信号がディスプレイ４２１、４２２に表示される。コマンダ２００から出力される映像信号については後述する。 The displays 421 and 422 are connected to the commander 200. The video signal output from the commander 200 is displayed on the displays 421 and 422. The video signal output from the commander 200 will be described later.

ＳＴＢ３００は、ＣＰＵ、エンコーダ３１０、記憶手段３２０、画像処理部を有している。ＳＴＢ３００のＣＰＵは、ＳＴＢ３００全体を制御する。ＳＴＢ３００の画像処理部の詳細については後述する。 The STB 300 includes a CPU, an encoder 310, a storage unit 320, and an image processing unit. The CPU of the STB 300 controls the entire STB 300. Details of the image processing unit of the STB 300 will be described later.

ＳＴＢ３００は、コマンダ２００に接続されている。ＳＴＢ３００は、コマンダ２００に外部接続装置として機能する。すなわち、既存のコマンダ２００に対し、ＳＴＢ３００を接続することで本発明を実現することができる。
コマンダ２００とＳＴＢ３００とは、制御線を介して接続されており、種々の制御信号を用いて互いの機器を制御することができる。 The STB 300 is connected to the commander 200. The STB 300 functions as an external connection device for the commander 200. That is, the present invention can be realized by connecting the STB 300 to the existing commander 200.
The commander 200 and the STB 300 are connected via a control line, and can control each other's devices using various control signals.

コマンダ２００は、ＳＴＢ３００に、マイク音声信号や混合音声信号を出力することができる。 The commander 200 can output a microphone audio signal or a mixed audio signal to the STB 300.

カメラ４１０は、ＳＴＢ３００に接続されている。カメラ４１０が撮影したカメラ信号は、ＳＴＢ３００に入力される。また、ＳＴＢ３００とカメラ４１０とは制御線を介して接続されており、ＳＴＢ３００は、カメラ４１０のＯＮ／ＯＦＦ制御を行うことができる。
また、ＳＴＢ３００は、コマンダ２００に、カメラ４１０からのカメラ信号を出力することができる。 The camera 410 is connected to the STB 300. Camera signals captured by the camera 410 are input to the STB 300. The STB 300 and the camera 410 are connected via a control line, and the STB 300 can perform ON / OFF control of the camera 410.
Further, the STB 300 can output the camera signal from the camera 410 to the commander 200.

ＳＴＢ３００は、コマンダ２００から受信したマイク音声信号や混合音声信号と、カメラ信号とをエンコーダ３１０によってエンコードすることができる（以下、エンコードされたデータを、「撮影データ」という。）。また、撮影データは、記憶手段３２０に記憶される。
また、ＳＴＢ３００は、コマンダ２００に、撮影データを出力することができる。 The STB 300 can encode the microphone audio signal or the mixed audio signal received from the commander 200 and the camera signal by the encoder 310 (hereinafter, the encoded data is referred to as “photographing data”). Further, the photographing data is stored in the storage unit 320.
In addition, the STB 300 can output shooting data to the commander 200.

記憶手段３２０に記憶された撮影データは、サーバ６００の動画データベース６２０にアップロードされる。また、撮影データのアップロードに用いるルータは、カラオケデータをダウンロードする際に用いるルータと別個に構成してもよい。 The shooting data stored in the storage unit 320 is uploaded to the moving image database 620 of the server 600. The router used for uploading the shooting data may be configured separately from the router used when downloading karaoke data.

（コマンダ、ＳＴＢの内部構成）
次に、コマンダ２００及びＳＴＢ３００の内部構成（映像信号及び音声信号に係る部分）について説明する。
図２は、コマンダ及びＳＴＢの内部構成（映像信号及び音声信号に関する部分）の模式図である。
なお、図２においては、説明の便宜上、背景映像、歌詞テロップ、楽音信号をコマンダ２００内に記憶する構成としているが、これらの一部または全部を、ストリーミング再生するものとして構成してもよい。 (Commander, STB internal structure)
Next, the internal configurations of the commander 200 and the STB 300 (portions relating to video signals and audio signals) will be described.
FIG. 2 is a schematic diagram of the internal configuration of the commander and STB (parts related to video signals and audio signals).
In FIG. 2, for convenience of explanation, the background video, the lyrics telop, and the musical tone signal are stored in the commander 200, but some or all of them may be configured to be streamed.

図２に示すように、コマンダ２００は、スイッチ２０１〜２０７を有している。 As shown in FIG. 2, the commander 200 has switches 201 to 207.

スイッチ２０１がＯＮとなると、背景映像がディスプレイ４２１に出力される。スイッチ２０２がＯＮとなると、歌詞テロップがディスプレイ４２１に出力される。スイッチ２０３がＯＮとなると、ＳＴＢ３００から送信されたカメラ信号が出力される。すなわち、スイッチ２０１〜２０３を切り換えることにより、ディスプレイ４２１に表示させる映像信号を制御することができる。また、各スイッチの制御は、図示しないＣＰＵによって行われる。 When the switch 201 is turned on, the background video is output to the display 421. When the switch 202 is turned on, the lyrics telop is output to the display 421. When the switch 203 is turned on, the camera signal transmitted from the STB 300 is output. That is, the video signal displayed on the display 421 can be controlled by switching the switches 201 to 203. Each switch is controlled by a CPU (not shown).

スイッチ２０４がＯＮとなると、背景映像がディスプレイ４２２に出力される。スイッチ２０５がＯＮとなると、歌詞テロップがディスプレイ４２２に出力される。スイッチ２０６がＯＮとなると、ＳＴＢ３００から送信されたカメラ信号が出力される。すなわち、スイッチ２０４〜２０６を切り換えることにより、ディスプレイ４２１に表示させる映像信号を制御することができる。また、各スイッチの制御は、図示しないＣＰＵによって行われる。 When the switch 204 is turned on, the background video is output to the display 422. When the switch 205 is turned on, the lyrics telop is output to the display 422. When the switch 206 is turned on, the camera signal transmitted from the STB 300 is output. That is, the video signal displayed on the display 421 can be controlled by switching the switches 204 to 206. Each switch is controlled by a CPU (not shown).

スイッチ２０７がＯＮとなると、マイク音声信号に楽音信号が混合され、混合音声信号が、ＳＴＢ３００に出力される。
なお、楽音信号や混合音声信号は、アンプ４４０にも出力される。 When the switch 207 is turned on, the musical sound signal is mixed with the microphone audio signal, and the mixed audio signal is output to the STB 300.
Note that the musical sound signal and the mixed sound signal are also output to the amplifier 440.

図２に示すように、ＳＴＢ３００は、エンコーダ３１０、記憶手段３２０を有している。エンコーダ３１０には、カメラ４１０からのカメラ信号、及び、コマンダ２００からの音声信号（マイク音声信号や混合音声信号）をエンコードし、撮影データを作成する。ここで、撮影データのフォーマットは適宜選択することができ、例えば、ＡＶＩフォーマットとすることができる。エンコードされた撮影データは、記憶手段３２０に記憶される。これにより、カメラ４１０からのカメラ信号、及び、コマンダ２００からの音声信号（マイク音声信号や混合音声信号）は、ＳＴＢ３００によってキャプチャされることになる。 As shown in FIG. 2, the STB 300 includes an encoder 310 and a storage unit 320. The encoder 310 encodes a camera signal from the camera 410 and an audio signal (a microphone audio signal or a mixed audio signal) from the commander 200 to create shooting data. Here, the format of the shooting data can be selected as appropriate, for example, the AVI format. The encoded photographing data is stored in the storage unit 320. Thereby, the camera signal from the camera 410 and the audio signal (microphone audio signal or mixed audio signal) from the commander 200 are captured by the STB 300.

記憶手段３２０に記憶された撮影データは、ネットワークを介してサーバ６００の動画データベース６２０にアップロードされる。また、記憶手段３２０に記憶された撮影データは、コマンダ２００を介してディスプレイ４２１、４２２に表示することができる（なお、図２においては、撮影データがディスプレイ４２１、４２２に表示されるための経路は省略してある。）。 The shooting data stored in the storage unit 320 is uploaded to the moving image database 620 of the server 600 via the network. In addition, the shooting data stored in the storage unit 320 can be displayed on the displays 421 and 422 via the commander 200 (in FIG. 2, the path for displaying the shooting data on the displays 421 and 422). Is omitted.)

なお、上記内部構成は単なる一例である。また、本発明は、上述した内部構成と均等な内部構成で実現することができることはいうまでもない。 The above internal configuration is merely an example. It goes without saying that the present invention can be realized with an internal configuration equivalent to the internal configuration described above.

（コマンダとＳＴＢの処理の関係）
次に、コマンダ２００とＳＴＢ３００の処理の関係について説明する。図３は、コマンダ２００とＳＴＢ３００の処理の関係を示した説明図である。 (Relationship between Commander and STB processing)
Next, the relationship between the process of the commander 200 and the STB 300 will be described. FIG. 3 is an explanatory diagram showing the relationship between the process of the commander 200 and the STB 300.

コマンダ２００は、ユーザから楽曲再生の指示及び撮影の指示を受けると、ＳＴＢ３００に対し、起動指示信号を送信する（１）。
ＳＴＢ３００は、上記起動指示信号を受信すると、キャプチャを行うためのアプリケーションの起動を行う（２）。 When the commander 200 receives a music playback instruction and a shooting instruction from the user, the commander 200 transmits an activation instruction signal to the STB 300 (1).
Upon receiving the activation instruction signal, the STB 300 activates an application for capturing (2).

コマンダ２００は、上記起動指示信号を送信したあと、オープニング動画再生を行う（３）。ここで、オープニング動画再生とは、今から始まるカメラ撮影の説明映像などの映像再生をいう。
このとき、ＳＴＢ３００からカメラ信号が出力される。 The commander 200 performs the opening moving image reproduction after transmitting the activation instruction signal (3). Here, the opening video playback refers to video playback such as an explanation video of camera shooting starting from now.
At this time, a camera signal is output from the STB 300.

コマンダ２００は、ディスプレイ４２１、４２２に対する出力映像を制御する（４）。具体的には、ユーザによって指定された設定情報（背景映像＋歌詞テロップ、歌詞テロップのみ、背景映像のみ、いずれもオフ）に基いて、スイッチ２０１〜２０６を制御する。 The commander 200 controls the output video to the displays 421 and 422 (4). Specifically, the switches 201 to 206 are controlled based on setting information designated by the user (background video + lyric telop, only lyrics telop, only background video, all off).

コマンダ２００は、ＳＴＢ３００に対し、キャプチャ開始指示信号を送信する（５）。
また、コマンダ２００は、楽曲再生を開始する。このとき、マイク音声信号及び楽音信号がＳＴＢ３００に出力される。 The commander 200 transmits a capture start instruction signal to the STB 300 (5).
Further, the commander 200 starts playing the music. At this time, a microphone sound signal and a musical sound signal are output to the STB 300.

ＳＴＢ３００は、コマンダ２００から出力された音声信号（マイク音声信号及び楽音信号）とカメラ４１０から出力されたカメラ信号をエンコードして撮影データを作成し、作成した撮影データを記憶手段３２０に記憶する。すなわち、音声信号及びカメラ信号をキャプチャする（７）。 The STB 300 encodes the audio signal (microphone audio signal and musical tone signal) output from the commander 200 and the camera signal output from the camera 410 to create shooting data, and stores the generated shooting data in the storage unit 320. That is, the audio signal and the camera signal are captured (7).

コマンダ２００は、楽曲の再生が終了すると、ＳＴＢ３００に対し、キャプチャ終了指示信号を送信する（８）。
コマンダ２００は、リモコン５００の表示部に、選択画面を表示させる（９）。
図４は、選択画面の表示例を示している。 When the reproduction of the music ends, the commander 200 transmits a capture end instruction signal to the STB 300 (8).
The commander 200 displays a selection screen on the display unit of the remote controller 500 (9).
FIG. 4 shows a display example of the selection screen.

図４に示すように、選択画面上には、撮影（キャプチャ）が終了したことを示すメッセージ、及び、撮影データに対する動作指示のための選択肢（ボタン）が表示される。
コマンダ２００は、ＳＴＢ３００に対し、選択された選択肢に対応する動作指示信号を送信する（１０）。
ＳＴＢ３００は、受信した動作指示信号に基いた動作を行う（１１）。 As shown in FIG. 4, a message indicating that shooting (capture) has ended and options (buttons) for operating instructions for shooting data are displayed on the selection screen.
The commander 200 transmits an operation instruction signal corresponding to the selected option to the STB 300 (10).
The STB 300 performs an operation based on the received operation instruction signal (11).

図４に示した選択画面において、「再生」が選択されると、コマンダ２００は、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データを要求する信号」を送信する。
これにより、ＳＴＢ３００は、コマンダ２００に対し、記憶手段３２０に記憶している撮影データを送信する。送信された撮影データは、ディスプレイ４２１等に表示される。すなわち、撮影データが、コマンダ２００側において再生される。なお、撮影データの再生中において、リモコン５００の表示部上において、当該撮影データの再生を停止させるための停止ボタンを表示させてもよい。 When “playback” is selected on the selection screen shown in FIG. 4, the commander 200 transmits a “signal for requesting shooting data stored in the storage unit 320” to the STB 300.
As a result, the STB 300 transmits the shooting data stored in the storage unit 320 to the commander 200. The transmitted shooting data is displayed on the display 421 or the like. That is, the shooting data is reproduced on the commander 200 side. Note that a stop button for stopping the reproduction of the photographic data may be displayed on the display unit of the remote controller 500 during the reproduction of the photographic data.

また、図４に示した選択画面において、「アップロード」が選択されると、コマンダ２００は、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データをサーバ６００の動画データベース６２０にアップロードさせることを要求する信号」を送信する。これにより、ＳＴＢ３００は、撮影データを、動画データベース６２０にアップロードする。
その後、当該撮影データを、記憶手段３２０から削除する。 When “upload” is selected on the selection screen shown in FIG. 4, the commander 200 causes the STB 300 to “upload the shooting data stored in the storage unit 320 to the moving image database 620 of the server 600. "Signal requesting" is transmitted. Thereby, the STB 300 uploads the shooting data to the moving image database 620.
Thereafter, the image data is deleted from the storage unit 320.

また、図４に示した選択画面において、「消去」が選択されると、コマンダ２００は、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データを削除させることを要求する信号」を送信する。これにより、ＳＴＢ３００は、撮影データを、記憶手段３２０から削除する。 When “Erase” is selected on the selection screen shown in FIG. 4, the commander 200 transmits a “signal for requesting deletion of shooting data stored in the storage unit 320” to the STB 300. To do. As a result, the STB 300 deletes the shooting data from the storage unit 320.

（歌唱態様、及び、表示・記憶される内容）
次に、上述したカラオケ装置１００を用いた歌唱態様について説明する。図５は、歌唱態様を示した説明図である。図５に示すように、歌唱者は、ディスプレイ４２２を見ながらカラオケ歌唱を行う。このとき、ディスプレイ４２２には、歌詞テロップ及び背景映像が表示される。 (Singing mode and contents displayed / stored)
Next, the singing aspect using the karaoke apparatus 100 mentioned above is demonstrated. FIG. 5 is an explanatory diagram showing a singing mode. As shown in FIG. 5, the singer performs karaoke singing while viewing the display 422. At this time, the lyrics telop and the background video are displayed on the display 422.

また、カメラ４１０が、歌唱者を撮影可能な位置に配置されている。なお、カメラ４１０は自由に移動させることができる。
なお、図５に示したカラオケ装置の外観は単なる一例であり、本発明は、当該外観を有するカラオケ装置に限定されるものではない。また、図５においては、配線の一部を省略してある。なお、図５では、ディスプレイの数を２つとしているが、ディスプレイ４２２を省略することもできる。 Moreover, the camera 410 is arrange | positioned in the position which can image | photograph a song person. The camera 410 can be moved freely.
The appearance of the karaoke apparatus shown in FIG. 5 is merely an example, and the present invention is not limited to the karaoke apparatus having the appearance. In FIG. 5, a part of the wiring is omitted. In FIG. 5, the number of displays is two, but the display 422 may be omitted.

図６は、背景映像及び歌詞テロップの表示例を示した図である。ディスプレイ４２１、４２２には、図６に示した内容を表示させることができる。 FIG. 6 is a diagram showing a display example of background video and lyrics telop. The contents shown in FIG. 6 can be displayed on the displays 421 and 422.

図７は、カメラ４１０で撮影された映像の一例を示した図である。図５で示した歌唱態様においては、図７に示すように、歌唱者及びディスプレイ４２１等が撮影される。ＳＴＢ３００は、図７に示した内容を記憶することができる。 FIG. 7 is a diagram illustrating an example of an image captured by the camera 410. In the singing mode shown in FIG. 5, as shown in FIG. 7, the singer and the display 421 are photographed. The STB 300 can store the contents shown in FIG.

図８は、カメラ４１０で撮影された映像に歌詞テロップを合成した映像の一例を示した図である。図８に示す映像は、カメラ４１０で撮影された映像（図７）に歌詞テロップを合成したものである。ディスプレイ４２１、４２２には、図８に示した内容を表示させることができる。 FIG. 8 is a diagram illustrating an example of a video in which a lyrics telop is combined with a video shot by the camera 410. The video shown in FIG. 8 is a combination of the lyrics telop with the video (FIG. 7) taken by the camera 410. The contents shown in FIG. 8 can be displayed on the displays 421 and 422.

図９は、背景映像及び歌詞テロップに歌唱者映像を合成した映像の一例を示した図である。図９に示す映像は、カメラ４１０で撮影した映像から歌唱者の部分を抽出し、抽出した映像を、背景映像及び歌詞テロップ上に合成したものである。ディスプレイ４２１、４２２には、図９に示した内容を表示させることができる。なお、歌唱者の部分のみを抽出するための画像処理は、ＳＴＢ３００またはコマンダ２００において実行される。当該画像処理は公知であるので、説明を省略する。 FIG. 9 is a diagram illustrating an example of a video in which a singer video is combined with a background video and a lyrics telop. The video shown in FIG. 9 is obtained by extracting the singer's part from the video shot by the camera 410 and synthesizing the extracted video on the background video and the lyrics telop. The contents shown in FIG. 9 can be displayed on the displays 421 and 422. Note that image processing for extracting only the singer's part is executed in the STB 300 or the commander 200. Since the image processing is publicly known, description thereof is omitted.

（背景映像、歌詞テロップに対する記憶の制限）
カラオケデータに含まれる背景映像、歌詞テロップについては、カラオケ歌唱のための「再生」は許可されているが、「記憶」が禁止されているものが存在する。ここで、上述した歌唱態様（図５参照）においては、カメラ４１０が撮影する映像に、背景映像、歌詞テロップが映ることが想定される（図７参照）。 (Restriction of memory for background video and lyrics telop)
Regarding the background video and lyrics telop included in the karaoke data, “reproduction” for karaoke singing is permitted, but “memory” is prohibited. Here, in the above-described singing mode (see FIG. 5), it is assumed that the background video and the lyrics telop are reflected in the video taken by the camera 410 (see FIG. 7).

カメラ４１０に、記憶が禁止されている背景映像、歌詞テロップが映っていることを検出した場合には、当該カメラ４１０に映っているディスプレイへの当該背景映像、歌詞テロップの表示を停止させる必要がある。
本実施形態においては、「カメラ信号」、及び、「背景映像の記憶を許可するか否かを示す情報、歌詞テロップの記憶を許可するか否かを示す情報」に基いて、ディスプレイ４２１、４２２への出力映像を制御する。 When it is detected that a background video or lyrics telop that is prohibited from being stored is displayed on the camera 410, the display of the background video or lyrics telop on the display shown on the camera 410 needs to be stopped. is there.
In the present embodiment, the displays 421 and 422 are based on the “camera signal” and “information indicating whether or not to allow storage of background video and information indicating whether or not to store lyrics telop”. Control the output video to.

例えば、
（１）背景映像の記憶が禁止されている、及び、
（２）カメラ信号にカメラ４２１に出力された背景映像が含まれている、
という２つの条件を満たしていると判断した場合、コマンダ２００は、ディスプレイ４２１への背景映像の出力を停止する。 For example,
(1) Background image storage is prohibited, and
(2) The background image output to the camera 421 is included in the camera signal.
When it is determined that the two conditions are satisfied, the commander 200 stops outputting the background video to the display 421.

また、例えば、
（３）歌詞テロップの記憶が禁止されている、及び、
（４）カメラ信号にカメラ４２２に出力された歌詞テロップが含まれている、
という２つの条件を満たしていると判断した場合、コマンダ２００は、ディスプレイ４２２への歌詞テロップの出力を停止する。 For example,
(3) Storage of lyrics telop is prohibited, and
(4) The lyrics telop output to the camera 422 is included in the camera signal.
When it is determined that the two conditions are satisfied, the commander 200 stops outputting the lyrics telop to the display 422.

背景映像、歌詞テロップの記憶が許可されているか否かは、制御フラグを調べることで把握することができる。制御フラグは、カラオケデータに付帯させることができる。また、楽曲ごとの制御フラグをテーブルとして定義してもよい。この場合、当該テーブルは、コマンダ２００の記憶手段に記憶される。 Whether or not the storage of the background video and the lyrics telop is permitted can be grasped by examining the control flag. The control flag can be attached to the karaoke data. Moreover, you may define the control flag for every music as a table. In this case, the table is stored in the storage unit of the commander 200.

カメラ信号に背景映像・歌詞テロップが含まれているか否かは、画像処理の結果によって把握することができる。ＳＴＢ３００は、カメラ信号にコマンダ２００から送信された各映像信号（ディスプレイ４２１に送信可能な背景映像、ディスプレイ４２１に送信可能な歌詞テロップ、ディスプレイ４２２に送信可能な背景映像、ディスプレイ４２２に送信可能な歌詞テロップ）が含まれているか否かを判断する。 Whether or not a background video / lyric telop is included in the camera signal can be grasped from the result of image processing. The STB 300 displays each video signal transmitted from the commander 200 as a camera signal (background video that can be transmitted to the display 421, lyrics telop that can be transmitted to the display 421, background video that can be transmitted to the display 422, and lyrics that can be transmitted to the display 422. Whether or not a telop is included is determined.

このとき、コマンダ２００から送信された各映像信号をテンプレートとして、カメラ信号に対しテンプレートマッチングを行うことで、上記画像処理を実現することができる。
また、歌詞テロップの画面上の位置や色が既知である場合は、それらの情報を用いて高速に処理することができる。 At this time, the image processing can be realized by performing template matching on the camera signal using each video signal transmitted from the commander 200 as a template.
Further, when the position and color of the lyrics telop on the screen are known, the information can be used for high-speed processing.

ここで、上記画像処理として、例えば、特開平１０−２５７４０１号（図３、図５）などに開示された技術（以下、「従来技術」）を用いてもよい。
具体的には、当該従来技術記載の「予約語」が「歌詞テロップ」に相当し、当該従来技術記載の「映像データ」が、カメラからの映像信号（ｅ）のディスプレイ１画面分の「映像信号テンプレート」に相当し、当該従来技術記載（例えば、図３）の「画像メモリ１２５」が、ＳＴＢ３００の画像処理部において前記テンプレート１画面分の画像を一時記憶するメモリ（図示せず。以下、「一時記憶メモリ」という。）に相当する。 Here, as the image processing, for example, a technique disclosed in Japanese Patent Laid-Open No. 10-257401 (FIGS. 3 and 5) (hereinafter, “conventional technique”) may be used.
Specifically, the “reserved word” described in the prior art corresponds to “lyric telop”, and the “video data” described in the prior art corresponds to “video” for one screen of the video signal (e) from the camera. The “image memory 125” in the prior art description (for example, FIG. 3) corresponds to a “signal template”, and the image processing unit of the STB 300 temporarily stores an image for one screen of the template (not shown, hereinafter). Equivalent to “temporary storage memory”).

そして、映像信号テンプレートを読み出し、１画面分の文字認識を行うことで前記テンプレートから文字列を抽出する。その後、歌詞テロップからの入力信号（ａ）と文字比較を行い、一定以上文字が一致している場合は、カメラ信号からの映像信号に歌詞テロップも撮影されているものと判断する処理を１画面毎に行う。 Then, the video signal template is read, and character strings are extracted from the template by performing character recognition for one screen. After that, character comparison is performed with the input signal (a) from the lyrics telop, and if the characters match more than a certain amount, the processing for determining that the lyrics telop is also captured in the video signal from the camera signal is one screen. Do it every time.

なお、上記一例では、画像処理として文字認識で画面の歌詞テロップを特定したが、歌詞テロップからの入力信号（ａ）の１画面分を歌詞テロップテンプレートとして一時記憶メモリに一時記憶し、映像信号テンプレートと比較して、映像パターンマッチングにより、両テンプレートが一定割合以上にイメージが一致していれば歌詞テロップが含まれていると判断することもできる。 In the above example, the lyric telop of the screen is specified by image recognition as image processing, but one screen of the input signal (a) from the lyric telop is temporarily stored in the temporary storage memory as a lyric telop template, and the video signal template As compared with, it is possible to determine that a lyric telop is included if the images of both templates match at a certain rate or more by video pattern matching.

そして、ＳＴＢ３００は、カメラ信号にコマンダ２００から送信された映像信号が含まれていると判断した場合に、コマンダ２００に対し、「停止指示信号」（結果信号）を送信する。この停止指示信号には、カメラ信号内で検出された映像信号（ディスプレイ４２１に送信可能な背景映像、ディスプレイ４２１に送信可能な歌詞テロップ、ディスプレイ４２２に送信可能な背景映像、ディスプレイ４２２に送信可能な歌詞テロップ）を示す識別番号が含まれる。また、いずれの映像信号も検出しない場合であっても、その旨を示す結果信号をコマンダ２００に送信するように構成してもよい。 If the STB 300 determines that the video signal transmitted from the commander 200 is included in the camera signal, the STB 300 transmits a “stop instruction signal” (result signal) to the commander 200. The stop instruction signal includes a video signal detected in the camera signal (background video that can be transmitted to the display 421, lyrics telop that can be transmitted to the display 421, background video that can be transmitted to the display 422, and transmission to the display 422. An identification number indicating a lyrics telop) is included. Further, even if no video signal is detected, a result signal indicating that may be transmitted to the commander 200.

コマンダ２００は、「停止指示信号」を受信し、かつ、背景映像及び／または歌詞テロップの記憶が禁止されている場合に限り、当該「停止指示信号」に含まれている映像信号の出力を停止するよう制御する。 The commander 200 stops outputting the video signal included in the “stop instruction signal” only when the “stop instruction signal” is received and the storage of the background video and / or the lyrics telop is prohibited. Control to do.

（コマンダ、ＳＴＢの内部構成）
次に、コマンダ２００及びＳＴＢ３００の内部構成（画像処理に関する部分）について説明する。図１０では、図２と同じ構成要素については同じ符号を付している。 (Commander, STB internal structure)
Next, the internal configuration (part relating to image processing) of the commander 200 and the STB 300 will be described. In FIG. 10, the same components as those in FIG.

図１０に示すように、背景映像がディスプレイ４２１に出力されているとき（すなわち、スイッチ２０１がＯＮとなっているとき）は、当該背景映像が、ＳＴＢ３００の画像処理部の端子（ａ）に入力される。また、歌詞テロップがディスプレイ４２１に出力されているとき（すなわち、スイッチ２０２がＯＮとなっているとき）は、当該歌詞テロップが、ＳＴＢ３００の画像処理部の端子（ｂ）に入力される。また、背景映像がディスプレイ４２２に出力されているとき（すなわち、スイッチ２０４がＯＮとなっているとき）は、当該背景映像が、ＳＴＢ３００の画像処理部の端子（ｃ）に入力される。また、歌詞テロップがディスプレイ４２２に出力されているとき（すなわち、スイッチ２０５がＯＮとなっているとき）は、当該歌詞テロップが、ＳＴＢ３００の画像処理部の端子（ｄ）に入力される。これにより、各ディスプレイに映像信号が出力されていないときは、上記端子にも映像信号が出力されない。 As shown in FIG. 10, when the background video is being output to the display 421 (that is, when the switch 201 is ON), the background video is input to the terminal (a) of the image processing unit of the STB 300. Is done. When the lyrics telop is output to the display 421 (that is, when the switch 202 is ON), the lyrics telop is input to the terminal (b) of the image processing unit of the STB 300. Further, when the background video is being output to the display 422 (that is, when the switch 204 is ON), the background video is input to the terminal (c) of the image processing unit of the STB 300. When the lyrics telop is output to the display 422 (that is, when the switch 205 is ON), the lyrics telop is input to the terminal (d) of the image processing unit of the STB 300. Thereby, when the video signal is not output to each display, the video signal is not output to the terminal.

また、カメラ４１０からのカメラ信号がＳＴＢ３００の画像処理部の端子（ｅ）に入力される。
画像処理部は、カメラ信号の中に、それぞれの端子に入力された映像信号が含まれているか否かを判断する。そして、画像処理結果に基く結果信号（停止指示信号）を、コマンダ２００に出力する。コマンダ２００は、結果信号（停止指示信号）に基いて、各ディスプレイ４２１、４２２への出力映像を制御する。 Further, the camera signal from the camera 410 is input to the terminal (e) of the image processing unit of the STB 300.
The image processing unit determines whether or not the video signal input to each terminal is included in the camera signal. Then, a result signal (stop instruction signal) based on the image processing result is output to the commander 200. The commander 200 controls the output video to each of the displays 421 and 422 based on the result signal (stop instruction signal).

（ＳＴＢとコマンダの処理の関係）
次に、ＳＴＢとコマンダの処理の関係について説明する。図１１は、ＳＴＢとコマンダの処理の関係を示した図である。また、以下においては、ディスプレイ４２１に対する歌詞テロップの出力制御について説明する。また、以下においては、歌詞テロップの記憶が禁止されているものとする。 (Relationship between STB and commander processing)
Next, the relationship between STB and commander processing will be described. FIG. 11 is a diagram showing the relationship between STB and commander processing. In the following, the lyrics telop output control for the display 421 will be described. In the following, it is assumed that storage of lyrics telop is prohibited.

コマンダ２００は、停止指示信号を受信していない間は、歌詞テロップを含む映像信号をディスプレイ４２１に出力する。これにより、ディスプレイ４２１には、歌詞テロップが表示されることになる。
その後、ＳＴＢ３００が、カメラ信号にディスプレイ４２１の映像信号に歌詞テロップが含まれていると判断すると、コマンダ２００に対し、停止指示信号を送信する。 The commander 200 outputs the video signal including the lyrics telop to the display 421 while not receiving the stop instruction signal. As a result, the lyrics telop is displayed on the display 421.
Thereafter, when the STB 300 determines that the video signal of the display 421 is included in the video signal of the display 421, the STB 300 transmits a stop instruction signal to the commander 200.

コマンダ２００は、停止指示信号を受信すると、ディスプレイ４２１に対する出力映像を切り換える。具体的には、歌詞テロップを表示させないように制御する。これにより、ディスプレイ４２１には、歌詞テロップが表示されないことになる。 When receiving the stop instruction signal, the commander 200 switches the output video for the display 421. Specifically, control is performed so that the lyrics telop is not displayed. As a result, the lyrics telop is not displayed on the display 421.

その後、コマンダ２００は、停止指示信号を受信していないと判断すると、ディスプレイ４２１に対する出力映像を切り換える。具体的には、歌詞テロップを表示させるように制御する。これにより、ディスプレイ４２１には、歌詞テロップが表示されることになる。なお、停止指示信号を受信しているか否かの判断タイミングは、適宜決定することができ、例えば、所定時間ごとに上記判断をするように構成することができる。 Thereafter, when the commander 200 determines that the stop instruction signal has not been received, the commander 200 switches the output video to the display 421. Specifically, control is performed to display a lyrics telop. As a result, the lyrics telop is displayed on the display 421. Note that the determination timing as to whether or not the stop instruction signal is received can be determined as appropriate, and for example, the above determination can be made every predetermined time.

なお、歌詞テロップの表示／非表示は、１画面毎に判断してもよいが、操作間違いによる一瞬の歌詞テロップの映り込みも考えられるし、１画面毎に表示と非表示とを繰り返すと故障だと利用者に誤解される場合もある。そこで、表示／非表示を切り換えた後は、一定時間上記判断をしないように構成してもよい。すなわち、表示／非表示の切替が短い時間で繰り返し行われないように構成してもよい。 Note that the display / non-display of the lyrics telop may be determined for each screen, but there may be a momentary reflection of the lyrics telop due to an operation error, and failure occurs when display and non-display are repeated for each screen. This may be misunderstood by the user. Therefore, after switching between display / non-display, the above determination may not be performed for a certain period of time. That is, the display / non-display switching may not be repeated repeatedly in a short time.

なお、背景映像についても、同じように処理することができる。また、背景映像及び歌詞テロップの記憶が禁止されていない（すなわち、許可されている）場合は、上述した処理は実行されない。 The background video can be processed in the same way. In addition, when the storage of the background video and the lyrics telop is not prohibited (that is, permitted), the above-described processing is not executed.

（コマンダ側の処理）
次に、コマンダ側の処理について説明する。図１２は、コマンダ側の処理のフローチャートである。
Ｓ１１において、ユーザから指示を受け付ける。ユーザは、リモコン５００を用いて、楽曲再生の指示、及び、撮影の指示を入力することができる。また、各ディスプレイ上の表示態様（背景映像＋歌詞テロップ、歌詞テロップのみ、背景映像のみ、いずれもオフ）についても入力することができる。 (Processing on the commander side)
Next, the process on the commander side will be described. FIG. 12 is a flowchart of processing on the commander side.
In S11, an instruction is received from the user. The user can use the remote controller 500 to input a music playback instruction and a shooting instruction. Also, the display mode on each display (background video + lyric telop, only lyrics telop, only background video, all off) can be input.

Ｓ１２において、ＳＴＢ３００に対し、起動指示信号を送信する。これにより、ＳＴＢ３００は、キャプチャを開始するためのスタンバイ処理を実行する。スタンバイ処理の詳細については後述する。 In S12, an activation instruction signal is transmitted to STB300. As a result, the STB 300 executes standby processing for starting capture. Details of the standby processing will be described later.

Ｓ１３において、初期設定処理を実行する。初期設定処理では、歌詞テロップ、背景映像の記録が禁止されているか否かを示す制御フラグを取得する。そして、取得した制御フラグを、例えば、コマンダ２００内部のＲＡＭに記憶する。また、オープニング動画を再生する。 In S13, an initial setting process is executed. In the initial setting process, a control flag indicating whether or not recording of lyrics telop and background video is prohibited is acquired. And the acquired control flag is memorize | stored in RAM inside the commander 200, for example. Also, the opening video is played.

Ｓ１４において、ＳＴＢ３００に対し、キャプチャ開始指示信号を送信する。
Ｓ１５において、楽曲の再生を開始する。このとき、楽音信号とマイク音声信号との混合音声信号が、ＳＴＢ３００に出力される。 In S14, a capture start instruction signal is transmitted to the STB 300.
In S15, music playback is started. At this time, a mixed sound signal of a musical sound signal and a microphone sound signal is output to the STB 300.

Ｓ１６において、出力映像切替処理を実行する。出力映像切替処理では、Ｓ１１で入力指示された出力態様となるように、出力映像を制御する。また、停止指示信号を受信した場合であって、背景映像、歌詞テロップの記憶が禁止されているときには、当該背景映像及び／または歌詞テロップの出力を停止する。 In S16, an output video switching process is executed. In the output video switching process, the output video is controlled so that the output mode instructed in S11 is obtained. Further, when the stop instruction signal is received and the storage of the background video and the lyrics telop is prohibited, the output of the background video and / or the lyrics telop is stopped.

Ｓ１７において、楽曲の再生を終了したか否かを判断する。楽曲の再生を終了していないと判断した場合は（Ｓ１７：ＮＯ）、Ｓ１６に戻る。一方、楽曲の再生を終了したと判断した場合は（Ｓ１７：ＹＥＳ）、Ｓ１８に移行する。
Ｓ１８において、キャプチャ終了指示信号をＳＴＢ３００に送信する。
Ｓ１９において、撮影後処理を実行する。 In S17, it is determined whether or not the reproduction of the music has ended. If it is determined that the music has not been played back (S17: NO), the process returns to S16. On the other hand, when it is determined that the reproduction of the music has ended (S17: YES), the process proceeds to S18.
In S18, a capture end instruction signal is transmitted to the STB 300.
In S19, post-shooting processing is executed.

次に、撮影後処理（コマンダ側）について説明する。図１３は、撮影後処理（コマンダ側）のフローチャートである。 Next, post-shooting processing (commander side) will be described. FIG. 13 is a flowchart of post-shooting processing (commander side).

Ｓ３１において、リモコン５００の表示部に、選択画面（図４参照）を表示させる。また、各ディスプレイにも当該選択画面を表示させてもよい。
Ｓ３２において、ユーザの入力を受け付ける。具体的には、図４に示される「再生」、「アップロード」、「消去」の入力を受け付ける。 In S31, a selection screen (see FIG. 4) is displayed on the display unit of remote controller 500. Further, the selection screen may be displayed on each display.
In S32, a user input is accepted. Specifically, the input of “play”, “upload”, and “erase” shown in FIG. 4 is accepted.

Ｓ３３において、入力された指示内容を判断する。 In step S33, the input instruction content is determined.

入力された指示が「再生」であると判断した場合は、Ｓ３４に移行する。
Ｓ３４において、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データを要求する信号」を送信する。
Ｓ３５において、受信した撮影データの再生を開始する。このとき、リモコン５００の表示部上には、再生中の撮影データの停止を指示するための停止ボタンを表示させる。 If it is determined that the input instruction is “reproduction”, the process proceeds to S34.
In S <b> 34, a “signal for requesting photographing data stored in the storage unit 320” is transmitted to the STB 300.
In S35, reproduction of the received shooting data is started. At this time, a stop button for instructing to stop the shooting data being reproduced is displayed on the display unit of the remote controller 500.

Ｓ３６において、停止ボタンが押下されたか否かを判断する。停止ボタンが押下されたと判断した場合は（Ｓ３６：ＹＥＳ）、Ｓ３１に戻る。一方、停止ボタンが押下されていないと判断した場合は（Ｓ３６：ＮＯ）、Ｓ３７に移行する。 In S36, it is determined whether or not the stop button has been pressed. If it is determined that the stop button has been pressed (S36: YES), the process returns to S31. On the other hand, if it is determined that the stop button has not been pressed (S36: NO), the process proceeds to S37.

Ｓ３７において、撮影データの再生が終了したか否かを判断する。撮影データの再生は終了していないと判断した場合は（Ｓ３７：ＮＯ）、Ｓ３６に戻る。一方、撮影データの再生が終了したと判断した場合は（Ｓ３７：ＹＥＳ）、Ｓ３１に戻る。 In S37, it is determined whether or not the reproduction of the photographing data is completed. If it is determined that the reproduction of the shooting data has not ended (S37: NO), the process returns to S36. On the other hand, when it is determined that the reproduction of the photographic data has been completed (S37: YES), the process returns to S31.

一方、Ｓ３３において、入力された指示が「アップロード」であると判断した場合は、Ｓ３８に移行する。
Ｓ３８において、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データをサーバ６００の動画データベース６２０にアップロードさせることを要求する信号」を送信する。 On the other hand, if it is determined in S33 that the input instruction is “upload”, the process proceeds to S38.
In S <b> 38, “a signal requesting uploading of the shooting data stored in the storage unit 320 to the moving image database 620 of the server 600” is transmitted to the STB 300.

一方、Ｓ３３において、入力された指示が「消去」であると判断した場合は、Ｓ３９に移行する。
Ｓ３９において、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データを削除させることを要求する信号」を送信する。 On the other hand, if it is determined in S33 that the input instruction is “delete”, the process proceeds to S39.
In S39, a “signal for requesting deletion of shooting data stored in storage means 320” is transmitted to STB 300.

なお、コマンダ２００側において、アップロードする撮影データを編集するための機能を有するように構成してもよい。 The commander 200 may be configured to have a function for editing the shooting data to be uploaded.

（ＳＴＢ側の処理）
次に、ＳＴＢ側の処理について説明する。図１４は、ＳＴＢ側の処理のフローチャートである。
Ｓ５１において、コマンダ２００から起動指示信号を受信する。
Ｓ５２において、スタンバイ処理を実行する。スタンバイ処理では、キャプチャを行うためのアプリケーションの起動を行う。また、カメラ４１０に対しＯＮ制御を行う。 (STB side processing)
Next, processing on the STB side will be described. FIG. 14 is a flowchart of processing on the STB side.
In S51, an activation instruction signal is received from the commander 200.
In S52, standby processing is executed. In standby processing, an application for capturing is started. In addition, ON control is performed on the camera 410.

Ｓ５３において、キャプチャ開始指示信号を受信する。
Ｓ５４において、キャプチャを開始する。すなわち、カメラ４１０からのカメラ信号及びコマンダ２００からの音声信号が記憶手段３２０に記憶される。 In S53, a capture start instruction signal is received.
In S54, capture is started. That is, the camera signal from the camera 410 and the audio signal from the commander 200 are stored in the storage unit 320.

Ｓ５５において、カメラ信号にディスプレイの映像信号（ディスプレイ４２１に送信可能な背景映像、ディスプレイ４２１に送信可能な歌詞テロップ、ディスプレイ４２２に送信可能な背景映像、ディスプレイ４２２に送信可能な歌詞テロップ）が含まれているか否かを判断する。なお、Ｓ５５の条件判断は、コマンダ２００から出力される映像信号（図１０参照）ごとに行われる。
例えば、Ｓ５５の条件判断の１つは、上述した画像処理部における「映像信号から文字を抽出する機能」を、カメラ信号へディスプレイの映像信号に含まれた歌詞テロップの映り込み判断として作用させるものである。 In S55, the video signal of the display (background video that can be transmitted to the display 421, lyrics telop that can be transmitted to the display 421, background video that can be transmitted to the display 422, and lyrics telop that can be transmitted to the display 422) is included in the camera signal. Judge whether or not. The condition determination in S55 is performed for each video signal (see FIG. 10) output from the commander 200.
For example, one of the condition determinations in S55 is to make the above-described image processing unit “function to extract characters from the video signal” act as a reflection determination of the lyrics telop included in the video signal of the display to the camera signal. It is.

カメラ信号にディスプレイの映像信号は含まれていないと判断した場合は（Ｓ５５：ＮＯ）、Ｓ５７に移行する。一方、カメラ信号にディスプレイの映像信号が含まれていると判断した場合は（Ｓ５５：ＹＥＳ）、Ｓ５６に移行する。
Ｓ５６において、コマンダ２００に対し、停止指示信号を送信する。停止指示信号には、カメラ信号内で検出された映像信号（ディスプレイ４２１に送信可能な背景映像、ディスプレイ４２１に送信可能な歌詞テロップ、ディスプレイ４２２に送信可能な背景映像、ディスプレイ４２２に送信可能な歌詞テロップ）を示す識別番号が含まれる。 When it is determined that the video signal of the display is not included in the camera signal (S55: NO), the process proceeds to S57. On the other hand, when it is determined that the video signal of the display is included in the camera signal (S55: YES), the process proceeds to S56.
In S56, a stop instruction signal is transmitted to the commander 200. The stop instruction signal includes a video signal detected in the camera signal (background video that can be transmitted to the display 421, lyrics telop that can be transmitted to the display 421, background video that can be transmitted to the display 422, and lyrics that can be transmitted to the display 422. An identification number indicating (telop) is included.

Ｓ５７において、コマンダ２００からキャプチャ終了指示信号を受信したか否かを判断する。
キャプチャ終了指示信号を受信していないと判断した場合は（Ｓ５７：ＮＯ）、Ｓ５５に戻る。一方、キャプチャ終了指示信号を受信したと判断した場合は（Ｓ５７：ＹＥＳ）、Ｓ５８に移行する。 In S57, it is determined whether or not a capture end instruction signal is received from the commander 200.
If it is determined that the capture end instruction signal has not been received (S57: NO), the process returns to S55. On the other hand, if it is determined that the capture end instruction signal has been received (S57: YES), the process proceeds to S58.

Ｓ５８において、キャプチャを終了する。
Ｓ５９において、撮影後処理を実行する。 In S58, the capture is terminated.
In S59, post-shooting processing is executed.

次に、撮影後処理（ＳＴＢ側）について説明する。図１５は、撮影後処理（ＳＴＢ側）のフローチャートである。 Next, post-shooting processing (STB side) will be described. FIG. 15 is a flowchart of the post-shooting process (STB side).

Ｓ７１において、指示信号を受信する。
Ｓ７２において、受信した指示信号が示す指示内容を判断する。 In S71, an instruction signal is received.
In S72, the instruction content indicated by the received instruction signal is determined.

指示内容が「撮影データ送信」であった場合は、Ｓ７３に移行する。
Ｓ７３において、コマンダ２００に対し、記憶手段３２０に記憶している撮影データを送信する。 When the instruction content is “shooting data transmission”, the process proceeds to S73.
In S73, the image data stored in the storage unit 320 is transmitted to the commander 200.

指示内容が「アップロード」であった場合は、Ｓ７４に移行する。
Ｓ７４において、撮影データを、動画データベース６２０にアップロードする。
Ｓ７５において、撮影データを、記憶手段３２０から削除する。 If the instruction content is “upload”, the process proceeds to S74.
In S74, the shooting data is uploaded to the moving image database 620.
In S75, the shooting data is deleted from the storage means 320.

指示内容が「消去」であった場合は、Ｓ７６に移行する。
Ｓ７６において、撮影データを、記憶手段３２０から削除する。 If the instruction content is “erase”, the process proceeds to S76.
In S76, the shooting data is deleted from the storage means 320.

以上説明したとおり、本発明は、画像処理部を備えたＳＴＢ３００を有し、ＳＴＢ３００は、カメラ４１０からのカメラ信号に、ディスプレイ４２１、４２２の映像信号（背景映像、歌詞テロップ）が含まれているか否かを判断し、カメラ信号に上記映像信号が含まれていると判断した場合に、コマンダ２００に対し、停止指示信号を送信する。コマンダ２００は、停止指示信号を受信すると、背景映像、歌詞テロップの記憶が禁止されている判断した場合に、当該カメラ信号に含まれている映像信号の出力を停止する。
これにより、記録が禁止されているカラオケコンテンツを用いた場合であっても、歌唱者の歌唱の様子を撮影し映像として記録することができるので、カラオケ事業におけるサービスの多様化・充実化を図ることが可能となる。 As described above, the present invention includes the STB 300 including the image processing unit, and the STB 300 includes the video signals (background video and lyrics telop) of the displays 421 and 422 in the camera signal from the camera 410. If it is determined that the video signal is included in the camera signal, a stop instruction signal is transmitted to the commander 200. When receiving the stop instruction signal, the commander 200 stops the output of the video signal included in the camera signal when determining that the storage of the background video and the lyrics telop is prohibited.
As a result, even when using karaoke content for which recording is prohibited, it is possible to shoot the singer's singing state and record it as a video, so the service in the karaoke business will be diversified and enhanced. It becomes possible.

本発明は上述した実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内で種々の改良、変形が可能であることはいうまでもない。 The present invention is not limited to the above-described embodiment, and it goes without saying that various improvements and modifications can be made without departing from the scope of the present invention.

例えば、カラオケ楽曲の再生中に、ユーザが指定した所望のタイミングに所望のテロップをディスプレイ上に表示させてもよい。このとき、ユーザは、テロップの内容及び表示タイミングを、リモコン５００を用いて編集することができる。また、ユーザが作成されたテロップは、カメラ４１０と各ディスプレイ４２１、４２２とが向き合う位置関係にあっても、常に表示される。
これにより、ユーザ自身が作成したテロップは、カラオケ楽曲の制御フラグの状態による影響を受けないので、ユーザによって作成されたテロップが常に映し込まれたビデオ映像は、撮影後に、ユーザがビデオメッセージとしてユーザの目的に応じて配布する場合にも有効となる。 For example, during playback of karaoke music, a desired telop may be displayed on the display at a desired timing designated by the user. At this time, the user can edit the contents of the telop and the display timing using the remote controller 500. In addition, the telop created by the user is always displayed even if the camera 410 and the displays 421 and 422 are in a positional relationship facing each other.
Thus, since the telop created by the user is not affected by the state of the control flag of the karaoke music piece, the video image in which the telop created by the user is always reflected is displayed as a video message by the user after shooting. It is also effective when distributing according to the purpose of the.

また、上述した各フローチャートは単なる一例であり、該各フローチャートの処理と同等の結果を得ることできるものであれば、他のフローチャートによって処理を実現してもよい。 Further, each flowchart described above is merely an example, and the processing may be realized by another flowchart as long as a result equivalent to the processing of each flowchart can be obtained.

また、上述したカラオケ装置、カラオケシステム、ＳＴＢに係る方法、該方法をコンピュータに実行させるためのプログラム、該プログラムを記録した記録媒体等としても本発明は実現可能である。 The present invention can also be realized as a karaoke apparatus, a karaoke system, a method related to STB, a program for causing a computer to execute the method, a recording medium on which the program is recorded, and the like.

カラオケシステムの構成の一例を示した図である。It is the figure which showed an example of the structure of a karaoke system. コマンダ及びＳＴＢの内部構成（映像信号及び音声信号に関する部分）の模式図である。It is a schematic diagram of the internal structure (part regarding a video signal and an audio | voice signal) of a commander and STB. コマンダとＳＴＢの処理の関係を示した図である。It is the figure which showed the relationship between the commander and the process of STB. リモコンの表示部の表示例を示した図である。It is the figure which showed the example of a display of the display part of a remote control. 歌唱態様を示した図である。It is the figure which showed the singing aspect. 背景映像及び歌詞テロップの表示例を示した図である。It is the figure which showed the example of a display of a background image | video and a lyrics telop. カメラで撮影された映像の一例を示した図である。It is the figure which showed an example of the image | video image | photographed with the camera. カメラで撮影された映像に歌詞テロップを合成した映像の一例を示した図である。It is the figure which showed an example of the image | video which synthesize | combined the lyrics telop with the image | video image | photographed with the camera. 背景映像及び歌詞テロップに歌唱者映像を合成した映像の一例を示した図である。It is the figure which showed an example of the image | video which synthesize | combined the singer image | video with the background image | video and the lyrics telop. コマンダ及びＳＴＢの内部構成（画像処理に関する部分）の模式図である。It is a schematic diagram of the internal configuration (part relating to image processing) of the commander and STB. ＳＴＢとコマンダの処理の関係を示した図である。It is the figure which showed the relationship between the process of STB and commander. コマンダ側の処理のフローチャートである。It is a flowchart of the process by the commander side. 撮影後処理（コマンダ側）のフローチャートである。It is a flowchart of a post-shooting process (commander side). ＳＴＢ側の処理のフローチャートである。It is a flowchart of the process by the side of STB. 撮影後処理（ＳＴＢ側）のフローチャートである。It is a flowchart of the imaging post-processing (STB side).

Explanation of symbols

１００カラオケ装置
２００コマンダ
３００ＳＴＢ
４１０カメラ
４２１ディスプレイ
４２２ディスプレイ
４３０マイク
４４０アンプ
４５０スピーカ
５００リモコン
６００サーバ
６１０カラオケデータベース
６２０動画データベース 100 Karaoke equipment 200 Commander 300 STB
410 Camera 421 Display 422 Display 430 Microphone 440 Amplifier 450 Speaker 500 Remote control 600 Server 610 Karaoke database 620 Movie database

Claims

A karaoke device comprising a display, a camera, recording means, video output control means, audio output means, image processing means,
The voice output means outputs a voice signal based on musical tone information included in karaoke data,
The recording means records a video signal taken by the camera,
The image processing means compares a video signal included in the karaoke data with a video signal taken by the camera, and outputs the comparison result as a result signal,
The karaoke data includes background video and lyrics telop,
The video output control means includes
The video signal included in the karaoke data can be output to the display,
Obtaining a control flag for the karaoke data;
Receiving the result signal;
Control whether to output the lyrics telop and / or the background video to the display based on the control flag and the result signal .
A karaoke apparatus characterized by that.

The result signal indicates whether or not a video signal included in the karaoke data is included in a video signal photographed by the camera.
The karaoke apparatus of Claim 1 characterized by the above-mentioned.

The control flag indicates whether to permit recording of a video signal included in the karaoke data,
The video output control means determines, based on the control flag and the comparison signal, that the video signal included in the karaoke data is captured by the camera and that recording of the video signal is prohibited. Sometimes, the prohibited video signal is not output to the display.
The karaoke apparatus according to claim 1 or 2 , characterized by the above.

In karaoke system consisting of commander and set top box,
The set top box is
Connected to the camera,
Storage means for storing a video signal captured by the camera;
The commander
Connected to the display,
The video signal included in the karaoke data can be output to the display,
The video signal output to the display is output to the set top box,
further,
The set top box determines whether the video signal output by the commander is included in the video signal captured by the camera, and outputs the determination result as a result signal,
When the commander receives the result signal,
Obtaining a control flag for the karaoke data;
Based on the control flag and the result signal, when the video signal included in the karaoke data is captured by the camera and it is determined that recording of the video signal is prohibited, the video signal is prohibited. Does not output the video signal to the display,
Karaoke system characterized by that.

Connected to the display,
The video signal included in the karaoke data can be output to the display,
The video signal output to the display is output to a set top box constituting the karaoke system,
When a result signal is received from the set top box,
Obtaining a control flag for the karaoke data;
Based on the control flag and the result signal, when the video signal included in the karaoke data is captured by the camera and it is determined that recording of the video signal is prohibited, the video signal is prohibited. Connected to a commander that controls the video signal not to be output to the display,
In the set top box constituting the karaoke system ,
Connected to the camera,
Storage means for storing a video signal captured by the camera;
Determining whether the video signal output by the commander is included in the video signal captured by the camera, and outputting the determination result to the commander as the result signal;
A set-top box characterized by that.