JP6785169B2 - Karaoke device, remote control device - Google Patents
Karaoke device, remote control device Download PDFInfo
- Publication number
- JP6785169B2 JP6785169B2 JP2017041432A JP2017041432A JP6785169B2 JP 6785169 B2 JP6785169 B2 JP 6785169B2 JP 2017041432 A JP2017041432 A JP 2017041432A JP 2017041432 A JP2017041432 A JP 2017041432A JP 6785169 B2 JP6785169 B2 JP 6785169B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- video data
- karaoke
- mobile terminal
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
本発明はカラオケ装置、及びリモコン装置に関する。 The present invention relates to a karaoke device and a remote control device.
従来、カラオケ本体に設けられた定点カメラで歌唱者を撮影し、得られた映像データを編集して表示装置に表示させたり、歌唱時の音声データと映像データを編集した動画像データをサーバにアップロードすることにより、第三者に対して歌唱時の映像を公開するサービスが普及している。 Conventionally, a singer is photographed with a fixed point camera provided in the karaoke body, and the obtained video data is edited and displayed on a display device, or the audio data at the time of singing and the moving image data obtained by editing the video data are used as a server. A service that publishes a video of singing to a third party by uploading it is widespread.
また、利用者が所有する携帯端末により撮影された映像を定点カメラの映像と組み合わせる技術が開示されている。 Further, a technique for combining an image taken by a mobile terminal owned by a user with an image taken by a fixed-point camera is disclosed.
たとえば、特許文献１には、カラオケ装置による演奏曲の出力と併行して、位置が固定されたデジタルカメラにより撮影された撮像に対して、利用者の携帯電話機により撮影された撮像を、その演奏曲の出力の進行に応じて合成表示させる合成表示手段を有するカラオケ装置が開示されている。このようなカラオケ装置によれば、カラオケ演奏中に撮影された撮像の特殊性を踏まえて、その撮像における所定の時間位置に携帯電話機により撮影された撮像を組み込むことができる。 For example, in Patent Document 1, in parallel with the output of a performance song by a karaoke device, an image taken by a user's mobile phone is performed with respect to an image taken by a digital camera whose position is fixed. A karaoke device having a composite display means for displaying a composite display according to the progress of output of a song is disclosed. According to such a karaoke device, an image taken by a mobile phone can be incorporated at a predetermined time position in the image taking in consideration of the peculiarity of the image taken during the karaoke performance.
また、特許文献２には、ユーザーカメラで取得された歌唱静止画データを撮影タイミング情報と関連付けて取得し、通常時にはビデオカメラで撮影された歌唱映像データに基づく歌唱映像を再生させるが、撮影タイミングが到来すると、歌唱静止画データに基づく歌唱映像を再生させる技術が開示されている。 Further, in Patent Document 2, the singing still image data acquired by the user camera is acquired in association with the shooting timing information, and the singing video based on the singing video data shot by the video camera is normally reproduced. When the arrival of, a technique for reproducing a singing video based on singing still image data is disclosed.
特許文献１及び特許文献２に開示されている技術は、表示装置に表示される映像を自由に切り替えたり、所望の映像で構成される動画像データを作成したりすることを想定したものではない。 The techniques disclosed in Patent Document 1 and Patent Document 2 are not intended to freely switch the image displayed on the display device or to create moving image data composed of a desired image. ..
本発明の目的は、同じタイミングで撮影された映像データに基づく複数の映像の中から所望の映像を選択可能とするカラオケ装置、及びリモコン装置を提供することにある。 An object of the present invention is to provide a karaoke device and a remote control device that can select a desired video from a plurality of videos based on video data shot at the same timing.
上記目的を達成するための主たる発明は、カラオケ本体、及びリモコン装置を有するカラオケ装置において、前記リモコン装置は、利用者が所有する携帯端末で撮影された映像を前記リモコン装置で表示可能とするよう、当該携帯端末と前記リモコン装置とのペアリングを行うペアリング処理部と、ペアリングされた前記携帯端末により撮影された映像データを受信する映像データ受信部と、ペアリングされた第１の携帯端末により撮影された映像データに基づく第１の映像と、前記第１の映像と同じタイミングで他の装置により撮影された映像データに基づく第２の映像を、一の表示画面を分割して表示させる表示制御部と、分割表示された複数の映像のうち、任意に選択された映像に対応する映像データを前記カラオケ本体に送信する映像データ送信部と、を有することを特徴とするカラオケ装置である。
本発明の他の特徴については、後述する明細書及び図面の記載により明らかにする。
A main invention for achieving the above object is to make a karaoke main body and a karaoke device having a remote control device capable of displaying images taken by a mobile terminal owned by the user on the remote control device. , The pairing processing unit that pairs the mobile terminal with the remote control device, the video data receiving unit that receives the video data captured by the paired mobile terminal, and the paired first mobile device. The first video based on the video data taken by the terminal and the second video based on the video data taken by another device at the same timing as the first video are displayed by dividing one display screen. A karaoke device characterized by having a display control unit for displaying and a video data transmission unit for transmitting video data corresponding to an arbitrarily selected video from a plurality of dividedly displayed videos to the karaoke main body. is there.
Other features of the present invention will be clarified by the description of the description and drawings described later.
本発明によれば、同じタイミングで撮影された映像データに基づく複数の映像の中から所望の映像を選択できる。 According to the present invention, a desired video can be selected from a plurality of videos based on video data shot at the same timing.
後述する明細書及び図面の記載から、上記の主たる発明の他、少なくとも以下の事項が明らかとなる。 In addition to the above-mentioned main invention, at least the following matters will be clarified from the description of the description and drawings described later.
すなわち、前記映像データ送信部が、分割表示された映像のいずれもが所定時間、選択されない場合には、前記表示画面の所定位置に表示されている映像に対応する映像データを前記カラオケ本体に送信するカラオケ装置が明らかとなる。このようなカラオケ装置によれば、あるカラオケ楽曲の歌唱に伴う映像データが部分的に欠損することが無い。 That is, when none of the divided and displayed videos is selected for a predetermined time, the video data transmission unit transmits the video data corresponding to the video displayed at the predetermined position on the display screen to the karaoke body. The karaoke device to be played is clarified. According to such a karaoke device, the video data associated with the singing of a certain karaoke song is not partially lost.
また、前記表示制御部が、映像を分割表示させる際に、当該映像を撮影した携帯端末を所有する利用者を示す情報を併せて表示させるカラオケ装置が明らかとなる。このようなカラオケ装置によれば、映像を撮影した利用者を容易に把握することができる。 Further, when the display control unit divides and displays the video, it becomes clear that the karaoke device also displays information indicating the user who owns the mobile terminal that captured the video. With such a karaoke device, it is possible to easily grasp the user who shot the video.
また、前記他の装置が、前記第１の携帯端末とは異なる携帯端末であって、前記リモコン装置とペアリングされている第２の携帯端末であることを特徴とするカラオケ装置が明らかとなる。或いは、前記他の装置が、予め所定位置に固定された定点カメラであるカラオケ装置が明らかとなる。これらのカラオケ装置によれば、他の携帯端末や定点カメラにより撮影された映像データに基づく映像を選択することが可能となる。 Further, a karaoke device characterized in that the other device is a mobile terminal different from the first mobile terminal and is a second mobile terminal paired with the remote control device becomes clear. .. Alternatively, a karaoke device in which the other device is a fixed point camera fixed in a predetermined position in advance becomes clear. According to these karaoke devices, it is possible to select a video based on video data taken by another mobile terminal or a fixed point camera.
更に、前記カラオケ本体が、受信した前記映像データを歌唱された楽曲毎に時系列に編集し、サーバにアップロードする映像処理部を有するカラオケ装置が明らかとなる。このようなカラオケ装置によれば、編集した映像データ（動画像データ）をアップロードすることができる。 Further, it becomes clear that the karaoke device has a video processing unit that edits the received video data in chronological order for each sung song and uploads it to the server. According to such a karaoke device, edited video data (moving image data) can be uploaded.
或いは、利用者が所有する携帯端末で撮影された映像を表示可能とするよう、当該携帯端末とのペアリングを行うペアリング処理部と、ペアリングされた前記携帯端末により撮影された映像データを受信する映像データ受信部と、ペアリングされた第１の携帯端末により撮影された映像データに基づく第１の映像と、前記第１の映像と同じタイミングで他の装置により撮影された映像データに基づく第２の映像を、一の表示画面を分割して表示させる表示制御部と、分割表示された複数の映像のうち、任意に選択された映像に対応する映像データをカラオケ本体に送信する映像データ送信部と、を有するリモコン装置が明らかとなる。このようなリモコン装置によれば、同じタイミングで撮影された映像データに基づく複数の映像の中から所望の映像を選択できる。 Alternatively, the pairing processing unit that performs pairing with the mobile terminal and the video data taken by the paired mobile terminal are displayed so that the video taken by the mobile terminal owned by the user can be displayed. The video data receiving unit to be received, the first video based on the video data taken by the paired first mobile terminal, and the video data taken by another device at the same timing as the first video. A display control unit that divides one display screen to display the second video based on the above, and a video that transmits video data corresponding to an arbitrarily selected video from a plurality of split-displayed videos to the karaoke main unit. A remote control device having a data transmission unit is clarified. According to such a remote control device, a desired image can be selected from a plurality of images based on the image data captured at the same timing.
＜実施形態＞
図１〜図７を参照して、実施形態に係るカラオケ装置１について説明する。
<Embodiment>
The karaoke device 1 according to the embodiment will be described with reference to FIGS. 1 to 7.
＝＝カラオケ装置＝＝
カラオケ装置１は、カラオケ演奏及び利用者がカラオケ歌唱を行うための装置である。カラオケ装置１は、たとえばカラオケ店舗の各部屋に設置される。カラオケ装置１では、様々なカラオケ歌唱を楽しむことが可能である。たとえば、カラオケ装置１では、カラオケ歌唱する利用者を撮影した映像データ（動画像データ）をサーバにアップロードすることができる。アップロードされた映像データに基づく映像は、インターネット等を通じて一般に公開される。
== Karaoke device ==
The karaoke device 1 is a device for performing karaoke and for the user to sing karaoke. The karaoke device 1 is installed in each room of a karaoke store, for example. With the karaoke device 1, it is possible to enjoy various karaoke singing. For example, in the karaoke device 1, video data (moving image data) of a user singing karaoke can be uploaded to the server. The video based on the uploaded video data will be released to the public via the Internet or the like.
図１に示すように、カラオケ装置１は、カラオケ本体１０、スピーカ２０、表示装置３０、マイク４０、リモコン装置５０、及び定点カメラ６０を備える。
As shown in FIG. 1, the karaoke device 1 includes a
カラオケ本体１０は、選択されたカラオケ楽曲の演奏制御、歌詞や背景映像等の表示制御、マイク４０を通じて入力された音声信号の処理といった、カラオケ歌唱に関する各種の制御を行う。スピーカ２０はカラオケ本体１０からの放音信号に基づいて放音するための構成である。表示装置３０はカラオケ本体１０からの信号に基づいて映像や画像を画面に表示するための構成である。マイク４０は歌唱者の歌唱音声をアナログの音声信号に変換してカラオケ本体１０に入力するための構成である。リモコン装置５０は、カラオケ本体１０に対する各種操作をおこなうための装置である。利用者はリモコン装置５０を用いてカラオケ歌唱を希望する楽曲の選曲（予約）等を行うことができる。リモコン装置５０の表示画面には各種操作の指示入力を行うためのアイコン等が表示される。定点カメラ６０は、カラオケ歌唱を行う利用者の撮影を行うための装置である。定点カメラ６０は、部屋内において予め所定位置に固定されている。
The
また、図１に示すように、リモコン装置５０は、カラオケ装置１の利用者が所有する携帯端末Ｍと通信可能となっている。リモコン装置５０及び携帯端末Ｍ間の通信の詳細は後述する。なお、図１では２台の携帯端末Ｍを示しているが、本実施形態においてリモコン装置５０と通信される携帯端末は３台以上であってもよい。
Further, as shown in FIG. 1, the
携帯端末Ｍは、たとえば一般的なスマートフォンやタブレット端末、或いは家庭用のビデオカメラ等である。携帯端末Ｍは、撮影機能、及び撮影した映像データをリモコン装置５０に送信するための通信機能を有するものであればよい。また、携帯端末Ｍは、個々の端末を特定するための端末識別情報（端末ＩＤ）、及び所有する利用者を示す利用者識別情報（利用者ＩＤ）を記憶している。
The mobile terminal M is, for example, a general smartphone or tablet terminal, a home video camera, or the like. The mobile terminal M may have a shooting function and a communication function for transmitting the shot video data to the
［リモコン装置］
図２はリモコン装置５０のハードウェア構成例を示す図である。リモコン装置５０は、記憶部５０ａ、通信部５０ｂ、操作部５０ｃ、表示部５０ｄ、及び制御部５０ｅを備える。
[Remote control device]
FIG. 2 is a diagram showing a hardware configuration example of the
記憶部５０ａは、リモコン装置５０に関する各種情報を記憶する。本実施形態において、記憶部５０ａは、少なくとも、複数の映像を表示部５０ｄの表示画面を分割して表示させるアプリケーションソフトウェア（以下、「分割表示用アプリ」という）を記憶している。
The
ある携帯端末により撮影された映像データをリモコン装置５０に送信するためには、分割表示用アプリを実行しているリモコン装置５０と、ある携帯端末とのペアリングを要する。ペアリングとは、所定の携帯端末と所定のリモコン装置とが通信可能となるように関連付けを行うことをいう（詳細は後述）。
In order to transmit the video data captured by a certain mobile terminal to the
通信部５０ｂは、リモコン装置５０と携帯端末Ｍまたはカラオケ本体１０とを接続するためのインターフェースを提供する。操作部５０ｃは、利用者が各種の操作入力を行うためのボタンやＧＵＩである。表示部５０ｄは、各種の情報や映像を表示させる表示画面を提供する。たとえば、表示部５０ｄに表示された所定のアイコンを選択することにより、上述の分割表示用アプリが実行される。
The
制御部５０ｅは、リモコン装置５０の各種処理を制御する。制御部５０ｅは、ＣＰＵおよびメモリ（いずれも図示無し）を備える。ＣＰＵは、メモリに記憶されたプログラムを実行することにより各種の機能を実現する。
The control unit 50e controls various processes of the
図３はリモコン装置５０のソフトウェア構成例を示す図である。リモコン装置５０は、ペアリング処理部５００、映像データ受信部５０１、表示制御部５０２及び映像データ送信部５０３を備える。ペアリング処理部５００、映像データ受信部５０１、表示制御部５０２及び映像データ送信部５０３は、制御部５０ｅのＣＰＵがメモリに記憶されている動作プログラムを実行することにより実現される。動作プログラムは、たとえば、分割表示用アプリにより実行される。
FIG. 3 is a diagram showing a software configuration example of the
（ペアリング処理部）
ペアリング処理部５００は、利用者が所有する携帯端末で撮影された映像をリモコン装置５０で表示可能とするよう、当該携帯端末とリモコン装置５０とのペアリングを行う。
(Pairing processing unit)
The
具体例として、利用者Ａ〜利用者Ｆでカラオケ装置１を利用する場合について述べる。この例においては、利用者Ａがカラオケ歌唱を行い、利用者Ｂ〜利用者Ｅそれぞれが自己の所有する携帯端末Ｍｂ〜Ｍｅを用いて利用者Ａの撮影を行い、利用者Ｆがリモコン装置５０を操作するとする。
As a specific example, a case where the karaoke device 1 is used by the users A to F will be described. In this example, the user A sings a karaoke song, each of the users B to E takes a picture of the user A using their own mobile terminals Mb to Me, and the user F takes a picture of the
利用者Ａは、リモコン装置５０を介して楽曲Ｘを予約する際、表示部５０ｄに表示された分割表示モードのボタンを選択する。利用者Ａの選択に伴い、リモコン装置５０は、分割表示アプリの立ち上げを行う。
When the user A reserves the music X via the
その後、撮影を行う利用者Ｂ〜利用者Ｅは、自己の携帯端末とリモコン装置５０とのペアリングを行う。たとえば、利用者Ｂは、携帯端末Ｍｂで専用のアプリを立ち上げ、リモコン装置５０に対して近距離無線通信により、携帯端末Ｍｂの端末ＩＤを送信する。ペアリング処理部５００は、受信した端末ＩＤをペアリングテーブルに記憶する。この例では、携帯端末Ｍｂと同様に、携帯端末Ｍｃ〜携帯端末Ｍｅの端末ＩＤもペアリングテーブルに記憶されたとする。
After that, the user B to the user E who performs the shooting perform pairing between their own mobile terminal and the
ペアリング処理部５００は、たとえば所定時間、携帯端末からの端末ＩＤの送信を受け付けた後、カラオケ本体１０に対して演奏開始の信号を送信する。カラオケ本体１０は、演奏開始の信号を受信した場合、楽曲Ｘのカラオケ演奏を開始する。
The
なお、分割表示モードは、上記例のように楽曲毎に選択することでもよいし、「分割表示モード」ボタンの押下に基づき、以降に歌唱されるカラオケ楽曲を全てに対して分割表示モードを設定することでもよい。 The split display mode may be selected for each song as in the above example, or the split display mode is set for all the karaoke songs to be sung thereafter based on the pressing of the "split display mode" button. You may do it.
（映像データ受信部）
映像データ受信部５０１は、ペアリングされた携帯端末により撮影された映像データを受信する。
(Video data receiver)
The video
上記例において、楽曲Ｘのカラオケ演奏に合わせて利用者Ａはカラオケ歌唱を行う。利用者Ｂ〜利用者Ｅは、自己の携帯端末により、それぞれ所望の位置や大きさで利用者Ａの撮影を行う。各携帯端末は、撮影により得られた映像データを、撮影時間（撮影タイミング）及び端末ＩＤと関連付けてリモコン装置５０に送信する。
In the above example, the user A sings karaoke along with the karaoke performance of the music X. Users B to E take pictures of user A at desired positions and sizes by their own mobile terminals. Each mobile terminal transmits the video data obtained by shooting to the
映像データ受信部５０１は、各携帯端末から送信された端末ＩＤがペアリングテーブルに含まれているかどうかを確認する。送信された端末ＩＤがペアリングテーブルに含まれている場合、映像データ受信部５０１は、当該端末ＩＤに関連付けられている映像データ及び撮影時間を受信する。ここでは、利用者Ｂ〜利用者Ｅそれぞれの携帯端末から送信された映像データを順次受信するものとする。
The video
（表示制御部）
表示制御部５０２は、ペアリングされた第１の携帯端末により撮影された映像データに基づく第１の映像と、第１の映像と同じタイミングで他の装置により撮影された映像データに基づく第２の映像を、一の表示画面を分割して表示させる。
(Display control unit)
The
一の表示画面の分割は、表示させる映像の数に応じて設定することが可能である。各映像の表示サイズは等しくてもよいし、異なっていてもよい。 The division of one display screen can be set according to the number of images to be displayed. The display size of each image may be the same or different.
上記例において、携帯端末Ｍｂにより撮影タイミングＴ１で撮影された映像データに基づく映像Ｉ１を受信したとする。表示制御部５０２は、撮影タイミングＴ１と同じタイミングで撮影された映像データを受信しているかどうかを判断する。この例では、他の携帯端末Ｍｃ〜Ｍｅから撮影タイミングＴ１で撮影された映像データ（それぞれ映像Ｉ２〜Ｉ４に対応する）を受信しているとする。この場合、表示制御部５０２は、一の表示画面を４分割し、映像Ｉ１〜Ｉ４を一の表示画面を４分割して表示させる（図４Ａ参照）。このように、ある時点で一の表示画面に複数の映像が表示される場合、それらの映像は、同じタイミングで撮影された映像に相当する。
In the above example, it is assumed that the video I1 based on the video data shot at the shooting timing T1 is received by the mobile terminal Mb. The
表示制御部５０２は、各携帯端末から順次送信される映像を表示させることにより、動画像として表示させることができる。この例における携帯端末Ｍｂは「第１の携帯端末」の一例であり、映像Ｉ１は「第１の映像」の一例であり、携帯端末Ｍｃ〜Ｍｅは「他の装置」の一例であり、映像Ｉ２〜Ｉ４は、「第２の映像」の一例である。すなわち、本実施形態では、「他の装置」が、第１の携帯端末（携帯端末Ｍｂ）とは異なる携帯端末であって、リモコン装置５０とペアリングされている第２の携帯端末（携帯端末Ｍｃ〜Ｍｅ）に相当する。
The
なお、ある利用者がカラオケ演奏の開始後も撮影を行わない場合や、ある利用者が途中で撮影を中止した場合、携帯端末から映像データが受信できない。この場合、表示制御部５０２は、当該携帯端末により撮影された映像データに基づく映像を表示させる領域には何も表示させないことが可能である。たとえば、上記例において、携帯端末Ｍｅから映像データが受信できない場合、表示制御部５０２は、図４Ａにおける左下の分割領域には何も表示させない。
If a user does not shoot even after the start of the karaoke performance, or if a user stops shooting in the middle, the video data cannot be received from the mobile terminal. In this case, the
或いは、表示制御部５０２は、映像データを送信している携帯端末の数に応じて、分割領域を変更してもよい。たとえば、上記例において、携帯端末Ｍｅから映像データが受信できない場合、表示制御部５０２は、残りの携帯端末Ｍｂ〜Ｍｄの数（３つ）に応じて表示画面を３分割し、それぞれの携帯端末からの映像データに基づく映像を表示させることも可能である。
Alternatively, the
（映像データ送信部）
映像データ送信部５０３は、分割表示された複数の映像のうち、任意に選択された映像に対応する映像データをカラオケ本体に送信する。
(Video data transmitter)
The video
たとえば、図４Ａのように複数の映像が分割表示されているとする。利用者Ｆは、表示されている４つの映像の中から、利用者Ａの動きが分かりやすい映像や映りのよい映像等、任意の映像を選択する。映像の選択は、たとえば、タッチパネル方式の表示部５０ｄで所望の画像を選択することにより行うことができる。図４Ｂは、映像Ｉ２が選択された例を示している。 For example, suppose that a plurality of images are divided and displayed as shown in FIG. 4A. The user F selects an arbitrary image from the four displayed images, such as an image in which the movement of the user A is easy to understand and an image in which the image is good. The image can be selected, for example, by selecting a desired image on the touch panel type display unit 50d. FIG. 4B shows an example in which video I2 is selected.
利用者Ｆにより特定の映像が選択された場合、映像データ送信部５０３は、当該選択を受け付ける。そして、映像データ送信部５０３は、選択された映像データをカラオケ本体１０に送信する。
When a specific video is selected by the user F, the video
なお、選択された映像データのみを送信することでもよいし、表示されている映像データ全て、及び選択された映像データを識別するための情報（専用のＩＤや選択された時刻を示すデータ等）を併せて送信することでもよい。 It should be noted that only the selected video data may be transmitted, all the displayed video data, and information for identifying the selected video data (dedicated ID, data indicating the selected time, etc.). May also be transmitted together.
［カラオケ本体］
図５に示すように、カラオケ本体１０は、制御部１１、通信部１２、記憶部１３、音響処理部１４、表示処理部１５及び操作部１６を備える。各構成はインターフェース（図示なし）を介してバスＢに接続されている。
[Karaoke body]
As shown in FIG. 5, the
制御部１１は、ＣＰＵ１１ａおよびメモリ１１ｂを備える。ＣＰＵ１１ａは、メモリ１１ｂに記憶された動作プログラムを実行することにより各種の制御機能を実現する。メモリ１１ｂは、ＣＰＵ１１ａに実行されるプログラムを記憶したり、プログラムの実行時に各種情報を一時的に記憶したりする記憶装置である。
The
通信部１２は、ルーター（図示なし）を介してカラオケ本体１０を通信回線に接続するためのインターフェースを提供する。
The
記憶部１３は、各種のデータを記憶する大容量の記憶装置であり、たとえばハードディスクドライブなどである。記憶部１３は、カラオケ装置１によりカラオケ演奏を行うための複数の楽曲データを記憶する。本実施形態に係る記憶部１３は、映像データ送信部５０３から送信された、選択された映像データを記憶してもよい。
The
音響処理部１４は、制御部１１の制御に基づき、カラオケ楽曲に対する演奏の制御およびマイク４０を通じて入力された歌唱音声信号の処理を行う。音響処理部１４は、たとえばＭＩＤＩ音源、ミキサ、アンプ（いずれも図示なし）を含む。ＭＩＤＩ音源は、楽曲データに基づいて楽音信号を生成する。ミキサは、当該音楽信号およびマイク４０から出力される歌唱音声信号を適当な比率でミキシングしてアンプに出力する。アンプは、ミキサからのミキシング信号を増幅し、放音信号としてスピーカ２０へ出力する。これにより、スピーカ２０からは放音信号に基づくカラオケ演奏音およびマイク４０からの歌唱音声が放音される。
Based on the control of the
表示処理部１５は、制御部１１の制御に基づき、表示装置３０やリモコン装置５０における各種表示に関する処理を行う。たとえば、表示処理部１５は、カラオケ演奏時における背景映像に歌詞テロップが重ねられた映像を表示装置３０に表示させる制御を行う。
The
操作部１６は、パネルスイッチおよびリモコン受信回路などからなり、歌唱者によるカラオケ装置１のパネルスイッチあるいはリモコン装置５０の操作に応じて選曲信号、演奏中止信号などの操作信号を制御部１１に対して出力する。制御部１１は、操作部１６からの操作信号を検出し、対応する処理を実行する。
The
図６はカラオケ本体１０のソフトウェア構成例を示す図である。カラオケ本体１０は、映像処理部１０１、及び表示制御部１０２を備える。映像処理部１０１、及び表示制御部１０２は、制御部１１のＣＰＵ１１ａがメモリ１１ｂに記憶されている動作プログラムを実行することにより実現される。
FIG. 6 is a diagram showing a software configuration example of the karaoke
［映像処理部］
映像処理部１０１は、受信した映像データを歌唱された楽曲毎に編集し、サーバにアップロードする。
[Video processing unit]
The
たとえば、利用者Ａによる楽曲Ｘの歌唱が終了した場合、映像処理部１０１は、楽曲Ｘの歌唱中にリモコン装置５０から送信された映像データを記憶部１３から読み出し、時系列に繋ぎ合せることで映像（動画像）の編集を行う。映像処理部１０１は、編集した映像データをサーバに送信（アップロード）する。なお、映像データを編集する際に、カラオケ歌唱により得られた歌唱音声データも含めて編集してもよい。また、映像データの編集はサーバ（図示無し）側で行うことも可能である。この場合、映像処理部１０１は、編集前の映像データをそのままサーバにアップロードする。
For example, when the singing of the music X by the user A is completed, the
映像処理部１０１によるサーバへのアップロードは、分割表示モードを選択したことに応じて自動的に実行されてもよい。或いは、映像処理部１０１は、編集が完了した後にアップロードするかどうかの確認信号をリモコン装置５０に送信する。リモコン装置５０は、当該確認信号に応じて利用者へ確認画面を提示する。そして、利用者からアップロードの指示があった場合、リモコン装置５０は指示信号をカラオケ本体１０に送信する。映像処理部１０１は、このような指示信号を受信した場合にのみアップロードを行うことでもよい。
The upload to the server by the
［表示制御部］
表示制御部１０２は、リモコン装置５０から受信した映像データに基づく映像、または編集した映像データに基づく映像を表示装置３０に表示させる。
[Display control unit]
The
表示制御部１０２は、表示処理部１５を制御し、リモコン装置５０から受信した映像データに基づく映像を表示装置３０のディスプレイに順次表示させることができる。表示制御部１０２は、この映像を背景画像に重畳して表示してもよいし、背景画像の代わりとして表示してもよい。この場合、歌唱を行う利用者は、自己の歌唱している姿をリアルタイムで確認することができる。或いは、表示制御部１０２は、カラオケ歌唱の終了後に、映像処理部１０１において編集された映像データに基づく映像を表示させることも可能である。この場合、カラオケ歌唱を行った利用者は、カラオケ歌唱の出来や映り具合を確認したうえでアップロードするかどうかを判断することが可能となる。
The
＝＝カラオケ装置１の動作について＝＝
次に、図７を参照して本実施形態におけるカラオケ装置１の動作の具体例について述べる。図７は、カラオケ装置１の動作例を示すフローチャートである。この例では、利用者Ａが楽曲Ｘのカラオケ歌唱を行い、利用者Ｂ〜利用者Ｅそれぞれが自己の所有する携帯端末Ｍｂ〜Ｍｅを用いて利用者Ａの撮影を行い、利用者Ｆがリモコン装置５０を操作するとする。
== About the operation of the karaoke device 1 ==
Next, a specific example of the operation of the karaoke device 1 in the present embodiment will be described with reference to FIG. 7. FIG. 7 is a flowchart showing an operation example of the karaoke device 1. In this example, user A sings a karaoke song of music X, each of user B to E takes a picture of user A using his / her own mobile terminals Mb to Me, and user F uses a remote controller. It is assumed that the
利用者Ａは、リモコン装置５０を介して楽曲Ｘを予約する際、表示部５０ｄに表示された分割表示モードのボタンを選択する（分割表示モードの選択。ステップ１０）。この選択に伴い、リモコン装置５０は分割表示アプリの立ち上げを行う。
When the user A reserves the music X via the
ペアリング処理部５００は、利用者Ｂ〜利用者Ｅが所有する携帯端末Ｍｂ〜Ｍｅで撮影された映像を表示可能とするよう、各携帯端末とのペアリングを行う（携帯端末とのペアリング。ステップ１１）。ペアリング処理部５００は、所定時間の経過後、演奏開始信号をカラオケ本体１０に送信する（演奏開始信号の送信。ステップ１２）。ここでは、所定時間内に携帯端末Ｍｂ〜Ｍｅ全てとのペアリングが完了したものとする。表示制御部５０２は、ペアリングした携帯端末の数（４つ）に応じて、予め表示画面が４分割されるように設定を行っておく。
The
カラオケ本体１０は、演奏開始信号に基づいて楽曲Ｘの演奏を開始する（演奏の開始。ステップ１３）。利用者Ｂ〜利用者Ｅは、各携帯端末を用いて利用者Ａのカラオケ歌唱を撮影する。携帯端末は、撮影した映像データをリモコン装置５０に順次送信する。
The karaoke
映像データ受信部５０１は、ステップ１１でペアリングされた携帯端末から送信されてきた映像データを受信する（映像データの受信。ステップ１４）。
The video
表示制御部５０２は、ペアリングされた携帯端末Ｍｂ〜Ｍｅにより同じタイミングで撮影された映像データに基づく複数の映像を、一の表示画面を分割して表示させる（分割表示。ステップ１５）。
The
表示部５０ｄの表示画面に分割表示された複数の映像の中から利用者Ｆが任意の映像を選択した場合、映像データ送信部５０３は、当該選択を受け付ける。そして、映像データ送信部５０３は、選択された映像に対応する映像データをカラオケ本体１０に送信する（選択された映像データの送信。ステップ１６）。
When the user F selects an arbitrary video from a plurality of videos divided and displayed on the display screen of the display unit 50d, the video
楽曲Ｘの演奏が終了した場合（演奏の終了。ステップ１７）、カラオケ本体１０の映像処理部１０１は、受信した映像データを歌唱された楽曲毎に時系列に編集し、サーバにアップロードする（編集・アップロード。ステップ１８）。
When the performance of the music X is completed (end of the performance. Step 17), the
このように、本実施形態に係るカラオケ装置１によれば、携帯端末で撮影された映像をリモコン装置５０で表示可能とするようペアリングを行い、ペアリングされた携帯端末により撮影された映像データを受信することができる。また、カラオケ装置１は、ペアリングされた複数の携帯端末により同じタイミングで撮影された映像データに基づく複数の映像を、一の表示画面を分割して表示させることができる。更に、カラオケ装置１は、分割表示された複数の映像のうち、任意に選択された映像に対応する映像データをカラオケ本体１０に送信する。すなわち、本実施形態に係るカラオケ装置によれば、利用者が、同じタイミングで撮影された映像データに基づく複数の映像の中から所望の映像を選択できる。このように選択された映像は、たとえば、カラオケ本体１０の映像処理部１０１によって時系列に編集され、動画像としてサーバへアップロードすることが可能となる。なお、このように編集された動画像を構成する各映像は、任意に選択されたものであるため、カラオケ歌唱の臨場感が得られる映像であったり、カラオケ歌唱する利用者の特徴的な動きを捉えた映像であったりする。つまり、本実施形態に係るカラオケ装置１によれば、従来の映像に比べて個性のある映像を得ることが可能となる。
As described above, according to the karaoke device 1 according to the present embodiment, pairing is performed so that the video captured by the mobile terminal can be displayed by the
＜変形例＞
図４Ａのような分割表示がなされた場合に、いずれの映像も選択されない場合がありうる。この場合、携帯端末から送信された映像データがカラオケ本体１０に送信されないため、たとえば歌唱終了後に映像の編集を行う際に映像の一部が欠けてしまうという問題が生じる。
<Modification example>
When the divided display as shown in FIG. 4A is performed, none of the images may be selected. In this case, since the video data transmitted from the mobile terminal is not transmitted to the
そこで、映像データ送信部５０３は、分割表示された映像のいずれもが所定時間、選択されない場合には、表示画面の所定位置に表示されている映像に対応する映像データをカラオケ本体１０に送信することが可能である。
Therefore, the video
所定時間及び所定位置については、予め設定しておくことも可能であるし、都度、設定することでもよい。たとえば、所定時間として「映像が選択されない時間が５秒以上続いた場合」を設定し、所定位置として「分割表示のうち、左上に位置する映像」を設定することができる。たとえば、図４Ａの例において映像が選択されない時間が５秒続くと、映像データ送信部５０３は、左上に位置する映像Ｉ１に対応する映像データをカラオケ本体１０に送信する。
The predetermined time and the predetermined position can be set in advance, or may be set each time. For example, "when the time when the image is not selected continues for 5 seconds or more" can be set as the predetermined time, and "the image located at the upper left of the divided display" can be set as the predetermined position. For example, in the example of FIG. 4A, when the video is not selected for 5 seconds, the video
このように、分割された映像のいずれもが選択されない場合であっても、強制的に映像データをカラオケ本体１０に送信することにより、あるカラオケ楽曲の歌唱に伴う映像データが部分的に欠損することが無い。すなわち、歌唱終了後に映像の編集を行う場合に映像の一部が欠けるようなことが生じない。
In this way, even if none of the divided videos is selected, by forcibly transmitting the video data to the karaoke
また、たとえば図４Ａのような分割表示がなされた場合、各映像を誰が撮影しているか（どの携帯端末で撮影されているか）を把握することができない。よって、撮影を行っている利用者に対して「もう少し歌唱者の顔を映して欲しい」、「もっと正面から撮影して欲しい」といった指示を行い難い。 Further, for example, when the divided display as shown in FIG. 4A is performed, it is not possible to grasp who is shooting each video (which mobile terminal is shooting). Therefore, it is difficult to give instructions such as "I want you to show the singer's face a little more" and "I want you to shoot from the front" to the user who is shooting.
そこで、表示制御部５０２は、映像を分割表示させる際に、当該映像を撮影した携帯端末を所有する利用者を示す情報を併せて表示させることが可能である。
Therefore, when the video is divided and displayed, the
この場合、ある携帯端末とリモコン装置５０とのペアリングを行う際、携帯端末は、携帯端末の端末ＩＤと併せて携帯端末を所有する利用者を識別するための利用者ＩＤを送信する。ペアリング処理部５００は、受信した端末ＩＤ及び利用者ＩＤをペアリングテーブルに記憶する。
In this case, when pairing a certain mobile terminal with the
表示制御部５０２は、映像を分割表示させる際に、受信した端末ＩＤに関連付けられている利用者ＩＤから当該映像を撮影した携帯端末を所有する利用者を特定し、当該利用者を示す情報（利用者ＩＤ、利用者名、ニックネーム等）を併せて表示させる。このようなカラオケ装置によれば、複数の映像が分割表示されている場合であっても、各映像を撮影した利用者を容易に把握することができる。
When the video is divided and displayed, the
また、上記実施形態においては、携帯端末により撮影された複数の映像を分割表示する例について述べた。一方、カラオケ装置１が備える定点カメラ６０により撮影された映像を併せて表示することも可能である。この場合、定点カメラ６０は「他の装置」に相当する。また、定点カメラ６０により撮影された映像データに基づく映像は「第２の映像」に相当する。なお、定点カメラ６０で撮影された映像データを利用する場合、リモコン装置５０と通信可能な携帯端末は、少なくとも１台あればよい。
Further, in the above-described embodiment, an example of dividing and displaying a plurality of images captured by a mobile terminal has been described. On the other hand, it is also possible to display an image taken by the fixed
上記実施形態は、例として提示したものであり、発明の範囲を限定するものではない。上記の構成は、適宜組み合わせて実施することが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。上記実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 The above-described embodiment is presented as an example and does not limit the scope of the invention. The above configurations can be implemented in appropriate combinations, and various omissions, replacements, and changes can be made without departing from the gist of the invention. The above-described embodiment and its modifications are included in the scope and gist of the invention, as well as in the scope of the invention described in the claims and the equivalent scope thereof.
１ カラオケ装置
１０ カラオケ本体
５０ リモコン装置
５００ ペアリング処理部
５０１ 映像データ受信部
５０２ 表示制御部
５０３ 映像データ送信部
1
Claims (7)
前記リモコン装置は、
利用者が所有する携帯端末で撮影された映像を前記リモコン装置で表示可能とするよう、当該携帯端末と前記リモコン装置とのペアリングを行うペアリング処理部と、
ペアリングされた前記携帯端末により撮影された映像データを受信する映像データ受信部と、
ペアリングされた第１の携帯端末により撮影された映像データに基づく第１の映像と、前記第１の映像と同じタイミングで他の装置により撮影された映像データに基づく第２の映像を、一の表示画面を分割して表示させる表示制御部と、
分割表示された複数の映像のうち、任意に選択された映像に対応する映像データを前記カラオケ本体に送信する映像データ送信部と、
を有することを特徴とするカラオケ装置。 In the karaoke body and the karaoke device having a remote control device
The remote control device is
A pairing processing unit that pairs the mobile terminal with the remote controller so that the image taken by the mobile terminal owned by the user can be displayed on the remote controller.
A video data receiving unit that receives video data taken by the paired mobile terminal, and
A first video based on the video data taken by the paired first mobile terminal and a second video based on the video data taken by another device at the same timing as the first video are combined. Display control unit that divides the display screen of
A video data transmission unit that transmits video data corresponding to an arbitrarily selected video to the karaoke main unit among a plurality of divided and displayed videos.
A karaoke device characterized by having.
受信した前記映像データを歌唱された楽曲毎に時系列に編集し、サーバにアップロードする映像処理部を有することを特徴とする請求項１〜５のいずれか一つに記載のカラオケ装置。 The karaoke body
The karaoke device according to any one of claims 1 to 5, further comprising a video processing unit that edits the received video data in chronological order for each sung song and uploads it to a server.
ペアリングされた前記携帯端末により撮影された映像データを受信する映像データ受信部と、
ペアリングされた第１の携帯端末により撮影された映像データに基づく第１の映像と、前記第１の映像と同じタイミングで他の装置により撮影された映像データに基づく第２の映像を、一の表示画面を分割して表示させる表示制御部と、
分割表示された複数の映像のうち、任意に選択された映像に対応する映像データをカラオケ本体に送信する映像データ送信部と、
を有するリモコン装置。 A pairing processing unit that performs pairing with the mobile terminal so that the video taken by the mobile terminal owned by the user can be displayed.
A video data receiving unit that receives video data taken by the paired mobile terminal, and
A first video based on the video data taken by the paired first mobile terminal and a second video based on the video data taken by another device at the same timing as the first video are combined. Display control unit that divides the display screen of
A video data transmitter that transmits video data corresponding to an arbitrarily selected video to the karaoke main unit from a plurality of split-displayed videos.
Remote control device with.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017041432A JP6785169B2 (en) | 2017-03-06 | 2017-03-06 | Karaoke device, remote control device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017041432A JP6785169B2 (en) | 2017-03-06 | 2017-03-06 | Karaoke device, remote control device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2018146762A JP2018146762A (en) | 2018-09-20 |
| JP6785169B2 true JP6785169B2 (en) | 2020-11-18 |
Family
ID=63592103
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017041432A Active JP6785169B2 (en) | 2017-03-06 | 2017-03-06 | Karaoke device, remote control device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6785169B2 (en) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7371562B2 (en) | 2020-04-08 | 2023-10-31 | トヨタ自動車株式会社 | Information processing device, information processing system, and program |
| WO2022039284A1 (en) * | 2020-08-19 | 2022-02-24 | 엘지전자 주식회사 | Remote control apparatus and wireless display system |
-
2017
- 2017-03-06 JP JP2017041432A patent/JP6785169B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2018146762A (en) | 2018-09-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20140285312A1 (en) | Audio Mixing Based Upon Playing Device Location | |
| JP6785169B2 (en) | Karaoke device, remote control device | |
| JP5713048B2 (en) | Karaoke system | |
| JP6246532B2 (en) | Online karaoke system | |
| JP5293976B2 (en) | Karaoke device and communication karaoke system | |
| JP6196839B2 (en) | A communication karaoke system characterized by voice switching processing during communication duets | |
| JP6210220B2 (en) | Karaoke equipment | |
| JP6051075B2 (en) | A communication karaoke system that can continue duet singing in the event of a communication failure | |
| JP6170692B2 (en) | A communication karaoke system that can continue duet singing in the event of a communication failure | |
| JP6562302B2 (en) | Karaoke system, karaoke apparatus, moving image display method, and moving image display control program | |
| JP2015025984A (en) | Karaoke contribution system, karaoke device, and composite motion picture creation method | |
| JP6601615B2 (en) | Movie processing system, movie processing program, and portable terminal | |
| JP6007098B2 (en) | Singing video generation system | |
| JP2017063392A (en) | Video processing device and video processing system | |
| JP6601099B2 (en) | Karaoke posting system, karaoke apparatus, and composite video creation method | |
| JP6220576B2 (en) | A communication karaoke system characterized by a communication duet by multiple people | |
| JP2014197056A (en) | Information terminal, program for information terminal, and karaoke device | |
| JP5224508B2 (en) | Karaoke recorder | |
| JP6648464B2 (en) | Karaoke system and composite posting information creation method | |
| JP6876169B1 (en) | Karaoke equipment | |
| JP6648463B2 (en) | Karaoke system and composite posting information creation method | |
| JP6507793B2 (en) | Karaoke system and karaoke apparatus | |
| JP6159581B2 (en) | Online karaoke system using sound collecting microphone | |
| JP6051040B2 (en) | Singing video generation system | |
| JP6579482B2 (en) | Karaoke system, moving image display method, and moving image display control program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200123 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200903 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201020 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201026 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6785169 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |