JP6020830B2 - カラオケ装置及びカラオケ用ホスト装置 - Google Patents

Description

本発明は、演奏にあわせて歌唱を楽しむことのできるカラオケ装置、並びに、カラオケ装置と通信可能なカラオケ用ホスト装置に関する。特に、歌唱並びに歌唱の様子を公開可能とするカラオケ装置、並びに、カラオケ用ホスト装置に関する。

従来、楽曲の演奏に合わせて歌唱を楽しむカラオケ装置が知られている。現在、カラオケ装置では、歌唱を楽しむのみならず、歌唱の様子を録画した動画を、ネットワーク上に公開し、幅広いユーザに見て貰うといった投稿サービスが人気を集めている。

特許文献１には、カラオケにおいて、複数のユーザによる投稿サービス（コラボ）を実行可能とする動画情報配信システムが開示されている。この動画情報配信システムでは、カラオケ装置を利用して録画された動画情報をホスト装置にアップロードして公開し、公開された動画情報をコラボ相手となるユーザに配信し、さらなる録画情報を作成することで、１の楽曲によるコラボ動画を作成することを可能としている。

この特許文献１に開示される投稿サービスでは、従前に投稿を行った３人のユーザと新たにコラボに参加する１人のユーザ、合計４人のユーザの歌唱状況を画面に表示することを可能としている。

特開２０１３−１５６５４３号公報

特許文献１に開示された複数のユーザによる投稿サービスでは、合計４人のユーザの歌唱状況を画面に表示することでコラボを楽しむことが可能である。このような歌唱のコラボにおいて、さらにコラボの参加人数を増加させることで多人数による合唱を楽しみたいという要望がある。特許文献１に開示される動画情報配信システムにおいて、コラボの参加人数を増加させる場合、コラボの参加人数に応じて画面を分割する必要があり、参加人数が多数となった場合、分割された１つの領域の表示サイズは小さくなってしまうことが考えられる。このような表示サイズでは、ユーザの表情が読み取りづらい等の支障が考えられる。

本発明は、多人数が参加することのできる投稿サービスを提供することを目的とするものであり、その際、画面分割で表示されるユーザ毎の分割画面の表示サイズを適切なサイズで表示可能とすることを目的とするものである。

上述する課題を解決するため、本発明に係るカラオケ装置は、以下の構成を採用するものである。
演奏部と、制御部と、を備えたカラオケ装置であって、
前記演奏部は、演奏情報に基づく演奏を可能とし、
前記制御部は、投稿情報指定処理と、録画演奏処理と、録画事後処理を実行可能とし、
前記投稿情報指定処理は、ユーザによる投稿情報の指定を入力部にて受け付け、
前記投稿情報は、楽曲識別情報と、単位動画と単位歌唱音声を複数含んで構成され、
前記録画演奏処理は、演奏処理、録画処理、再生処理を実行し、
前記演奏処理は、投稿情報に含まれる楽曲識別情報に対応する演奏情報を前記演奏部に演奏させ、
前記録画処理は、カメラで撮影されている動画を単位動画情報として記録するとともに、マイクロホンから入力される歌唱音声を単位歌唱音声情報として記録し、
前記再生処理は、前記投稿情報に含まれる全ての単位歌唱音声を常時再生し、前記投稿情報に含まれる単位動画を時分割で切り替えて表示部の画面内に表示するとともに、前記カメラで撮影されている動画を前記表示部の画面内に常時表示し、
前記録画事後処理は、前記録画演奏処理の終了後、前記録画処理で記録した単位動画情報と単位歌唱音声情報を含んだ単位投稿情報をホスト装置に送信する。

さらに本発明に係るカラオケ装置において、
前記再生処理は、カメラで撮影されている動画と、前記投稿情報に含まれる複数の単位動画を、前記表示部の１画面内に表示する。

さらに本発明に係るカラオケ装置において、
前記再生処理は、１画面中に複数の単位動画を含んで構成された複合動画情報を時分割で切り替えて表示する。

さらに本発明に係るカラオケ装置において、
前記再生処理は、１画面内に表示する単位動画の数に応じて、時分割による切り替え間隔を変更する。

また本発明に係るカラオケ用ホスト装置は、
カラオケ装置と通信可能なカラオケ用ホスト装置であって、
配信処理と、受信処理と、投稿情報作成処理とを実行可能とし、
前記配信処理は、前記カラオケ装置から要求された投稿情報を配信し、
前記受信処理は、単位動画情報と単位歌唱音声情報を含んだ単位投稿情報を前記カラオケ装置から受信し、
前記投稿情報作成処理は、前記配信処理で配信した投稿情報に含まれる単位投稿情報と、前記受信処理で受信した単位投稿情報に基づいて投稿情報を作成し、
前記投稿情報は、前記複数の単位投稿情報に含まれる全ての単位歌唱音声を常時再生するとともに、前記複数の単位動画を時分割で切り替えて表示する領域と、カメラで撮像された動画を常時表示するための領域とを有する。

本発明のカラオケ装置、並びに、カラオケ用ホスト装置によれば、複数の投稿者の歌唱音声を常時再生することで多数の投稿者との歌唱体験を楽しむことが可能となる。その際、投稿者の歌唱の様子を記録した単位動画を時分割で切り替えて表示することで、各投稿者の歌唱の様子を適切な大きさで確認しつつ歌唱を行うことを可能としている。

本発明の実施形態に係る投稿の概要を説明するための図 本発明の実施形態に係るカラオケシステムの構成を示す図 本発明の実施形態に係るカラオケ装置のメイン処理を示すフロー図 本発明の実施形態に係る投稿情報選択画面を示す図 本発明の実施形態に係る投稿情報（ダウンロード情報）のデータ構成図 本発明の実施形態に係る映像再生処理時の画面構成を示す図 本発明の実施形態に係る楽曲再生時の画面構成、出力形態を説明するための図 本発明の実施形態に係る単位投稿情報（アップロード情報）のデータ構成図 本発明の実施形態に係るホスト装置における投稿情報作成処理を示すフロー図 本発明の実施形態に係る投稿情報（ダウンロード情報）のデータ構成図 本発明の実施形態に係る楽曲再生時の画面構成、出力形態を説明するための図 本発明の実施形態に係る人数に応じた画面構成を示す図

本実施形態のカラオケ装置は、歌唱を楽しむカラオケにおいて、その場に居合わせない歌唱者とデュエットや合唱などを楽しむことのできるカラオケ投稿システムに利用可能としている。図１は、このカラオケ投稿システムの概要を説明するための図である。この図を用いてカラオケ投稿の流れを簡単に説明する。ここでは、歌唱音声の記録を行う場合について説明するが、実際には、カメラにて記録された映像が伴うこととなる。

まず、歌唱者は、カラオケボックスなど、カラオケシステムが設置される場所で演奏にあわせた歌唱が行われ歌唱音声が記録される（ａ）。カラオケシステムは、カラオケ装置（別称「コマンダ」）、カラオケ装置から出力される歌詞映像、背景映像が表示されるモニタ、操作者からの操作をカラオケ装置に伝えるリモコン装置にて構成されている。歌唱音声は、カラオケ装置に内蔵されたハードディスクなどの記録手段に第１投稿情報として記録される。

歌唱者は、記録された歌唱音声を確認するため、第１投稿情報の再生を行うこともできる（ｂ）。歌唱者が希望する場合には、第１投稿情報は、ホスト装置上にアップロードされ、インターネットを介して公開することが可能となる（ｃ）。公開された第１投稿情報は、この歌唱者と一緒に歌唱を希望する歌唱者によりカラオケシステムでダウンロードされる（ｄ）。

ダウンロードされた第１投稿情報は、楽曲にあわせて再生することで内容を確認することもできる（ｅ）。ダウンロードされた第１歌唱情報は、楽曲と共にカラオケ装置にて再生され、歌唱者は予め記録された第１歌唱情報とのデュエットを楽しむことができる。さらに、第１歌唱情報と一緒に歌唱を行った歌唱者の歌唱音声は、第２投稿情報としてカラオケ装置に記録される（ｆ）。記録された第２投稿情報は、第１投稿情報、並びに、楽曲と同期して再生することができ、歌唱者は自身の歌唱をデュエット形式で確認することができる（ｇ）。

歌唱者は、新たな投稿として第２投稿情報をホスト装置にアップロードすることができる。第２投稿情報は、第１投稿情報と併せて再生することができるものであるが、ホスト装置には第１投稿情報が保存されているため、第２投稿情報のみが送信される。第２投稿情報には、第１投稿情報と対応付けるため、第２投稿情報の識別情報が付与される（ｈ）。

ホスト装置に保存された第１投稿情報、第２投稿情報は、ユーザからの要請により、ＰＣ（パーソナルコンピュータ）あるいはカラオケシステムにダウンロードされ、第１投稿情報、第２投稿情報、並びに楽曲情報に基づいて複数の歌唱者によるコラボレーションを楽しむことが可能となる（ｉ）。以上、第１投稿情報と第２投稿情報に基づくコラボレーションについて説明したが、（ｄ）、（ｆ）〜（ｈ）を繰り返し行うことで、複数人（２名以上）のコラボレーションが可能となる。

このように本実施形態のカラオケ投稿システムでは、その場に居合わせない相手ともデ
ュエットや合唱を楽しむことができる。ここでは、歌唱音声についてのみ説明したが、本発明に適用する場合には、歌唱音声と一緒にカメラによる撮影、並びに、映像情報の記録がカラオケ装置にて実行される。

では、歌唱の記録とあわせて、カメラによる撮影を可能とするカラオケシステムの一実施形態について図２を用いて説明する。本実施形態におけるカラオケシステムは、カラオケ装置２（別称「コマンダ」）と、リモコン装置１にて構成されており、これらは、ＬＡＮ１００にて、無線、有線で互いに接続されている。

カラオケ装置２は、全体を統括制御する制御部３０を中心として機能し、主な機能として、演奏処理、映像再生処理、選曲処理などを実行可能としている。演奏処理は、操作部２１やリモコン装置１にてユーザにより、指定された楽曲に対応する楽曲情報を音響制御部２５にて演奏させ、スピーカ４２から放音させる処理である。このとき、スピーカ４２からはマイクロホン４４ａ、４４ｂから入力される音声も合わせて放音される。また、コラボレーション時には、録音された録音情報が合わせて再生する音声再生処理が同時に実行される。映像再生処理は、映像再生部２９にて背景映像、歌詞情報などを再生させ、モニタ４１を介して視覚情報をユーザに提供する処理である。コラボレーション時には、録画された録画情報が再生される。

選曲処理は、ユーザからの指定に基づいて楽曲を選択するための処理である。本実施形態では、リモコン装置１と連携して実行することとなる。リモコン装置１の操作部１７から入力されたユーザの指令は、赤外線通信部１９、２３、あるいは、ＬＡＮ１００を介してカラオケ装置２に伝達される。カラオケ装置２での処理結果は、リモコン装置１側の表示部１１に表示され、ユーザは選曲のための各種情報を視認することが可能である。

カラオケ装置２には、撮影を行うための外部機器としてカメラ４５が接続されている。カメラ４４からのカメラ映像は、映像入出力を担う映像制御部３１を介して、記録手段としてのＨＤＤ３２（ハードディスク）に記録、そして、モニタ４１にリアルタイム表示することが可能である。さらに、カメラ４４からの映像情報と一緒に、予め記録している歌唱相手の録画情報をモニタ４１に表示させることができる。

図４は、本発明の実施形態に係るカラオケ装置２におけるメイン処理を示すフロー図である。カラオケシステムの利用者は、リモコン装置１を利用して希望する楽曲を指定すること（通常予約）ができる。また、本実施形態では、歌唱者の歌唱姿を撮像するとともに、歌唱音声を録音して単位投稿情報を作成する予約（コラボ予約）を指定することができる（図３で説明した予約確認画面で予約を行う）。このコラボ予約では、事前に投稿された投稿情報を指定することも可能である。

図４には、本発明の実施形態に係る投稿情報選択画面が示されている。ユーザは、リモコン装置１のタッチパネルモニタ１１あるいは操作部１７を操作することで、図４に示される投稿情報選択画面にてコラボする投稿情報を選択することが可能である。本実施形態のカラオケシステムは、複数のユーザが同時にログインすることが可能であり、ログインユーザ表示欄１０３には、ログインしているユーザのアイコン（アバター）が表示されている。ユーザ表示欄１０３中、一番右側に表示されるユーザはアクティブユーザであり、アクティブユーザのユーザ情報を使用して歌唱、あるいは、コラボする楽曲を選択することが可能である。アクティブユーザの切り替えは、ユーザ切り替えボタン１０１を操作することで行うことが可能である。また、ユーザカウントを有していないユーザは、ゲストボタン１０２を操作して楽曲の選択操作等を行うことを可能としている。

図４に示される投稿情報選択画面では、事前に投稿された投稿情報に関する各種情報が
表示されている。図４の例では、投稿情報選択画面中、４つの投稿情報を選択することが可能である。さらに他の投稿情報を選択したいユーザは、画面右に表示される「前ページ」、「後ページ」と表記されたページ切り替えボタンを操作することで、他の投稿情報に関する情報を表示させることが可能である。各投稿情報に関する情報としては、歌手名、楽曲名、コラボ参加ユーザ名、投稿情報中、撮影された画面の１静止画であるサムネイル画像１０５ａ〜１０５ｄを含んで構成されている。本実施形態では、サムネイル画像１０５ａ〜１０５ｄの左上に、コラボ参加ユーザの人数が表示されている。ユーザはこれらの情報に基づいて、コラボしたい投稿情報を選択することが可能となっている。

カラオケ装置２では、予約リストを随時確認し、次に実行される予約の種類が判別される（Ｓ１０１）。予約リスト上、次の予約種別が通常予約である場合は、指定された楽曲識別子に対応する楽曲情報をＭＩＤＩ音源２６に再生させる通常楽曲再生（Ｓ１０２）を実行する。再生された楽音は、マイクロホン４３から入力される歌唱音声と一緒にスピーカ４２から放音される。

一方、予約リスト上、次の予約種別がコラボ予約である場合、Ｓ１０３にて初回投稿か否かが判定される。初回投稿である場合には、同時に再生する投稿情報が存在しないため楽曲再生（Ｓ１０５）、録画（Ｓ１０６）を開始する。一方、事前に投稿された投稿情報が指定されている場合、すなわち、２回目以降の投稿である場合、当該コラボ予約で指定されている投稿情報がカラオケ装置２にダウンロードされているか否か判断し、ダウンロードされていない場合は、サーバ装置から対象となる投稿情報のダウンロードを実行する（Ｓ１０４）。

図５には、ダウンロード時の投稿情報（１０コラボ時）のデータ構成が示されている。本実施形態の投稿情報は、投稿情報を識別するための投稿識別情報（投稿ＩＤ）、録画時に使用した楽曲の楽曲識別情報（楽曲ＩＤ）、複数の複合投稿情報によって構成されている。本実施形態では、１つの複合投稿情報に含まれるコラボ数（投稿した人数）の最大値を５としている。本実施形態では、１０コラボであるため、投稿情報には、２つの複合投稿情報が含まれている。１つの投稿情報に含まれる複合投稿情報の数は、コラボ数が５増加する毎に追加される。

各複合投稿情報は、複合動画情報、複合音声情報、コラボ数、コラボユーザ情報を含んで構成されている。複合動画情報は、単位投稿情報に含まれる単位動画情報を画面上で複数（最大値５）配置して構成された動画情報である。本実施形態では、ホスト装置５において、複数の単位動画情報を組み合わせてエンコードすることで複合動画情報を形成している。複合音声情報は、カラオケ装置２から投稿された単位投稿情報に含まれる単位音声情報を複数（最大値５）ミキシング（合成）して形成された音声情報である。本実施形態において、複合音声情報は、複合動画情報と同様、ホスト装置５において、複数の単位音声情報をミキシングすることで形成される。複合動画情報のエンコードと、複合音声情報のミキシングは、ホスト装置５におおいて同時に行うこととしてもよい。

コラボ数は、複合投稿情報に含まれる投稿人数を示す数で有り、複合動画情報、複合音声情報において使用された単位動画情報、単位音声情報の数に相当する。コラボユーザ情報は、複合投稿情報中に含まれる投稿ユーザに関する情報であり、投稿ユーザについて、ユーザ識別情報と、各投稿ユーザの投稿した順番等を含んで構成されている。

投稿情報のダウンロード（Ｓ１０４）が完了すると、楽曲の演奏が開始される（Ｓ１０５）。制御部としてのＣＰＵ３０は、投稿情報中に含まれる楽曲ＩＤ（楽曲識別情報）に対応する演奏情報を、ＨＤＤ３２から読み出して、演奏部としての音響制御部２５に演奏開始させる。楽曲の演奏開始に伴い、歌唱用マイク４４ａ、４４ｂから入力された歌唱音
声の記録、並びに、カメラ４５にて撮像された動画の記録が開始される（Ｓ１０６）。記録された歌唱音声は、単位歌唱音声情報として記録される。そして、記録された動画は、単位動画情報としてＨＤＤ３２に一次記録される。

また、楽曲の演奏中には、ダウンロードした投稿情報、及び、カメラ４５にて撮像されている動画がモニタ４１上に表示する動画再生処理（Ｓ１０７）が実行される。図６には、楽曲演奏中のある時点でのモニタ４１の表示形態が示されている。図５で説明したように、本実施形態では１つの投稿情報中に複数の複合投稿情報が含まれている。本実施形態では、楽曲の演奏中、複数の複合投稿情報に含まれる複合動画情報を時分割で表示させることとしている。

図６は、楽曲の演奏中においてある複合動画情報が再生されている状態を示している。図５で説明したように、本実施形態では、複数（最大数５）の単位動画情報を画面上で組み合わせて複合動画情報を形成している。図６に示されるＣ１〜Ｃ５は、複合動画情報の作成に使用された単位動画情報に基づいて表示された単位動画である。本実施敬愛では、この単位動画Ｃ１〜Ｃ５を配置して形成された複合動画情報に、カメラ４５で撮影されている単位動画情報ＣＡ、並びに、演奏している楽曲に対応する歌詞情報を重畳して画面を構成している。カメラ４５で撮影されている単位動画情報ＣＡは、モニタ４１上では、左右反転させた鏡像形態で表示している。このような鏡像形態で表示することで、モニタ４４５を観察する歌唱ユーザの違和感の抑制を図っている。なお、記録された単位動画情報ＣＡをプレビュー、あるいは、投稿情報として再生表示する際には、鏡像形態を解除した形態で再生表示が行われる。

図５で説明したように、本実施形態の投稿情報は、複数の複合投稿情報で形成することが可能であり、各複合投稿情報は、複合動画情報と複合音声情報を含んで構成される。本実施形態では、複数の複合投稿情報が含まれる場合、複合動画情報を時分割で表示するとともに、全ての複合音声情報を再生することで、多人数によるコラボレーションを実現可能としている。その際、複合動画情報を時分割で再生することで、１つの画面上に含まれるコラボユーザの数を多人数とすることなく、１つの画面中で分割表示された単位動画の面積を確保することで、表示されるコラボユーザの視認性の維持が図られる。

図７には、本発明の実施形態に係る楽曲再生時の画面構成、及び、映像と音響の出力形態が示されている。図７の実施形態は、図５で説明した投稿情報のデータ構成の場合であり、２つの複合投稿情報によって構成された場合の形態である。図５に示されるように各複合投稿情報は、５人のコラボユーザ（コラボ数５）の単位投稿情報によって形成されている。映像については、各複合動画情報を時分割で表示させている。図７の情報には、各複合動画情報の配置形態が示されている。第１複合動画情報中の単位動画の配置形態Ａは、図６で説明したように単位動画Ｃ１〜Ｃ５を組み合わせて形成されている。この第１複合動画情報に、カメラ４５で撮影されている単位動画情報ＣＡ、そして、演奏されている楽曲の歌詞情報が重畳され、モニタ４１に表示する画面が形成される。

第２複合動画情報中の単位動画の配置形態Ｂは、単位動画Ｃ６〜Ｃ１０を組み合わせて形成されている。この第２複合動画情報に、カメラ４５で撮影されている単位動画情報ＣＡ、そして、演奏されている楽曲の歌詞情報が重畳される。本実施形態では、これら第１複合動画情報と第２複合動画情報を時分割で再生表示している。図中、各複合が情報について、実線で表示する期間は出力期間であり、破線で表示する期間は非出力期間である。本実施形態では、このような表示形態を採用することで、コラボに参加したユーザを全て表示するとともに、コラボの参加人数が多人数となった場合においても、モニタ４１ｓに表示される各ユーザの単位動画の面積を確保可能としている。

一方、楽曲再生時の音響出力形態は、演奏情報による演奏、第１複合音声情報、第２複合音声情報の再生を、演奏開始から演奏終了の期間中、継続して行うこととしている。このような音響出力形態により、演奏情報の演奏にあわせて、コラボに参加した１０人のユーザの歌唱音声を音響出力することで、全てのコラボユーザとの合唱を行うことを可能としている。

楽曲の再生が終了（Ｓ１０８：Ｙｅｓ）すると、それに伴い、録音、録画を行う録画演奏処理が終了する（Ｓ１０９）。録画演奏処理でＨＤＤ３２等の記憶部に記録された録画情報は、投稿の対象とする前に、ユーザにより確認することが可能である。タッチパネルモニタ３３、あるいは、リモコン装置１等の入力部を使用して、プレビューが指定された場合（Ｓ１１０：Ｙｅｓ）には、記録された動画情報を再生するプレビュー処理が実行される（Ｓ１１１）。このプレビュー処理では、今回、記録した動画情報のみを再生することとしてもよいし、図６のようなレイアウト（今回撮像された単位動画ＣＡについては、正転像で表示する）にて、前回までの複合動画情報を同時に再生させることとしてもよい。なお、本実施形態の録画演奏処理では、楽曲の演奏音は記録していないため、プレビュー処理では、対象となる楽曲情報を同期して再生させることで、歌唱時の状態を再現することが可能である。なお、本実施形態では、タッチパネルモニタ３３、あるいは、リモコン装置１を入力部として使用しているが、入力部としては、このような形態の他、ユーザが所持する携帯電話やスマートフォン等の携帯端末を使用することが可能である。このような形態では、携帯端末に入力された情報、指示が通信によって、カラオケ装置２に通知されることとなる。

その後、ユーザは、楽曲演奏中に記録された単位動画情報、及び、単位音声情報を投稿情報としてホスト装置５に投稿するか否か、カラオケ装置２あるいはリモコン装置１に設けられた各種入力手段を使用して選択することが可能である。アップロードすることが選択された場合、楽曲演奏中に記録された単位動画情報、及び、単位音声情報を含む投稿情報が形成される。図８には、本発明の実施形態に係る単位投稿情報（アップロード情報）のデータ構成が示されている。本実施形態の単位投稿情報は、録画演奏処理で録音されたユーザの歌唱（単位音声情報）、録画された歌唱の様子（単位動画情報）、録画演奏処理に使用された投稿情報の投稿ＩＤ、録画演奏処理に使用された楽曲の楽曲ＩＤ（楽曲識別情報）、図４の投稿情報選択画面において、アクティブユーザとして投稿情報を選択したユーザのユーザＩＤを含むコラボユーザ情報を含んで構成されている。

ユーザによりアップロードすることが選択された場合（Ｓ１１２：Ｙｅｓ）、この単位投稿情報をホスト装置５に送信するアップロード処理を実行する（Ｓ１１３）。一方、アップロードしない場合（Ｓ１１２：Ｎｏ）には、録画、録音した単位動画情報、単位音声情報を破棄し、一連の処理を終了する。

ホスト装置５は、カラオケ装置２から受信した単位投稿情報を使用して、次のコラボを行うための投稿情報を作成する。図９には、本発明の実施形態に係るホスト装置５における投稿情報作成処理を示すフロー図が示されている。ホスト装置５において、カラオケ装置２から単位投稿情報を受信した場合（Ｓ２０１：Ｙｅｓ）、単位投稿情報中の投稿ＩＤ（投稿識別情報）を参照し、当該単位投稿情報の作成に使用された投稿情報が抽出される（Ｓ２０２）。抽出された投稿情報中に含まれる複合投稿情報中、最後に形成された複合投稿情報中のコラボ数が所定人数を超過しているか否かが判定される（Ｓ２０３）。図６等で説明したように、本実施形態では、１つの画面中に５人までのユーザを表示するため、この所定人数は５人である。

図５の投稿情報の場合、最後に作成された複合投稿情報のコラボ数は５人であるため、Ｓ２０３の判定は所定人数を超過している（Ｓ２０３：Ｙｅｓ）と判定される。この場合
、今回受信した単位投稿情報を、第２複合投稿情報中に含めることはできないため、受信した単位投稿情報に基づいてエンコードを行うこと（Ｓ２０４）によって、新たな複合投稿情報（第３複合投稿情報）作成される（Ｓ２０９）。図１０には、図５の投稿情報に対し、今回行われたコラボによる単位投稿情報を加えて形成された新たな投稿情報（ダウンロード情報）のデータ構成が示されている。第１複合投稿情報、第２複合投稿情報は従前の情報であり、新たに第３複合動画情報、第３複合音声情報、コラボ数、コラボユーザ情報を含む第３複合投稿情報が付加されている。図１２（Ａ）には、新たに作成された場合の投稿動画情報の画面構成が示されている。モニタ４１内の領域Ｃ１には、新たに投稿された単位投稿情報内の単位動画情報が表示される。また、モニタ４１内の破線で示される領域は、次の投稿時、カメラ４５にて撮像された動画情報が表示される領域である。

図９のフロー図に戻り、最後に作成された複合投稿情報中のコラボ数が所定数を超過していない場合（Ｓ２０３：Ｎｏ）には、最後に作成された複合投稿情報に使用した単位投稿情報が記憶部５１内のデータベースから抽出される（Ｓ２０６）。Ｓ２０７では、抽出した単位投稿情報と、今回受信した単位投稿情報に基づき、差し替えるための複合投稿情報の作成（エンコード）が行われる。図１２（Ｂ）〜図１２（Ｅ）には、今回の投稿に基づいて形成される複合動画情報の画面構成が示されている。図１２（Ｂ）は、今回の投稿を含めコラボ数が２人の場合の画面構成であり、図１２（Ｃ）〜図１２（Ｅ）は、当該コラボ数が、３人、４人、５人の場合である。

図１２（Ａ）の場合と同様、領域Ｃ１〜Ｃ５は単位投稿情報内の単位動画情報が表示される領域である。各画面中、末番の領域には、今回新たに投稿された単位投稿情報内の単位動画情報が表示される。また、モニタ４１内の破線で示される領域は、次の投稿時、カメラ４５にて撮像された動画情報が表示される領域である。一方、音響面においては、単位動画情報中の全ての単位音声情報をミキシングして複合音声情報が形成される。

エンコードにより新たに形成された複合動画情報、複合音声情報にコラボ数、コラボユーザ情報を加えることで新たな複合投稿情報が形成される。新たに形成された複合投稿情報は、対象としている投稿情報中、最後に作成された複合投稿情報と差し替えられ（Ｓ２０８）、投稿情報の作成が完了する（Ｓ２０９）。作成された投稿情報は、カラオケ装置２におけるコラボにおいて使用されることとなる。

図１１には、図１０で説明した新たに作成された投稿情報について、楽曲再生時の画面構成、出力形態が示されている。図７で説明した実施形態では、１０人のユーザによって形成された投稿情報に基づくコラボであったが、図１１の実施形態では、図７で新たにコラボに参加したユーザが追加された形態となっている。本実施形態では、１つの画面中のコラボ参加人数を５人（コラボ参加者を含めると６人）としているため、図１１の実施形態では、第３複合動画情報が追加され、画面構成の形態（配置形態Ｃ）が１つ増加している。

映像面については、演奏開始から演奏終了までの期間中、第１〜第３複合動画情報を時分割で切り替えて再生することとしている。なお、本実施形態では、各複合動画情報中のコラボ数によって、出力期間の長さを調整している。具体的には、第１複合動画情報、第２複合動画情報のコラボ数が５であるに対して、第３複合動画情報のコラボ数は１であるため、第３複合動画情報の出力期間を、第１、第２複合動画情報の出力期間よりも短く設定している。このような形態を採用することで、モニタ４１に表示される歌唱者の人数に応じた表示期間を確保することが可能となる。なお、表示期間の設定は、コラボ数に応じて適宜に設定することが可能である。

一方、音響面については、演奏部としての音響制御部２５に演奏情報を演奏させる他、
常時、第１〜第３複合音声情報の再生を行うこととしている。このような形態により、音響面においては、コラボに参加した全てのユーザと合唱を楽しむことが可能となる。また、映像面においては、画面内に複数の単位動画を配置して構成された複合動画情報を時分割で切り替えて表示することで、各ユーザの視認領域を適度な大きさで確保しつつ、多人数参加によるコラボを実現可能としている。

以上、本実施形態のカラオケシステムでは、ホスト装置５において、単位投稿情報中の単位動画情報をエンコードすることで、複数の複合動画情報を形成し、カラオケ装置２において、複合動画情報を時分割で切り替えて再生する形態を採用している。このような形態では、ホスト装置５側で集約してエンコードを行うこととなり、カラオケ装置２における負荷を削減することが可能となる。

なお、本発明は、このようにホスト装置５において複数の複合動画情報を形成し、カラオケ装置２において時分割で切り替えて再生する形態に限られるものではなく、各種形態を採用することが考えられる。例えば、ホスト装置５において複数の複合動画情報を形成することに代え、複数の単位動画が時分割で切り替えて再生される１つの複合動画情報をホスト装置５で形成しておくことが考えられる。この場合、カラオケ装置２では、ホスト装置５で形成された１つの複合動画情報を再生するだけで、本実施形態のような画面構成、時分割での遷移を実現することが可能となる。あるいは、必要とされる単位動画情報を全て投稿情報に含ませておき、カラオケ装置２側において、表示される画面中に、単位動画情報を組み合わせて配置するとともに、配置形態を時分割で切り替えることとしてもよい。このような形態では、ホスト装置５はエンコードを行う必要が無く、ホスト装置５側での負荷を削減することが可能となる。

１ａ、１ｂ…リモコン装置 ２５…音響制御部
１１…タッチパネルモニタ ２７…メモリ
１１ａ…表示部 ２８…ビデオＲＡＭ
１１ｂ…タッチパネル ２９…映像再生部
１２…ビデオＲＡＭ ３０…ＣＰＵ
１３…映像制御部 ３１…映像制御部
１４…メモリ ３２…ＨＤＤ（ハードディスク）
１５…ＣＰＵ ４１…モニタ
１６…無線ＬＡＮ通信部 ４２…スピーカ
１７…操作部 ４４ａ、４４ｂ…歌唱用マイク（マイクロホン）
１８…操作処理部 ４５…カメラ
１９…赤外線通信部 １００…ＬＡＮ
２…カラオケ装置（コマンダ） １１０…アクセスポイント
２１…操作部 １２０…ルータ
２２…操作処理部 ５…ホスト装置
２３…赤外線通信部 ５１…記憶部
２４…ＬＡＮ通信部

Claims (5)

1. 演奏部と、制御部と、を備えたカラオケ装置であって、
   前記演奏部は、演奏情報に基づく演奏を可能とし、
   前記制御部は、投稿情報指定処理と、録画演奏処理と、録画事後処理を実行可能とし、
   前記投稿情報指定処理は、ユーザによる投稿情報の指定を入力部にて受け付け、
   前記投稿情報は、楽曲識別情報と、単位動画と単位歌唱音声を複数含んで構成され、
   前記録画演奏処理は、演奏処理、録画処理、再生処理を実行し、
   前記演奏処理は、投稿情報に含まれる楽曲識別情報に対応する演奏情報を前記演奏部に演奏させ、
   前記録画処理は、カメラで撮影されている動画を単位動画情報として記録するとともに、マイクロホンから入力される歌唱音声を単位歌唱音声情報として記録し、
   前記再生処理は、前記投稿情報に含まれる全ての単位歌唱音声を常時再生し、前記投稿情報に含まれる単位動画を時分割で切り替えて表示部の画面内に表示するとともに、前記カメラで撮影されている動画を前記表示部の画面内に常時表示し、
   前記録画事後処理は、前記録画演奏処理の終了後、前記録画処理で記録した単位動画情報と単位歌唱音声情報を含んだ単位投稿情報をホスト装置に送信する
   カラオケ装置。
2. 前記再生処理は、カメラで撮影されている動画と、前記投稿情報に含まれる複数の単位動画を、前記表示部の１画面内に表示する
   請求項１に記載のカラオケ装置。
3. 前記再生処理は、１画面中に複数の単位動画を含んで構成された複合動画情報を時分割で切り替えて表示する
   請求項１または請求項２に記載のカラオケ装置。
4. 前記再生処理は、１画面内に表示する単位動画の数に応じて、時分割による切り替え間隔を変更する
   請求項２または請求項３に記載のカラオケ装置。
5. カラオケ装置と通信可能なカラオケ用ホスト装置であって、
   配信処理と、受信処理と、投稿情報作成処理とを実行可能とし、
   前記配信処理は、前記カラオケ装置から要求された投稿情報を配信し、
   前記受信処理は、単位動画情報と単位歌唱音声情報を含んだ単位投稿情報を前記カラオケ装置から受信し、
   前記投稿情報作成処理は、前記配信処理で配信した投稿情報に含まれる単位投稿情報と、前記受信処理で受信した単位投稿情報に基づいて投稿情報を作成し、
   前記投稿情報は、前記複数の単位投稿情報に含まれる全ての単位歌唱音声を常時再生するとともに、前記複数の単位動画を時分割で切り替えて表示する領域と、カメラで撮像された動画を常時表示するための領域とを有する
   カラオケ用ホスト装置。

Images