JP2022053099A

JP2022053099A - サーバ装置

Info

Publication number: JP2022053099A
Application number: JP2020159717A
Authority: JP
Inventors: 政之鎌田; Masayuki Kamata
Original assignee: Daiichikosho Co Ltd
Current assignee: Daiichikosho Co Ltd
Priority date: 2020-09-24
Filing date: 2020-09-24
Publication date: 2022-04-05

Abstract

【課題】利用者が互いのカラオケ歌唱を邪魔しないように配慮しつつ、聴取希望の利用者がカラオケ歌唱を聴取可能なオンラインカラオケを提供する。【解決手段】サーバ装置は、予約操作を受け付けた予約端末装置（１１Ａ）から楽曲識別情報及び端末識別情報を取得して予約待ち行列に登録する予約部（２１）と、予約済みの楽曲のカラオケ歌唱を希望する歌唱希望端末装置（１１Ｂ）の端末識別情報を取得して予約待ち行列（２５）に登録する登録部（２２）と、カラオケ演奏データを取得して予約端末装置及び歌唱希望端末装置に送信する送信部（２４）と、を備えている。送信部は、予約端末装置及び歌唱希望端末装置から歌唱音声データを取得して、いずれかの歌唱音声データをカラオケ演奏データに同期させて聴取端末装置（１１Ｃ、１１Ｄ）に送信する。【選択図】図２

Description

本発明は、サーバ装置に関する。

クラウド型サーバ装置によるオンライン会議システムが普及し、最近ではオンライン会議システムを利用したオンライン飲み会が行われている。このようなオンライン会議システムとして、利用者の端末装置にカラオケ演奏データを配信するものが知られている（例えば、特許文献１参照）。特許文献１の技術を用いれば、オンライン飲み会の利用者が、各自の端末装置から出力されたカラオケ演奏音に合わせてカラオケ歌唱を楽しむことができる。複数の利用者が互いの歌唱を邪魔しないように、端末装置の音声入力をオフにしたまま歌唱しても、複数の利用者で映像が共有されて一体感は損なわれない。これは、カラオケルーム等に集まる場合にはできないオンラインカラオケならではの楽しみ方である。

特開２０１０－０７４１９９号公報

しかしながら、カラオケ歌唱する利用者が各自の端末装置の音声入力をオフにすると、他人のカラオケ歌唱を聴きたい利用者の端末装置からは歌唱音声が出力されず、カラオケ歌唱中の利用者と一緒に聴取希望の利用者がオンラインカラオケを楽しむことができない。すなわち、カラオケ歌唱する利用者が互いの歌唱を邪魔しないように配慮すると、カラオケ歌唱を希望しない利用者がカラオケ歌唱を聴くことができない。

本発明の目的は、利用者が互いのカラオケ歌唱を邪魔しないように配慮しつつ、聴取希望の利用者がカラオケ歌唱を聴取可能なオンラインカラオケを提供するサーバ装置を提供することである。

上記目的を達成するための主たる発明は、互いにビデオ通話可能な複数の端末装置に通信可能に接続されたサーバ装置であって、利用者の予約操作を受け付けた端末装置である予約端末装置から楽曲識別情報及び端末識別情報を取得して、楽曲識別情報に前記予約端末装置の端末識別情報を対応付けて予約待ち行列に登録する予約部と、予約済みの楽曲のカラオケ歌唱を希望する他の利用者の端末装置である歌唱希望端末装置の端末識別情報を取得して、楽曲識別情報に前記歌唱希望端末装置の端末識別情報を対応付けて予約待ち行列に登録する登録部と、予約待ち行列に登録された楽曲識別情報に基づいてカラオケ演奏データを取得して、前記予約端末装置及び前記歌唱希望端末装置に対してカラオケ演奏データを送信する送信部と、を備え、前記送信部は、前記予約端末装置及び前記歌唱希望端末装置から歌唱音声データを取得して、前記予約端末装置及び前記歌唱希望端末装置のいずれかの歌唱音声データをカラオケ演奏データに同期させて、前記予約端末装置及び前記歌唱希望端末装置以外の端末装置である聴取端末装置に対して送信するサーバ装置である。

本発明によれば、予約端末装置及び歌唱希望端末装置に対してはカラオケ演奏データが送信されて歌唱音声データが送信されない。このため、予約端末装置及び歌唱希望端末装置の利用者がカラオケ演奏に合わせてカラオケ歌唱しても、予約端末装置及び歌唱希望端末装置の利用者が互いのカラオケ歌唱を邪魔することがない。聴取端末装置に対してはカラオケ演奏データと歌唱音声データが送信される。このため、聴取端末装置の利用者はカラオケ歌唱を聴くことができ、聴取端末装置の利用者がカラオケ歌唱中の利用者と一緒にカラオケを楽しむことができる。

第１実施形態のオンラインシステムの構成図である。第１実施形態のオンラインシステムの機能ブロック図である。第１実施形態の端末装置の装置状態を示す図である。第１実施形態のオンラインシステムのフロー図である。第２実施形態の端末装置の装置状態を示す図である。第３実施形態のオンラインシステムの機能ブロック図である。第３実施形態の残響成分データの概念図である。

＜第１実施形態＞
図１及び図２を参照して、第１実施形態のオンラインシステムについて説明する。図１は、第１実施形態のオンラインシステムの構成図である。図２は、第１実施形態のオンラインシステムの機能ブロック図である。なお、以下の説明では、端末装置は、予約端末装置、歌唱希望端末装置、聴取端末装置のいずれかとして動作するが、これらの文言には同一の符号を付して説明する。また、端末装置には符号Ａ－Ｄが付されているが、任意の端末装置を特定しない場合にはＡ－Ｄを省略することもある。

図１に示すように、第１実施形態のオンラインシステム１０は、複数の利用者Ａ－Ｄが所持する端末装置１１Ａ－１１Ｄと、オンラインコミュニケーションを制御する制御サーバ装置（サーバ装置）１２と、多数の楽曲を管理するカラオケ配信サーバ装置１３とを備えている。端末装置１１Ａ－１１Ｄ、制御サーバ装置１２、カラオケ配信サーバ装置１３はネットワーク１４を介して通信可能に接続されている。端末装置１１Ａ－１１Ｄにはマイクロフォン、カメラ、スピーカ、ディスプレイが設けられており、端末装置１１Ａ－１１Ｄが互いにネットワーク１４を介してビデオ通話可能に構成されている。

制御サーバ装置１２は、端末装置１１Ａ－１１Ｄに音声データ及び映像データを共有させている。例えば、制御サーバ装置１２は、端末装置１１Ｂ－１１Ｄから取得した音声データを端末装置１１Ａに送信し、端末装置１１Ａ、１１Ｃ、１１Ｄから取得した音声データを端末装置１１Ｂに送信し、端末装置１１Ａ、１１Ｂ、１１Ｄから取得した音声データを端末装置１１Ｃに送信し、端末装置１１Ａ－１１Ｃから取得した音声データを端末装置１１Ｄに送信する。また、制御サーバ装置１２は、端末装置１１Ａ－１１Ｄから取得した映像データをレイアウトした合成映像データを端末装置１１Ａ－１１Ｄに送信する。

さらに、制御サーバ装置１２は、端末装置１１Ａ－１１Ｄに対して利用者グループ内のオンラインコミュニケーションの１つとしてオンラインカラオケを提供している。オンラインカラオケでは、端末装置１１Ａ－１１Ｄに対して仮想的なカラオケルームが用意されて、端末装置１１Ａ－１１Ｄの間で歌唱音声データ及び歌唱映像データが送受信される。制御サーバ装置１２は、オンラインカラオケに参加する利用者Ａ－Ｄの要求に応じて、カラオケ配信サーバ装置１３から取得した楽曲のカラオケ演奏データを端末装置１１Ａ－１１Ｄにストリーミング配信可能に構成されている。

端末装置１１Ａ－１１Ｄにはオンラインコミュニケーションのソフトウェアがインストールされており、このソフトウェアにはオンラインカラオケ用に楽曲予約機能及び歌唱参加機能が含まれている。楽曲予約機能はカラオケ演奏の楽曲に対する利用者の予約を受け付けており、歌唱参加機能は予約済みの楽曲への他の利用者によるカラオケ歌唱の参加を受け付けている。そして、制御サーバ装置１２は、カラオケ歌唱を行う利用者の間では互いのカラオケ歌唱が邪魔にならず、他の利用者も聞き手として一緒に参加できるようにオンラインカラオケを制御している。

図２に示すように、オンラインシステム１０には、利用者Ａの端末装置１１Ａが予約操作を受け付けた予約端末装置１１Ａとして参加し、利用者Ｂの端末装置１１Ｂが予約済みの楽曲のカラオケ歌唱を希望する歌唱希望端末装置１１Ｂとして参加している。また、オンラインシステム１０には、利用者Ｃ、Ｄの端末装置１１Ｃ、１１Ｄが利用者Ａ、Ｂのカラオケ歌唱を聴取する聴取端末装置１１Ｃ、１１Ｄとして参加している。これら予約端末装置１１Ａ、歌唱希望端末装置１１Ｂ、聴取端末装置１１Ｃ、１１Ｄは、制御サーバ装置１２を介して互いにビデオ通話可能に接続されている。

制御サーバ装置１２は、予約部２１と、登録部２２と、受信部２３と、送信部２４とを備えている。また、制御サーバ装置１２には、予約された楽曲の楽曲識別情報が登録順に並べられた予約待ち行列２５が記憶されている。予約部２１は、予約操作を受け付けた端末装置１１から楽曲識別情報及び端末識別情報を取得して、楽曲識別情報に端末識別情報を対応付けて予約待ち行列２５に登録する。本実施形態では、利用者Ａによって予約端末装置１１Ａの予約画面に楽曲識別情報が入力され、予約部２１によって予約待ち行列２５の最後尾に楽曲識別情報と予約端末装置１１Ａの端末識別情報が登録される。

登録部２２は、予約待ち行列２５の予約状況を他の端末装置１１に送信し、予約済みの楽曲のカラオケ歌唱を希望する端末装置１１から端末識別情報を取得して、この端末識別情報を楽曲識別情報に対応付けて予約待ち行列に登録する。本実施形態では、登録部２２によって歌唱希望端末装置１１Ｂから端末識別情報が取得されて、歌唱希望端末装置１１Ｂの端末識別情報が楽曲識別情報に対応付けて予約待ち行列２５に登録される。このため、予約待ち行列２５には、楽曲識別情報に予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂの端末識別情報が対応付けられて登録されている。

受信部２３は、予約待ち行列２５に登録された楽曲識別情報に基づいて、カラオケ配信サーバ装置１３からカラオケ演奏データを受信する。送信部２４は、受信部２３からカラオケ演奏データを取得して、予約待ち行列２５に登録された端末識別情報の端末装置１１にカラオケ演奏データを送信して、カラオケ演奏データの送信先の端末装置１１から歌唱音声データを取得する。本実施形態では、送信部２４よって制御サーバ装置１２から予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂにカラオケ演奏データが送信されて、送信部２４によって予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂから歌唱音声データが取得される。

また、送信部２４は、いずれかの歌唱音声データをカラオケ演奏データに同期させて、予約待ち行列２５に未登録の端末装置１１に対して送信する。本実施形態では、予約端末装置１１Ａから取得した歌唱音声データがカラオケ演奏データに同期されて、聴取端末装置１１Ｃ、１１Ｄに対して送信される。このように、予約端末装置１１Ａ、歌謡希望端末装置１１Ｂに対しては互いの歌唱の邪魔にならないようにカラオケ演奏データだけが送信され、聴取端末装置１１Ｃ、１１Ｄに対してはカラオケに聞き手として参加できるようにカラオケ演奏データと歌唱音声データが送信される。

オンラインシステム１０の各装置の各処理は、プロセッサを用いてソフトウェアによって実現されてもよいし、集積回路等に形成された論理回路（ハードウェア）によって実現されてもよい。プロセッサを用いる場合には、プロセッサがメモリに記憶されているプログラムを読み出して実行することで各種処理が実施される。プロセッサとしては、例えば、ＣＰＵ（Central Processing Unit）が使用される。また、メモリは、用途に応じてＲＯＭ(Read Only Memory)、ＲＡＭ（Random Access Memory）等の一つ又は複数の記憶媒体によって構成されている。

図３及び図４を参照して、オンラインシステムの処理動作について具体例を挙げて説明する。図３は、第１実施形態の端末装置の装置状態を示す図である。図４は、第１実施形態のオンラインシステムのフロー図である。なお、ここでは、図１及び図２の符号を適宜使用して説明する。

図３及び図４に示すように、端末装置１１Ａ－１１Ｄでオンラインコミュニケーションのソフトウェアが動作しており、利用者Ａ－Ｄによってオンラインシステム１０を利用してオンライン飲み会が開かれている。利用者Ａによって端末装置１１Ａが操作され、楽曲検索によって楽曲Ｘ１のカラオケ演奏が予約される（ステップＳ０１）。これにより、端末装置１１Ａが予約端末装置１１Ａとして動作する。予約端末装置１１Ａから制御サーバ装置１２に、予約端末装置１１Ａの端末識別情報ＴＩＤ＊＊＊＊Ａと楽曲Ｘ１の楽曲識別情報ＳＩＤ＊＊＊＊１を含む予約要求が送信される。

次に、制御サーバ装置１２の予約部２１によって予約要求から端末識別情報ＴＩＤ＊＊＊＊Ａと楽曲Ｘ１の楽曲識別情報ＳＩＤ＊＊＊＊１が取得される。そして、予約部２１によって端末識別情報ＴＩＤ＊＊＊＊Ａと楽曲識別情報ＳＩＤ＊＊＊＊１が対応付けられて予約待ち行列２５に登録される（ステップＳ０２）。次に、制御サーバ装置１２の登録部２２によって予約待ち行列２５の予約状況を示す予約情報が他の端末装置１１Ｂ－１１Ｄに送信される（ステップＳ０３）。予約情報に基づいて端末装置１１Ｂ－１１Ｄのディスプレイに、利用者Ａが楽曲Ｘ１を予約したことが表示される。

次に、利用者Ｂによって端末装置１１Ｂが操作され、楽曲Ｘ１のカラオケ歌唱への参加が指示される（ステップＳ０４）。これにより、端末装置１１Ｂが歌唱希望端末装置１１Ｂとして動作する。歌唱希望端末装置１１Ｂから制御サーバ装置１２に、歌唱希望端末装置１１Ｂの端末識別情報ＴＩＤ＊＊＊＊Ｂを含む歌唱希望要求が送信される。次に、制御サーバ装置１２の登録部２２によって歌唱希望要求から端末識別情報ＴＩＤ＊＊＊＊Ｂが取得される。そして、楽曲Ｘ１の楽曲識別情報ＳＩＤ＊＊＊＊１に対応付けられて予約待ち行列２５に登録される（ステップＳ０５）。歌唱希望要求の送信は、予約情報の送信から所定時間以内（例えば、１分以内）に行われるものとする。

この時点で、予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂ以外の端末装置１１Ｃ、１１Ｄがカラオケ歌唱を希望しない聴取端末装置１１Ｃ、１１Ｄとして動作する。利用者Ａによって予約端末装置１１Ａが操作されて、楽曲Ｘ１のカラオケ演奏が指示される（ステップＳ０６）。予約端末装置１１Ａから制御サーバ装置１２に楽曲Ｘ１の楽曲識別情報ＳＩＤ＊＊＊＊１を含む演奏開始要求が送信される。次に、制御サーバ装置１２からカラオケ配信サーバ装置１３に、楽曲Ｘ１の楽曲識別情報ＳＩＤ＊＊＊＊１を含むカラオケ演奏データの配信要求が送信される（ステップＳ０７）。

次に、制御サーバ装置１２の受信部２３によってカラオケ配信サーバ装置１３から楽曲Ｘ１のカラオケ演奏データが受信される（ステップＳ０８）。次に、制御サーバ装置１２の送信部２４によって楽曲Ｘ１のカラオケ演奏データが予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂに送信される（ステップＳ０９）。カラオケ演奏に合わせて利用者Ａ、Ｂによってカラオケ歌唱される。予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂに利用者Ａ、Ｂのカラオケ歌唱が音声入力されて、予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂから制御サーバ装置１２に歌唱音声データが送信される（ステップＳ１０）。

次に、制御サーバ装置１２の送信部２４によって予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂの歌唱音声データが取得される（ステップＳ１１）。次に、送信部２４によって予約端末装置１１Ａの歌唱音声データと楽曲Ｘ１のカラオケ演奏データが同期されて聴取端末装置１１Ｃ、１１Ｄに送信される（ステップＳ１２）。通常、予約端末装置１１Ａにカラオケ演奏データを送信してから、予約端末装置１１Ａから歌謡音声データを取得するまでに遅延が生じる。このため、公知の技術を用いて聴取端末装置１１Ｃ、１１Ｄへのカラオケ演奏データの送信を所定時間遅らせて、歌唱音声データとカラオケ演奏データが同期される。

そして、聴取端末装置１１Ｃ、１１Ｄの利用者Ｃ、Ｄは、楽曲Ｘ１のカラオケ演奏に合わせて利用者Ａのカラオケ歌唱を聴取する。楽曲Ｘ１のカラオケ演奏が終了すると、制御サーバ装置１２の予約部２１によって予約待ち行列２５から楽曲Ｘ１の楽曲識別情報ＳＩＤ＊＊＊＊１、予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂの端末識別情報ＴＩＤ＊＊＊＊Ａ、ＴＩＤ＊＊＊＊Ｂが削除される（ステップＳ１３）。予約待ち行列２５から楽曲Ｘ１に関する各識別情報が削除されると、楽曲Ｘ１以降の楽曲Ｘ２－Ｘ４についても上記と同様な処理が実施される。なお、カラオケ演奏が行われない時間（曲間）においては、上記したように端末装置１１Ａ－１１Ｄが互いにネットワーク１４を介してビデオ通話可能になっている。

図３に示すように、楽曲Ｘ２は利用者Ｂによって予約されており、端末装置１１Ｂが予約端末装置１１Ｂとして動作する。利用者Ｃが楽曲Ｘ２のカラオケ歌唱を希望しており、端末装置１１Ｃが歌唱希望端末装置１１Ｃとして動作する。利用者Ａ、Ｄが楽曲Ｘ２のカラオケ歌唱を希望しておらず、端末装置１１Ａ、１１Ｄが聴取端末装置１１Ａ、１１Ｄとして動作する。このため、制御サーバ装置１２の予約待ち行列２５には、楽曲Ｘ２の楽曲識別情報ＳＩＤ＊＊＊＊２に予約端末装置１１Ｂの端末識別情報ＴＩＤ＊＊＊＊Ｂ及び歌唱希望端末装置１１ＣのＴＩＤ＊＊＊＊Ｃが対応付けられて登録されている。

カラオケ配信サーバ装置１３から制御サーバ装置１２に楽曲Ｘ２のカラオケ演奏データが送信され、制御サーバ装置１２から予約端末装置１１Ｂ及び歌唱希望端末装置１１Ｃに楽曲Ｘ２のカラオケ演奏データが送信される。カラオケ演奏に合わせて利用者Ｂ、Ｃによってカラオケ歌唱されると、予約端末装置１１Ｂ及び歌唱希望端末装置１１Ｃから制御サーバ装置１２に歌唱音声データが送信される。そして、予約端末装置１１Ｂから取得した歌唱音声データと楽曲Ｘ２のカラオケ演奏データが同期されて、制御サーバ装置１２から聴取端末装置１１Ａ、１１Ｄに送信される。

また、楽曲Ｘ３は利用者Ａによって予約されており、端末装置１１Ａが予約端末装置１１Ａとして動作する。利用者Ｂ、Ｃが楽曲Ｘ３のカラオケ歌唱を希望しており、端末装置１１Ｂ、１１Ｃが歌唱希望端末装置１１Ｂ、１１Ｃとして動作する。利用者Ｄが楽曲Ｘ３のカラオケ歌唱を希望しておらず、端末装置１１Ｄが聴取端末装置１１Ｄとして動作する。このため、制御サーバ装置１２の予約待ち行列２５には、楽曲Ｘ３の楽曲識別情報ＳＩＤ＊＊＊＊３に予約端末装置１１Ａの端末識別情報ＴＩＤ＊＊＊＊Ａ及び歌唱希望端末装置１１Ｂ、１１ＣのＴＩＤ＊＊＊＊Ｂ、ＴＩＤ＊＊＊＊Ｃが対応付けられて登録されている。

カラオケ配信サーバ装置１３から制御サーバ装置１２に楽曲Ｘ３のカラオケ演奏データが送信され、制御サーバ装置１２から予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂ、１１Ｃに楽曲Ｘ３のカラオケ演奏データが送信される。カラオケ演奏に合わせて利用者Ａ－Ｃによってカラオケ歌唱されると、予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂ、１１Ｃから制御サーバ装置１２に歌唱音声データが送信される。そして、予約端末装置１１Ａから取得した歌唱音声データと楽曲Ｘ３のカラオケ演奏データが同期されて、制御サーバ装置１２から聴取端末装置１１Ｄに送信される。

また、楽曲Ｘ４は利用者Ｃによって予約されており、端末装置１１Ｃが予約端末装置１１Ｃとして動作する。利用者Ａ、Ｂ、Ｄが楽曲Ｘ４のカラオケ歌唱を希望しておらず、端末装置１１Ａ、１１Ｂ、１１Ｄが聴取端末装置１１Ａ、１１Ｂ、１１Ｄとして動作する。歌唱希望端末装置として動作する端末装置は存在しない。このため、制御サーバ装置１２の予約待ち行列２５には、楽曲Ｘ４の楽曲識別情報ＳＩＤ＊＊＊＊４に予約端末装置１１Ｃの端末識別情報ＴＩＤ＊＊＊＊Ｃが対応付けられて登録されている。

カラオケ配信サーバ装置１３から制御サーバ装置１２に楽曲Ｘ４のカラオケ演奏データが送信され、制御サーバ装置１２から予約端末装置１１Ｃに楽曲Ｘ４のカラオケ演奏データが送信される。カラオケ演奏に合わせて利用者Ｃによってカラオケ歌唱されると、予約端末装置１１Ｃから制御サーバ装置１２に歌唱音声データが送信される。そして、予約端末装置１１Ｃから取得した歌唱音声データと楽曲Ｘ４のカラオケ演奏データが同期されて、制御サーバ装置１２から聴取端末装置１１Ａ、１１Ｂ、１１Ｄに送信される。

以上、第１実施形態によれば、予約端末装置及び歌唱希望端末装置に対しては制御サーバ装置からカラオケ演奏データが送信されて歌唱音声データが送信されない。このため、予約端末装置及び歌唱希望端末装置の利用者がカラオケ演奏に合わせてカラオケ歌唱しても、各利用者が互いのカラオケ歌唱を邪魔することがない。聴取端末装置に対してはカラオケ演奏データと歌唱音声データが送信される。このため、聴取端末装置の利用者は、予約端末装置及び歌唱希望端末装置の利用者のカラオケ歌唱を聴いて、歌唱中の利用者と一緒にカラオケを楽しむことができる。

＜第２実施形態＞
図５を参照して、第２実施形態のオンラインシステムについて説明する。図５は、第２実施形態の端末装置の装置状態を示す図である。なお、第２実施形態のオンラインシステムは、聴取端末装置に予約端末装置及び歌唱希望端末装置を指定させて、指定端末装置から聴取端末装置に歌唱音声データを送信させる点で第１実施形態のオンラインシステムと相違する。したがって、第２実施形態については、第１実施形態と同様な構成については説明を省略する。また、第１実施形態と同一名称の構成については同一の符号を付して説明する。

第２実施形態の登録部は、予約端末装置の識別情報の他に、少なくとも１つの歌唱希望端末装置の端末識別情報が予約待ち行列に登録された場合に、聴取端末装置に予約端末装置及び歌唱希望端末装置から１つの端末装置を指定させる。この場合、制御サーバ装置から各端末装置に送信された予約待ち行列の予約状況の応答として、聴取端末装置から制御サーバ装置に指定端末装置の端末識別情報が返信される。登録部によって指定端末装置の端末識別情報が取得されると、管理テーブルによって指定端末装置の端末識別情報が聴取端末装置の端末識別情報に対応付けられて登録される。

第２実施形態の送信部は、聴取端末装置に指定された指定端末装置の歌唱音声データを取得し、この歌唱音声データをカラオケ演奏データに同期させて聴取端末装置に送信する。この場合、送信部によって管理テーブルが参照され、指定端末装置から取得した歌唱音声データとカラオケ演奏データが同期されて、指定端末装置に対応付けられた聴取端末装置に送信される。なお、管理テーブルの代わりに、予約待ち行列に楽曲の楽曲識別情報に指定端末装置の端末識別情報と聴取端末装置の端末識別情報が対応付けられて登録されてもよい。

図５に示すように、楽曲Ｘ１は利用者Ａによって予約されており、端末装置１１Ａが予約端末装置１１Ａとして動作する。利用者Ｂが楽曲Ｘ１のカラオケ歌唱を希望しており、端末装置１１Ｂが歌唱希望端末装置１１Ｂとして動作する。利用者Ｃ、Ｄが楽曲Ｘ１の歌唱を希望しておらず、端末装置１１Ｃ、１１Ｄが聴取端末装置１１Ｃ、１１Ｄとして動作する。また、聴取端末装置１１Ｃによって予約端末装置１１Ａが指定され、聴取端末装置１１Ｄによって歌唱希望端末装置１１Ｂが指定されている。第１実施形態と同様に、予約待ち行列２５には各識別情報が対応付けられて登録されている。

カラオケ配信サーバ装置１３から制御サーバ装置１２に楽曲Ｘ１のカラオケ演奏データが送信され、制御サーバ装置１２から予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂに楽曲Ｘ１のカラオケ演奏データが送信される。カラオケ演奏に合わせて利用者Ａ、Ｂによってカラオケ歌唱されると、予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂから制御サーバ装置１２に歌唱音声データが送信される。そして、予約端末装置１１Ａの歌唱音声データと楽曲Ｘ１のカラオケ演奏データが同期されて聴取端末装置１１Ｃに送信され、予約端末装置１１Ｂの歌唱音声データと楽曲Ｘ１のカラオケ演奏データが同期されて聴取端末装置１１Ｄに送信される。

楽曲Ｘ２は利用者Ｂによって予約されており、端末装置１１Ｂが予約端末装置１１Ｂとして動作する。利用者Ｃが楽曲Ｘ２のカラオケ歌唱を希望しており、端末装置１１Ｃが歌唱希望端末装置１１Ｃとして動作する。利用者Ａ、Ｄが楽曲Ｘ２の歌唱を希望しておらず、端末装置１１Ａ、１１Ｄが聴取端末装置１１Ａ、１１Ｄとして動作する。また、聴取端末装置１１Ａによって予約端末装置１１Ｂが指定され、聴取端末装置１１Ｄによって歌唱希望端末装置１１Ｃが指定されている。第１実施形態と同様に、予約待ち行列２５には各識別情報が対応付けられて登録されている。

カラオケ配信サーバ装置１３から制御サーバ装置１２に楽曲Ｘ２のカラオケ演奏データが送信され、制御サーバ装置１２から予約端末装置１１Ｂ及び歌唱希望端末装置１１Ｃに楽曲Ｘ２のカラオケ演奏データが送信される。カラオケ演奏に合わせて利用者Ｂ、Ｃによってカラオケ歌唱されると、予約端末装置１１Ｂ及び歌唱希望端末装置１１Ｃから制御サーバ装置１２に歌唱音声データが送信される。そして、予約端末装置１１Ｂの歌唱音声データと楽曲Ｘ２のカラオケ演奏データが同期されて聴取端末装置１１Ａに送信され、予約端末装置１１Ｃの歌唱音声データと楽曲Ｘ２のカラオケ演奏データが同期されて聴取端末装置１１Ｄに送信される。

楽曲Ｘ３は利用者Ａによって予約されており、端末装置１１Ａが予約端末装置１１Ａとして動作する。利用者Ｂ、Ｃが楽曲Ｘ３のカラオケ歌唱を希望しており、端末装置１１Ｂ、１１Ｃが歌唱希望端末装置１１Ｂ、１１Ｃとして動作する。利用者Ｄが楽曲Ｘ３の歌唱を希望しておらず、端末装置１１Ｄが聴取端末装置１１Ｄとして動作する。また、聴取端末装置１１Ｄによって予約端末装置１１Ａが指定されている。第１実施形態と同様に、予約待ち行列２５には各識別情報が対応付けられて登録されている。

カラオケ配信サーバ装置１３から制御サーバ装置１２に楽曲Ｘ３のカラオケ演奏データが送信され、制御サーバ装置１２から予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂ、１１Ｃに楽曲Ｘ３のカラオケ演奏データが送信される。カラオケ演奏に合わせて利用者Ａ－Ｃによってカラオケ歌唱されると、予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂ、１１Ｃから制御サーバ装置１２に歌唱音声データが送信される。そして、予約端末装置１１Ａの歌唱音声データと楽曲Ｘ３のカラオケ演奏データが同期されて聴取端末装置１１Ｄに送信される。

楽曲Ｘ４は利用者Ｃによって予約されており、端末装置１１Ｃが予約端末装置１１Ｃとして動作する。利用者Ａ、Ｂ、Ｄが楽曲Ｘ４のカラオケ歌唱を希望しておらず、端末装置１１Ａ、１１Ｂ、１１Ｄが聴取端末装置１１Ａ、１１Ｂ、１１Ｄとして動作する。歌唱希望端末装置として動作する端末装置は存在しないため、聴取端末装置１１Ａ、１１Ｂ、１１Ｄによって指定端末装置が指定されない。第１実施形態と同様に、予約待ち行列２５には各識別情報が対応付けられて登録されている。

カラオケ配信サーバ装置１３から制御サーバ装置１２に楽曲Ｘ４のカラオケ演奏データが送信され、制御サーバ装置１２から予約端末装置１１Ｃに楽曲Ｘ４のカラオケ演奏データが送信される。カラオケ演奏に合わせて利用者Ｃによってカラオケ歌唱されると、予約端末装置１１Ｃから制御サーバ装置１２に歌唱音声データが送信される。そして、予約端末装置１１Ｃの歌唱音声データと楽曲Ｘ４のカラオケ演奏データが同期されて聴取端末装置１１Ａ、１１Ｂ、１１Ｄに送信される。

以上、第２実施形態によれば、第１実施形態と同様に、予約端末装置及び歌唱希望端末装置の利用者がカラオケ演奏に合わせてカラオケ歌唱しても、各利用者が互いのカラオケ歌唱を邪魔することがない。また、聴取端末装置の利用者は、予約端末装置及び歌唱希望端末装置の利用者を指定して、指定した利用者のカラオケ歌唱を聴くことができる。

＜第３実施形態＞
図６及び図７を参照して、第３実施形態のオンラインシステムについて説明する。図６は、第３実施形態のオンラインシステムの機能ブロック図である。図７は、第３実施形態の残響成分データの概念図である。なお、第３実施形態のオンラインシステムは、予約端末装置及び歌唱希望端末装置から取得した歌唱音声データから残響成分データを生成する点で、第１の実施形態のオンラインシステムと相違する。したがって、第３実施形態については、第１実施形態と同様な構成については説明を省略する。

図６に示すように、第３実施形態のオンラインシステム３０は、第１実施形態のオンラインシステム１０と略同様に構成されており、端末装置３１Ａ－３１Ｄと、制御サーバ装置３２と、カラオケ配信サーバ装置３３とを備えている。このオンラインシステム３０には、端末装置３１Ａが予約端末装置３１Ａとして参加し、端末装置３１Ｂが歌唱希望端末装置３１Ｂとして参加し、端末装置３１Ｃ、３１Ｄが聴取端末装置３１Ｃ、３１Ｄとして参加している。これら予約端末装置３１Ａ、歌唱希望端末装置３１Ｂ、聴取端末装置３１Ｃ、３１Ｄは制御サーバ装置３２を介して互いにビデオ通話可能に接続されている。

制御サーバ装置３２には、予約部４１と、登録部４２と、受信部４３と、送信部４４と、生成部４５とが設けられている。また、制御サーバ装置３２には、予約された楽曲の楽曲識別情報が登録順に並べられた予約待ち行列４６が記憶されている。生成部４５は、予約待ち行列４６に登録された端末識別情報の端末装置３１、すなわち歌唱中の利用者の端末装置３１から歌唱音声データを取得して、歌唱音声データに基づいて残響成分データを生成する。本実施形態では、予約端末装置３１Ａ及び歌唱希望端末装置３１Ｂから歌唱音声データＡ、Ｂが取得されて、歌唱音声データＡ、Ｂに基づいて残響成分データＡ、Ｂが生成される。

送信部４４は、予約待ち行列４６に登録された端末識別情報の端末装置３１に対して、送信先の端末装置の歌唱音声データから生成された残響成分データを送信する。本実施例では、予約端末装置３１Ａに残響成分データＡが送信され、歌唱希望端末装置３１Ｂに残響成分データＢが送信される。また、送信部４４は、いずれかの歌唱音声データに当該歌唱音声データから生成された残響成分データを付与してカラオケ演奏データに同期させて、予約待ち行列４６に未登録の端末装置３１に対して送信する。本実施形態では、予約端末装置３１Ａの歌唱音声データＡに残響成分データＡが付与されて、カラオケ演奏データに同期されて聴取端末装置３１Ｃ、３１Ｄに送信される。

より詳細には、利用者Ａによって楽曲Ｘ１のカラオケ演奏開始が指示されると、生成部４５によって予約端末装置３１Ａ及び歌唱希望端末装置３１Ｂから歌唱音声データＡ、Ｂが取得され、歌唱音声データに基づいて残響成分データＡ、Ｂが生成される。そして、送信部４４によって楽曲Ｘ１のカラオケ演奏データと残響成分データＡが予約端末装置３１Ａに送信され、楽曲Ｘ１のカラオケ演奏データと残響成分データＢが歌唱希望端末装置３１Ｂに送信される。予約端末装置３１Ａ及び歌唱希望端末装置３１Ｂには、歌唱音声データＡ、Ｂが送信されず、残響成分データＡ、Ｂが送信される。

上記したように、予約端末装置３１Ａ及び歌唱希望端末装置３１Ｂに楽曲Ｘ１のカラオケ演奏データを送信してから、予約端末装置３１Ａ及び歌唱希望端末装置３１Ｂから歌唱音声データＡ、Ｂを取得するまでに遅延が生じる。しかしながら、生成部４５が歌唱音声データＡ、Ｂに基づいて生成するデータは、エコー等の残響成分データＡ、Ｂであるため、楽曲Ｘ１のカラオケ演奏データに対して遅延したまま残響成分データＡ、Ｂを送信することができる。このとき、楽曲Ｘ１のカラオケ演奏データの送信と歌唱音声データＡ、Ｂの取得の間の遅延時間に応じて、残響成分データＡ、Ｂの送信タイミングが調整される。

例えば、図７に示すように、楽曲Ｘ１のカラオケ演奏データの送信と歌唱音声データＡの取得の間に１５０[ｍｓｅｃ]の遅延が生じている。また、生成部４５によって歌唱音声データＡに基づいて残響成分データとしてディレイタイム２５０[ｍｓｅｃ]（ＢＰＭ＝１２０の楽曲における８分音符の長さに相当）のエコー成分データが生成される。この場合、１番目のエコー成分データのディレイタイムが１００［ｍｓｅｃ］に設定され、２番目以降のエコー成分データのディレイタイムを２５０［ｍｓｅｃ］間隔に設定される。なお、エコー成分データの生成中のディレイタイムの変更は電子楽器の分野で公知である。

また、送信部４４によって歌唱音声データＡに残響成分データＡが付与され、この歌唱音声データＡが楽曲Ｘ１のカラオケ演奏データに同期されて聴取端末装置３１Ｃ、３１Ｄに送信される。歌唱音声データＡの取得と残響成分データＡの生成との間の遅延は本来のディレイタイム（２５０［ｍｓｅｃ］）のみであるため、残響成分データＡをそのまま歌唱音声データＡに付与できる。このため、公知の技術を用いて聴取端末装置３１Ｃ、３１Ｄへの楽曲Ｘ１のカラオケ演奏データの送信を所定時間遅らせて、残響成分データＡが付与された歌唱音声データＡと楽曲Ｘ１のカラオケ演奏データが同期される。

以上、第３実施形態によれば、予約端末装置及び歌唱希望端末装置の利用者は、自身の歌唱音声の残響成分を聴きながらカラオケ歌唱することができ、聴取端末装置の利用者は残響成分が付与されたカラオケ歌唱を聴くことができる。

なお、各実施形態では、制御サーバ装置から予約端末装置及び歌唱希望端末装置に各端末装置から取得した映像データを送信する構成にしたが、制御サーバ装置から予約端末装置及び歌唱希望端末装置に歌詞テロップを含む背景映像データが送信されてもよい。この場合、制御サーバ装置がカラオケ配信サーバ装置から背景映像データを取得して予約端末装置及び歌唱希望端末装置に送信する。

また、各実施形態では、歌唱終了後に制御サーバ装置から予約端末装置及び歌唱希望端末装置に特に何も送信されないが、制御サーバ装置から予約端末装置及び歌唱希望端末装置に歌唱採点データが送信されてもよい。この場合、制御サーバ装置が予約端末装置及び歌唱希望端末装置から取得した歌唱音声データを採点機能付きのカラオケ配信サーバ装置に送信する。歌唱終了後に、制御サーバ装置がカラオケ配信サーバ装置から歌唱採点データを取得して、予約端末装置及び歌唱希望端末装置に送信する。

また、各実施形態では、制御サーバ装置がカラオケ配信サーバ装置からカラオケ演奏データを取得する構成にしたが、制御サーバ装置が自装置の記憶部からカラオケ演奏データを取得してもよい。すなわち、制御サーバ装置とカラオケ配信サーバ装置が別体に形成されたが、制御サーバ装置がカラオケ配信サーバ装置の機能を備えていてもよい。

また、各実施形態では、歌唱音声データに映像データ及びカラオケ演奏データが同期されたカラオケ動画データが制御サーバ装置に記憶されていてもよい。この場合、制御サーバ装置が、予約端末装置及び歌唱希望端末装置から歌唱音声データと共に映像データを取得し、歌唱音声データ及び映像データをカラオケ演奏データに同期させてカラオケ動画データを生成する。カラオケ動画データは予約端末装置及び歌唱希望端末装置の端末識別情報に対応付けられて記憶されている。端末装置の要求に応じて、制御サーバ装置から端末装置にカラオケ歌唱データが送信される。

また、第３実施形態では、歌唱音声データに残響成分データが付与され、さらにカラオケ演奏データに同期されたカラオケ歌唱データが制御サーバ装置に記憶されていてもよい。この場合、制御サーバ装置が、予約端末装置及び歌唱希望端末装置から歌唱音声データを取得し、歌唱音声データに残響成分データを付与してカラオケ演奏データに同期させてカラオケ歌唱データを生成する。カラオケ歌唱データは予約端末装置及び歌唱希望端末装置の端末識別情報に対応付けられて記憶されている。端末装置の要求に応じて、制御サーバ装置から端末装置にカラオケ歌唱データが送信される。

また、第３実施形態では、生成部が予約端末装置及び歌唱希望端末装置に対して共通のディレイタイム及びレベルの残響成分データを生成したが、生成部が予約端末装置及び歌唱希望端末装置に対して個別のディレイタイム及びレベルの残響成分データを生成してもよい。この場合、予約端末装置及び歌唱希望端末装置によって、送信される残響成分データのディレイタイム及びレベルが設定されてもよい。例えば、予約端末装置は、残響成分データのディレイタイムを２００［ｍｓｅｃ］、レベルを６０（最大値１００とする）に設定し、歌唱希望端末装置は、残響成分データのディレイタイムを１８０［ｍｓｅｃ］、レベルを７０に設定する。生成部は、ディレイタイム２００［ｍｓｅｃ］、レベル６０の設定で残響成分データＡを生成し、ディレイタイム１８０［ｍｓｅｃ］、レベル７０の設定で残響成分データＢを生成する。

また、各実施形態の端末装置は、ビデオ通話機能を備えた電子機器であればよい。例えば、端末装置はパーソナルコンピュータ、テレビジョン、携帯電話、スマートフォン、ゲーム機器でもよい。

また、上記した各実施形態において、制御サーバ装置及び端末装置にプログラムをインストールすることによって、制御サーバ装置にオンラインカラオケ機能が追加されてもよい。このプログラムは記憶媒体に記憶されている。記憶媒体は特に限定されないが、光ディスク、光磁気ディスク、フラッシュメモリ等の非一過性の記憶媒体であってもよい。

また、本実施形態を説明したが、他の実施形態として、上記実施形態及び変形例を全体的又は部分的に組み合わせたものでもよい。

また、本発明の技術は上記の実施形態に限定されるものではなく、技術的思想の趣旨を逸脱しない範囲において様々に変更、置換、変形されてもよい。さらには、技術の進歩又は派生する別技術によって、技術的思想を別の仕方によって実現することができれば、その方法を用いて実施されてもよい。したがって、特許請求の範囲は、技術的思想の範囲内に含まれ得る全ての実施態様をカバーしている。

１０、３０：オンラインシステム
１１、３１：端末装置
１２、３２：制御サーバ装置（サーバ装置）
１３、３３：カラオケ配信サーバ装置
２１、４１：予約部
２２、４２：登録部
２４、４４：送信部
２５、４６：予約待ち行列
４５：生成部

Claims

互いにビデオ通話可能な複数の端末装置に通信可能に接続されたサーバ装置であって、
利用者の予約操作を受け付けた端末装置である予約端末装置から楽曲識別情報及び端末識別情報を取得して、楽曲識別情報に前記予約端末装置の端末識別情報を対応付けて予約待ち行列に登録する予約部と、
予約済みの楽曲のカラオケ歌唱を希望する他の利用者の端末装置である歌唱希望端末装置の端末識別情報を取得して、楽曲識別情報に前記歌唱希望端末装置の端末識別情報を対応付けて予約待ち行列に登録する登録部と、
予約待ち行列に登録された楽曲識別情報に基づいてカラオケ演奏データを取得して、前記予約端末装置及び前記歌唱希望端末装置に対してカラオケ演奏データを送信する送信部と、を備え、
前記送信部は、前記予約端末装置及び前記歌唱希望端末装置から歌唱音声データを取得して、前記予約端末装置及び前記歌唱希望端末装置のいずれかの歌唱音声データをカラオケ演奏データに同期させて、前記予約端末装置及び前記歌唱希望端末装置以外の端末装置である聴取端末装置に対して送信することを特徴とするサーバ装置。
前記登録部は、少なくとも１つの前記歌唱希望端末装置の端末識別情報が登録された場合に、前記聴取端末装置に前記予約端末装置及び前記歌唱希望端末装置から１つの端末装置を指定させ、
前記送信部は、前記聴取端末装置に指定された端末装置の歌唱音声データをカラオケ演奏データに同期させて当該聴取端末装置に送信することを特徴とする請求項１に記載のサーバ装置。
前記予約端末装置及び前記歌唱希望端末装置から歌唱音声データを取得して、歌唱音声データに基づいて残響成分データを生成する生成部を備え、
前記送信部は、前記予約端末装置及び前記歌唱希望端末装置に対してカラオケ演奏データ及び送信先の端末装置の歌唱音声データから生成された残響成分データを送信し、前記聴取端末装置に対して前記予約端末装置及び前記歌唱希望端末装置のいずれかの歌唱音声データに当該歌唱音声データから生成された残響成分データを付与してカラオケ演奏データに同期させて送信することを特徴とする請求項１又は請求項２に記載のサーバ装置。