JP7520661B2 - Server device - Google Patents

Server device Download PDF

Info

Publication number
JP7520661B2
JP7520661B2 JP2020159717A JP2020159717A JP7520661B2 JP 7520661 B2 JP7520661 B2 JP 7520661B2 JP 2020159717 A JP2020159717 A JP 2020159717A JP 2020159717 A JP2020159717 A JP 2020159717A JP 7520661 B2 JP7520661 B2 JP 7520661B2
Authority
JP
Japan
Prior art keywords
terminal device
singing
reservation
karaoke
terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020159717A
Other languages
Japanese (ja)
Other versions
JP2022053099A (en
Inventor
政之 鎌田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Daiichikosho Co Ltd
Original Assignee
Daiichikosho Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daiichikosho Co Ltd filed Critical Daiichikosho Co Ltd
Priority to JP2020159717A priority Critical patent/JP7520661B2/en
Publication of JP2022053099A publication Critical patent/JP2022053099A/en
Application granted granted Critical
Publication of JP7520661B2 publication Critical patent/JP7520661B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Telephonic Communication Services (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)

Description

本発明は、サーバ装置に関する。 The present invention relates to a server device.

クラウド型サーバ装置によるオンライン会議システムが普及し、最近ではオンライン会議システムを利用したオンライン飲み会が行われている。このようなオンライン会議システムとして、利用者の端末装置にカラオケ演奏データを配信するものが知られている（例えば、特許文献１参照）。特許文献１の技術を用いれば、オンライン飲み会の利用者が、各自の端末装置から出力されたカラオケ演奏音に合わせてカラオケ歌唱を楽しむことができる。複数の利用者が互いの歌唱を邪魔しないように、端末装置の音声入力をオフにしたまま歌唱しても、複数の利用者で映像が共有されて一体感は損なわれない。これは、カラオケルーム等に集まる場合にはできないオンラインカラオケならではの楽しみ方である。 Online conference systems using cloud-based server devices have become widespread, and online drinking parties using online conference systems have recently been held. One such online conference system known to distribute karaoke performance data to users' terminal devices (see, for example, Patent Document 1). Using the technology of Patent Document 1, users at an online drinking party can enjoy singing karaoke along with the karaoke performance sounds output from their respective terminal devices. Even if multiple users sing with the audio input of their terminal devices turned off so as not to disturb each other's singing, the video is shared among the multiple users and the sense of unity is not lost. This is a way of enjoying online karaoke that is not possible when gathering in a karaoke room, etc.

特開２０１０－０７４１９９号公報JP 2010-074199 A

しかしながら、カラオケ歌唱する利用者が各自の端末装置の音声入力をオフにすると、他人のカラオケ歌唱を聴きたい利用者の端末装置からは歌唱音声が出力されず、カラオケ歌唱中の利用者と一緒に聴取希望の利用者がオンラインカラオケを楽しむことができない。すなわち、カラオケ歌唱する利用者が互いの歌唱を邪魔しないように配慮すると、カラオケ歌唱を希望しない利用者がカラオケ歌唱を聴くことができない。 However, if users singing karaoke turn off the audio input on their own terminal devices, singing voices will not be output from the terminal devices of users who want to listen to others singing karaoke, and users who wish to listen along with the user who is singing karaoke will not be able to enjoy online karaoke. In other words, if users singing karaoke try to be careful not to disturb each other's singing, users who do not wish to sing karaoke will not be able to listen to the karaoke.

本発明の目的は、利用者が互いのカラオケ歌唱を邪魔しないように配慮しつつ、聴取希望の利用者がカラオケ歌唱を聴取可能なオンラインカラオケを提供するサーバ装置を提供することである。 The object of the present invention is to provide a server device that provides online karaoke that allows users who wish to listen to karaoke to listen to the singing, while being mindful of not disturbing each other's karaoke singing.

上記目的を達成するための主たる発明は、互いにビデオ通話可能な複数の端末装置に通信可能に接続されたサーバ装置であって、利用者の予約操作を受け付けた端末装置である予約端末装置から楽曲識別情報及び端末識別情報を取得して、楽曲識別情報に前記予約端末装置の端末識別情報を対応付けて予約待ち行列に登録する予約部と、予約済みの楽曲のカラオケ歌唱を希望する他の利用者の端末装置である歌唱希望端末装置の端末識別情報を取得して、楽曲識別情報に前記歌唱希望端末装置の端末識別情報を対応付けて予約待ち行列に登録する登録部と、予約待ち行列に登録された楽曲識別情報に基づいてカラオケ演奏データを取得して、前記予約端末装置及び前記歌唱希望端末装置に対してカラオケ演奏データを送信する送信部と、を備え、前記送信部は、前記予約端末装置及び前記歌唱希望端末装置から歌唱音声データを取得して、前記予約端末装置及び前記歌唱希望端末装置のいずれかの歌唱音声データをカラオケ演奏データに同期させて、前記予約端末装置及び前記歌唱希望端末装置以外の端末装置である聴取端末装置に対して送信し、前記予約端末装置及び前記歌唱希望端末装置に歌唱音声データを送信しないサーバ装置である。 The main invention for achieving the above object is a server device communicably connected to a plurality of terminal devices capable of video calling with each other, the server device comprising: a reservation unit which acquires song identification information and terminal identification information from a reservation terminal device which is a terminal device that has accepted a reservation operation from a user, and registers the song identification information in a reservation queue by associating the terminal identification information of the reservation terminal device with the song identification information; a registration unit which acquires terminal identification information of a singing desire terminal device which is a terminal device of another user who wishes to sing the karaoke version of the reserved song, and registers the song identification information in the reservation queue by associating the terminal identification information of the singing desire terminal device with the song identification information; and a transmitting unit which acquires karaoke performance data based on the registered song identification information and transmits the karaoke performance data to the reservation terminal device and the desired singing terminal device, wherein the transmitting unit is a server device which acquires singing voice data from the reservation terminal device and the desired singing terminal device, synchronizes the singing voice data of either the reservation terminal device or the desired singing terminal device with the karaoke performance data, and transmits it to a listening terminal device which is a terminal device other than the reservation terminal device and the desired singing terminal device, and does not transmit the singing voice data to the reservation terminal device and the desired singing terminal device.

本発明によれば、予約端末装置及び歌唱希望端末装置に対してはカラオケ演奏データが送信されて歌唱音声データが送信されない。このため、予約端末装置及び歌唱希望端末装置の利用者がカラオケ演奏に合わせてカラオケ歌唱しても、予約端末装置及び歌唱希望端末装置の利用者が互いのカラオケ歌唱を邪魔することがない。聴取端末装置に対してはカラオケ演奏データと歌唱音声データが送信される。このため、聴取端末装置の利用者はカラオケ歌唱を聴くことができ、聴取端末装置の利用者がカラオケ歌唱中の利用者と一緒にカラオケを楽しむことができる。 According to the present invention, karaoke performance data is sent to the reservation terminal device and the singing desired terminal device, but singing voice data is not sent. Therefore, even if the users of the reservation terminal device and the singing desired terminal device sing karaoke along with the karaoke performance, the users of the reservation terminal device and the singing desired terminal device do not disturb each other's karaoke singing. Karaoke performance data and singing voice data are sent to the listening terminal device. Therefore, the user of the listening terminal device can listen to the karaoke singing, and can enjoy karaoke together with the user who is singing karaoke.

第１実施形態のオンラインシステムの構成図である。FIG. 1 is a configuration diagram of an online system according to a first embodiment. 第１実施形態のオンラインシステムの機能ブロック図である。FIG. 2 is a functional block diagram of the online system according to the first embodiment. 第１実施形態の端末装置の装置状態を示す図である。FIG. 2 is a diagram illustrating a device state of the terminal device according to the first embodiment. 第１実施形態のオンラインシステムのフロー図である。FIG. 2 is a flow diagram of the online system according to the first embodiment. 第２実施形態の端末装置の装置状態を示す図である。FIG. 11 is a diagram illustrating a device state of a terminal device according to the second embodiment. 第３実施形態のオンラインシステムの機能ブロック図である。FIG. 13 is a functional block diagram of an online system according to a third embodiment. 第３実施形態の残響成分データの概念図である。FIG. 13 is a conceptual diagram of reverberation component data according to the third embodiment.

＜第１実施形態＞
図１及び図２を参照して、第１実施形態のオンラインシステムについて説明する。図１は、第１実施形態のオンラインシステムの構成図である。図２は、第１実施形態のオンラインシステムの機能ブロック図である。なお、以下の説明では、端末装置は、予約端末装置、歌唱希望端末装置、聴取端末装置のいずれかとして動作するが、これらの文言には同一の符号を付して説明する。また、端末装置には符号Ａ－Ｄが付されているが、任意の端末装置を特定しない場合にはＡ－Ｄを省略することもある。 First Embodiment
The online system of the first embodiment will be described with reference to Figures 1 and 2. Figure 1 is a configuration diagram of the online system of the first embodiment. Figure 2 is a functional block diagram of the online system of the first embodiment. In the following description, a terminal device operates as either a reservation terminal device, a singing request terminal device, or a listening terminal device, but these terms will be described with the same reference numerals. Furthermore, although the terminal devices are given the numerals A-D, A-D may be omitted when no particular terminal device is specified.

図１に示すように、第１実施形態のオンラインシステム１０は、複数の利用者Ａ－Ｄが所持する端末装置１１Ａ－１１Ｄと、オンラインコミュニケーションを制御する制御サーバ装置（サーバ装置）１２と、多数の楽曲を管理するカラオケ配信サーバ装置１３とを備えている。端末装置１１Ａ－１１Ｄ、制御サーバ装置１２、カラオケ配信サーバ装置１３はネットワーク１４を介して通信可能に接続されている。端末装置１１Ａ－１１Ｄにはマイクロフォン、カメラ、スピーカ、ディスプレイが設けられており、端末装置１１Ａ－１１Ｄが互いにネットワーク１４を介してビデオ通話可能に構成されている。 As shown in FIG. 1, the online system 10 of the first embodiment includes terminal devices 11A-11D owned by multiple users A-D, a control server device (server device) 12 that controls online communication, and a karaoke distribution server device 13 that manages a large number of songs. The terminal devices 11A-11D, control server device 12, and karaoke distribution server device 13 are communicatively connected via a network 14. The terminal devices 11A-11D are equipped with a microphone, camera, speaker, and display, and are configured to be able to make video calls between the terminal devices 11A-11D via the network 14.

制御サーバ装置１２は、端末装置１１Ａ－１１Ｄに音声データ及び映像データを共有させている。例えば、制御サーバ装置１２は、端末装置１１Ｂ－１１Ｄから取得した音声データを端末装置１１Ａに送信し、端末装置１１Ａ、１１Ｃ、１１Ｄから取得した音声データを端末装置１１Ｂに送信し、端末装置１１Ａ、１１Ｂ、１１Ｄから取得した音声データを端末装置１１Ｃに送信し、端末装置１１Ａ－１１Ｃから取得した音声データを端末装置１１Ｄに送信する。また、制御サーバ装置１２は、端末装置１１Ａ－１１Ｄから取得した映像データをレイアウトした合成映像データを端末装置１１Ａ－１１Ｄに送信する。 The control server device 12 allows the terminal devices 11A-11D to share audio data and video data. For example, the control server device 12 transmits audio data acquired from the terminal devices 11B-11D to the terminal device 11A, transmits audio data acquired from the terminal devices 11A, 11C, and 11D to the terminal device 11B, transmits audio data acquired from the terminal devices 11A, 11B, and 11D to the terminal device 11C, and transmits audio data acquired from the terminal devices 11A-11C to the terminal device 11D. The control server device 12 also transmits composite video data, which is a layout of the video data acquired from the terminal devices 11A-11D, to the terminal devices 11A-11D.

さらに、制御サーバ装置１２は、端末装置１１Ａ－１１Ｄに対して利用者グループ内のオンラインコミュニケーションの１つとしてオンラインカラオケを提供している。オンラインカラオケでは、端末装置１１Ａ－１１Ｄに対して仮想的なカラオケルームが用意されて、端末装置１１Ａ－１１Ｄの間で歌唱音声データ及び歌唱映像データが送受信される。制御サーバ装置１２は、オンラインカラオケに参加する利用者Ａ－Ｄの要求に応じて、カラオケ配信サーバ装置１３から取得した楽曲のカラオケ演奏データを端末装置１１Ａ－１１Ｄにストリーミング配信可能に構成されている。 Furthermore, the control server device 12 provides online karaoke to the terminal devices 11A-11D as one of the online communications within the user group. In online karaoke, a virtual karaoke room is prepared for the terminal devices 11A-11D, and singing voice data and singing video data are transmitted and received between the terminal devices 11A-11D. The control server device 12 is configured to be able to stream karaoke performance data of songs acquired from the karaoke distribution server device 13 to the terminal devices 11A-11D in response to requests from users A-D participating in online karaoke.

端末装置１１Ａ－１１Ｄにはオンラインコミュニケーションのソフトウェアがインストールされており、このソフトウェアにはオンラインカラオケ用に楽曲予約機能及び歌唱参加機能が含まれている。楽曲予約機能はカラオケ演奏の楽曲に対する利用者の予約を受け付けており、歌唱参加機能は予約済みの楽曲への他の利用者によるカラオケ歌唱の参加を受け付けている。そして、制御サーバ装置１２は、カラオケ歌唱を行う利用者の間では互いのカラオケ歌唱が邪魔にならず、他の利用者も聞き手として一緒に参加できるようにオンラインカラオケを制御している。 Online communication software is installed on the terminal devices 11A-11D, and this software includes a song reservation function and a singing participation function for online karaoke. The song reservation function accepts reservations by users for songs to be performed by karaoke, and the singing participation function accepts participation by other users in singing karaoke to songs that have been reserved. The control server device 12 controls the online karaoke so that users singing karaoke do not disturb each other's karaoke singing, and other users can also participate as listeners.

図２に示すように、オンラインシステム１０には、利用者Ａの端末装置１１Ａが予約操作を受け付けた予約端末装置１１Ａとして参加し、利用者Ｂの端末装置１１Ｂが予約済みの楽曲のカラオケ歌唱を希望する歌唱希望端末装置１１Ｂとして参加している。また、オンラインシステム１０には、利用者Ｃ、Ｄの端末装置１１Ｃ、１１Ｄが利用者Ａ、Ｂのカラオケ歌唱を聴取する聴取端末装置１１Ｃ、１１Ｄとして参加している。これら予約端末装置１１Ａ、歌唱希望端末装置１１Ｂ、聴取端末装置１１Ｃ、１１Ｄは、制御サーバ装置１２を介して互いにビデオ通話可能に接続されている。 As shown in FIG. 2, user A's terminal device 11A participates in the online system 10 as the reservation terminal device 11A that accepts the reservation operation, and user B's terminal device 11B participates as the singing desire terminal device 11B that desires to sing the karaoke of the reserved song. In addition, users C and D's terminal devices 11C and 11D participate in the online system 10 as listening terminal devices 11C and 11D that listen to the karaoke singing of users A and B. The reservation terminal device 11A, singing desire terminal device 11B, and listening terminal devices 11C and 11D are connected to each other via the control server device 12 so that they can make video calls with each other.

制御サーバ装置１２は、予約部２１と、登録部２２と、受信部２３と、送信部２４とを備えている。また、制御サーバ装置１２には、予約された楽曲の楽曲識別情報が登録順に並べられた予約待ち行列２５が記憶されている。予約部２１は、予約操作を受け付けた端末装置１１から楽曲識別情報及び端末識別情報を取得して、楽曲識別情報に端末識別情報を対応付けて予約待ち行列２５に登録する。本実施形態では、利用者Ａによって予約端末装置１１Ａの予約画面に楽曲識別情報が入力され、予約部２１によって予約待ち行列２５の最後尾に楽曲識別情報と予約端末装置１１Ａの端末識別情報が登録される。 The control server device 12 includes a reservation unit 21, a registration unit 22, a receiving unit 23, and a transmission unit 24. The control server device 12 also stores a reservation queue 25 in which the song identification information of reserved songs is arranged in the order of registration. The reservation unit 21 acquires song identification information and terminal identification information from the terminal device 11 that has accepted the reservation operation, associates the song identification information with the terminal identification information, and registers it in the reservation queue 25. In this embodiment, user A inputs song identification information into the reservation screen of the reservation terminal device 11A, and the reservation unit 21 registers the song identification information and the terminal identification information of the reservation terminal device 11A at the end of the reservation queue 25.

登録部２２は、予約待ち行列２５の予約状況を他の端末装置１１に送信し、予約済みの楽曲のカラオケ歌唱を希望する端末装置１１から端末識別情報を取得して、この端末識別情報を楽曲識別情報に対応付けて予約待ち行列に登録する。本実施形態では、登録部２２によって歌唱希望端末装置１１Ｂから端末識別情報が取得されて、歌唱希望端末装置１１Ｂの端末識別情報が楽曲識別情報に対応付けて予約待ち行列２５に登録される。このため、予約待ち行列２５には、楽曲識別情報に予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂの端末識別情報が対応付けられて登録されている。 The registration unit 22 transmits the reservation status of the reservation queue 25 to other terminal devices 11, acquires terminal identification information from the terminal device 11 that wishes to sing the reserved song karaoke, and registers this terminal identification information in the reservation queue in association with the song identification information. In this embodiment, the registration unit 22 acquires terminal identification information from the singing terminal device 11B, and registers the terminal identification information of the singing terminal device 11B in association with the song identification information in the reservation queue 25. Therefore, the reservation queue 25 registers the terminal identification information of the reservation terminal device 11A and the singing terminal device 11B in association with the song identification information.

受信部２３は、予約待ち行列２５に登録された楽曲識別情報に基づいて、カラオケ配信サーバ装置１３からカラオケ演奏データを受信する。送信部２４は、受信部２３からカラオケ演奏データを取得して、予約待ち行列２５に登録された端末識別情報の端末装置１１にカラオケ演奏データを送信して、カラオケ演奏データの送信先の端末装置１１から歌唱音声データを取得する。本実施形態では、送信部２４よって制御サーバ装置１２から予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂにカラオケ演奏データが送信されて、送信部２４によって予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂから歌唱音声データが取得される。 The receiving unit 23 receives karaoke performance data from the karaoke distribution server device 13 based on the song identification information registered in the reservation queue 25. The transmitting unit 24 acquires the karaoke performance data from the receiving unit 23, transmits the karaoke performance data to the terminal device 11 of the terminal identification information registered in the reservation queue 25, and acquires singing voice data from the terminal device 11 to which the karaoke performance data is to be transmitted. In this embodiment, the transmitting unit 24 transmits the karaoke performance data from the control server device 12 to the reservation terminal device 11A and the desired singing terminal device 11B, and the transmitting unit 24 acquires the singing voice data from the reservation terminal device 11A and the desired singing terminal device 11B.

また、送信部２４は、いずれかの歌唱音声データをカラオケ演奏データに同期させて、予約待ち行列２５に未登録の端末装置１１に対して送信する。本実施形態では、予約端末装置１１Ａから取得した歌唱音声データがカラオケ演奏データに同期されて、聴取端末装置１１Ｃ、１１Ｄに対して送信される。このように、予約端末装置１１Ａ、歌謡希望端末装置１１Ｂに対しては互いの歌唱の邪魔にならないようにカラオケ演奏データだけが送信され、聴取端末装置１１Ｃ、１１Ｄに対してはカラオケに聞き手として参加できるようにカラオケ演奏データと歌唱音声データが送信される。 The transmitting unit 24 also synchronizes any of the singing voice data with the karaoke performance data and transmits it to terminal devices 11 that are not registered in the reservation queue 25. In this embodiment, the singing voice data acquired from the reservation terminal device 11A is synchronized with the karaoke performance data and transmitted to the listening terminal devices 11C and 11D. In this way, only the karaoke performance data is transmitted to the reservation terminal device 11A and the song request terminal device 11B so as not to interfere with each other's singing, and the karaoke performance data and singing voice data are transmitted to the listening terminal devices 11C and 11D so that they can participate in the karaoke as listeners.

オンラインシステム１０の各装置の各処理は、プロセッサを用いてソフトウェアによって実現されてもよいし、集積回路等に形成された論理回路（ハードウェア）によって実現されてもよい。プロセッサを用いる場合には、プロセッサがメモリに記憶されているプログラムを読み出して実行することで各種処理が実施される。プロセッサとしては、例えば、ＣＰＵ（Central Processing Unit）が使用される。また、メモリは、用途に応じてＲＯＭ(Read Only Memory)、ＲＡＭ（Random Access Memory）等の一つ又は複数の記憶媒体によって構成されている。 The processes of each device in the online system 10 may be realized by software using a processor, or may be realized by logic circuits (hardware) formed in an integrated circuit or the like. When a processor is used, the processor reads and executes programs stored in memory to perform various processes. For example, a CPU (Central Processing Unit) is used as the processor. Furthermore, the memory is composed of one or more storage media such as ROM (Read Only Memory) and RAM (Random Access Memory) depending on the application.

図３及び図４を参照して、オンラインシステムの処理動作について具体例を挙げて説明する。図３は、第１実施形態の端末装置の装置状態を示す図である。図４は、第１実施形態のオンラインシステムのフロー図である。なお、ここでは、図１及び図２の符号を適宜使用して説明する。 The processing operation of the online system will be described with a specific example with reference to Figures 3 and 4. Figure 3 is a diagram showing the device state of the terminal device of the first embodiment. Figure 4 is a flow diagram of the online system of the first embodiment. Note that the symbols in Figures 1 and 2 will be used appropriately in the description.

図３及び図４に示すように、端末装置１１Ａ－１１Ｄでオンラインコミュニケーションのソフトウェアが動作しており、利用者Ａ－Ｄによってオンラインシステム１０を利用してオンライン飲み会が開かれている。利用者Ａによって端末装置１１Ａが操作され、楽曲検索によって楽曲Ｘ１のカラオケ演奏が予約される（ステップＳ０１）。これにより、端末装置１１Ａが予約端末装置１１Ａとして動作する。予約端末装置１１Ａから制御サーバ装置１２に、予約端末装置１１Ａの端末識別情報ＴＩＤ＊＊＊＊Ａと楽曲Ｘ１の楽曲識別情報ＳＩＤ＊＊＊＊１を含む予約要求が送信される。 As shown in Figures 3 and 4, online communication software is running on terminal devices 11A-11D, and users A-D are holding an online drinking party using online system 10. User A operates terminal device 11A and reserves a karaoke performance of song X1 through a song search (step S01). This causes terminal device 11A to operate as reservation terminal device 11A. A reservation request is sent from reservation terminal device 11A to control server device 12, including terminal identification information TID****A of reservation terminal device 11A and song identification information SID****1 of song X1.

次に、制御サーバ装置１２の予約部２１によって予約要求から端末識別情報ＴＩＤ＊＊＊＊Ａと楽曲Ｘ１の楽曲識別情報ＳＩＤ＊＊＊＊１が取得される。そして、予約部２１によって端末識別情報ＴＩＤ＊＊＊＊Ａと楽曲識別情報ＳＩＤ＊＊＊＊１が対応付けられて予約待ち行列２５に登録される（ステップＳ０２）。次に、制御サーバ装置１２の登録部２２によって予約待ち行列２５の予約状況を示す予約情報が他の端末装置１１Ｂ－１１Ｄに送信される（ステップＳ０３）。予約情報に基づいて端末装置１１Ｂ－１１Ｄのディスプレイに、利用者Ａが楽曲Ｘ１を予約したことが表示される。 Next, the reservation unit 21 of the control server device 12 obtains the terminal identification information TID****A and the song identification information SID****1 of song X1 from the reservation request. The reservation unit 21 then associates the terminal identification information TID****A with the song identification information SID****1 and registers them in the reservation queue 25 (step S02). Next, the registration unit 22 of the control server device 12 transmits reservation information indicating the reservation status of the reservation queue 25 to the other terminal devices 11B-11D (step S03). Based on the reservation information, the display of the terminal devices 11B-11D displays a message indicating that user A has reserved song X1.

次に、利用者Ｂによって端末装置１１Ｂが操作され、楽曲Ｘ１のカラオケ歌唱への参加が指示される（ステップＳ０４）。これにより、端末装置１１Ｂが歌唱希望端末装置１１Ｂとして動作する。歌唱希望端末装置１１Ｂから制御サーバ装置１２に、歌唱希望端末装置１１Ｂの端末識別情報ＴＩＤ＊＊＊＊Ｂを含む歌唱希望要求が送信される。次に、制御サーバ装置１２の登録部２２によって歌唱希望要求から端末識別情報ＴＩＤ＊＊＊＊Ｂが取得される。そして、楽曲Ｘ１の楽曲識別情報ＳＩＤ＊＊＊＊１に対応付けられて予約待ち行列２５に登録される（ステップＳ０５）。歌唱希望要求の送信は、予約情報の送信から所定時間以内（例えば、１分以内）に行われるものとする。 Next, user B operates terminal device 11B to instruct participation in karaoke singing of song X1 (step S04). This causes terminal device 11B to operate as singing desired terminal device 11B. A singing desire request including terminal identification information TID****B of singing desired terminal device 11B is transmitted to control server device 12 from singing desired terminal device 11B. Next, terminal identification information TID****B is obtained from the singing desire request by registration unit 22 of control server device 12. It is then associated with song identification information SID****1 of song X1 and registered in reservation queue 25 (step S05). The singing desire request is transmitted within a predetermined time (for example, within one minute) from transmission of the reservation information.

この時点で、予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂ以外の端末装置１１Ｃ、１１Ｄがカラオケ歌唱を希望しない聴取端末装置１１Ｃ、１１Ｄとして動作する。利用者Ａによって予約端末装置１１Ａが操作されて、楽曲Ｘ１のカラオケ演奏が指示される（ステップＳ０６）。予約端末装置１１Ａから制御サーバ装置１２に楽曲Ｘ１の楽曲識別情報ＳＩＤ＊＊＊＊１を含む演奏開始要求が送信される。次に、制御サーバ装置１２からカラオケ配信サーバ装置１３に、楽曲Ｘ１の楽曲識別情報ＳＩＤ＊＊＊＊１を含むカラオケ演奏データの配信要求が送信される（ステップＳ０７）。 At this point, the terminal devices 11C and 11D other than the reservation terminal device 11A and the singing desire terminal device 11B operate as listening terminal devices 11C and 11D that do not wish to sing karaoke. User A operates the reservation terminal device 11A to instruct a karaoke performance of song X1 (step S06). A performance start request including song identification information SID****1 of song X1 is sent from the reservation terminal device 11A to the control server device 12. Next, the control server device 12 sends a distribution request for karaoke performance data including song identification information SID****1 of song X1 to the karaoke distribution server device 13 (step S07).

次に、制御サーバ装置１２の受信部２３によってカラオケ配信サーバ装置１３から楽曲Ｘ１のカラオケ演奏データが受信される（ステップＳ０８）。次に、制御サーバ装置１２の送信部２４によって楽曲Ｘ１のカラオケ演奏データが予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂに送信される（ステップＳ０９）。カラオケ演奏に合わせて利用者Ａ、Ｂによってカラオケ歌唱される。予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂに利用者Ａ、Ｂのカラオケ歌唱が音声入力されて、予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂから制御サーバ装置１２に歌唱音声データが送信される（ステップＳ１０）。 Next, the receiving unit 23 of the control server device 12 receives the karaoke performance data of song X1 from the karaoke distribution server device 13 (step S08). Next, the transmitting unit 24 of the control server device 12 transmits the karaoke performance data of song X1 to the reservation terminal device 11A and the desired singing terminal device 11B (step S09). Users A and B sing karaoke along with the karaoke performance. The karaoke singing of users A and B is input into the reservation terminal device 11A and the desired singing terminal device 11B, and the singing voice data is transmitted from the reservation terminal device 11A and the desired singing terminal device 11B to the control server device 12 (step S10).

次に、制御サーバ装置１２の送信部２４によって予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂの歌唱音声データが取得される（ステップＳ１１）。次に、送信部２４によって予約端末装置１１Ａの歌唱音声データと楽曲Ｘ１のカラオケ演奏データが同期されて聴取端末装置１１Ｃ、１１Ｄに送信される（ステップＳ１２）。通常、予約端末装置１１Ａにカラオケ演奏データを送信してから、予約端末装置１１Ａから歌謡音声データを取得するまでに遅延が生じる。このため、公知の技術を用いて聴取端末装置１１Ｃ、１１Ｄへのカラオケ演奏データの送信を所定時間遅らせて、歌唱音声データとカラオケ演奏データが同期される。 Next, the transmission unit 24 of the control server device 12 acquires the singing voice data of the reservation terminal device 11A and the singing desire terminal device 11B (step S11). Next, the transmission unit 24 synchronizes the singing voice data of the reservation terminal device 11A with the karaoke performance data of song X1 and transmits them to the listening terminal devices 11C and 11D (step S12). Normally, there is a delay between transmitting the karaoke performance data to the reservation terminal device 11A and acquiring the singing voice data from the reservation terminal device 11A. For this reason, the transmission of the karaoke performance data to the listening terminal devices 11C and 11D is delayed by a predetermined time using known technology, and the singing voice data and the karaoke performance data are synchronized.

そして、聴取端末装置１１Ｃ、１１Ｄの利用者Ｃ、Ｄは、楽曲Ｘ１のカラオケ演奏に合わせて利用者Ａのカラオケ歌唱を聴取する。楽曲Ｘ１のカラオケ演奏が終了すると、制御サーバ装置１２の予約部２１によって予約待ち行列２５から楽曲Ｘ１の楽曲識別情報ＳＩＤ＊＊＊＊１、予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂの端末識別情報ＴＩＤ＊＊＊＊Ａ、ＴＩＤ＊＊＊＊Ｂが削除される（ステップＳ１３）。予約待ち行列２５から楽曲Ｘ１に関する各識別情報が削除されると、楽曲Ｘ１以降の楽曲Ｘ２－Ｘ４についても上記と同様な処理が実施される。なお、カラオケ演奏が行われない時間（曲間）においては、上記したように端末装置１１Ａ－１１Ｄが互いにネットワーク１４を介してビデオ通話可能になっている。 Users C and D of the listening terminal devices 11C and 11D then listen to User A's karaoke singing along with the karaoke performance of song X1. When the karaoke performance of song X1 is finished, the reservation unit 21 of the control server device 12 deletes the song identification information SID****1 of song X1 and the terminal identification information TID****A and TID****B of the reservation terminal device 11A and the singing request terminal device 11B from the reservation queue 25 (step S13). When the identification information for song X1 is deleted from the reservation queue 25, the same process as above is carried out for songs X2-X4 following song X1. During times when karaoke performance is not being performed (between songs), the terminal devices 11A-11D are able to video call each other via the network 14 as described above.

図３に示すように、楽曲Ｘ２は利用者Ｂによって予約されており、端末装置１１Ｂが予約端末装置１１Ｂとして動作する。利用者Ｃが楽曲Ｘ２のカラオケ歌唱を希望しており、端末装置１１Ｃが歌唱希望端末装置１１Ｃとして動作する。利用者Ａ、Ｄが楽曲Ｘ２のカラオケ歌唱を希望しておらず、端末装置１１Ａ、１１Ｄが聴取端末装置１１Ａ、１１Ｄとして動作する。このため、制御サーバ装置１２の予約待ち行列２５には、楽曲Ｘ２の楽曲識別情報ＳＩＤ＊＊＊＊２に予約端末装置１１Ｂの端末識別情報ＴＩＤ＊＊＊＊Ｂ及び歌唱希望端末装置１１ＣのＴＩＤ＊＊＊＊Ｃが対応付けられて登録されている。 As shown in FIG. 3, song X2 has been reserved by user B, and terminal device 11B operates as reservation terminal device 11B. User C wishes to sing karaoke of song X2, and terminal device 11C operates as singing-desired terminal device 11C. Users A and D do not wish to sing karaoke of song X2, and terminal devices 11A and 11D operate as listening terminal devices 11A and 11D. For this reason, in the reservation queue 25 of control server device 12, song identification information SID****2 of song X2 is registered in association with terminal identification information TID****B of reservation terminal device 11B and TID****C of singing-desired terminal device 11C.

カラオケ配信サーバ装置１３から制御サーバ装置１２に楽曲Ｘ２のカラオケ演奏データが送信され、制御サーバ装置１２から予約端末装置１１Ｂ及び歌唱希望端末装置１１Ｃに楽曲Ｘ２のカラオケ演奏データが送信される。カラオケ演奏に合わせて利用者Ｂ、Ｃによってカラオケ歌唱されると、予約端末装置１１Ｂ及び歌唱希望端末装置１１Ｃから制御サーバ装置１２に歌唱音声データが送信される。そして、予約端末装置１１Ｂから取得した歌唱音声データと楽曲Ｘ２のカラオケ演奏データが同期されて、制御サーバ装置１２から聴取端末装置１１Ａ、１１Ｄに送信される。 Karaoke performance data of song X2 is transmitted from the karaoke distribution server device 13 to the control server device 12, and the karaoke performance data of song X2 is transmitted from the control server device 12 to the reservation terminal device 11B and the desired singing terminal device 11C. When users B and C sing karaoke along with the karaoke performance, singing voice data is transmitted from the reservation terminal device 11B and the desired singing terminal device 11C to the control server device 12. The singing voice data acquired from the reservation terminal device 11B and the karaoke performance data of song X2 are then synchronized and transmitted from the control server device 12 to the listening terminal devices 11A and 11D.

また、楽曲Ｘ３は利用者Ａによって予約されており、端末装置１１Ａが予約端末装置１１Ａとして動作する。利用者Ｂ、Ｃが楽曲Ｘ３のカラオケ歌唱を希望しており、端末装置１１Ｂ、１１Ｃが歌唱希望端末装置１１Ｂ、１１Ｃとして動作する。利用者Ｄが楽曲Ｘ３のカラオケ歌唱を希望しておらず、端末装置１１Ｄが聴取端末装置１１Ｄとして動作する。このため、制御サーバ装置１２の予約待ち行列２５には、楽曲Ｘ３の楽曲識別情報ＳＩＤ＊＊＊＊３に予約端末装置１１Ａの端末識別情報ＴＩＤ＊＊＊＊Ａ及び歌唱希望端末装置１１Ｂ、１１ＣのＴＩＤ＊＊＊＊Ｂ、ＴＩＤ＊＊＊＊Ｃが対応付けられて登録されている。 Song X3 has been reserved by user A, and terminal device 11A operates as reservation terminal device 11A. Users B and C wish to sing song X3 karaoke, and terminal devices 11B and 11C operate as singing-desiring terminal devices 11B and 11C. User D does not wish to sing song X3 karaoke, and terminal device 11D operates as listening terminal device 11D. For this reason, in the reservation queue 25 of control server device 12, song identification information SID***3 of song X3 is registered in association with terminal identification information TID***A of reservation terminal device 11A and TID***B and TID***C of singing-desiring terminal devices 11B and 11C.

カラオケ配信サーバ装置１３から制御サーバ装置１２に楽曲Ｘ３のカラオケ演奏データが送信され、制御サーバ装置１２から予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂ、１１Ｃに楽曲Ｘ３のカラオケ演奏データが送信される。カラオケ演奏に合わせて利用者Ａ－Ｃによってカラオケ歌唱されると、予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂ、１１Ｃから制御サーバ装置１２に歌唱音声データが送信される。そして、予約端末装置１１Ａから取得した歌唱音声データと楽曲Ｘ３のカラオケ演奏データが同期されて、制御サーバ装置１２から聴取端末装置１１Ｄに送信される。 Karaoke performance data of song X3 is transmitted from the karaoke distribution server device 13 to the control server device 12, and the karaoke performance data of song X3 is transmitted from the control server device 12 to the reservation terminal device 11A and the desired singing terminal devices 11B and 11C. When users A-C sing karaoke along with the karaoke performance, singing voice data is transmitted from the reservation terminal device 11A and the desired singing terminal devices 11B and 11C to the control server device 12. The singing voice data acquired from the reservation terminal device 11A and the karaoke performance data of song X3 are then synchronized and transmitted from the control server device 12 to the listening terminal device 11D.

また、楽曲Ｘ４は利用者Ｃによって予約されており、端末装置１１Ｃが予約端末装置１１Ｃとして動作する。利用者Ａ、Ｂ、Ｄが楽曲Ｘ４のカラオケ歌唱を希望しておらず、端末装置１１Ａ、１１Ｂ、１１Ｄが聴取端末装置１１Ａ、１１Ｂ、１１Ｄとして動作する。歌唱希望端末装置として動作する端末装置は存在しない。このため、制御サーバ装置１２の予約待ち行列２５には、楽曲Ｘ４の楽曲識別情報ＳＩＤ＊＊＊＊４に予約端末装置１１Ｃの端末識別情報ＴＩＤ＊＊＊＊Ｃが対応付けられて登録されている。 Song X4 has been reserved by user C, and terminal device 11C operates as reservation terminal device 11C. Users A, B, and D do not wish to sing karaoke of song X4, and terminal devices 11A, 11B, and 11D operate as listening terminal devices 11A, 11B, and 11D. There is no terminal device operating as a singing desired terminal device. For this reason, the reservation queue 25 of control server device 12 has song identification information SID****4 of song X4 registered in association with terminal identification information TID****C of reservation terminal device 11C.

カラオケ配信サーバ装置１３から制御サーバ装置１２に楽曲Ｘ４のカラオケ演奏データが送信され、制御サーバ装置１２から予約端末装置１１Ｃに楽曲Ｘ４のカラオケ演奏データが送信される。カラオケ演奏に合わせて利用者Ｃによってカラオケ歌唱されると、予約端末装置１１Ｃから制御サーバ装置１２に歌唱音声データが送信される。そして、予約端末装置１１Ｃから取得した歌唱音声データと楽曲Ｘ４のカラオケ演奏データが同期されて、制御サーバ装置１２から聴取端末装置１１Ａ、１１Ｂ、１１Ｄに送信される。 Karaoke performance data of song X4 is transmitted from the karaoke distribution server device 13 to the control server device 12, and the karaoke performance data of song X4 is transmitted from the control server device 12 to the reservation terminal device 11C. When user C sings karaoke along with the karaoke performance, singing voice data is transmitted from the reservation terminal device 11C to the control server device 12. The singing voice data acquired from the reservation terminal device 11C and the karaoke performance data of song X4 are then synchronized and transmitted from the control server device 12 to the listening terminal devices 11A, 11B, and 11D.

以上、第１実施形態によれば、予約端末装置及び歌唱希望端末装置に対しては制御サーバ装置からカラオケ演奏データが送信されて歌唱音声データが送信されない。このため、予約端末装置及び歌唱希望端末装置の利用者がカラオケ演奏に合わせてカラオケ歌唱しても、各利用者が互いのカラオケ歌唱を邪魔することがない。聴取端末装置に対してはカラオケ演奏データと歌唱音声データが送信される。このため、聴取端末装置の利用者は、予約端末装置及び歌唱希望端末装置の利用者のカラオケ歌唱を聴いて、歌唱中の利用者と一緒にカラオケを楽しむことができる。 As described above, according to the first embodiment, karaoke performance data is sent from the control server device to the reservation terminal device and the singing desire terminal device, but singing voice data is not sent. Therefore, even if users of the reservation terminal device and the singing desire terminal device sing karaoke along with the karaoke performance, each user does not disturb the other's karaoke singing. Karaoke performance data and singing voice data are sent to the listening terminal device. Therefore, users of the listening terminal device can listen to the karaoke singing of the users of the reservation terminal device and the singing desire terminal device, and enjoy karaoke together with the users who are singing.

＜第２実施形態＞
図５を参照して、第２実施形態のオンラインシステムについて説明する。図５は、第２実施形態の端末装置の装置状態を示す図である。なお、第２実施形態のオンラインシステムは、聴取端末装置に予約端末装置及び歌唱希望端末装置を指定させて、指定端末装置から聴取端末装置に歌唱音声データを送信させる点で第１実施形態のオンラインシステムと相違する。したがって、第２実施形態については、第１実施形態と同様な構成については説明を省略する。また、第１実施形態と同一名称の構成については同一の符号を付して説明する。 Second Embodiment
The online system of the second embodiment will be described with reference to Fig. 5. Fig. 5 is a diagram showing the device state of the terminal device of the second embodiment. The online system of the second embodiment differs from the online system of the first embodiment in that the listening terminal device is made to designate a reservation terminal device and a singing desired terminal device, and singing voice data is transmitted from the designated terminal device to the listening terminal device. Therefore, in the second embodiment, the description of the same configuration as in the first embodiment will be omitted. Also, the same reference numerals will be used to designate the same configuration as in the first embodiment.

第２実施形態の登録部は、予約端末装置の識別情報の他に、少なくとも１つの歌唱希望端末装置の端末識別情報が予約待ち行列に登録された場合に、聴取端末装置に予約端末装置及び歌唱希望端末装置から１つの端末装置を指定させる。この場合、制御サーバ装置から各端末装置に送信された予約待ち行列の予約状況の応答として、聴取端末装置から制御サーバ装置に指定端末装置の端末識別情報が返信される。登録部によって指定端末装置の端末識別情報が取得されると、管理テーブルによって指定端末装置の端末識別情報が聴取端末装置の端末識別情報に対応付けられて登録される。 The registration unit of the second embodiment causes the listening terminal device to designate one terminal device from the reserving terminal device and the singing terminal device when the terminal identification information of at least one singing terminal device is registered in the reservation queue in addition to the identification information of the reserving terminal device. In this case, the listening terminal device returns the terminal identification information of the designated terminal device to the control server device as a response to the reservation status of the reservation queue transmitted from the control server device to each terminal device. When the registration unit obtains the terminal identification information of the designated terminal device, the terminal identification information of the designated terminal device is registered in association with the terminal identification information of the listening terminal device in the management table.

第２実施形態の送信部は、聴取端末装置に指定された指定端末装置の歌唱音声データを取得し、この歌唱音声データをカラオケ演奏データに同期させて聴取端末装置に送信する。この場合、送信部によって管理テーブルが参照され、指定端末装置から取得した歌唱音声データとカラオケ演奏データが同期されて、指定端末装置に対応付けられた聴取端末装置に送信される。なお、管理テーブルの代わりに、予約待ち行列に楽曲の楽曲識別情報に指定端末装置の端末識別情報と聴取端末装置の端末識別情報が対応付けられて登録されてもよい。 The transmission unit of the second embodiment acquires singing voice data of a designated terminal device designated as a listening terminal device, synchronizes this singing voice data with karaoke performance data, and transmits it to the listening terminal device. In this case, the transmission unit refers to the management table, synchronizes the singing voice data acquired from the designated terminal device with the karaoke performance data, and transmits it to the listening terminal device associated with the designated terminal device. Note that instead of the management table, the song identification information of the song may be registered in the reservation queue in association with the terminal identification information of the designated terminal device and the terminal identification information of the listening terminal device.

図５に示すように、楽曲Ｘ１は利用者Ａによって予約されており、端末装置１１Ａが予約端末装置１１Ａとして動作する。利用者Ｂが楽曲Ｘ１のカラオケ歌唱を希望しており、端末装置１１Ｂが歌唱希望端末装置１１Ｂとして動作する。利用者Ｃ、Ｄが楽曲Ｘ１の歌唱を希望しておらず、端末装置１１Ｃ、１１Ｄが聴取端末装置１１Ｃ、１１Ｄとして動作する。また、聴取端末装置１１Ｃによって予約端末装置１１Ａが指定され、聴取端末装置１１Ｄによって歌唱希望端末装置１１Ｂが指定されている。第１実施形態と同様に、予約待ち行列２５には各識別情報が対応付けられて登録されている。 As shown in FIG. 5, song X1 has been reserved by user A, and terminal device 11A operates as reservation terminal device 11A. User B wishes to sing song X1 karaoke, and terminal device 11B operates as singing desired terminal device 11B. Users C and D do not wish to sing song X1, and terminal devices 11C and 11D operate as listening terminal devices 11C and 11D. Furthermore, reservation terminal device 11A is designated by listening terminal device 11C, and singing desired terminal device 11B is designated by listening terminal device 11D. As in the first embodiment, each identification information is associated and registered in the reservation queue 25.

カラオケ配信サーバ装置１３から制御サーバ装置１２に楽曲Ｘ１のカラオケ演奏データが送信され、制御サーバ装置１２から予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂに楽曲Ｘ１のカラオケ演奏データが送信される。カラオケ演奏に合わせて利用者Ａ、Ｂによってカラオケ歌唱されると、予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂから制御サーバ装置１２に歌唱音声データが送信される。そして、予約端末装置１１Ａの歌唱音声データと楽曲Ｘ１のカラオケ演奏データが同期されて聴取端末装置１１Ｃに送信され、予約端末装置１１Ｂの歌唱音声データと楽曲Ｘ１のカラオケ演奏データが同期されて聴取端末装置１１Ｄに送信される。 Karaoke performance data of song X1 is transmitted from the karaoke distribution server device 13 to the control server device 12, and the karaoke performance data of song X1 is transmitted from the control server device 12 to the reservation terminal device 11A and the desired singing terminal device 11B. When users A and B sing karaoke along with the karaoke performance, singing voice data is transmitted from the reservation terminal device 11A and the desired singing terminal device 11B to the control server device 12. The singing voice data of the reservation terminal device 11A and the karaoke performance data of song X1 are then synchronized and transmitted to the listening terminal device 11C, and the singing voice data of the reservation terminal device 11B and the karaoke performance data of song X1 are synchronized and transmitted to the listening terminal device 11D.

楽曲Ｘ２は利用者Ｂによって予約されており、端末装置１１Ｂが予約端末装置１１Ｂとして動作する。利用者Ｃが楽曲Ｘ２のカラオケ歌唱を希望しており、端末装置１１Ｃが歌唱希望端末装置１１Ｃとして動作する。利用者Ａ、Ｄが楽曲Ｘ２の歌唱を希望しておらず、端末装置１１Ａ、１１Ｄが聴取端末装置１１Ａ、１１Ｄとして動作する。また、聴取端末装置１１Ａによって予約端末装置１１Ｂが指定され、聴取端末装置１１Ｄによって歌唱希望端末装置１１Ｃが指定されている。第１実施形態と同様に、予約待ち行列２５には各識別情報が対応付けられて登録されている。 Song X2 has been reserved by user B, and terminal device 11B operates as reservation terminal device 11B. User C wishes to sing song X2 karaoke, and terminal device 11C operates as singing desired terminal device 11C. Users A and D do not wish to sing song X2, and terminal devices 11A and 11D operate as listening terminal devices 11A and 11D. Furthermore, reservation terminal device 11B is designated by listening terminal device 11A, and singing desired terminal device 11C is designated by listening terminal device 11D. As in the first embodiment, each identification information is associated and registered in the reservation queue 25.

カラオケ配信サーバ装置１３から制御サーバ装置１２に楽曲Ｘ２のカラオケ演奏データが送信され、制御サーバ装置１２から予約端末装置１１Ｂ及び歌唱希望端末装置１１Ｃに楽曲Ｘ２のカラオケ演奏データが送信される。カラオケ演奏に合わせて利用者Ｂ、Ｃによってカラオケ歌唱されると、予約端末装置１１Ｂ及び歌唱希望端末装置１１Ｃから制御サーバ装置１２に歌唱音声データが送信される。そして、予約端末装置１１Ｂの歌唱音声データと楽曲Ｘ２のカラオケ演奏データが同期されて聴取端末装置１１Ａに送信され、予約端末装置１１Ｃの歌唱音声データと楽曲Ｘ２のカラオケ演奏データが同期されて聴取端末装置１１Ｄに送信される。 The karaoke performance data of song X2 is transmitted from the karaoke distribution server device 13 to the control server device 12, and the karaoke performance data of song X2 is transmitted from the control server device 12 to the reservation terminal device 11B and the desired singing terminal device 11C. When users B and C sing karaoke along with the karaoke performance, singing voice data is transmitted from the reservation terminal device 11B and the desired singing terminal device 11C to the control server device 12. The singing voice data of the reservation terminal device 11B and the karaoke performance data of song X2 are then synchronized and transmitted to the listening terminal device 11A, and the singing voice data of the reservation terminal device 11C and the karaoke performance data of song X2 are then synchronized and transmitted to the listening terminal device 11D.

楽曲Ｘ３は利用者Ａによって予約されており、端末装置１１Ａが予約端末装置１１Ａとして動作する。利用者Ｂ、Ｃが楽曲Ｘ３のカラオケ歌唱を希望しており、端末装置１１Ｂ、１１Ｃが歌唱希望端末装置１１Ｂ、１１Ｃとして動作する。利用者Ｄが楽曲Ｘ３の歌唱を希望しておらず、端末装置１１Ｄが聴取端末装置１１Ｄとして動作する。また、聴取端末装置１１Ｄによって予約端末装置１１Ａが指定されている。第１実施形態と同様に、予約待ち行列２５には各識別情報が対応付けられて登録されている。 Song X3 has been reserved by user A, and terminal device 11A operates as reservation terminal device 11A. Users B and C wish to sing song X3 karaoke, and terminal devices 11B and 11C operate as singing preference terminal devices 11B and 11C. User D does not wish to sing song X3, and terminal device 11D operates as listening terminal device 11D. Also, reservation terminal device 11A is specified by listening terminal device 11D. As in the first embodiment, each identification information is associated and registered in the reservation queue 25.

カラオケ配信サーバ装置１３から制御サーバ装置１２に楽曲Ｘ３のカラオケ演奏データが送信され、制御サーバ装置１２から予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂ、１１Ｃに楽曲Ｘ３のカラオケ演奏データが送信される。カラオケ演奏に合わせて利用者Ａ－Ｃによってカラオケ歌唱されると、予約端末装置１１Ａ及び歌唱希望端末装置１１Ｂ、１１Ｃから制御サーバ装置１２に歌唱音声データが送信される。そして、予約端末装置１１Ａの歌唱音声データと楽曲Ｘ３のカラオケ演奏データが同期されて聴取端末装置１１Ｄに送信される。 Karaoke performance data of song X3 is transmitted from the karaoke distribution server device 13 to the control server device 12, and the karaoke performance data of song X3 is transmitted from the control server device 12 to the reservation terminal device 11A and the desired singing terminal devices 11B and 11C. When users A-C sing karaoke along with the karaoke performance, singing voice data is transmitted from the reservation terminal device 11A and the desired singing terminal devices 11B and 11C to the control server device 12. The singing voice data of the reservation terminal device 11A and the karaoke performance data of song X3 are then synchronized and transmitted to the listening terminal device 11D.

楽曲Ｘ４は利用者Ｃによって予約されており、端末装置１１Ｃが予約端末装置１１Ｃとして動作する。利用者Ａ、Ｂ、Ｄが楽曲Ｘ４のカラオケ歌唱を希望しておらず、端末装置１１Ａ、１１Ｂ、１１Ｄが聴取端末装置１１Ａ、１１Ｂ、１１Ｄとして動作する。歌唱希望端末装置として動作する端末装置は存在しないため、聴取端末装置１１Ａ、１１Ｂ、１１Ｄによって指定端末装置が指定されない。第１実施形態と同様に、予約待ち行列２５には各識別情報が対応付けられて登録されている。 Song X4 has been reserved by user C, and terminal device 11C operates as reservation terminal device 11C. Users A, B, and D do not wish to sing karaoke of song X4, and terminal devices 11A, 11B, and 11D operate as listening terminal devices 11A, 11B, and 11D. Since there is no terminal device operating as a singing desired terminal device, no designated terminal device is specified by listening terminal devices 11A, 11B, and 11D. As in the first embodiment, each identification information is associated and registered in the reservation queue 25.

カラオケ配信サーバ装置１３から制御サーバ装置１２に楽曲Ｘ４のカラオケ演奏データが送信され、制御サーバ装置１２から予約端末装置１１Ｃに楽曲Ｘ４のカラオケ演奏データが送信される。カラオケ演奏に合わせて利用者Ｃによってカラオケ歌唱されると、予約端末装置１１Ｃから制御サーバ装置１２に歌唱音声データが送信される。そして、予約端末装置１１Ｃの歌唱音声データと楽曲Ｘ４のカラオケ演奏データが同期されて聴取端末装置１１Ａ、１１Ｂ、１１Ｄに送信される。 Karaoke performance data of song X4 is transmitted from the karaoke distribution server device 13 to the control server device 12, and the karaoke performance data of song X4 is transmitted from the control server device 12 to the reservation terminal device 11C. When user C sings karaoke along with the karaoke performance, singing voice data is transmitted from the reservation terminal device 11C to the control server device 12. The singing voice data of the reservation terminal device 11C and the karaoke performance data of song X4 are then synchronized and transmitted to the listening terminal devices 11A, 11B, and 11D.

以上、第２実施形態によれば、第１実施形態と同様に、予約端末装置及び歌唱希望端末装置の利用者がカラオケ演奏に合わせてカラオケ歌唱しても、各利用者が互いのカラオケ歌唱を邪魔することがない。また、聴取端末装置の利用者は、予約端末装置及び歌唱希望端末装置の利用者を指定して、指定した利用者のカラオケ歌唱を聴くことができる。 As described above, according to the second embodiment, as in the first embodiment, even if users of the reservation terminal device and the singing desire terminal device sing karaoke along with the karaoke performance, each user does not disturb the other user's karaoke singing. In addition, a user of the listening terminal device can specify a user of the reservation terminal device and the singing desire terminal device and listen to the karaoke singing of the specified user.

＜第３実施形態＞
図６及び図７を参照して、第３実施形態のオンラインシステムについて説明する。図６は、第３実施形態のオンラインシステムの機能ブロック図である。図７は、第３実施形態の残響成分データの概念図である。なお、第３実施形態のオンラインシステムは、予約端末装置及び歌唱希望端末装置から取得した歌唱音声データから残響成分データを生成する点で、第１の実施形態のオンラインシステムと相違する。したがって、第３実施形態については、第１実施形態と同様な構成については説明を省略する。 Third Embodiment
The online system of the third embodiment will be described with reference to Fig. 6 and Fig. 7. Fig. 6 is a functional block diagram of the online system of the third embodiment. Fig. 7 is a conceptual diagram of reverberation component data of the third embodiment. Note that the online system of the third embodiment differs from the online system of the first embodiment in that reverberation component data is generated from singing voice data acquired from a reservation terminal device and a singing request terminal device. Therefore, in the third embodiment, a description of the same configuration as in the first embodiment will be omitted.

図６に示すように、第３実施形態のオンラインシステム３０は、第１実施形態のオンラインシステム１０と略同様に構成されており、端末装置３１Ａ－３１Ｄと、制御サーバ装置３２と、カラオケ配信サーバ装置３３とを備えている。このオンラインシステム３０には、端末装置３１Ａが予約端末装置３１Ａとして参加し、端末装置３１Ｂが歌唱希望端末装置３１Ｂとして参加し、端末装置３１Ｃ、３１Ｄが聴取端末装置３１Ｃ、３１Ｄとして参加している。これら予約端末装置３１Ａ、歌唱希望端末装置３１Ｂ、聴取端末装置３１Ｃ、３１Ｄは制御サーバ装置３２を介して互いにビデオ通話可能に接続されている。 As shown in FIG. 6, the online system 30 of the third embodiment is configured in a manner similar to the online system 10 of the first embodiment, and includes terminal devices 31A-31D, a control server device 32, and a karaoke distribution server device 33. In this online system 30, terminal device 31A participates as a reservation terminal device 31A, terminal device 31B participates as a singing request terminal device 31B, and terminal devices 31C and 31D participate as listening terminal devices 31C and 31D. The reservation terminal device 31A, singing request terminal device 31B, and listening terminal devices 31C and 31D are connected to each other via the control server device 32 so that they can make video calls.

制御サーバ装置３２には、予約部４１と、登録部４２と、受信部４３と、送信部４４と、生成部４５とが設けられている。また、制御サーバ装置３２には、予約された楽曲の楽曲識別情報が登録順に並べられた予約待ち行列４６が記憶されている。生成部４５は、予約待ち行列４６に登録された端末識別情報の端末装置３１、すなわち歌唱中の利用者の端末装置３１から歌唱音声データを取得して、歌唱音声データに基づいて残響成分データを生成する。本実施形態では、予約端末装置３１Ａ及び歌唱希望端末装置３１Ｂから歌唱音声データＡ、Ｂが取得されて、歌唱音声データＡ、Ｂに基づいて残響成分データＡ、Ｂが生成される。 The control server device 32 is provided with a reservation unit 41, a registration unit 42, a receiving unit 43, a transmitting unit 44, and a generating unit 45. The control server device 32 also stores a reservation queue 46 in which the song identification information of reserved songs is arranged in the order of registration. The generating unit 45 acquires singing voice data from the terminal device 31 of the terminal identification information registered in the reservation queue 46, i.e., the terminal device 31 of the user currently singing, and generates reverberation component data based on the singing voice data. In this embodiment, singing voice data A and B are acquired from the reservation terminal device 31A and the singing desire terminal device 31B, and reverberation component data A and B are generated based on the singing voice data A and B.

送信部４４は、予約待ち行列４６に登録された端末識別情報の端末装置３１に対して、送信先の端末装置の歌唱音声データから生成された残響成分データを送信する。本実施例では、予約端末装置３１Ａに残響成分データＡが送信され、歌唱希望端末装置３１Ｂに残響成分データＢが送信される。また、送信部４４は、いずれかの歌唱音声データに当該歌唱音声データから生成された残響成分データを付与してカラオケ演奏データに同期させて、予約待ち行列４６に未登録の端末装置３１に対して送信する。本実施形態では、予約端末装置３１Ａの歌唱音声データＡに残響成分データＡが付与されて、カラオケ演奏データに同期されて聴取端末装置３１Ｃ、３１Ｄに送信される。 The transmitting unit 44 transmits reverberation component data generated from the singing voice data of the destination terminal device to the terminal device 31 of the terminal identification information registered in the reservation queue 46. In this embodiment, reverberation component data A is transmitted to the reservation terminal device 31A, and reverberation component data B is transmitted to the singing desire terminal device 31B. The transmitting unit 44 also adds reverberation component data generated from the singing voice data to any singing voice data, synchronizes it with the karaoke performance data, and transmits it to the terminal device 31 not registered in the reservation queue 46. In this embodiment, the reverberation component data A is added to the singing voice data A of the reservation terminal device 31A, synchronized with the karaoke performance data, and transmitted to the listening terminal devices 31C and 31D.

より詳細には、利用者Ａによって楽曲Ｘ１のカラオケ演奏開始が指示されると、生成部４５によって予約端末装置３１Ａ及び歌唱希望端末装置３１Ｂから歌唱音声データＡ、Ｂが取得され、歌唱音声データに基づいて残響成分データＡ、Ｂが生成される。そして、送信部４４によって楽曲Ｘ１のカラオケ演奏データと残響成分データＡが予約端末装置３１Ａに送信され、楽曲Ｘ１のカラオケ演奏データと残響成分データＢが歌唱希望端末装置３１Ｂに送信される。予約端末装置３１Ａ及び歌唱希望端末装置３１Ｂには、歌唱音声データＡ、Ｂが送信されず、残響成分データＡ、Ｂが送信される。 More specifically, when user A issues an instruction to start karaoke performance of song X1, the generation unit 45 acquires singing voice data A and B from the reservation terminal device 31A and the desired singing terminal device 31B, and generates reverberation component data A and B based on the singing voice data. Then, the transmission unit 44 transmits the karaoke performance data and reverberation component data A of song X1 to the reservation terminal device 31A, and transmits the karaoke performance data and reverberation component data B of song X1 to the desired singing terminal device 31B. The singing voice data A and B are not transmitted to the reservation terminal device 31A and the desired singing terminal device 31B, but the reverberation component data A and B are transmitted.

上記したように、予約端末装置３１Ａ及び歌唱希望端末装置３１Ｂに楽曲Ｘ１のカラオケ演奏データを送信してから、予約端末装置３１Ａ及び歌唱希望端末装置３１Ｂから歌唱音声データＡ、Ｂを取得するまでに遅延が生じる。しかしながら、生成部４５が歌唱音声データＡ、Ｂに基づいて生成するデータは、エコー等の残響成分データＡ、Ｂであるため、楽曲Ｘ１のカラオケ演奏データに対して遅延したまま残響成分データＡ、Ｂを送信することができる。このとき、楽曲Ｘ１のカラオケ演奏データの送信と歌唱音声データＡ、Ｂの取得の間の遅延時間に応じて、残響成分データＡ、Ｂの送信タイミングが調整される。 As described above, a delay occurs between the transmission of the karaoke performance data of song X1 to the reservation terminal device 31A and the desired singing terminal device 31B and the acquisition of the singing voice data A and B from the reservation terminal device 31A and the desired singing terminal device 31B. However, since the data generated by the generation unit 45 based on the singing voice data A and B is reverberation component data A and B such as echo, the reverberation component data A and B can be transmitted with a delay relative to the karaoke performance data of song X1. At this time, the transmission timing of the reverberation component data A and B is adjusted according to the delay time between the transmission of the karaoke performance data of song X1 and the acquisition of the singing voice data A and B.

例えば、図７に示すように、楽曲Ｘ１のカラオケ演奏データの送信と歌唱音声データＡの取得の間に１５０[ｍｓｅｃ]の遅延が生じている。また、生成部４５によって歌唱音声データＡに基づいて残響成分データとしてディレイタイム２５０[ｍｓｅｃ]（ＢＰＭ＝１２０の楽曲における８分音符の長さに相当）のエコー成分データが生成される。この場合、１番目のエコー成分データのディレイタイムが１００［ｍｓｅｃ］に設定され、２番目以降のエコー成分データのディレイタイムを２５０［ｍｓｅｃ］間隔に設定される。なお、エコー成分データの生成中のディレイタイムの変更は電子楽器の分野で公知である。 For example, as shown in FIG. 7, a delay of 150 [msec] occurs between the transmission of the karaoke performance data of song X1 and the acquisition of singing voice data A. Furthermore, the generation unit 45 generates echo component data with a delay time of 250 [msec] (corresponding to the length of an eighth note in a song with BPM=120) as reverberation component data based on the singing voice data A. In this case, the delay time of the first echo component data is set to 100 [msec], and the delay times of the second and subsequent echo component data are set at 250 [msec] intervals. Note that changing the delay time during the generation of echo component data is well known in the field of electronic musical instruments.

また、送信部４４によって歌唱音声データＡに残響成分データＡが付与され、この歌唱音声データＡが楽曲Ｘ１のカラオケ演奏データに同期されて聴取端末装置３１Ｃ、３１Ｄに送信される。歌唱音声データＡの取得と残響成分データＡの生成との間の遅延は本来のディレイタイム（２５０［ｍｓｅｃ］）のみであるため、残響成分データＡをそのまま歌唱音声データＡに付与できる。このため、公知の技術を用いて聴取端末装置３１Ｃ、３１Ｄへの楽曲Ｘ１のカラオケ演奏データの送信を所定時間遅らせて、残響成分データＡが付与された歌唱音声データＡと楽曲Ｘ１のカラオケ演奏データが同期される。 The transmitting unit 44 also adds reverberation component data A to the singing voice data A, which is then synchronized with the karaoke performance data of song X1 and transmitted to the listening terminal devices 31C and 31D. Since the delay between the acquisition of the singing voice data A and the generation of the reverberation component data A is only the original delay time (250 msec), the reverberation component data A can be added directly to the singing voice data A. For this reason, the transmission of the karaoke performance data of song X1 to the listening terminal devices 31C and 31D is delayed by a predetermined time using known technology, and the singing voice data A to which the reverberation component data A has been added is synchronized with the karaoke performance data of song X1.

以上、第３実施形態によれば、予約端末装置及び歌唱希望端末装置の利用者は、自身の歌唱音声の残響成分を聴きながらカラオケ歌唱することができ、聴取端末装置の利用者は残響成分が付与されたカラオケ歌唱を聴くことができる。 As described above, according to the third embodiment, users of the reservation terminal device and the singing desire terminal device can sing karaoke while listening to the reverberation components of their own singing voice, and users of the listening terminal device can listen to the karaoke singing with the reverberation components added.

なお、各実施形態では、制御サーバ装置から予約端末装置及び歌唱希望端末装置に各端末装置から取得した映像データを送信する構成にしたが、制御サーバ装置から予約端末装置及び歌唱希望端末装置に歌詞テロップを含む背景映像データが送信されてもよい。この場合、制御サーバ装置がカラオケ配信サーバ装置から背景映像データを取得して予約端末装置及び歌唱希望端末装置に送信する。 In each embodiment, the control server device transmits the video data acquired from each terminal device to the reservation terminal device and the desired singing terminal device, but background video data including lyrics captions may also be transmitted from the control server device to the reservation terminal device and the desired singing terminal device. In this case, the control server device acquires background video data from the karaoke distribution server device and transmits it to the reservation terminal device and the desired singing terminal device.

また、各実施形態では、歌唱終了後に制御サーバ装置から予約端末装置及び歌唱希望端末装置に特に何も送信されないが、制御サーバ装置から予約端末装置及び歌唱希望端末装置に歌唱採点データが送信されてもよい。この場合、制御サーバ装置が予約端末装置及び歌唱希望端末装置から取得した歌唱音声データを採点機能付きのカラオケ配信サーバ装置に送信する。歌唱終了後に、制御サーバ装置がカラオケ配信サーバ装置から歌唱採点データを取得して、予約端末装置及び歌唱希望端末装置に送信する。 In addition, in each embodiment, after singing is finished, nothing is transmitted from the control server device to the reservation terminal device and the desired singing terminal device, but singing scoring data may be transmitted from the control server device to the reservation terminal device and the desired singing terminal device. In this case, the control server device transmits the singing voice data acquired from the reservation terminal device and the desired singing terminal device to a karaoke distribution server device with a scoring function. After singing is finished, the control server device acquires the singing scoring data from the karaoke distribution server device and transmits it to the reservation terminal device and the desired singing terminal device.

また、各実施形態では、制御サーバ装置がカラオケ配信サーバ装置からカラオケ演奏データを取得する構成にしたが、制御サーバ装置が自装置の記憶部からカラオケ演奏データを取得してもよい。すなわち、制御サーバ装置とカラオケ配信サーバ装置が別体に形成されたが、制御サーバ装置がカラオケ配信サーバ装置の機能を備えていてもよい。 In addition, in each embodiment, the control server device is configured to obtain karaoke performance data from the karaoke distribution server device, but the control server device may obtain karaoke performance data from its own memory unit. In other words, the control server device and the karaoke distribution server device are formed separately, but the control server device may have the functions of the karaoke distribution server device.

また、各実施形態では、歌唱音声データに映像データ及びカラオケ演奏データが同期されたカラオケ動画データが制御サーバ装置に記憶されていてもよい。この場合、制御サーバ装置が、予約端末装置及び歌唱希望端末装置から歌唱音声データと共に映像データを取得し、歌唱音声データ及び映像データをカラオケ演奏データに同期させてカラオケ動画データを生成する。カラオケ動画データは予約端末装置及び歌唱希望端末装置の端末識別情報に対応付けられて記憶されている。端末装置の要求に応じて、制御サーバ装置から端末装置にカラオケ歌唱データが送信される。 In addition, in each embodiment, karaoke video data in which video data and karaoke performance data are synchronized with singing voice data may be stored in the control server device. In this case, the control server device acquires video data together with singing voice data from the reservation terminal device and the desired singing terminal device, and generates karaoke video data by synchronizing the singing voice data and the video data with the karaoke performance data. The karaoke video data is stored in association with the terminal identification information of the reservation terminal device and the desired singing terminal device. In response to a request from the terminal device, the karaoke singing data is transmitted from the control server device to the terminal device.

また、第３実施形態では、歌唱音声データに残響成分データが付与され、さらにカラオケ演奏データに同期されたカラオケ歌唱データが制御サーバ装置に記憶されていてもよい。この場合、制御サーバ装置が、予約端末装置及び歌唱希望端末装置から歌唱音声データを取得し、歌唱音声データに残響成分データを付与してカラオケ演奏データに同期させてカラオケ歌唱データを生成する。カラオケ歌唱データは予約端末装置及び歌唱希望端末装置の端末識別情報に対応付けられて記憶されている。端末装置の要求に応じて、制御サーバ装置から端末装置にカラオケ歌唱データが送信される。 In the third embodiment, reverberation component data may be added to the singing voice data, and the karaoke singing data synchronized with the karaoke performance data may be stored in the control server device. In this case, the control server device acquires singing voice data from the reservation terminal device and the desired singing terminal device, adds reverberation component data to the singing voice data, and synchronizes it with the karaoke performance data to generate karaoke singing data. The karaoke singing data is stored in association with the terminal identification information of the reservation terminal device and the desired singing terminal device. In response to a request from the terminal device, the karaoke singing data is transmitted from the control server device to the terminal device.

また、第３実施形態では、生成部が予約端末装置及び歌唱希望端末装置に対して共通のディレイタイム及びレベルの残響成分データを生成したが、生成部が予約端末装置及び歌唱希望端末装置に対して個別のディレイタイム及びレベルの残響成分データを生成してもよい。この場合、予約端末装置及び歌唱希望端末装置によって、送信される残響成分データのディレイタイム及びレベルが設定されてもよい。例えば、予約端末装置は、残響成分データのディレイタイムを２００［ｍｓｅｃ］、レベルを６０（最大値１００とする）に設定し、歌唱希望端末装置は、残響成分データのディレイタイムを１８０［ｍｓｅｃ］、レベルを７０に設定する。生成部は、ディレイタイム２００［ｍｓｅｃ］、レベル６０の設定で残響成分データＡを生成し、ディレイタイム１８０［ｍｓｅｃ］、レベル７０の設定で残響成分データＢを生成する。 In the third embodiment, the generating unit generates reverberation component data with a common delay time and level for the reservation terminal device and the desired singing terminal device, but the generating unit may generate reverberation component data with individual delay times and levels for the reservation terminal device and the desired singing terminal device. In this case, the reservation terminal device and the desired singing terminal device may set the delay time and level of the reverberation component data to be transmitted. For example, the reservation terminal device sets the delay time of the reverberation component data to 200 [msec] and the level to 60 (maximum value 100), and the desired singing terminal device sets the delay time of the reverberation component data to 180 [msec] and the level to 70. The generating unit generates reverberation component data A with a delay time of 200 [msec] and a level of 60, and generates reverberation component data B with a delay time of 180 [msec] and a level of 70.

また、各実施形態の端末装置は、ビデオ通話機能を備えた電子機器であればよい。例えば、端末装置はパーソナルコンピュータ、テレビジョン、携帯電話、スマートフォン、ゲーム機器でもよい。 The terminal device in each embodiment may be any electronic device equipped with a video calling function. For example, the terminal device may be a personal computer, a television, a mobile phone, a smartphone, or a game device.

また、上記した各実施形態において、制御サーバ装置及び端末装置にプログラムをインストールすることによって、制御サーバ装置にオンラインカラオケ機能が追加されてもよい。このプログラムは記憶媒体に記憶されている。記憶媒体は特に限定されないが、光ディスク、光磁気ディスク、フラッシュメモリ等の非一過性の記憶媒体であってもよい。 In addition, in each of the above-described embodiments, an online karaoke function may be added to the control server device by installing a program in the control server device and the terminal device. This program is stored in a storage medium. The storage medium is not particularly limited, but may be a non-transitory storage medium such as an optical disk, a magneto-optical disk, or a flash memory.

また、本実施形態を説明したが、他の実施形態として、上記実施形態及び変形例を全体的又は部分的に組み合わせたものでもよい。 Although this embodiment has been described, other embodiments may be combinations of the above embodiments and variations in whole or in part.

また、本発明の技術は上記の実施形態に限定されるものではなく、技術的思想の趣旨を逸脱しない範囲において様々に変更、置換、変形されてもよい。さらには、技術の進歩又は派生する別技術によって、技術的思想を別の仕方によって実現することができれば、その方法を用いて実施されてもよい。したがって、特許請求の範囲は、技術的思想の範囲内に含まれ得る全ての実施態様をカバーしている。 The technology of the present invention is not limited to the above-described embodiments, and may be modified, substituted, or altered in various ways without departing from the spirit of the technical idea. Furthermore, if the technical idea can be realized in a different way due to technological advances or other derived technologies, it may be implemented using that method. Therefore, the claims cover all embodiments that may fall within the scope of the technical idea.

１０、３０：オンラインシステム
１１、３１：端末装置
１２、３２：制御サーバ装置（サーバ装置）
１３、３３：カラオケ配信サーバ装置
２１、４１：予約部
２２、４２：登録部
２４、４４：送信部
２５、４６：予約待ち行列
４５ ：生成部 10, 30: Online system 11, 31: Terminal device 12, 32: Control server device (server device)
13, 33: karaoke distribution server device 21, 41: reservation section 22, 42: registration section 24, 44: transmission section 25, 46: reservation queue 45: generation section

Claims (3)

互いにビデオ通話可能な複数の端末装置に通信可能に接続されたサーバ装置であって、
利用者の予約操作を受け付けた端末装置である予約端末装置から楽曲識別情報及び端末識別情報を取得して、楽曲識別情報に前記予約端末装置の端末識別情報を対応付けて予約待ち行列に登録する予約部と、
予約済みの楽曲のカラオケ歌唱を希望する他の利用者の端末装置である歌唱希望端末装置の端末識別情報を取得して、楽曲識別情報に前記歌唱希望端末装置の端末識別情報を対応付けて予約待ち行列に登録する登録部と、
予約待ち行列に登録された楽曲識別情報に基づいてカラオケ演奏データを取得して、前記予約端末装置及び前記歌唱希望端末装置に対してカラオケ演奏データを送信する送信部と、を備え、
前記送信部は、前記予約端末装置及び前記歌唱希望端末装置から歌唱音声データを取得して、前記予約端末装置及び前記歌唱希望端末装置のいずれかの歌唱音声データをカラオケ演奏データに同期させて、前記予約端末装置及び前記歌唱希望端末装置以外の端末装置である聴取端末装置に対して送信し、前記予約端末装置及び前記歌唱希望端末装置に歌唱音声データを送信しないことを特徴とするサーバ装置。 A server device communicably connected to a plurality of terminal devices capable of video calling with each other,
a reservation unit that acquires song identification information and terminal identification information from a reservation terminal device that is a terminal device that accepts a reservation operation from a user, associates the song identification information with the terminal identification information of the reservation terminal device, and registers the association in a reservation queue;
a registration unit which acquires terminal identification information of a terminal device of another user who wishes to sing the karaoke of the reserved song, and registers the terminal identification information of the terminal device of the other user who wishes to sing the karaoke of the reserved song in a reservation queue by associating the song identification information with the terminal identification information of the terminal device of the other user;
a transmitting section for acquiring karaoke performance data based on song identification information registered in the reservation queue and transmitting the karaoke performance data to the reservation terminal device and the singing request terminal device,
The transmitting unit acquires singing voice data from the reservation terminal device and the desired singing terminal device, synchronizes the singing voice data of either the reservation terminal device or the desired singing terminal device with karaoke performance data, and transmits it to a listening terminal device which is a terminal device other than the reservation terminal device and the desired singing terminal device, and does not transmit singing voice data to the reservation terminal device and the desired singing terminal device. 前記登録部は、少なくとも１つの前記歌唱希望端末装置の端末識別情報が登録された場合に、前記聴取端末装置に前記予約端末装置及び前記歌唱希望端末装置から１つの端末装置を指定させ、
前記送信部は、前記聴取端末装置に指定された端末装置の歌唱音声データをカラオケ演奏データに同期させて当該聴取端末装置に送信することを特徴とする請求項１に記載のサーバ装置。 the registration unit causes the listening terminal device to designate one of the reserving terminal device and the singing desired terminal device when terminal identification information of at least one of the singing desired terminal devices is registered;
2. The server device according to claim 1, wherein said transmitting section transmits singing voice data of a terminal device designated as said listening terminal device to said listening terminal device in synchronization with karaoke performance data. 前記予約端末装置及び前記歌唱希望端末装置から歌唱音声データを取得して、歌唱音声データに基づいて残響成分データを生成する生成部を備え、
前記送信部は、前記予約端末装置及び前記歌唱希望端末装置に対してカラオケ演奏データ及び送信先の端末装置の歌唱音声データから生成された残響成分データを送信し、前記聴取端末装置に対して前記予約端末装置及び前記歌唱希望端末装置のいずれかの歌唱音声データに当該歌唱音声データから生成された残響成分データを付与してカラオケ演奏データに同期させて送信することを特徴とする請求項１又は請求項２に記載のサーバ装置。 a generating unit for acquiring singing voice data from the reservation terminal device and the singing request terminal device, and generating reverberation component data based on the singing voice data;
The server device according to claim 1 or 2, characterized in that the transmitting unit transmits karaoke performance data and reverberation component data generated from the singing voice data of the destination terminal device to the reservation terminal device and the singing desire terminal device, and transmits to the listening terminal device the singing voice data of either the reservation terminal device or the singing desire terminal device, adding the reverberation component data generated from the singing voice data, in synchronization with the karaoke performance data.
JP2020159717A 2020-09-24 2020-09-24 Server device Active JP7520661B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020159717A JP7520661B2 (en) 2020-09-24 2020-09-24 Server device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020159717A JP7520661B2 (en) 2020-09-24 2020-09-24 Server device

Publications (2)

Publication Number Publication Date
JP2022053099A JP2022053099A (en) 2022-04-05
JP7520661B2 true JP7520661B2 (en) 2024-07-23

Family

ID=80962869

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020159717A Active JP7520661B2 (en) 2020-09-24 2020-09-24 Server device

Country Status (1)

Country Link
JP (1) JP7520661B2 (en)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003046967A (en) 2001-07-31 2003-02-14 Daiichikosho Co Ltd Method for using karaoke device in accordance with banquet by connecting distant plural karaoke banquetting halls through video conference system
JP2003167575A (en) 2001-11-30 2003-06-13 Nippon Telegraph & Telephone East Corp Audiovisual synchronously compositing and distributing method, device for player's terminal, program for the device and recording medium where the program for the device is recorded, service providing device, and program for the service providing device and recording medium recorded with the program for the device
JP2010074199A (en) 2008-09-16 2010-04-02 Brother Ind Ltd Conference system, conference support method and conference support program
JP2010197499A (en) 2009-02-23 2010-09-09 Taito Corp Karaoke service system, distribution server and terminal device
JP2010237442A (en) 2009-03-31 2010-10-21 Yamaha Corp Sound effect attaching system
JP2015143733A (en) 2014-01-31 2015-08-06 ブラザー工業株式会社 Karaoke host device, karaoke system, and karaoke program
JP2017068029A (en) 2015-09-30 2017-04-06 ブラザー工業株式会社 Karaoke system and composite contribution information creation method

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003046967A (en) 2001-07-31 2003-02-14 Daiichikosho Co Ltd Method for using karaoke device in accordance with banquet by connecting distant plural karaoke banquetting halls through video conference system
JP2003167575A (en) 2001-11-30 2003-06-13 Nippon Telegraph & Telephone East Corp Audiovisual synchronously compositing and distributing method, device for player's terminal, program for the device and recording medium where the program for the device is recorded, service providing device, and program for the service providing device and recording medium recorded with the program for the device
JP2010074199A (en) 2008-09-16 2010-04-02 Brother Ind Ltd Conference system, conference support method and conference support program
JP2010197499A (en) 2009-02-23 2010-09-09 Taito Corp Karaoke service system, distribution server and terminal device
JP2010237442A (en) 2009-03-31 2010-10-21 Yamaha Corp Sound effect attaching system
JP2015143733A (en) 2014-01-31 2015-08-06 ブラザー工業株式会社 Karaoke host device, karaoke system, and karaoke program
JP2017068029A (en) 2015-09-30 2017-04-06 ブラザー工業株式会社 Karaoke system and composite contribution information creation method

Also Published As

Publication number Publication date
JP2022053099A (en) 2022-04-05

Similar Documents

Publication Publication Date Title
US11706729B2 (en) Synchronized playback and control of media
CN103718528B (en) A kind of multiple terminals is worked in coordination with and is play the method for multimedia file and relevant apparatus and system
CN110910860B (en) Online KTV implementation method and device, electronic equipment and storage medium
US20050206721A1 (en) Method and apparatus for disseminating information associated with an active conference participant to other conference participants
US9553900B2 (en) System and method for managing conferencing in a distributed communication network
KR100747450B1 (en) Multimedia contents service providing system for wating call connection and a method thereof
JP7476327B2 (en) AUDIO DATA PROCESSING METHOD, DELAY TIME ACQUISITION METHOD, SERVER, AND COMPUTER PROGRAM
WO2019062667A1 (en) Method and device for transmitting conference content
JP3752932B2 (en) Communication system and communication method
JP3938379B2 (en) Information processing method and program for speaker right in electronic voice conference, and wireless communication portable terminal
JP2012257116A (en) Text and telephone conference system and text and telephone conference method
WO2024159973A1 (en) Video conference implementation method and apparatus, device, and storage medium
JP7520661B2 (en) Server device
US10523812B2 (en) Method and system for providing ringback tone service and ringtone service in Voice over Internet Protocol (VoIP) call service
JP7143874B2 (en) Information processing device, information processing method and program
CN111741174B (en) Video color ring generating method, system, network equipment and storage medium
JP2021111867A (en) Program, communication method, communication terminal, and communication system
JP2011517174A (en) Method for generating a set of user identifiers associated with user presentation information, method for accessing said information, and associated server and terminal
KR100345578B1 (en) network game system provided with the function of hearing the specific background music of the remote multi-user vioce communication
WO2024161545A1 (en) Information processing device, information processing method, and information processing program
US20240195851A1 (en) Systems and methods for enabling a virtual assistant in different environments
US20240195646A1 (en) Systems and methods for enabling a virtual assistant in different environments
JP6295675B2 (en) Music session system, method and terminal device
WO2024100920A1 (en) Information processing device, information processing method, and program for information processing
KR102307639B1 (en) Hand Phone Band Screen accompaniment Service System

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230727

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240326

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240409

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240523

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240709

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240710

R150 Certificate of patent or registration of utility model

Ref document number: 7520661

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150