JP2015069084A - Karaoke distribution server, terminal equipment and program - Google Patents

Karaoke distribution server, terminal equipment and program Download PDF

Info

Publication number
JP2015069084A
JP2015069084A JP2013204486A JP2013204486A JP2015069084A JP 2015069084 A JP2015069084 A JP 2015069084A JP 2013204486 A JP2013204486 A JP 2013204486A JP 2013204486 A JP2013204486 A JP 2013204486A JP 2015069084 A JP2015069084 A JP 2015069084A
Authority
JP
Japan
Prior art keywords
display color
karaoke
color
distribution
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013204486A
Other languages
Japanese (ja)
Other versions
JP6065800B2 (en
Inventor
克朗 須田
Katsuro Suda
克朗 須田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Brother Industries Ltd
Original Assignee
Brother Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Brother Industries Ltd filed Critical Brother Industries Ltd
Priority to JP2013204486A priority Critical patent/JP6065800B2/en
Publication of JP2015069084A publication Critical patent/JP2015069084A/en
Application granted granted Critical
Publication of JP6065800B2 publication Critical patent/JP6065800B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To perform the streaming distribution of karaoke content in such configurations that a trouble hardly occurs in the reproduction of the sound of karaoke and the display of a lyric telop.SOLUTION: A karaoke distribution server 10 acquires information indicating the processing performance of terminal equipment 20, and determines the distribution of either moving image data or acoustic data on the basis of the acquired processing performance. When the distribution of the acoustic data is determined, and the display color of a background image displayed by the terminal equipment 20 is similar to the default display color of telop data, the display color is changed. When the distribution of the moving image data is determined, the moving image data and the telop data are distributed to the terminal equipment 20. When the distribution of the acoustic data is determined, the acoustic data and the telop data are distributed to the terminal equipment 20. When the display color of the telop data is changed, the telop data with which the changed display color has been associated are distributed, and when the display color of the telop data is not changed, the telop data with which the default display color has been associated are distributed.

Description

本発明は、端末装置に対してカラオケコンテンツをストリーミング配信する技術に関する。   The present invention relates to a technique for streaming karaoke content to a terminal device.

従来、オンデマンドのカラオケシステムにおいて、業務用のカラオケ装置に限らず、スマートフォンやタブレットコンピュータといった個人用の端末装置に対して、カラオケコンテンツをストリーミング配信するサービスが知られている。これらの端末装置に向けて配信されるカラオケコンテンツには、カラオケの音響及び映像を表す動画データや、動画データの映像上に重ねて表示される歌詞テロップを表すデータ等がある。   2. Description of the Related Art Conventionally, in an on-demand karaoke system, services for streaming karaoke content to personal terminal devices such as smartphones and tablet computers as well as commercial karaoke devices are known. The karaoke content distributed toward these terminal devices includes moving image data representing the sound and video of karaoke, data representing lyrics telop displayed on the video data, and the like.

一方、特許文献1には、カラオケの背景画像データや歌詞データを、カラオケ装置からリモコン端末にストリーミングにより伝送することで、リモコン端末において歌詞及び背景画像を表示する技術が開示されている。特許文献1に記載の技術では、何らかの事情により通信速度が低下した場合、送信する背景画像のビットレートを下げる、又は背景画像を間引くことで、通信速度に見合ったデータ量で背景画像データや歌詞データをリモコン端末に送信するようになっている。   On the other hand, Patent Document 1 discloses a technique for displaying lyrics and background images on a remote control terminal by transmitting karaoke background image data and lyrics data from a karaoke apparatus to the remote control terminal by streaming. In the technique described in Patent Document 1, when the communication speed decreases due to some circumstances, the background image data and the lyrics with the data amount corresponding to the communication speed can be obtained by reducing the bit rate of the background image to be transmitted or by thinning out the background image. Data is transmitted to the remote control terminal.

特開2006−267835号公報JP 2006-267835 A

一般的に、カラオケコンテンツのデータは、カラオケの音響を表す音響データ又はカラオケの音響及び映像を表す動画データと、歌詞テロップのデータとから構成される。カラオケを行うためには、音響と歌詞テロップとが少なくとも必須である。また、音響と映像とを含む動画データは、音響のみで構成される音響データよりもデータ量が大きい。   In general, karaoke content data is composed of acoustic data representing karaoke sound or moving image data representing karaoke sound and video, and lyrics telop data. In order to perform karaoke, sound and lyrics telop are at least essential. In addition, moving image data including sound and video has a larger data amount than sound data including only sound.

上述のオンデマンドのカラオケシステムにおいて、個人用の端末装置が利用するネットワーク回線の性能や端末装置自体の処理性能は、高性能なものから低性能なものまで様々である。そのため、個人用の端末装置を対象にコンテンツを配信する際、ネットワーク回線の性能や端末装置自体の処理性能が十分でない場合がある。その場合、端末装置がコンテンツのストリームを受信や再生処理をスムーズに行うことができず、コンテンツの再生に遅延等の支障をきたすおそれがある。   In the above-mentioned on-demand karaoke system, the performance of the network line used by the personal terminal device and the processing performance of the terminal device itself vary from high performance to low performance. Therefore, when content is distributed to a personal terminal device, the performance of the network line or the processing performance of the terminal device itself may not be sufficient. In such a case, the terminal device cannot smoothly receive or play back the content stream, and there is a risk that the playback of the content may be delayed.

そのため、処理性能の低い端末装置に対しては、比較的データ量が小さい音響データと歌詞テロップのデータとを配信することで支障を回避することが考えられる。しかしながら、音響データと歌詞テロップのデータとが配信された端末装置において、端末装置に記憶されている背景画像上に歌詞テロップを表示したときに、背景画像の色合いと歌詞テロップの表示色とが似ていると、歌詞テロップの文字が見えにくくなることがある。   Therefore, it is conceivable to avoid troubles by distributing acoustic data and lyrics telop data having a relatively small amount of data to a terminal device having low processing performance. However, when the lyrics telop is displayed on the background image stored in the terminal device in the terminal device to which the acoustic data and the lyrics telop data are distributed, the color of the background image and the display color of the lyrics telop are similar. The text in the lyrics telop may be difficult to see.

本発明は、上記問題を解決するためになされたものである。その目的は、端末装置側の処理能力が低くても、カラオケの音響の再生及び歌詞テロップの表示に支障が出にくい態様でカラオケコンテンツのストリーミング配信を行うための技術を提供することである。   The present invention has been made to solve the above problems. The object is to provide a technique for streaming karaoke content in a manner that does not easily hinder the playback of karaoke sound and the display of lyrics telop even if the processing capacity on the terminal device side is low.

本発明のカラオケ配信サーバは、記憶手段と、要求受付手段と、取得手段と、決定手段と、判断手段と、変更手段と、歌詞配信手段とを備える。記憶手段は、カラオケコンテンツの音響を表す音響データと、カラオケコンテンツの音響及び映像を含む動画データと、カラオケコンテンツの歌詞を表す文字情報であって、所定の表示色が対応付けられた文字情報とを、楽曲ごとに記憶する。要求受付手段は、端末装置からカラオケコンテンツの配信要求を受信する。取得手段は、要求受付手段により受信された配信要求について、端末装置の通信にかかる処理性能を示す情報を取得する。決定手段は、取得された処理性能の情報に基づいて、動画データ又は音響データの何れか一方のデータの配信を決定する。   The karaoke distribution server of the present invention includes storage means, request reception means, acquisition means, determination means, determination means, change means, and lyrics distribution means. The storage means includes acoustic data representing the sound of the karaoke content, moving image data including the sound and video of the karaoke content, character information representing the lyrics of the karaoke content, and character information associated with a predetermined display color. For each song. The request accepting unit receives a karaoke content distribution request from the terminal device. The acquisition unit acquires information indicating processing performance related to communication of the terminal device with respect to the distribution request received by the request reception unit. The determining means determines distribution of either the moving image data or the sound data based on the acquired processing performance information.

判断手段は、音響データの配信が決定された場合、端末装置において音響データが再生されるときに表示される背景画像の表示色の特徴を示す背景色情報に基づき、記憶手段に記憶されている文字情報に対応付けられている所定の表示色と、背景画像の表示色の特徴とが類似しているかを判断する。変更手段は、文字情報の所定の表示色と背景色情報で示される表示色の特徴とが類似していると判断された場合、文字情報の表示色を背景色情報で示される表示色と異なる色に変更する。歌詞配信手段は、配信要求されたカラオケコンテンツに対応する文字情報を端末装置に配信する。ただし、文字情報の表示色が変更されたときには、変更後の表示色の文字情報を配信し、文字情報の表示色が変更されていないときには、所定の表示色が対応付けられている文字情報を配信する。   The determination means is stored in the storage means based on the background color information indicating the characteristics of the display color of the background image displayed when the sound data is reproduced in the terminal device when the distribution of the sound data is determined. It is determined whether the predetermined display color associated with the character information is similar to the display color feature of the background image. When it is determined that the predetermined display color of the character information and the characteristics of the display color indicated by the background color information are similar, the changing unit changes the display color of the character information from the display color indicated by the background color information. Change to color. The lyrics distribution means distributes character information corresponding to the requested karaoke content to the terminal device. However, when the display color of the character information is changed, the character information of the changed display color is distributed. When the display color of the character information is not changed, the character information associated with the predetermined display color is distributed. To deliver.

本発明では、カラオケコンテンツを要求する端末装置の通信にかかる処理性能に応じて、音響及び映像からなる動画データの配信と、処理負担の軽い音響データの配信とを選択できる。これにより、カラオケコンテンツの要である音響の再生に支障をきたさないようにできる。また、音響データの配信をする場合、端末装置で表示される背景画像の表示色の特徴と異なる表示色を対応付けた歌詞の文字情報を配信できる。これにより、動画データによる映像の代わりに配信先の端末装置で独自に表示される背景画像にマッチする見やすい表示色の歌詞テロップを、端末装置に表示させることができる。   In the present invention, it is possible to select between distribution of moving image data composed of sound and video and distribution of acoustic data with a light processing load in accordance with the processing performance of the terminal device requesting karaoke content. As a result, it is possible to prevent the sound that is the key of the karaoke content from being hindered. Further, when distributing acoustic data, it is possible to distribute lyrics character information in which a display color different from the display color feature of the background image displayed on the terminal device is associated. As a result, it is possible to cause the terminal device to display a lyrics telop having an easy-to-see display color that matches the background image uniquely displayed on the distribution destination terminal device instead of the moving image data.

なお、歌詞の文字情報を配信する方法として、具体的には、請求項2に記載のようにする。すなわち、動画データの配信が決定された場合、歌詞配信手段は、所定の表示色が対応付けられている文字情報を端末装置に配信する。一方、音響データの配信が決定された場合、歌詞配信手段は、変更手段により文字情報の表示色が変更されたときには、変更後の表示色の文字情報を端末装置に配信し、変更手段により文字情報の表示色が変更されていないときには、所定の表示色が対応付けられている文字情報を端末装置に配信する。   In addition, as a method for distributing the character information of the lyrics, specifically, the method is as described in claim 2. That is, when distribution of moving image data is determined, the lyrics distribution means distributes character information associated with a predetermined display color to the terminal device. On the other hand, when the distribution of the acoustic data is determined, the lyrics distribution unit distributes the character information of the display color after the change to the terminal device when the display color of the character information is changed by the change unit, and the character change by the change unit When the display color of the information is not changed, character information associated with a predetermined display color is distributed to the terminal device.

また、決定手段による決定結果に基づく動画データ又は音響データの配信は、請求項3に記載のようにする。すなわち、決定手段によって動画データの配信が決定された場合、楽曲配信手段は、配信要求されたカラオケコンテンツに対応する動画データを端末装置にストリーミング配信する。一方、決定手段によって音響データの配信が決定された場合、楽曲配信手段は、配信要求されたカラオケコンテンツに対応する音響データを端末装置にストリーミング配信する。   Further, the distribution of the moving image data or the sound data based on the determination result by the determining means is as described in claim 3. That is, when the distribution of the moving image data is determined by the determining unit, the music distributing unit distributes the moving image data corresponding to the requested karaoke content to the terminal device. On the other hand, when the distribution of the acoustic data is determined by the determination unit, the music distribution unit performs streaming distribution of the acoustic data corresponding to the karaoke content requested for distribution to the terminal device.

請求項4に記載のカラオケ配信サーバは、次の特徴を有する。すなわち、切替受付手段は、楽曲配信手段による動画データのストリーミング配信中に、配信先の端末装置から、音響データの配信に切替えるための切替要求を受信する。切替要求を受信した場合、判断手段、変更手段、楽曲配信手段、及び、歌詞配信手段は次のようにする。判断手段は、切替要求に該当するカラオケコンテンツに対応する文字情報に対応付けられている所定の表示色と、背景色情報で示される表示色の特徴とが類似しているかを判断する。変更手段は、文字情報の所定の表示色と背景色情報で示される表示色の特徴とが類似していると判断された場合、文字情報の表示色を背景色情報で示される表示色と異なる色に変更する。   The karaoke distribution server according to claim 4 has the following characteristics. That is, the switching accepting unit receives a switching request for switching to the distribution of the acoustic data from the distribution destination terminal device during the streaming distribution of the moving image data by the music distribution unit. When the switching request is received, the determining means, changing means, music distributing means, and lyrics distributing means are as follows. The determining means determines whether the predetermined display color associated with the character information corresponding to the karaoke content corresponding to the switching request is similar to the display color feature indicated by the background color information. When it is determined that the predetermined display color of the character information and the characteristics of the display color indicated by the background color information are similar, the changing unit changes the display color of the character information from the display color indicated by the background color information. Change to color.

楽曲配信手段は、切替要求に該当する動画データの配信に代えて、切替要求に該当する音響データを、配信途中の動画データの続きからストリーミング配信する。歌詞配信手段は、変更手段により文字情報の表示色が変更されたときには、変更後の表示色の文字情報を端末装置に配信し、変更手段により文字情報の表示色が変更されていないときには、所定の表示色が対応付けられている文字情報を端末装置に配信する。   The music distribution means performs streaming distribution of the acoustic data corresponding to the switching request from the continuation of the moving image data being distributed, instead of distributing the moving image data corresponding to the switching request. The lyric distribution means distributes the character information of the display color after the change to the terminal device when the display color of the character information is changed by the changing means, and predetermined when the display color of the character information is not changed by the changing means. Is distributed to the terminal device.

このようにすることで、一旦、動画データのストリーミング配信が始まった後であっても、配信先の端末装置からの要求に応じて、途中から音響データの配信に切替えることができる。また、音響データへの切替えに合わせて、端末装置で表示される背景画像にマッチする表示色の文字情報を配信できる。これにより、動画データのストリーミング再生中において、通信状況の悪化等の何らかの理由により、端末装置において遅延などの支障をきたす可能性があるときに、処理負担の軽い音響データのストリーミング再生に切替えて支障を回避できる。   By doing in this way, even after the streaming distribution of the moving image data has started once, it is possible to switch to the distribution of the acoustic data in the middle in response to a request from the terminal device of the distribution destination. Moreover, the character information of the display color which matches the background image displayed with a terminal device can be delivered according to the switch to acoustic data. As a result, during streaming playback of moving image data, if there is a possibility that the terminal device may cause a delay or the like for some reason, such as a deterioration in communication status, switching to streaming playback of acoustic data with a light processing burden is hindered. Can be avoided.

なお、請求項5に記載のように、カラオケコンテンツの配信を要求する側の処理性能を示す情報としては、カラオケコンテンツの配信に用いられる通信回線の性能を示す情報が挙げられる。これにより、個人用の端末装置に向けて普及している様々な形式のネットワーク回線について、それぞれの通信性能に応じて動画データの配信か音響データの配信かを決定できる。   As described in claim 5, the information indicating the processing performance on the side requesting distribution of karaoke content includes information indicating the performance of a communication line used for distributing karaoke content. Thereby, it is possible to determine whether to distribute moving image data or acoustic data for various types of network lines that are widely used for personal terminal devices, according to the communication performance of each type.

請求項6に記載のカラオケ配信サーバは、次の特徴を有する。すなわち、記憶手段には、端末装置において表示される背景画像について、背景画像の表示色の特徴を示す背景色情報と、背景色情報で示される表示色の特徴に対して適性がある適性表示色を示す文字色情報とを定義する色定義情報が記憶されている。判断手段は、文字情報の所定の表示色と、色定義情報の背景色情報で示される表示色の特徴とが類似しているかを判断する。変更手段は、文字情報の所定の表示色と背景色情報で示される表示色の特徴とが類似していると判断された場合、文字情報の表示色を、色定義情報で示される適性表示色に変更する。このようにすることで、配信先の端末装置で表示される背景画像の表示色の特徴に合わせて、最適な表示色の歌詞テロップを端末装置に表示させることができる。   The karaoke distribution server according to claim 6 has the following characteristics. That is, for the background image displayed on the terminal device, the storage means has background color information indicating the characteristics of the display color of the background image and an appropriate display color that is appropriate for the characteristics of the display color indicated by the background color information. The color definition information for defining the character color information indicating is stored. The determining means determines whether the predetermined display color of the character information is similar to the display color feature indicated by the background color information of the color definition information. When it is determined that the predetermined display color of the character information and the characteristics of the display color indicated by the background color information are similar, the changing means changes the display color of the character information to the appropriate display color indicated by the color definition information. Change to By doing in this way, it is possible to display the lyrics telop of the optimum display color on the terminal device in accordance with the characteristics of the display color of the background image displayed on the distribution destination terminal device.

請求項7に記載のカラオケ配信サーバは、次の特徴を有する。すなわち、記憶手段に記憶されている楽曲ごとの文字情報には、楽曲ごとの動画データの映像に対応して定められた表示色がそれぞれ対応付けられている。判断手段は、配信要求されたカラオケコンテンツの楽曲に対応する文字情報に対して定められている楽曲ごとの表示色と、背景色情報で示される表示色の特徴とが類似しているかを判断する。このようにすることで、歌詞の文字情報に楽曲ごとに異なる表示色がデフォルトとして対応付けられている場合において、楽曲ごとの表示色が、端末装置で表示される背景画像にマッチしているかどうかを判断できる。   The karaoke distribution server according to claim 7 has the following characteristics. In other words, the character information for each piece of music stored in the storage means is associated with a display color determined corresponding to the video of the moving image data for each piece of music. The determining means determines whether the display color for each music set for the character information corresponding to the music of the karaoke content requested for distribution is similar to the display color feature indicated by the background color information. . By doing in this way, when a different display color is associated with the text information of the lyrics for each song as a default, whether the display color for each song matches the background image displayed on the terminal device Can be judged.

なお、本発明は、請求項8に記載のように、カラオケ配信サーバからカラオケコンテンツを受信する端末装置の態様で実現することもできる。本発明に係る端末装置は、記憶手段と、取得要求手段と、歌詞受信手段と、楽曲受信手段と、判断手段と、変更手段と、再生制御手段とを備える。記憶手段は、カラオケコンテンツの再生時に表示される背景画像と、背景画像の表示色の特徴を示す背景色情報とを記憶する。取得要求手段は、通信にかかる処理性能を示す情報に基づいて、カラオケコンテンツの音響及び映像を含む動画データ、又は、カラオケコンテンツの音響を表す音響データの何れか一方のデータの取得要求を、カラオケ配信サーバに対して行う。歌詞受信手段は、取得要求されたカラオケコンテンツの歌詞を表す文字情報であって、所定の表示色が対応付けられている文字情報を、カラオケ配信サーバから受信する。   In addition, this invention can also be implement | achieved in the aspect of the terminal device which receives karaoke content from a karaoke delivery server, as described in Claim 8. The terminal device according to the present invention includes storage means, acquisition request means, lyrics reception means, music reception means, determination means, change means, and playback control means. The storage means stores a background image displayed when the karaoke content is reproduced, and background color information indicating characteristics of the display color of the background image. The acquisition requesting unit is configured to acquire an acquisition request for either data of moving image data including sound and video of karaoke content or sound data representing sound of karaoke content based on information indicating processing performance related to communication. Perform to the distribution server. The lyrics receiving means receives character information representing the lyrics of the karaoke content requested to be acquired and is associated with a predetermined display color from the karaoke distribution server.

音響データの取得要求が行われた場合、楽曲受信手段は、取得要求されたカラオケコンテンツに対応する音響データを、カラオケ配信サーバからストリーミング受信する。判断手段は、音響データの取得要求が行われた場合、歌詞受信手段により受信された文字情報に対応付けられている所定の表示色と、記憶手段に記憶されている背景色情報で示される表示色の特徴とが類似しているかを判断する。変更手段は、文字情報の所定の表示色と背景色情報で示される表示色の特徴とが類似していると判断された場合、文字情報の表示色を背景色情報で示される表示色と異なる色に変更する。再生制御手段は、受信された音響データをストリーミング再生し、音響データの再生に合わせて、受信された文字情報で表される歌詞テロップを、記憶手段に記憶されている背景画像と共に表示手段に表示させる。ただし、再生制御手段は、変更手段により表示色が変更された場合は変更後の表示色を用いて歌詞テロップを表示し、変更手段により表示色が変更されていない場合は所定の表示色を用いて歌詞テロップを表示する。   When the acquisition request for the acoustic data is made, the music receiving means receives the streaming of the acoustic data corresponding to the karaoke content requested for acquisition from the karaoke distribution server. When a request for acquisition of acoustic data is made, the judging means displays a predetermined display color associated with the character information received by the lyrics receiving means and a display indicated by background color information stored in the storage means Determine if the color features are similar. When it is determined that the predetermined display color of the character information and the characteristics of the display color indicated by the background color information are similar, the changing unit changes the display color of the character information from the display color indicated by the background color information. Change to color. The reproduction control means performs streaming reproduction of the received acoustic data, and displays the lyrics telop represented by the received character information on the display means together with the background image stored in the storage means in accordance with the reproduction of the acoustic data. Let However, the reproduction control means displays the lyrics telop using the changed display color when the display color is changed by the changing means, and uses the predetermined display color when the display color is not changed by the changing means. To display the lyrics telop.

また、本発明は、請求項9に記載のように、コンピュータにおいて実行されるプログラム、あるいは当該プログラムを記憶する記憶媒体の態様で実現することもできる。   Moreover, as described in claim 9, the present invention can also be realized in the form of a program executed on a computer or a storage medium for storing the program.

カラオケシステムの概略構成を示すブロック図。The block diagram which shows schematic structure of a karaoke system. (a)テロップ色定義情報の一例を示す説明図、(b)背景色定義情報の一例を示す説明図。(A) Explanatory drawing which shows an example of telop color definition information, (b) Explanatory drawing which shows an example of background color definition information. 第1実施形態のサーバ処理の手順を示すフローチャート。The flowchart which shows the procedure of the server process of 1st Embodiment. 第1実施形態の配信判断処理の手順を示すフローチャート。The flowchart which shows the procedure of the delivery judgment process of 1st Embodiment. 第1実施形態のテロップ色変更処理の手順を示すフローチャート。The flowchart which shows the procedure of the telop color change process of 1st Embodiment. 第1実施形態の再生処理の手順を示すフローチャート。6 is a flowchart showing a procedure of reproduction processing according to the first embodiment. 第1実施形態の受信処理の手順を示すフローチャート。The flowchart which shows the procedure of the reception process of 1st Embodiment. 第2実施形態の端末処理の手順を示すフローチャート。The flowchart which shows the procedure of the terminal process of 2nd Embodiment.

以下、本発明の一実施形態を図面に基づいて説明する。なお、本発明は下記の実施形態に限定されるものではなく様々な態様にて実施することが可能である。
[カラオケシステムの構成の説明]
図1に示すように、実施形態カラオケシステムは、カラオケ配信サーバ10と端末装置20とを有する。カラオケ配信サーバ10と端末装置20とは、インターネットを介して通信可能に接続される。なお、図1では、端末装置20を1つだけ記載しているが、これより多くの端末装置20があってもよい。
Hereinafter, an embodiment of the present invention will be described with reference to the drawings. In addition, this invention is not limited to the following embodiment, It is possible to implement in various aspects.
[Description of karaoke system configuration]
As shown in FIG. 1, the embodiment karaoke system includes a karaoke distribution server 10 and a terminal device 20. The karaoke distribution server 10 and the terminal device 20 are communicably connected via the Internet. In FIG. 1, only one terminal device 20 is shown, but there may be more terminal devices 20 than this.

カラオケ配信サーバ10は、コンピュータシステムを構成している。このカラオケ配信サーバ10は、ハードウェア構成として、制御部11、各種情報を記憶する記憶部12、インターネットを介した通信を制御する通信部13等を備える。制御部11は、CPUやROM、RAM等を中心に構成された情報処理デバイスであり、装置全体の制御を司る。制御部11は、ROMや記憶部12から読込んだプログラムやデータに基づいて種々の処理を実行する。記憶部12は、ハードディスクドライブ等の大容量記憶装置である。記憶部12には、制御部11に実行させるプログラムや、その実行時に用いられるデータが記憶されている。また、記憶部12には、個々のカラオケ楽曲に対応するカラオケコンテンツのデータを多数収録したカラオケデータベースが記憶されている。   The karaoke distribution server 10 constitutes a computer system. As a hardware configuration, the karaoke distribution server 10 includes a control unit 11, a storage unit 12 that stores various types of information, a communication unit 13 that controls communication via the Internet, and the like. The control unit 11 is an information processing device mainly composed of a CPU, a ROM, a RAM, and the like, and controls the entire apparatus. The control unit 11 executes various processes based on programs and data read from the ROM and the storage unit 12. The storage unit 12 is a mass storage device such as a hard disk drive. The storage unit 12 stores a program to be executed by the control unit 11 and data used at the time of execution. In addition, the storage unit 12 stores a karaoke database in which a lot of karaoke content data corresponding to individual karaoke songs is recorded.

カラオケコンテンツのデータは、個々のカラオケ楽曲ごとに、カラオケ楽曲の音響と音響が出力されるときに表示される背景映像とを含む動画データと、カラオケ楽曲の音響を表す音響データと、カラオケ楽曲の歌詞をテロップとして表示させるためのテロップデータとを含む。動画データには、周知の音響・映像圧縮フォーマットに準拠したデジタルデータ等が用いられる。また、音響データには、周知の音声圧縮フォーマットに準拠したデジタルデータ等が用いられる。音響と背景映像とを含む動画データは、音響のみで構成される音響データよりもデータ量が大きい。   Karaoke content data includes, for each karaoke piece of music, video data including the sound of the karaoke piece and the background image displayed when the sound is output, sound data representing the sound of the karaoke piece, Telop data for displaying lyrics as telops. As the moving image data, digital data conforming to a well-known audio / video compression format is used. As the acoustic data, digital data conforming to a well-known audio compression format is used. The moving image data including the sound and the background image has a larger data amount than the sound data including only sound.

テロップデータは、歌詞の文字列を表す文字情報や、歌詞を表示するレイアウトや表示のタイミング等を規定する制御データ等を含む。また、図2(a)に例示されるように、個々のカラオケ楽曲ごとのテロップデータには、対応する動画データの背景映像の色の特徴に合わせて、背景映像に重ねて表示しても見やすい適性のある色がデフォルトの表示色として予め対応付けられている。記憶部12には、図2(a)に例示されるようなテロップ色定義情報のテーブルが予め記録されている。このテロップ色定義情報には、楽曲ごとのテロップデータの識別情報である歌詞テロップIDと、各テロップデータのデフォルトの表示色とが対応付けて記述されている。   The telop data includes character information representing a character string of lyrics, control data for defining a layout for displaying lyrics, display timing, and the like. In addition, as illustrated in FIG. 2A, the telop data for each karaoke piece is easy to see even if it is displayed overlaid on the background video according to the color characteristics of the background video of the corresponding video data. A suitable color is associated in advance as a default display color. A table of telop color definition information as exemplified in FIG. 2A is recorded in the storage unit 12 in advance. In this telop color definition information, a lyrics telop ID that is identification information of telop data for each song and a default display color of each telop data are described in association with each other.

また、図2(b)に例示されるように、端末装置20に記憶されている複数の背景画像について、個々の背景画像の色の特徴を表す情報と、各背景画像に重ねて表示しても見やすい適性のある歌詞テロップの色を示す情報とが予め対応付けられている。後述する第1実施形態では、図2(b)に例示される背景色定義情報のテーブルが記憶部12に予め記録されている。この背景色定義情報には、背景画像の識別情報である背景画像番号と、背景画像の色の特徴を分類化して表した表示色と、背景画像に対して見やすい適性のある歌詞テロップの色を表す適性色とが対応付けて記述されている。   Further, as illustrated in FIG. 2B, for a plurality of background images stored in the terminal device 20, information representing the color characteristics of the individual background images and the respective background images are displayed in an overlapping manner. Also, information indicating the color of the appropriate lyrics telop that is easy to see is associated in advance. In the first embodiment to be described later, a table of background color definition information exemplified in FIG. 2B is recorded in the storage unit 12 in advance. The background color definition information includes the background image number that is identification information of the background image, the display color that classifies the characteristics of the color of the background image, and the color of the lyrics telop that is suitable for viewing the background image. Appropriate colors to be expressed are described in association with each other.

カラオケ配信サーバ10は、端末装置20からの配信要求に応じて、カラオケデータベースに収録されているカラオケコンテンツのデータを、インターネット経由で配信要求元の端末装置20に配信する。端末装置20にカラオケコンテンツのデータを配信する際には、端末装置20側の通信に係る処理性能に応じて、動画データ又は音響データの何れか一方をストリーミングで配信する。また、カラオケ配信サーバ10は、配信要求されたカラオケ楽曲に対応するテロップデータを、配信要求元の端末装置20に配信する。カラオケコンテンツの配信に係る一連の処理の詳細な手順については、後述する。   In response to the distribution request from the terminal device 20, the karaoke distribution server 10 distributes the data of the karaoke content recorded in the karaoke database to the terminal device 20 that is the distribution request source via the Internet. When distributing karaoke content data to the terminal device 20, either moving image data or acoustic data is distributed by streaming according to the processing performance related to communication on the terminal device 20 side. Also, the karaoke distribution server 10 distributes telop data corresponding to the karaoke song requested to be distributed to the terminal device 20 that is the distribution request source. A detailed procedure of a series of processes related to the distribution of karaoke contents will be described later.

端末装置20は、ユーザから選曲されたカラオケコンテンツの配信要求をカラオケ配信サーバ10に送信し、カラオケ配信サーバ10から配信されるカラオケコンテンツを受信して再生する機能を有する。この端末装置20は、例えば、カラオケ店舗に設置される業務用のカラオケ装置や、個人の利用者が所有するパソコン、高機能携帯電話(いわゆるスマートフォン)、タブレットコンピュータといった、様々な情報処理装置で具現化される。端末装置20は、ハードウェア構成として、制御部21、記憶部22、再生処理部23、表示部24、音声出力部25、操作部26、通信部27等を備える。   The terminal device 20 has a function of transmitting a karaoke content distribution request selected by the user to the karaoke distribution server 10 and receiving and reproducing the karaoke content distributed from the karaoke distribution server 10. The terminal device 20 is embodied in various information processing devices such as a business karaoke device installed in a karaoke store, a personal computer owned by an individual user, a high-function mobile phone (so-called smartphone), and a tablet computer. It becomes. The terminal device 20 includes a control unit 21, a storage unit 22, a reproduction processing unit 23, a display unit 24, an audio output unit 25, an operation unit 26, a communication unit 27, and the like as a hardware configuration.

制御部21は、CPUやROM、RAM等を中心に構成された情報処理デバイスであり、装置全体の制御を司る。制御部21は、ROMや記憶部22から読込んだプログラムやデータに基づいて種々の処理を実行する。記憶部22は、ハードディスクドライブや書換え可能な不揮発性半導体メモリ等の大容量記憶装置である。記憶部22には、制御部11に実行させるプログラムや、その実行時に用いられるデータが記憶されている。また、記憶部22には、カラオケ配信サーバ10から受信したカラオケコンテンツが再生されるときに、背景として表示部24に表示される背景画像のデータが記憶されている。なお、後述する第2実施形態では、図2(b)に例示される背景色定義情報のテーブルが記憶部22に予め記録されている。   The control unit 21 is an information processing device configured mainly with a CPU, ROM, RAM, and the like, and controls the entire apparatus. The control unit 21 executes various processes based on programs and data read from the ROM and the storage unit 22. The storage unit 22 is a mass storage device such as a hard disk drive or a rewritable nonvolatile semiconductor memory. The storage unit 22 stores a program to be executed by the control unit 11 and data used at the time of execution. The storage unit 22 stores background image data displayed on the display unit 24 as a background when the karaoke content received from the karaoke distribution server 10 is reproduced. In the second embodiment to be described later, a background color definition information table illustrated in FIG. 2B is recorded in the storage unit 22 in advance.

再生処理部23は、カラオケ配信サーバ10から受信したカラオケコンテンツの動画データ又は音響データの再生を行い、再生された映像信号及び音響信号を出力する。カラオケコンテンツの再生は、カラオケ配信サーバ10から送信される動画データ又は音響データのストリームを受信しながら同時に再生を行う、ストリーミングによって行われる。表示部24は、例えば、液晶ディスプレイ等の表示装置であり、各種画像を表示する。この表示部24には、カラオケコンテンツの動画データを再生した背景映像や、記憶部22に記憶されている背景画像データに基づく背景画像、カラオケ楽曲の歌詞を表す歌詞テロップ等の画像が表示される。音声出力部25は、再生処理部23によって再生される楽曲の音響信号を音に換えて出力する。操作部26は、種々の入力ボタンやタッチパネル等を備えており、操作者から受付けた入力操作に応じた操作信号を制御部21に入力する。   The reproduction processing unit 23 reproduces the moving image data or audio data of the karaoke content received from the karaoke distribution server 10 and outputs the reproduced video signal and audio signal. The reproduction of the karaoke content is performed by streaming that simultaneously reproduces the moving image data or the sound data stream transmitted from the karaoke distribution server 10. The display unit 24 is a display device such as a liquid crystal display, for example, and displays various images. The display unit 24 displays images such as a background image obtained by reproducing moving image data of karaoke content, a background image based on background image data stored in the storage unit 22, and a lyrics telop representing lyrics of karaoke music. . The audio output unit 25 outputs the sound signal of the music reproduced by the reproduction processing unit 23 instead of sound. The operation unit 26 includes various input buttons, a touch panel, and the like, and inputs an operation signal corresponding to the input operation received from the operator to the control unit 21.

通信部27は、端末装置20をインターネットに接続して情報通信を行うための通信インタフェースである。本実施形態では、個々の端末装置20ごとに、通信速度が異なる様々な通信規格の通信回線を利用する通信インタフェースが通信部27として適用されることを想定している。例えば、携帯通信端末向けのデータ通信規格として、第3世代移動通信システム(3G:3rd Generation)、LTE(Long Term Evolution)、第4世代移動通信システム(4G:4th Generation)、無線LAN等が挙げられる。また、施設向けのデータ通信規格として、ブロードバンドインターネット接続(例えば、ADSL、CATV、FTTH)等が例示される。本実施形態では、通信部27がインターネット接続に利用する通信回線の性能に応じて、カラオケ配信サーバ10が配信するカラオケコンテンツが動画データになるか音響データになるかが決定される。   The communication unit 27 is a communication interface for performing information communication by connecting the terminal device 20 to the Internet. In the present embodiment, it is assumed that a communication interface using communication lines of various communication standards having different communication speeds is applied as the communication unit 27 for each terminal device 20. For example, as a data communication standard for mobile communication terminals, third generation mobile communication system (3G: 3rd Generation), LTE (Long Term Evolution), fourth generation mobile communication system (4G: 4th Generation), wireless LAN, and the like can be cited. It is done. Moreover, broadband internet connection (for example, ADSL, CATV, FTTH) etc. is illustrated as a data communication standard for facilities. In the present embodiment, it is determined whether the karaoke content distributed by the karaoke distribution server 10 is video data or acoustic data according to the performance of the communication line used by the communication unit 27 for Internet connection.

[第1実施形態:サーバ処理の説明]
第1実施形態において、カラオケ配信サーバ10の制御部11が実行するサーバ処理の手順について、図3のフローチャートを参照しながら説明する。この処理は、カラオケ配信サーバ10の稼働時に繰返し実行される。
[First Embodiment: Explanation of Server Processing]
In the first embodiment, the procedure of server processing executed by the control unit 11 of the karaoke distribution server 10 will be described with reference to the flowchart of FIG. This process is repeatedly executed when the karaoke distribution server 10 is in operation.

S100では、制御部11は、端末装置20からカラオケコンテンツの配信要求を受信したか否かを判定する。端末装置20から送信されてくる配信要求には、カラオケコンテンツの楽曲の識別情報(例えば、楽曲番号)と、端末装置20がインターネットに接続するために利用している通信回線の種別を示す情報が含まれている。通信回線の種別を示す情報は、端末装置20の通信にかかる処理性能を表す情報に相当する。端末装置20から配信要求を受信していない場合(S100:NO)、制御部11はS100を繰返す。一方、端末装置20から配信要求を受信した場合(S100:YES)、制御部11はS102に進む。   In S <b> 100, the control unit 11 determines whether or not a karaoke content distribution request is received from the terminal device 20. The distribution request transmitted from the terminal device 20 includes identification information (for example, music number) of the karaoke content music and information indicating the type of communication line used by the terminal device 20 to connect to the Internet. include. The information indicating the type of communication line corresponds to information indicating the processing performance related to the communication of the terminal device 20. When the distribution request has not been received from the terminal device 20 (S100: NO), the control unit 11 repeats S100. On the other hand, when the distribution request is received from the terminal device 20 (S100: YES), the control unit 11 proceeds to S102.

S102では、配信要求されたカラオケコンテンツの動画データを配信するか、音響データを配信するかを決定する配信判断処理を実行する。ここで、S102の配信判断処理の手順について、図4のフローチャートを参照しながら説明する。S200では、制御部11は、端末装置20から受信した配信要求で示される通信回線の種別が3Gであるか否かを判定する。本実施形態では、端末装置20がインターネット接続に利用する通信回線のうち、3Gを最も低速な通信回線として位置付けている。そのため、配信要求で示される通信回線の種別が3Gである場合、通信速度が低い(処理性能が低い)ものとして扱い、S200では肯定判定をしてS202に進む。一方、配信要求で示される通信回線の種別が3Gでない場合、通信速度が早い(処理性能が高い)ものとして扱い、S200では否定判定をしてS206に進む。   In S102, a distribution determination process for determining whether to distribute the moving image data of the karaoke content requested to be distributed or to distribute the acoustic data is executed. Here, the procedure of the delivery determination process of S102 will be described with reference to the flowchart of FIG. In S200, the control unit 11 determines whether or not the type of the communication line indicated by the distribution request received from the terminal device 20 is 3G. In this embodiment, 3G is positioned as the slowest communication line among the communication lines used by the terminal device 20 for Internet connection. For this reason, when the type of the communication line indicated by the distribution request is 3G, the communication speed is low (processing performance is low), an affirmative determination is made in S200, and the process proceeds to S202. On the other hand, if the type of the communication line indicated by the distribution request is not 3G, the communication speed is assumed to be high (processing performance is high), a negative determination is made in S200, and the process proceeds to S206.

S200で肯定判定をした場合に進むS202では、制御部11は、配信要求されたカラオケコンテンツに対応する動画データのサイズが、100MB以上であるか否かを判定する。動画データのサイズが100MB以上である場合(S202:YES)、制御部11はS204に進む。一方、動画データのサイズが100MB未満である場合(S202:NO)、制御部11はS206に進む。S202で肯定判定をした場合に進むS204では、制御部11は音響データの配信を決定する。一方、S200又はS202で否定判定をした場合に進むS206では、制御部11は、動画データの配信を決定する。S204,S206の後、制御部11は本処理を終了する。   In S202, which proceeds when an affirmative determination is made in S200, the control unit 11 determines whether or not the size of the moving image data corresponding to the requested karaoke content is 100 MB or more. When the size of the moving image data is 100 MB or more (S202: YES), the control unit 11 proceeds to S204. On the other hand, when the size of the moving image data is less than 100 MB (S202: NO), the control unit 11 proceeds to S206. In S204, which proceeds when an affirmative determination is made in S202, the control unit 11 determines the distribution of the acoustic data. On the other hand, in S206 which proceeds when a negative determination is made in S200 or S202, the control unit 11 determines distribution of the moving image data. The control part 11 complete | finishes this process after S204 and S206.

図3のフローチャートの説明に戻る。S104では、制御部11は、S102で配信を決定したデータが動画データであるか音響データであるかに応じて処理を分岐する。音響データの配信を決定した場合(S104:音響)、制御部11はS106に進む。S106では、端末装置20で表示される背景画像に合わせて歌詞テロップの表示色を変更するテロップ色変更処理を実行する。ここで、S106のテロップ色変更処理の手順について、図5を参照しながら説明する。   Returning to the flowchart of FIG. In S104, the control unit 11 branches the process depending on whether the data determined to be distributed in S102 is moving image data or acoustic data. When the distribution of the acoustic data is determined (S104: sound), the control unit 11 proceeds to S106. In S <b> 106, a telop color changing process for changing the display color of the lyrics telop in accordance with the background image displayed on the terminal device 20 is executed. Here, the procedure of the telop color changing process in S106 will be described with reference to FIG.

S300では、制御部11は、端末装置20が音響データの再生時に表示する背景画像を特定する。具体的には、端末装置20に対して背景画像の識別情報である背景画像番号を問合せる。端末装置20は、カラオケ配信サーバ10からの問合せに対して、音響データの再生時に表示する背景画像に対応する背景画像番号を返答する。S302では、制御部11は、配信要求されたカラオケコンテンツに対応する配信対象のテロップデータに対応付けられた表示色が、S300で特定した背景画像の表示色と類似するか否かを判定する。具体的には、図2(a)に例示されるテロップ色定義情報を参照して、配信対象のテロップデータに対応付けられている表示色を特定する。また、図2(b)に例示される背景色定義情報を参照して、前記特定した背景画像の色の特徴を示す表示色を特定する。そして、テロップ色定義情報から特定したテロップの表示色と、背景色定義情報から特定した背景画像の表示色とを比較し、両者が一致する又は同系色である場合、類似すると判定する。   In S300, the control unit 11 specifies the background image that the terminal device 20 displays when reproducing the acoustic data. Specifically, the terminal device 20 is inquired about the background image number which is the identification information of the background image. In response to the inquiry from the karaoke distribution server 10, the terminal device 20 replies with a background image number corresponding to the background image displayed at the time of reproducing the acoustic data. In S302, the control unit 11 determines whether or not the display color associated with the telop data to be distributed corresponding to the requested karaoke content is similar to the display color of the background image specified in S300. Specifically, the display color associated with the telop data to be distributed is specified with reference to the telop color definition information illustrated in FIG. Also, the display color indicating the color characteristics of the specified background image is specified with reference to the background color definition information exemplified in FIG. Then, the display color of the telop specified from the telop color definition information is compared with the display color of the background image specified from the background color definition information, and if both match or are similar colors, it is determined that they are similar.

配信対象のテロップデータに対応付けられた表示色と、前記特定した背景画像の表示色とが類似する場合(S302:YES)、制御部11はS304に進む。S304では、制御部11は、背景色定義情報を参照して、配信対象のテロップデータに対応付けられている表示色を、前記特定した背景画像に対応する適性色に変更して本処理を終了する。一方、S302において、配信対象のテロップデータに対応付けられた表示色と、前記特定した背景画像の表示色とが類似しないと判定した場合(S302:NO)、制御部11は本処理を終了する。   When the display color associated with the telop data to be distributed is similar to the display color of the specified background image (S302: YES), the control unit 11 proceeds to S304. In S304, the control unit 11 refers to the background color definition information, changes the display color associated with the telop data to be distributed to an appropriate color corresponding to the identified background image, and ends this processing. To do. On the other hand, if it is determined in S302 that the display color associated with the telop data to be distributed is not similar to the display color of the specified background image (S302: NO), the control unit 11 ends this process. .

図3のフローチャートの説明に戻る。S108では、制御部11は、配信要求されたカラオケコンテンツに対応するテロップデータを、S106のテロップ色変更処理の結果を反映した表示色を対応付けて、端末装置20に送信する。すなわち、S106でテロップデータの表示色が背景画像の適性色に変更された場合、変更後の適性色を対応付けてテロップデータを端末装置20に送信する。一方、S106でテロップデータの表示色が変更されなかった場合、デフォルトの表示色を対応付けてテロップデータを端末装置20に送信する。   Returning to the flowchart of FIG. In S108, the control unit 11 transmits the telop data corresponding to the requested karaoke content to the terminal device 20 in association with the display color reflecting the result of the telop color change process in S106. That is, when the display color of the telop data is changed to the appropriate color of the background image in S106, the telop data is transmitted to the terminal device 20 in association with the changed appropriate color. On the other hand, if the display color of the telop data is not changed in S106, the telop data is transmitted to the terminal device 20 in association with the default display color.

次のS110では、配信要求されたカラオケコンテンツの音響データのストリームを、順次端末装置20に送信する。S112では、制御部11は、音響データのストリームの送信を終了するか否かを判定する。送信を続ける場合(S112:NO)、制御部11はS110に戻って音響データのストリームの送信を継続する。一方、送信を終了する場合(S112:YES)、制御部11は本処理を終了する。   In next S110, the stream of acoustic data of the karaoke content requested for distribution is sequentially transmitted to the terminal device 20. In S112, the control unit 11 determines whether or not to end the transmission of the stream of acoustic data. When continuing transmission (S112: NO), the control part 11 returns to S110, and continues transmission of the stream of acoustic data. On the other hand, when the transmission is finished (S112: YES), the control unit 11 finishes this process.

一方、S104において、動画データの配信を決定した場合(S104:動画)、制御部11はS114に進む。S114では、制御部11は、配信要求されたカラオケコンテンツに対応するテロップデータを、デフォルトの表示色を対応付けて、端末装置20に送信する。次のS116では、配信要求されたカラオケコンテンツの動画データのストリームを、順次端末装置20に送信する。S118では、制御部11は、動画データのストリームの送信を終了するか否かを判定する。送信を続ける場合(S118:NO)、制御部11はS120に進む。一方、送信を終了する場合(S118:YES)、制御部11は本処理を終了する。   On the other hand, when the distribution of moving image data is determined in S104 (S104: moving image), the control unit 11 proceeds to S114. In S <b> 114, the control unit 11 transmits the telop data corresponding to the requested karaoke content to the terminal device 20 in association with the default display color. In next S 116, the stream of moving image data of the karaoke content requested for distribution is sequentially transmitted to the terminal device 20. In S118, the control unit 11 determines whether or not to end the transmission of the moving image data stream. When the transmission is continued (S118: NO), the control unit 11 proceeds to S120. On the other hand, when the transmission is finished (S118: YES), the control unit 11 finishes this process.

送信を続ける場合に進むS120では、制御部11は、動画データの配信先の端末装置20から、送信するストリームを動画データから音響データに切替える切替要求を受信したか否かを判定する。切替要求を受信していない場合(S120:NO)、制御部11はS116に戻って動画データのストリームの送信を継続する。一方、切替要求を受信した場合(S120:YES)、制御部11はS106に進む。   In S120, which proceeds when the transmission is continued, the control unit 11 determines whether a switching request for switching the stream to be transmitted from the moving image data to the acoustic data is received from the terminal device 20 to which the moving image data is distributed. When the switching request has not been received (S120: NO), the control unit 11 returns to S116 and continues to transmit the moving image data stream. On the other hand, when the switching request is received (S120: YES), the control unit 11 proceeds to S106.

その後、制御部11は、S106で上述のテロップ色変更処理(図5参照)を実行し、S108で表示色の変更を反映したテロップデータを端末装置20に送信する。そして、S110では、動画データのストリームの送信を中断し、送信済みの動画データのストリームの続きに相当する再生位置から、音響データのストリームの送信を開始する。以降、S112で送信を終了すると判断するまで、制御部11は、音響データのストリームの送信を継続し、送信を終了すると判断した場合(S112:YES)、本処理を終了する。   Thereafter, the control unit 11 executes the above-described telop color change process (see FIG. 5) in S106, and transmits telop data reflecting the change in display color to the terminal device 20 in S108. In S110, transmission of the moving image data stream is interrupted, and transmission of the acoustic data stream is started from a reproduction position corresponding to the continuation of the transmitted moving image data stream. Thereafter, the control unit 11 continues to transmit the acoustic data stream until it is determined in S112 that transmission is to be ended, and when it is determined that transmission is to be ended (S112: YES), this process ends.

[第1実施形態:再生処理の説明]
第1実施形態において、端末装置20の制御部21が実行する再生処理の手順について、図6のフローチャートを参照しながら説明する。この処理は、カラオケコンテンツを再生する機能の実行が指令されたときに実行される。
[First Embodiment: Description of Reproduction Processing]
In the first embodiment, the procedure of the reproduction process executed by the control unit 21 of the terminal device 20 will be described with reference to the flowchart of FIG. This process is executed when the execution of a function for reproducing karaoke content is instructed.

S400では、制御部21は、再生をリクエストするカラオケコンテンツの選曲が完了したか否かを判定する。カラオケコンテンツの選曲は、ユーザから操作部26を介して受付ける。カラオケコンテンツの選曲が完了した場合(S400:YES)、制御部21はS402に進む。一方、カラオケコンテンツの選曲が完了していない場合、制御部21はS400を繰返す。S402では、制御部21は、選曲されたカラオケコンテンツの配信を要求する内容の配信要求をカラオケ配信サーバ10に送信する。ここで送信する配信要求には、選曲されたカラオケコンテンツの識別情報(例えば、楽曲番号)と、自端末装置20の通信部27がインターネット接続に利用する通信回線の種別を示す情報とが含まれる。配信要求がカラオケ配信サーバ10に送信されると、カラオケ配信サーバ10からテロップデータの送信、及び、通知された動画データ又は音響データのストリームの送信が行われる。   In S400, the control unit 21 determines whether or not the music selection of the karaoke content for which reproduction is requested has been completed. The music selection of the karaoke content is received from the user via the operation unit 26. When the music selection of the karaoke content is completed (S400: YES), the control unit 21 proceeds to S402. On the other hand, when the music selection of the karaoke content is not completed, the control unit 21 repeats S400. In S <b> 402, the control unit 21 transmits a distribution request for content requesting distribution of the selected karaoke content to the karaoke distribution server 10. The distribution request transmitted here includes identification information (for example, music number) of the selected karaoke content and information indicating the type of communication line used by the communication unit 27 of the terminal device 20 for Internet connection. . When the distribution request is transmitted to the karaoke distribution server 10, telop data is transmitted from the karaoke distribution server 10, and the notified moving image data or audio data stream is transmitted.

次のS404では、制御部21は、配信要求を送信した結果、配信判断処理(図4参照)の判断結果に応じてカラオケ配信サーバ10から送信されてくるデータが動画データであるか、音響データであるかに応じて処理を分岐する。音響データが送信される場合(S404:音響)、制御部21はS406に進む。S406では、制御部21は、バッファメモリのリストに蓄積されている音響データのストリームの受信量が、3秒分の再生時間を越えているか否かを判定する。音響データのストリームの受信量が3秒分の再生時間以下である場合(S406:NO)、制御部21はS406を繰返す。一方、音響データのストリームの受信量が3秒分の再生時間を越えている場合(S406:YES)、制御部21はS408に進む。S408では、制御部21は、受信した音響データのストリームを再生処理部23において順次再生する。音響データから再生されたカラオケコンテンツの音響は、音声出力部25から出力される。また、制御部21は、記憶部22に記憶されている所定の背景画像を表示部24に表示させる。さらに、制御部21は、音響データの再生に同期して、カラオケ配信サーバ10から受信したテロップデータで示される歌詞テロップの画像を、このテロップデータに対応付けられている表示色で描画して背景画像上に重ねて表示させる。   In the next S404, the control unit 21 transmits the distribution request, and whether the data transmitted from the karaoke distribution server 10 according to the determination result of the distribution determination process (see FIG. 4) is moving image data or acoustic data. The process branches depending on whether or not. When the acoustic data is transmitted (S404: sound), the control unit 21 proceeds to S406. In S406, the control unit 21 determines whether or not the received amount of the stream of acoustic data stored in the buffer memory list exceeds the reproduction time of 3 seconds. When the received amount of the acoustic data stream is equal to or shorter than the reproduction time of 3 seconds (S406: NO), the control unit 21 repeats S406. On the other hand, when the received amount of the stream of acoustic data exceeds the reproduction time for 3 seconds (S406: YES), the control unit 21 proceeds to S408. In step S <b> 408, the control unit 21 sequentially reproduces the received audio data stream in the reproduction processing unit 23. The sound of the karaoke content reproduced from the sound data is output from the sound output unit 25. Further, the control unit 21 causes the display unit 24 to display a predetermined background image stored in the storage unit 22. Furthermore, in synchronization with the reproduction of the acoustic data, the control unit 21 draws the image of the lyrics telop indicated by the telop data received from the karaoke distribution server 10 with the display color associated with the telop data, and Overlay on the image.

次のS410では、制御部21は、カラオケコンテンツの再生を終了するか否かを判定する。カラオケコンテンツの再生を続ける場合(S410:NO)、制御部21はS408に戻って、音響データの再生と、背景画像及び歌詞テロップ画像の表示とを継続する。一方、カラオケコンテンツの再生を終了する場合(S410:YES)、制御部21は本処理を終了する。   In next S410, the control unit 21 determines whether or not to end the reproduction of the karaoke content. When continuing the reproduction of the karaoke content (S410: NO), the control unit 21 returns to S408 and continues the reproduction of the acoustic data and the display of the background image and the lyrics telop image. On the other hand, when the reproduction of the karaoke content is finished (S410: YES), the control unit 21 finishes this process.

一方、S404において、動画データが送信される場合(S404:動画)、制御部21はS412に進む。S412では、制御部21は、バッファメモリのリストに蓄積されている動画データのストリームの受信量が、10秒分の再生時間を越えているか否かを判定する。動画データのストリームの受信量が10秒分の再生時間を越えていない場合(S412:NO)、制御部21はS412を繰返す。一方、動画データのストリームの受信量が10秒分の再生時間以下である場合(S412:YES)、制御部21はS414に進む。   On the other hand, when moving image data is transmitted in S404 (S404: moving image), the control unit 21 proceeds to S412. In S412, the control unit 21 determines whether or not the received amount of the moving image data stream stored in the buffer memory list exceeds the reproduction time of 10 seconds. When the received amount of the moving image data stream does not exceed the reproduction time of 10 seconds (S412: NO), the control unit 21 repeats S412. On the other hand, when the received amount of the moving image data stream is equal to or shorter than the reproduction time of 10 seconds (S412: YES), the control unit 21 proceeds to S414.

S414では、制御部21は、受信した動画データのストリームを再生処理部23において順次再生する。動画データから再生された背景映像は表示部24に表示され、動画データから再生された音響は音声出力部25から出力される。また、制御部21は、動画データの再生に同期して、カラオケ配信サーバ10から受信したテロップデータで示される歌詞テロップの画像を、このテロップデータに対応付けられている表示色で描画して、動画データを再生した背景映像上に重ねて表示させる。次のS416では、制御部21は、カラオケコンテンツの再生を終了するか否かを判定する。カラオケコンテンツの再生を続ける場合(S416:NO)、制御部21はS418に進む。一方、カラオケコンテンツの再生を終了する場合(S416:YES)、制御部21は本処理を終了する。   In S <b> 414, the control unit 21 sequentially reproduces the received moving image data stream in the reproduction processing unit 23. The background image reproduced from the moving image data is displayed on the display unit 24, and the sound reproduced from the moving image data is output from the audio output unit 25. In addition, in synchronization with the reproduction of the video data, the control unit 21 draws the image of the lyrics telop indicated by the telop data received from the karaoke distribution server 10 in the display color associated with the telop data, The video data is displayed overlaid on the reproduced background video. In next S416, the control unit 21 determines whether or not to end the reproduction of the karaoke content. When continuing to reproduce the karaoke content (S416: NO), the control unit 21 proceeds to S418. On the other hand, when the reproduction of the karaoke content is finished (S416: YES), the control unit 21 finishes this process.

カラオケコンテンツの再生を続ける場合に進むS418では、制御部21は、バッファメモリのリストに蓄積されている動画データのストリームの受信量が、5秒分の再生時間を越えているか否かを判定する。動画データのストリームの受信量が5秒分の再生時間を越えている場合(S418:YES)、制御部21はS414に戻って動画データの再生と歌詞テロップの画像の表示とを継続する。一方、動画データのストリームの受信量が5秒分の再生時間以下である場合(S418:NO)、制御部21はS420に進む。S420では、制御部21は、動画データの配信から音響データの配信に切替える切替要求を、カラオケ配信サーバ10に送信し、S406に進む。以降、制御部21は、上述のとおりS406〜S410において、カラオケ配信サーバ10から受信した音響データのストリーム及びテロップデータに基づいて、音響の再生と、背景画像及び歌詞テロップ画像の表示とを行う。   In S418, which proceeds when the reproduction of the karaoke content is continued, the control unit 21 determines whether or not the received amount of the moving image data stream accumulated in the buffer memory list exceeds the reproduction time of 5 seconds. . When the received amount of the moving image data stream exceeds the reproduction time of 5 seconds (S418: YES), the control unit 21 returns to S414 and continues the reproduction of the moving image data and the display of the lyrics telop image. On the other hand, when the received amount of the moving image data stream is equal to or shorter than the reproduction time of 5 seconds (S418: NO), the control unit 21 proceeds to S420. In S420, the control unit 21 transmits a switching request for switching from distribution of moving image data to distribution of acoustic data to the karaoke distribution server 10, and the process proceeds to S406. Thereafter, in S406 to S410, as described above, the control unit 21 performs sound reproduction and display of the background image and the lyrics telop image based on the sound data stream and telop data received from the karaoke distribution server 10.

[受信処理の説明]
端末装置20の制御部21が実行する受信処理の手順について、図7のフローチャートを参照しながら説明する。この処理は、上述の再生処理(図6)において、カラオケコンテンツの配信要求が送信されたときに実行される処理である。
[Description of reception processing]
A procedure of reception processing executed by the control unit 21 of the terminal device 20 will be described with reference to the flowchart of FIG. This process is a process executed when a karaoke content distribution request is transmitted in the above-described reproduction process (FIG. 6).

S500では、カラオケ配信サーバ10からテロップデータを受信した場合(S500:YES)、制御部21はS502に進む。S502では、制御部21は、受信したテロップデータをメモリの所定領域に保存する。   In S500, when the telop data is received from the karaoke distribution server 10 (S500: YES), the control unit 21 proceeds to S502. In S502, the control unit 21 stores the received telop data in a predetermined area of the memory.

一方、S504では、カラオケ配信サーバ10から動画データのストリームを受信した場合(S504:YES)、制御部21はS506に進む。S506では、制御部21は、受信した動画データのストリームを、バッファメモリのリストに順次追加する。バッファメモリは、カラオケ配信サーバ10から受信した未再生分のストリームを一時的に記憶するための記憶領域である。バッファメモリに蓄積されたストリームは順次再生され、再生が済んだストリームから順にバッファメモリから消去される。
一方、S508では、カラオケ配信サーバ10から音響データのストリームを受信した場合(S508:YES)、制御部21はS510に進む。S510では、制御部21は、受信した音響データのストリームをバッファメモリのリストに順次追加する。
On the other hand, in S504, when a stream of moving image data is received from the karaoke distribution server 10 (S504: YES), the control unit 21 proceeds to S506. In S506, the control unit 21 sequentially adds the received moving image data stream to the list of the buffer memory. The buffer memory is a storage area for temporarily storing an unreproduced stream received from the karaoke distribution server 10. Streams stored in the buffer memory are sequentially reproduced, and are erased from the buffer memory in order from the reproduced streams.
On the other hand, in S508, when a stream of acoustic data is received from the karaoke distribution server 10 (S508: YES), the control unit 21 proceeds to S510. In S510, the control unit 21 sequentially adds the received stream of acoustic data to the list of the buffer memory.

[第2実施形態:端末処理の説明]
第2実施形態において、端末装置20の制御部21が実行する端末処理の手順について、図8のフローチャートを参照しながら説明する。この処理は、カラオケコンテンツを再生する機能の実行が指令されたときに実行される。第2実施形態は、カラオケ配信サーバ10が配信するカラオケコンテンツのデータについて、動画データ又は音響データの何れか一方の配信要求を端末装置20側が行う点で、第1実施形態と相違する。
[Second Embodiment: Explanation of Terminal Processing]
In the second embodiment, a procedure of terminal processing executed by the control unit 21 of the terminal device 20 will be described with reference to the flowchart of FIG. This process is executed when the execution of a function for reproducing karaoke content is instructed. The second embodiment is different from the first embodiment in that the terminal device 20 side makes a distribution request for either moving image data or acoustic data for karaoke content data distributed by the karaoke distribution server 10.

S600では、制御部21は、再生をリクエストするカラオケコンテンツの選曲が完了したか否かを判定する。カラオケコンテンツの選曲は、ユーザから操作部26を介して受付ける。カラオケコンテンツの選曲が完了した場合(S600:YES)、制御部21はS602に進む。一方、カラオケコンテンツの選曲が完了していない場合、制御部21はS600を繰返す。S602では、制御部21は、通信部27が接続している通信回線の種別が3Gであるか否かを判定する。本実施形態では、端末装置20がインターネット接続に利用する通信回線のうち、3Gを最も低速な通信回線として位置付けている。そのため、配信要求で示される通信回線の種別が3Gである場合、通信速度が低い(処理性能が低い)ものとして扱い、S602では肯定判定をしてS604に進む。一方、配信要求で示される通信回線の種別が3Gでない場合、通信速度が早い(処理性能が高い)ものとして扱い、S604では否定判定をしてS618に進む。   In S600, the control unit 21 determines whether or not the music selection of the karaoke content for which reproduction is requested has been completed. The music selection of the karaoke content is received from the user via the operation unit 26. When the music selection of the karaoke content is completed (S600: YES), the control unit 21 proceeds to S602. On the other hand, when the music selection of the karaoke content is not completed, the control unit 21 repeats S600. In S602, the control unit 21 determines whether the type of the communication line to which the communication unit 27 is connected is 3G. In this embodiment, 3G is positioned as the slowest communication line among the communication lines used by the terminal device 20 for Internet connection. Therefore, when the type of the communication line indicated by the distribution request is 3G, it is treated as a communication speed being low (processing performance is low), an affirmative determination is made in S602, and the process proceeds to S604. On the other hand, if the type of the communication line indicated by the distribution request is not 3G, the communication speed is assumed to be high (processing performance is high), a negative determination is made in S604, and the flow proceeds to S618.

S602で肯定判定をした場合に進むS604では、制御部21は、選曲されたカラオケコンテンツに対応する音響データの配信を要求する内容の配信要求をカラオケ配信サーバ10に送信する。ここで送信する配信要求には、選曲されたカラオケコンテンツの識別情報(例えば、楽曲番号)と音響データの配信を指定する情報とが含まれる。これに対し、カラオケ配信サーバ10は、配信要求されたカラオケコンテンツに対応するテロップデータ、及び音響データのストリームの送信を行う。なお、ここで送信されるテロップデータには、テロップ色定義情報(図2(a)参照)で示されるデフォルトの表示色が対応付けられている。   In S604, which proceeds when an affirmative determination is made in S602, the control unit 21 transmits, to the karaoke distribution server 10, a distribution request for content that requests distribution of acoustic data corresponding to the selected karaoke content. The distribution request transmitted here includes identification information (for example, music number) of the selected karaoke content and information specifying distribution of acoustic data. On the other hand, the karaoke distribution server 10 transmits a stream of telop data and acoustic data corresponding to the karaoke content requested to be distributed. Note that the telop data transmitted here is associated with a default display color indicated by the telop color definition information (see FIG. 2A).

次のS606では、制御部21は、カラオケ配信サーバ10から送信されたテロップデータを取得する。そして、S608では、制御部21は、S604で取得したテロップデータに対応付けられた表示色が、選曲されたカラオケコンテンツを再生するときに表示する背景画像の表示色と類似するか否かを判定する。具体的には、図2(b)に例示される背景色定義情報を参照して、背景画像の色の特徴を示す表示色を特定する。そして、受信したテロップデータに対応付けられている表示色と、背景色定義情報から特定した背景画像の表示色とを比較し、両者が一致する又は同系色である場合、類似すると判定する。   In the next S606, the control unit 21 acquires the telop data transmitted from the karaoke distribution server 10. In step S608, the control unit 21 determines whether or not the display color associated with the telop data acquired in step S604 is similar to the display color of the background image displayed when the selected karaoke content is played. To do. Specifically, the display color indicating the color characteristics of the background image is specified with reference to the background color definition information exemplified in FIG. Then, the display color associated with the received telop data is compared with the display color of the background image specified from the background color definition information, and if they match or are similar colors, it is determined that they are similar.

受信したテロップデータに対応付けられた表示色と、背景画像の表示色とが類似する場合(S608:YES)、制御部21はS610に進む。S610では、制御部21は、背景色定義情報を参照して、受信したテロップデータに対応付けられている表示色を、背景画像に対応する適性色に変更する。一方、S608において、受信したテロップデータに対応付けられた表示色と、背景画像の表示色とが類似しないと判定した場合(S608:NO)、制御部21はS612に進む。   When the display color associated with the received telop data is similar to the display color of the background image (S608: YES), the control unit 21 proceeds to S610. In step S610, the control unit 21 refers to the background color definition information, and changes the display color associated with the received telop data to an appropriate color corresponding to the background image. On the other hand, if it is determined in S608 that the display color associated with the received telop data is not similar to the display color of the background image (S608: NO), the control unit 21 proceeds to S612.

S612では、制御部21は、カラオケ配信サーバ10から音響データのストリームを受信する。そして、受信した音響データのストリームを、未再生のストリームを一時的に記憶するバッファメモリのリストに順次追加する。S614では、制御部21は、受信した音響データのストリームを再生処理部23において順次再生する。音響データから再生されたカラオケコンテンツの音響は、音声出力部25から出力される。また、制御部21は、記憶部22に記憶されている所定の背景画像を表示部24に表示させる。さらに、制御部21は、音響データの再生に同期して、S606で取得したテロップデータで示される歌詞テロップの画像を、このテロップデータに対応付けられている表示色で描画して背景画像上に重ねて表示させる。ただし、歌詞テロップの画像を描画する際、S610で表示色を変更している場合は変更後の表示色を用いる一方、表示色を変更していない場合はデフォルトの表示色を用いる。   In S <b> 612, the control unit 21 receives a stream of acoustic data from the karaoke distribution server 10. Then, the received stream of acoustic data is sequentially added to the list of the buffer memory that temporarily stores the unreproduced stream. In S <b> 614, the control unit 21 sequentially reproduces the received audio data stream in the reproduction processing unit 23. The sound of the karaoke content reproduced from the sound data is output from the sound output unit 25. Further, the control unit 21 causes the display unit 24 to display a predetermined background image stored in the storage unit 22. Further, in synchronization with the reproduction of the acoustic data, the control unit 21 draws the lyrics telop image indicated by the telop data acquired in S606 in the display color associated with the telop data and displays it on the background image. Overlapping display. However, when the lyrics telop image is drawn, if the display color is changed in S610, the changed display color is used, and if the display color is not changed, the default display color is used.

次のS616では、制御部21は、カラオケコンテンツの再生を終了するか否かを判定する。カラオケコンテンツの再生を続ける場合(S616:NO)、制御部21はS612に戻る。一方、カラオケコンテンツの再生を終了する場合(S616:YES)、制御部21は本処理を終了する。   In next S616, the control unit 21 determines whether or not to end the reproduction of the karaoke content. When the reproduction of the karaoke content is continued (S616: NO), the control unit 21 returns to S612. On the other hand, when the reproduction of the karaoke content is finished (S616: YES), the control unit 21 finishes this process.

一方、S602で否定判定をした場合に進むS618では、選曲されたカラオケコンテンツに対応する動画データの配信を要求する内容の配信要求をカラオケ配信サーバ10に送信する。ここで送信する配信要求には、選曲されたカラオケコンテンツの識別情報(例えば、楽曲番号)と動画データの配信を指定する情報とが含まれる。これに対し、カラオケ配信サーバ10は、配信要求されたカラオケコンテンツに対応するテロップデータ、及び動画データのストリームの送信を行う。なお、ここで送信されるテロップデータには、テロップ色定義情報(図2(a)参照)で示されるデフォルトの表示色が対応付けられている。   On the other hand, in S <b> 618, which proceeds when a negative determination is made in S <b> 602, a distribution request for content requesting distribution of moving image data corresponding to the selected karaoke content is transmitted to the karaoke distribution server 10. The distribution request transmitted here includes identification information (for example, music number) of the selected karaoke content and information specifying distribution of moving image data. On the other hand, the karaoke distribution server 10 transmits a stream of telop data and moving image data corresponding to the karaoke content requested to be distributed. Note that the telop data transmitted here is associated with a default display color indicated by the telop color definition information (see FIG. 2A).

次のS620では、制御部21は、カラオケ配信サーバ10から送信されたテロップデータを取得する。また、S622では、制御部21は、カラオケ配信サーバ10から動画データのストリームを受信する。そして、受信した動画データのストリームを、未再生のストリームを一時的に記憶するバッファメモリのリストに順次追加する。S624では、制御部21は、受信した動画データのストリームを再生処理部23において順次再生する。動画データから再生された背景映像は表示部24に表示され、動画データから再生された音響は音声出力部25から出力される。また、制御部21は、動画データの再生に同期して、S620で取得したテロップデータで示される歌詞テロップの画像を、このテロップデータに対応付けられているデフォルト表示色で描画して、動画データを再生した背景映像上に重ねて表示させる。次のS626では、制御部21は、カラオケコンテンツの再生を終了するか否かを判定する。カラオケコンテンツの再生を続ける場合(S626:NO)、制御部21はS622に戻る。一方、カラオケコンテンツの再生を終了する場合(S626:YES)、制御部21は本処理を終了する。   In next S620, the control unit 21 acquires the telop data transmitted from the karaoke distribution server 10. In S <b> 622, the control unit 21 receives a stream of moving image data from the karaoke distribution server 10. Then, the received moving image data stream is sequentially added to the list of the buffer memory that temporarily stores the unreproduced stream. In S624, the control unit 21 sequentially reproduces the received moving image data stream in the reproduction processing unit 23. The background image reproduced from the moving image data is displayed on the display unit 24, and the sound reproduced from the moving image data is output from the audio output unit 25. In addition, in synchronization with the reproduction of the moving image data, the control unit 21 draws the image of the lyrics telop indicated by the telop data acquired in S620 in the default display color associated with the telop data, and the moving image data Is overlaid on the played background image. In next step S626, the control unit 21 determines whether or not to end the reproduction of the karaoke content. When the reproduction of the karaoke content is continued (S626: NO), the control unit 21 returns to S622. On the other hand, when the reproduction of the karaoke content is finished (S626: YES), the control unit 21 finishes this process.

[効果]
実施形態のカラオケシステムによれば、以下の効果を奏する。
端末装置20の通信にかかる処理性能(例えば、通信回線の種別)に応じて、音響及び背景映像からなる動画データの配信と、処理負担の軽い音響データの配信とを使い分けることができる。これにより、端末装置20の処理性能に関わらず、カラオケコンテンツの要である音響の再生に支障をきたさないようにできる。
[effect]
The karaoke system of the embodiment has the following effects.
Depending on the processing performance (for example, the type of the communication line) related to the communication of the terminal device 20, it is possible to selectively use distribution of moving image data composed of sound and background video and distribution of acoustic data with a light processing load. Thereby, irrespective of the processing performance of the terminal device 20, it is possible to prevent the sound reproduction that is the key of the karaoke content from being hindered.

第1実施形態では、カラオケ配信サーバ10が音響データの配信をする際、テロップデータの表示色を、端末装置20で表示される背景画像の表示色に対して見やすい適性色に変更できる。第2実施形態では、端末装置20が、カラオケ配信サーバ10から受信したテロップデータの表示色を、音響データの再生時に表示する背景画像の表示色に対して見やすい適性色に変更できる。このようにすることで、動画データによる背景映像の代わりに端末装置20が独自に表示する背景画像に対して見やすい適性色で描画された歌詞テロップを、端末装置20が表示できる。   In the first embodiment, when the karaoke distribution server 10 distributes the acoustic data, the display color of the telop data can be changed to an appropriate color that is easy to see with respect to the display color of the background image displayed on the terminal device 20. In the second embodiment, the terminal device 20 can change the display color of the telop data received from the karaoke distribution server 10 to an appropriate color that is easy to see with respect to the display color of the background image displayed when reproducing the acoustic data. By doing in this way, the terminal device 20 can display the lyrics telop drawn by the suitable color which is easy to see with respect to the background image which the terminal device 20 displays uniquely instead of the background image by moving image data.

第1実施形態では、一旦、動画データのストリーミング配信が始まった後であっても、端末装置20において動画データの受信の進行が遅い場合、端末装置20からの切替要求に応じて、途中から音響データの配信に切替えることができる。また、音響データへの切替えに合わせて、端末装置20で表示される背景画像に対して見やすい適性色を対応付けたテロップデータを配信できる。これにより、動画データのストリーミング再生中において、再生の遅延等の支障をきたす可能性があるときに、処理負担の軽い音響データのストリーミング再生に切替えて支障を回避できる。   In the first embodiment, even after the streaming distribution of moving image data has started, if the reception of moving image data is slow in the terminal device 20, the sound is transmitted from the middle in response to a switching request from the terminal device 20. You can switch to data distribution. In addition, telop data in which suitable colors that are easy to see are associated with the background image displayed on the terminal device 20 can be distributed in accordance with the switching to the acoustic data. As a result, when there is a possibility of delaying playback or the like during streaming playback of moving image data, switching to streaming playback of acoustic data with a light processing burden can be avoided.

[特許請求の範囲に記載の構成との対応]
実施形態に記載の構成と、特許請求の範囲に記載の構成との対応は次のとおりである。
(第1実施形態)記憶部12が記憶手段(請求項1)に相当する。制御部11及び通信部13が、要求受付手段、取得手段、楽曲配信手段、歌詞配信手段、切替受付手段に相当する。制御部11が、決定手段、判断手段(請求項1)、変更手段(請求項1)に相当する。
[Correspondence with configuration described in claims]
The correspondence between the configuration described in the embodiment and the configuration described in the claims is as follows.
(First Embodiment) The storage unit 12 corresponds to storage means (claim 1). The control unit 11 and the communication unit 13 correspond to a request reception unit, an acquisition unit, a music distribution unit, a lyrics distribution unit, and a switching reception unit. The control unit 11 corresponds to determination means, determination means (Claim 1), and change means (Claim 1).

(第2実施形態)記憶部22が記憶手段(請求項8)に相当する。制御部21及び通信部27が、取得要求手段、歌詞受信手段、楽曲受信手段に相当する。制御部21が、判断手段(請求項8)、変更手段(請求項8)、再生制御手段に相当する。表示部24が表示手段に相当する。   (Second Embodiment) The storage unit 22 corresponds to storage means (claim 8). The control unit 21 and the communication unit 27 correspond to an acquisition request unit, a lyrics reception unit, and a music reception unit. The control unit 21 corresponds to determination means (Claim 8), change means (Claim 8), and reproduction control means. The display unit 24 corresponds to display means.

[変形例]
上述の実施形態では、端末装置20の通信にかかる処理性能を示す情報として、端末装置20がインターネット接続に利用する通信回線の種別を示す情報に基づいて、動画データの配信又は音響データの配信の何れか一方を決定する事例について説明した。これに限らず、例えば、カラオケ配信サーバ10と端末装置20との間の通信速度(ビットレート)や、端末装置20の処理性能を示す情報を取得して、その取得した情報に基づいて動画データの配信又は音響データの配信の何れか一方を決定してもよい。端末装置20の処理性能を示す情報としては、オペレーションシステムの種類(バージョン、名称等)や、CPUの性能(種類、クロック周波数、コア数等)といったものが例示される。
[Modification]
In the above-described embodiment, as the information indicating the processing performance related to the communication of the terminal device 20, the distribution of moving image data or the distribution of acoustic data is performed based on the information indicating the type of communication line used by the terminal device 20 for Internet connection. An example of determining either one has been described. For example, information indicating the communication speed (bit rate) between the karaoke distribution server 10 and the terminal device 20 and the processing performance of the terminal device 20 is acquired, and the video data is based on the acquired information. Either one of the distribution or the acoustic data distribution may be determined. Examples of information indicating the processing performance of the terminal device 20 include the type of operation system (version, name, etc.) and the performance of the CPU (type, clock frequency, number of cores, etc.).

10…カラオケ配信サーバ、11…制御部、12…記憶部、13…通信部、20…端末装置、21…制御部、22…記憶部、23…再生処理部、24…表示部、25…音声出力部、26…操作部、27…通信部。   DESCRIPTION OF SYMBOLS 10 ... Karaoke distribution server, 11 ... Control part, 12 ... Storage part, 13 ... Communication part, 20 ... Terminal device, 21 ... Control part, 22 ... Storage part, 23 ... Reproduction processing part, 24 ... Display part, 25 ... Audio | voice Output unit, 26 ... operation unit, 27 ... communication unit.

Claims (9)

カラオケコンテンツの音響を表す音響データと、カラオケコンテンツの音響及び映像を含む動画データと、カラオケコンテンツの歌詞を表す文字情報であって、所定の表示色が対応付けられた文字情報とを、楽曲ごとに記憶する記憶手段と、
端末装置からカラオケコンテンツの配信要求を受信する要求受付手段と、
前記要求受付手段により受信された配信要求について、前記端末装置の通信にかかる処理性能を示す情報を取得する取得手段と、
前記取得手段により取得された処理性能の情報に基づいて、前記動画データ又は前記音響データの何れか一方のデータの配信を決定する決定手段と、
前記決定手段によって前記音響データの配信が決定された場合、前記端末装置において前記音響データが再生されるときに表示される背景画像の表示色の特徴を示す背景色情報に基づき、前記記憶手段に記憶されている文字情報に対応付けられている所定の表示色と、前記背景画像の表示色の特徴とが類似しているかを判断する判断手段と、
前記判断手段によって、前記文字情報の所定の表示色と前記背景色情報で示される表示色の特徴とが類似していると判断された場合、前記文字情報の表示色を前記背景色情報で示される表示色と異なる色に変更する変更手段と、
前記配信要求されたカラオケコンテンツに対応する文字情報であって、前記変更手段により前記文字情報の表示色が変更されたときには、変更後の表示色の文字情報を前記端末装置に配信し、前記変更手段により前記文字情報の表示色が変更されていないときには、前記所定の表示色が対応付けられている文字情報を前記端末装置に配信する歌詞配信手段と、
を備えることを特徴とするカラオケ配信サーバ。
Sound data representing the sound of karaoke content, video data including sound and video of karaoke content, character information representing lyrics of karaoke content, and character information associated with a predetermined display color, for each song Storage means for storing in,
Request accepting means for receiving a distribution request for karaoke content from the terminal device;
An acquisition unit that acquires information indicating processing performance related to communication of the terminal device with respect to the distribution request received by the request reception unit;
Determining means for determining distribution of either the moving image data or the acoustic data based on the processing performance information acquired by the acquiring means;
When distribution of the acoustic data is determined by the determining unit, the storage unit stores the acoustic data based on background color information indicating characteristics of a display color of a background image displayed when the acoustic data is reproduced on the terminal device. Determining means for determining whether a predetermined display color associated with stored character information is similar to a display color feature of the background image;
When the determination means determines that the predetermined display color of the character information is similar to the display color feature indicated by the background color information, the display color of the character information is indicated by the background color information. Changing means for changing to a different color from the displayed color;
The character information corresponding to the karaoke content requested to be distributed, and when the display color of the character information is changed by the changing means, the character information of the changed display color is distributed to the terminal device, and the change When the display color of the character information is not changed by the means, the lyrics distribution means for distributing the character information associated with the predetermined display color to the terminal device;
A karaoke distribution server comprising:
請求項1に記載のカラオケ配信サーバにおいて、
前記歌詞配信手段は、前記決定手段によって前記動画データの配信が決定された場合、前記所定の表示色が対応付けられている前記文字情報を前記端末装置に配信する一方、前記決定手段によって前記音響データの配信が決定された場合、前記変更手段により前記文字情報の表示色が変更されたときには、変更後の表示色の前記文字情報を前記端末装置に配信し、前記変更手段により前記文字情報の表示色が変更されていないときには、前記所定の表示色が対応付けられている前記文字情報を前記端末装置に配信すること、
を特徴とするカラオケ配信サーバ。
The karaoke distribution server according to claim 1,
The lyric distribution unit distributes the character information associated with the predetermined display color to the terminal device when the determination unit determines the distribution of the moving image data, while the determination unit determines the sound information. When the distribution of data is determined, when the display color of the character information is changed by the changing unit, the character information of the display color after the change is distributed to the terminal device, and the character information is updated by the changing unit. When the display color is not changed, delivering the character information associated with the predetermined display color to the terminal device;
Karaoke distribution server characterized by
請求項1又は請求項2に記載のカラオケ配信サーバにおいて、
前記決定手段によって前記動画データの配信が決定された場合、前記配信要求されたカラオケコンテンツに対応する動画データを前記端末装置にストリーミング配信する一方、前記決定手段によって前記音響データの配信が決定された場合、前記配信要求されたカラオケコンテンツに対応する音響データを前記端末装置にストリーミング配信する楽曲配信手段を備えること、
を特徴とするカラオケ配信サーバ。
In the karaoke distribution server according to claim 1 or 2,
When distribution of the moving image data is determined by the determining unit, streaming data of the moving image data corresponding to the requested karaoke content is streamed to the terminal device, while distribution of the acoustic data is determined by the determining unit. A music distribution means for streaming distribution of acoustic data corresponding to the distribution-requested karaoke content to the terminal device;
Karaoke distribution server characterized by
請求項3に記載のカラオケ配信サーバにおいて、
前記楽曲配信手段による動画データのストリーミング配信中に、配信先の端末装置から、音響データの配信に切替えるための切替要求を受信する切替受付手段を備え、
前記切替受付手段によって前記切替要求を受信した場合、
前記判断手段は、前記切替要求に該当するカラオケコンテンツに対応する前記文字情報の所定の表示色と、前記背景色情報で示される表示色の特徴とが類似するかを判断し、
前記変更手段は、前記判断手段によって、前記文字情報の所定の表示色と前記背景色情報で示される表示色の特徴とが類似していると判断された場合、前記文字情報の表示色を前記背景色情報で示される表示色と異なる色に変更し、
前記楽曲配信手段は、前記切替要求に該当する動画データの配信に代えて、前記切替要求に該当する音響データを配信途中の前記動画データの続きからストリーミング配信し、
前記歌詞配信手段は、前記変更手段により前記文字情報の表示色が変更されたときには、変更後の表示色の文字情報を前記端末装置に配信し、前記変更手段により前記文字情報の表示色が変更されていないときには、前記所定の表示色が対応付けられている文字情報を前記端末装置に配信すること、
を特徴とするカラオケ配信サーバ。
The karaoke distribution server according to claim 3,
During the streaming distribution of the video data by the music distribution means, the switching reception means for receiving a switching request for switching to the distribution of acoustic data from the terminal device of the distribution destination,
When the switching request is received by the switching receiving means,
The determination means determines whether a predetermined display color of the character information corresponding to the karaoke content corresponding to the switching request is similar to a display color feature indicated by the background color information,
When the determining unit determines that the predetermined display color of the character information is similar to the characteristic of the display color indicated by the background color information, the changing unit changes the display color of the character information. Change to a color different from the display color indicated in the background color information,
The music distribution means, instead of distributing the moving image data corresponding to the switching request, streaming the acoustic data corresponding to the switching request from the continuation of the moving image data being distributed,
The lyrics distribution means distributes the character information of the display color after the change to the terminal device when the display color of the character information is changed by the changing means, and the display color of the character information is changed by the changing means. If not, delivering the character information associated with the predetermined display color to the terminal device;
Karaoke distribution server characterized by
請求項1ないし請求項4の何れか1項に記載のカラオケ配信サーバにおいて、
前記取得手段は、前記処理性能を示す情報として、カラオケコンテンツの配信に用いられる通信回線の性能を示す情報を取得すること、
を特徴とするカラオケ配信サーバ。
In the karaoke delivery server according to any one of claims 1 to 4,
The acquisition means acquires information indicating the performance of a communication line used for distributing karaoke content as information indicating the processing performance;
Karaoke distribution server characterized by
請求項1ないし請求項5の何れか1項に記載のカラオケ配信サーバにおいて、
前記記憶手段には、前記端末装置において前記音響データが再生されるときに表示される背景画像について、前記背景画像の表示色の特徴を示す背景色情報と、前記背景色情報で示される表示色の特徴に対して適性がある適性表示色を示す文字色情報とを定義する色定義情報が記憶されており、
前記判断手段は、前記文字情報の所定の表示色と、前記色定義情報の背景色情報で示される表示色の特徴とが類似しているかを判断し、
前記変更手段は、前記判断手段によって、前記文字情報の所定の表示色と前記背景色情報で示される表示色の特徴とが類似していると判断された場合、前記文字情報の表示色を、前記色定義情報で示される適性表示色に変更すること、
を特徴とするカラオケ配信サーバ。
In the karaoke delivery server according to any one of claims 1 to 5,
For the background image displayed when the acoustic data is played back in the terminal device, the storage means includes background color information indicating characteristics of the display color of the background image, and a display color indicated by the background color information. Color definition information that defines character color information indicating an appropriate display color that is appropriate for the characteristics of
The determination means determines whether the predetermined display color of the character information is similar to the display color feature indicated by the background color information of the color definition information;
When the determining unit determines that the predetermined display color of the character information is similar to the display color feature indicated by the background color information, the changing unit changes the display color of the character information, Changing to an appropriate display color indicated by the color definition information;
Karaoke distribution server characterized by
請求項1ないし請求項6の何れか1項に記載のカラオケ配信サーバにおいて、
前記記憶手段に記憶されている楽曲ごとの前記文字情報には、楽曲ごとの前記動画データの映像に対応して定められた表示色がそれぞれ対応付けられており、
前記判断手段は、前記配信要求されたカラオケコンテンツの楽曲に対応する前記文字情報に対して定められている楽曲ごとの表示色と、前記背景色情報で示される表示色の特徴とが類似しているかを判断すること、
を特徴とするカラオケ配信サーバ。
The karaoke distribution server according to any one of claims 1 to 6,
The character information for each piece of music stored in the storage means is associated with a display color determined corresponding to the video of the video data for each piece of music,
The determination means is similar in the display color for each piece of music defined for the character information corresponding to the music of the karaoke content requested for distribution and the characteristics of the display color indicated by the background color information. To determine whether
Karaoke distribution server characterized by
カラオケコンテンツの再生時に表示される背景画像と、前記背景画像の表示色の特徴を示す背景色情報とを記憶する記憶手段と、
通信にかかる処理性能を示す情報に基づいて、カラオケコンテンツの音響及び映像を含む動画データ、又は、カラオケコンテンツの音響を表す音響データの何れか一方のデータの取得要求を、カラオケ配信サーバに対して行う取得要求手段と、
前記取得要求手段により取得要求されたカラオケコンテンツの歌詞を表す文字情報であって、所定の表示色が対応付けられている文字情報を、前記カラオケ配信サーバから受信する歌詞受信手段と、
前記取得要求手段により前記音響データの取得要求が行われた場合、前記取得要求されたカラオケコンテンツに対応する音響データを、前記カラオケ配信サーバからストリーミング受信する楽曲受信手段と、
前記取得要求手段により前記音響データの取得要求が行われた場合、前記歌詞受信手段により受信された文字情報に対応付けられている所定の表示色と、前記記憶手段に記憶されている背景色情報で示される表示色の特徴とが類似しているかを判断する判断手段と、
前記判断手段により、前記文字情報の所定の表示色と前記背景色情報で示される表示色の特徴とが類似していると判断された場合、前記文字情報の表示色を前記背景色情報で示される表示色と異なる色に変更する変更手段と、
前記楽曲受信手段により受信された音響データをストリーミング再生し、前記音響データの再生に合わせて、前記文字情報で表される歌詞テロップを、前記変更手段により表示色が変更された場合は変更後の表示色を用いて、前記変更手段により表示色が変更されていない場合は前記所定の表示色を用いて、前記記憶手段に記憶されている背景画像と共に表示手段に表示させる再生制御手段と、
を備えることを特徴とする端末装置。
Storage means for storing a background image displayed during playback of karaoke content, and background color information indicating characteristics of the display color of the background image;
Based on the information indicating the processing performance related to communication, an acquisition request for either data of moving image data including sound and video of karaoke content or sound data representing sound of karaoke content is sent to the karaoke distribution server. Acquisition request means to perform;
Text information representing the lyrics of the karaoke content requested to be acquired by the acquisition request means, and text information associated with a predetermined display color from the karaoke distribution server;
When an acquisition request for the acoustic data is made by the acquisition request means, music reception means for streaming receiving acoustic data corresponding to the karaoke content requested for acquisition from the karaoke distribution server;
When an acquisition request for the acoustic data is made by the acquisition request unit, a predetermined display color associated with the character information received by the lyrics reception unit and background color information stored in the storage unit Determining means for determining whether the display color feature indicated by is similar,
If the determination means determines that the predetermined display color of the character information is similar to the display color feature indicated by the background color information, the display color of the character information is indicated by the background color information. Changing means for changing to a different color from the displayed color;
Streaming playback of the acoustic data received by the music receiving means, and when the display color is changed by the changing means, the lyrics telop represented by the character information is changed in accordance with the playback of the acoustic data. Reproduction control means for displaying on the display means together with the background image stored in the storage means using the predetermined display color when the display color is not changed by the changing means using the display color;
A terminal device comprising:
通信にかかる処理性能を示す情報に基づいて、カラオケコンテンツの音響及び映像を含む動画データ、又は、カラオケコンテンツの音響を表す音響データの何れか一方のデータの取得要求を、カラオケ配信サーバに対して行う取得要求手順と、
前記取得要求手順において取得要求されたカラオケコンテンツの歌詞を表す文字情報であって、所定の表示色が対応付けられている文字情報を、前記カラオケ配信サーバから受信する歌詞受信手順と、
前記取得要求手順において前記音響データの取得要求が行われた場合、前記取得要求されたカラオケコンテンツに対応する音響データを、前記カラオケ配信サーバからストリーミング受信する楽曲受信手順と、
前記取得要求手順において前記音響データの取得要求が行われた場合、前記歌詞受信手順により受信された文字情報に対応付けられている所定の表示色と、カラオケコンテンツの再生時に表示される所定の背景画像の表示色の特徴とが類似しているかを判断する判断手順と、
前記判断手順において前記文字情報の所定の表示色と前記背景画像の表示色の特徴とが類似していると判断された場合、前記文字情報の表示色を前記背景色情報で示される表示色と異なる色に変更する変更手順と、
前記楽曲受信手順において受信された音響データをストリーミング再生し、前記音響データの再生に合わせて、前記文字情報で表される歌詞テロップを、前記変更手順において表示色が変更された場合は変更後の表示色を用いて、前記変更手順において表示色が変更されていない場合は前記所定の表示色を用いて、前記背景画像と共に表示手段に表示させる再生制御手順と、
をコンピュータに実行させるプログラム。
Based on the information indicating the processing performance related to communication, an acquisition request for either data of moving image data including sound and video of karaoke content or sound data representing sound of karaoke content is sent to the karaoke distribution server. Acquisition request procedures to be performed;
Text information representing the lyrics of the karaoke content requested for acquisition in the acquisition request procedure, and receiving the text information associated with a predetermined display color from the karaoke distribution server;
When an acquisition request for the acoustic data is made in the acquisition request procedure, the music reception procedure for streaming receiving acoustic data corresponding to the karaoke content requested for acquisition from the karaoke distribution server;
When an acquisition request for the acoustic data is made in the acquisition request procedure, a predetermined display color associated with the character information received by the lyrics reception procedure and a predetermined background displayed when the karaoke content is reproduced A determination procedure for determining whether the display color characteristics of the image are similar,
When it is determined in the determination procedure that the predetermined display color of the character information is similar to the characteristics of the display color of the background image, the display color of the character information is the display color indicated by the background color information Change procedure to change to a different color,
Streaming playback of the acoustic data received in the music reception procedure, and in response to the playback of the acoustic data, the lyrics telop represented by the character information is changed if the display color is changed in the change procedure Using a display color, if the display color is not changed in the change procedure, using the predetermined display color, a reproduction control procedure for displaying on the display means together with the background image,
A program that causes a computer to execute.
JP2013204486A 2013-09-30 2013-09-30 Karaoke distribution server, terminal device, program Active JP6065800B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013204486A JP6065800B2 (en) 2013-09-30 2013-09-30 Karaoke distribution server, terminal device, program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013204486A JP6065800B2 (en) 2013-09-30 2013-09-30 Karaoke distribution server, terminal device, program

Publications (2)

Publication Number Publication Date
JP2015069084A true JP2015069084A (en) 2015-04-13
JP6065800B2 JP6065800B2 (en) 2017-01-25

Family

ID=52835776

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013204486A Active JP6065800B2 (en) 2013-09-30 2013-09-30 Karaoke distribution server, terminal device, program

Country Status (1)

Country Link
JP (1) JP6065800B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018120022A (en) * 2017-01-23 2018-08-02 株式会社ジャパンディスプレイ Display

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03239290A (en) * 1990-02-17 1991-10-24 Brother Ind Ltd Video plotting device
JPH10210447A (en) * 1997-01-27 1998-08-07 Xing:Kk Data-centralized control type audio/dynamic image reproduction system
JP2007052362A (en) * 2005-08-19 2007-03-01 Xing Inc Communication karaoke machine
JP2009009158A (en) * 2008-09-22 2009-01-15 National Institute Of Advanced Industrial & Technology Karaoke system, music performance communication device, and communication method in music performance communication device
JP2012053206A (en) * 2010-08-31 2012-03-15 Brother Ind Ltd Karaoke network system and central management device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03239290A (en) * 1990-02-17 1991-10-24 Brother Ind Ltd Video plotting device
JPH10210447A (en) * 1997-01-27 1998-08-07 Xing:Kk Data-centralized control type audio/dynamic image reproduction system
JP2007052362A (en) * 2005-08-19 2007-03-01 Xing Inc Communication karaoke machine
JP2009009158A (en) * 2008-09-22 2009-01-15 National Institute Of Advanced Industrial & Technology Karaoke system, music performance communication device, and communication method in music performance communication device
JP2012053206A (en) * 2010-08-31 2012-03-15 Brother Ind Ltd Karaoke network system and central management device

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018120022A (en) * 2017-01-23 2018-08-02 株式会社ジャパンディスプレイ Display

Also Published As

Publication number Publication date
JP6065800B2 (en) 2017-01-25

Similar Documents

Publication Publication Date Title
US8201262B2 (en) Contents distribution system, contents distribution method, terminal apparatus, and recording medium on which program thereof is recorded
KR101771437B1 (en) Method for determining device according to contents attribute and providing contents to the device and electronic device using the same
TW201316752A (en) Video playing method and apparatus
TW200822749A (en) Display apparatus
JP2014007603A (en) Content reproducing device, content reproducing system and content reproducing method
JP4983233B2 (en) Content playback system
US11032621B2 (en) Content distribution server, terminal device, content distribution system, content distribution method, content play method, content distribution program, and content player program
JP6065800B2 (en) Karaoke distribution server, terminal device, program
JP6478162B2 (en) Mobile terminal device and content distribution system
JP4263873B2 (en) Server apparatus, client apparatus, distribution system, distribution program, and client program
JP6562302B2 (en) Karaoke system, karaoke apparatus, moving image display method, and moving image display control program
JP2009288891A (en) Content and commercial message distribution system, distribution server and reception terminal
JP2010041246A (en) Moving picture reproducer, server device, moving picture reproduction method, service method, and program
JP2007135070A (en) Content data distribution system
US11050579B2 (en) Distribution destination specifying device and distribution destination specifying method
JP2004134880A (en) Data distribution system, data distribution apparatus, and data distribution method
JP6328489B2 (en) Music reproduction system based on station information, music reproduction apparatus, and station information transfer method
JP2010231072A (en) Karaoke device
JP5309412B2 (en) Information display control device and program thereof
JP6579482B2 (en) Karaoke system, moving image display method, and moving image display control program
JP2009110399A (en) Communication system and communication terminal
KR100905657B1 (en) System and method for producing media, and server applied to the same
JP6579483B2 (en) Karaoke system, moving image display method, and moving image display control program
JP4085791B2 (en) Information communication system, distribution host device and terminal device
JP5355251B2 (en) Karaoke background video display system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150226

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160428

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160524

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160721

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161129

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161212

R150 Certificate of patent or registration of utility model

Ref document number: 6065800

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150