JP6913783B1 - Karaoke system - Google Patents

Karaoke system Download PDF

Info

Publication number
JP6913783B1
JP6913783B1 JP2020051738A JP2020051738A JP6913783B1 JP 6913783 B1 JP6913783 B1 JP 6913783B1 JP 2020051738 A JP2020051738 A JP 2020051738A JP 2020051738 A JP2020051738 A JP 2020051738A JP 6913783 B1 JP6913783 B1 JP 6913783B1
Authority
JP
Japan
Prior art keywords
user
karaoke
timing data
music
identification information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020051738A
Other languages
Japanese (ja)
Other versions
JP2021149064A (en
Inventor
紀久 伊藤
紀久 伊藤
裕一 村井
裕一 村井
光則 菅野
光則 菅野
永田 明峰
明峰 永田
理恵 執行
理恵 執行
天都 水口
天都 水口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Daiichikosho Co Ltd
Original Assignee
Daiichikosho Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daiichikosho Co Ltd filed Critical Daiichikosho Co Ltd
Priority to JP2020051738A priority Critical patent/JP6913783B1/en
Application granted granted Critical
Publication of JP6913783B1 publication Critical patent/JP6913783B1/en
Publication of JP2021149064A publication Critical patent/JP2021149064A/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Reverberation, Karaoke And Other Acoustics (AREA)

Abstract

【課題】利用者毎に適したタイミングで歌詞テロップの表示色を変更することが可能なカラオケシステムを提供する。【解決手段】カラオケ装置が、複数のタイミングデータを記憶するデータ記憶部、利用者識別情報を取得する取得部、所定のタイミングデータが記憶されている場合、所定のタイミングデータに基づいて歌詞テロップの表示色を変更し、所定のタイミングデータが記憶されていない場合、選択した一のタイミングデータに基づいて歌詞テロップの表示色を変更する表示制御部、カラオケ歌唱を評価する評価部、集計情報をサーバ装置に送信する送信処理部を備え、サーバ装置が、集計情報を記憶させる記憶処理部、集計情報が所定条件を満たした場合、所定のタイミングデータを決定しカラオケ装置に送信する決定部を備えるカラオケシステム。【選択図】図6PROBLEM TO BE SOLVED: To provide a karaoke system capable of changing a display color of a lyrics telop at a timing suitable for each user. SOLUTION: When a karaoke device stores a data storage unit for storing a plurality of timing data, an acquisition unit for acquiring user identification information, and predetermined timing data, a lyrics telop is performed based on the predetermined timing data. A display control unit that changes the display color and changes the display color of the lyrics telop based on the selected timing data when the specified timing data is not stored, an evaluation unit that evaluates karaoke singing, and a server for aggregated information. Karaoke including a transmission processing unit for transmitting to the device, a storage processing unit for storing the aggregated information, and a determination unit for determining predetermined timing data and transmitting the aggregated information to the karaoke apparatus when the aggregated information satisfies a predetermined condition. system. [Selection diagram] Fig. 6

Description

本発明はカラオケシステムに関する。 The present invention relates to a karaoke system.

カラオケ装置は、カラオケ演奏する楽曲の歌詞テロップを表示装置に表示することができる。また、カラオケ装置は、楽曲のカラオケ演奏の進行に伴って歌詞テロップの表示色を変更することができる。歌詞テロップの表示色を変更することにより、利用者は歌唱すべきタイミングを把握し易くなる。すなわち、利用者は歌詞テロップを参照しながらカラオケ歌唱を行い易くなる。 The karaoke device can display the lyrics telop of the music to be played in karaoke on the display device. In addition, the karaoke device can change the display color of the lyrics telop as the karaoke performance of the music progresses. By changing the display color of the lyrics telop, the user can easily grasp the timing to sing. That is, the user can easily sing karaoke while referring to the lyrics telop.

ここで、特許文献1には、デジタルテレビに歌詞を表示させる際、キャリブレーション処理で記憶された遅延時間に基づいて、色替えのタイミングを早める技術が開示されている。 Here, Patent Document 1 discloses a technique for accelerating the timing of color change based on the delay time stored in the calibration process when displaying lyrics on a digital television.

特開2013−029744号公報Japanese Unexamined Patent Publication No. 2013-029744

一般に、カラオケ歌唱を行い易いと感じる歌詞テロップの表示色を変更するタイミングは、利用者によって異なる。 In general, the timing of changing the display color of the lyrics telop, which makes it easy to sing karaoke, differs depending on the user.

本発明の目的は、利用者毎に適したタイミングで歌詞テロップの表示色を変更することが可能なカラオケシステムを提供することにある。 An object of the present invention is to provide a karaoke system capable of changing the display color of a lyrics telop at a timing suitable for each user.

上記目的を達成するための一の発明は、カラオケ装置及びサーバ装置が通信可能に接続されたカラオケシステムであって、前記カラオケ装置は、カラオケ演奏の進行に伴って歌詞テロップの表示色を変えるタイミングを示すタイミングデータについて、当該タイミングが異なる複数のタイミングデータを記憶するデータ記憶部と、カラオケ歌唱を行う利用者の利用者識別情報を取得する取得部と、前記利用者の利用者識別情報に紐付けられた所定のタイミングデータが記憶されている場合、当該所定のタイミングデータに基づいて歌詞テロップの表示色を変更し、当該所定のタイミングデータが記憶されていない場合、前記データ記憶部に記憶された複数のタイミングデータの中から選択した一のタイミングデータに基づいて歌詞テロップの表示色を変更する表示制御部と、前記利用者が行うカラオケ歌唱を評価する評価部と、前記所定のタイミングデータが記憶されていない場合、前記一のタイミングデータ、前記利用者が当該一のタイミングデータに基づいて表示色が変更された歌詞テロップを参照しながら行ったカラオケ歌唱の評価、及び当該利用者の利用者識別情報を紐付け、集計情報として前記サーバ装置に送信する送信処理部と、を備え、前記サーバ装置は、前記カラオケ装置から受信した集計情報を利用者毎に記憶させる記憶処理部と、前記利用者の利用者識別情報を含む集計情報が所定条件を満たした場合、当該集計情報に基づいて前記所定のタイミングデータを決定し、当該所定のタイミングデータを当該利用者の利用者識別情報と紐付けて前記カラオケ装置に送信する決定部と、を備えるカラオケシステムである。
本発明の他の特徴については、後述する明細書及び図面の記載により明らかにする。
One invention for achieving the above object is a karaoke system in which a karaoke device and a server device are communicably connected, and the karaoke device changes the display color of the lyrics telop as the karaoke performance progresses. Regarding the timing data indicating, the data storage unit that stores a plurality of timing data having different timings, the acquisition unit that acquires the user identification information of the user who sings karaoke, and the user identification information of the user are linked. When the attached predetermined timing data is stored, the display color of the lyrics telop is changed based on the predetermined timing data, and when the predetermined timing data is not stored, it is stored in the data storage unit. A display control unit that changes the display color of the lyrics telop based on one timing data selected from a plurality of timing data, an evaluation unit that evaluates the karaoke singing performed by the user, and the predetermined timing data. If it is not stored, the one timing data, the evaluation of the karaoke singing performed by the user with reference to the lyrics telop whose display color is changed based on the one timing data, and the user of the user. The server device includes a transmission processing unit that associates identification information and transmits the aggregated information to the server device, and the server device includes a storage processing unit that stores aggregated information received from the karaoke device for each user and the use. When the aggregated information including the user identification information of the user satisfies the predetermined condition, the predetermined timing data is determined based on the aggregated information, and the predetermined timing data is associated with the user identification information of the user. This is a karaoke system including a determination unit for transmitting data to the karaoke device.
Other features of the present invention will be clarified by the description of the description and drawings described later.

本発明によれば、利用者毎に適したタイミングで歌詞テロップの表示色を変更することができる。 According to the present invention, the display color of the lyrics telop can be changed at a timing suitable for each user.

実施形態に係るカラオケシステムの概略を示す図である。It is a figure which shows the outline of the karaoke system which concerns on embodiment. 実施形態に係るカラオケ装置を示す図である。It is a figure which shows the karaoke apparatus which concerns on embodiment. 実施形態に係るカラオケ本体を示す図である。It is a figure which shows the karaoke main body which concerns on embodiment. 実施形態に係るサーバ装置を示す図である。It is a figure which shows the server apparatus which concerns on embodiment. 実施形態に係るサーバ装置に記憶されている集計情報を示す図である。It is a figure which shows the aggregated information stored in the server apparatus which concerns on embodiment. 実施形態に係るサーバ装置に記憶されている集計情報を示す図である。It is a figure which shows the aggregated information stored in the server apparatus which concerns on embodiment. 実施形態に係るカラオケシステムの処理を示すフローチャートである。It is a flowchart which shows the process of the karaoke system which concerns on embodiment. 変形例1に係るサーバ装置に記憶されている集計情報を示す図である。It is a figure which shows the aggregated information stored in the server apparatus which concerns on modification 1. FIG. 変形例1に係るサーバ装置に記憶されている集計情報を示す図である。It is a figure which shows the aggregated information stored in the server apparatus which concerns on modification 1. FIG. 変形例2に係るカラオケ本体を示す図である。It is a figure which shows the karaoke main body which concerns on the modification 2.

図1〜図6を参照して、実施形態に係るカラオケシステムについて説明する。 The karaoke system according to the embodiment will be described with reference to FIGS. 1 to 6.

==カラオケシステム==
図1に示すように、本実施形態に係るカラオケシステム1は、サーバ装置S及びカラオケ装置Kを備える。サーバ装置S及びカラオケ装置Kは、ネットワークNを介して通信可能に接続されている。ネットワークNは、たとえば公衆電話回線網やインターネット回線等の伝送路である。
== Karaoke system ==
As shown in FIG. 1, the karaoke system 1 according to the present embodiment includes a server device S and a karaoke device K. The server device S and the karaoke device K are communicably connected via the network N. The network N is, for example, a transmission line such as a public telephone line network or an Internet line.

==カラオケ装置==
カラオケ装置Kは、楽曲のカラオケ演奏、及び利用者がカラオケ歌唱を行うための装置である。図2に示すように、カラオケ装置Kは、カラオケ本体10、スピーカ20、表示装置30、マイク40、及びリモコン装置50を備える。
== Karaoke device ==
The karaoke device K is a device for performing karaoke of music and for the user to sing karaoke. As shown in FIG. 2, the karaoke device K includes a karaoke body 10, a speaker 20, a display device 30, a microphone 40, and a remote control device 50.

カラオケ本体10は、選曲された楽曲の演奏制御、歌詞テロップや背景映像の表示制御、マイク40を通じて入力された音声信号の処理といった、カラオケ演奏やカラオケ歌唱に関する各種の制御を行う。スピーカ20は、カラオケ本体10からの放音信号に基づいて放音するための構成である。表示装置30は、カラオケ本体10からの信号に基づいて映像や画像を画面に表示するための構成である。マイク40は、利用者の歌唱音声をアナログの音声信号に変換してカラオケ本体10に入力するための構成である。リモコン装置50は、カラオケ本体10に対する各種操作をおこなうための装置である。 The karaoke main body 10 performs various controls related to karaoke performance and karaoke singing, such as performance control of selected songs, display control of lyrics telops and background images, and processing of audio signals input through a microphone 40. The speaker 20 is configured to emit sound based on the sound emitted signal from the karaoke main body 10. The display device 30 is configured to display an image or an image on the screen based on the signal from the karaoke main body 10. The microphone 40 is configured to convert the user's singing voice into an analog voice signal and input it to the karaoke main body 10. The remote control device 50 is a device for performing various operations on the karaoke main body 10.

図3に示すように、カラオケ本体10は、記憶手段10a、通信手段10b、入力手段10c、及び制御手段10dを備える。各構成はインターフェース(図示なし)を介してバスBに接続されている。 As shown in FIG. 3, the karaoke body 10 includes a storage means 10a, a communication means 10b, an input means 10c, and a control means 10d. Each configuration is connected to bus B via an interface (not shown).

[記憶手段]
記憶手段10aは、各種のデータを記憶する大容量の記憶装置である。記憶手段10aは楽曲データを記憶する。
[Memory means]
The storage means 10a is a large-capacity storage device that stores various types of data. The storage means 10a stores music data.

楽曲データは、個々の楽曲を特定するための楽曲識別情報が付与されている。楽曲識別情報は、楽曲を識別するための楽曲ID等、各楽曲に固有の情報である。楽曲データは、伴奏データ、リファレンスデータ、歌詞テロップデータ、背景映像データ、属性情報等を含む。 Music identification information for identifying individual music is added to the music data. The music identification information is information unique to each music, such as a music ID for identifying the music. The music data includes accompaniment data, reference data, lyrics telop data, background video data, attribute information, and the like.

伴奏データは、カラオケ演奏音の元となるデータである。リファレンスデータは、利用者によるカラオケ歌唱を評価するためのデータである。歌詞テロップデータは、各楽曲に対応する歌詞テロップを表示装置30等に表示させるためのデータである。背景映像データは、カラオケ演奏時に背景映像を表示装置30等に表示させるためのデータである。属性情報は、楽曲名、歌手名等の楽曲に関する情報を示すデータである。 The accompaniment data is the data that is the source of the karaoke performance sound. The reference data is data for evaluating the karaoke singing by the user. The lyrics telop data is data for displaying the lyrics telop corresponding to each song on the display device 30 or the like. The background video data is data for displaying the background video on the display device 30 or the like during a karaoke performance. The attribute information is data indicating information about the music such as a music name and a singer name.

また、本実施形態において、記憶手段10aの記憶領域の一部は、データ記憶部100として機能する。 Further, in the present embodiment, a part of the storage area of the storage means 10a functions as a data storage unit 100.

(データ記憶部)
データ記憶部100は、タイミングデータを記憶する。タイミングデータは、カラオケ演奏の進行に伴って歌詞テロップの表示色を変えるタイミングを示すデータである。なお、歌詞テロップの表示色を変えるタイミングは、カラオケ演奏に合わせてカラオケ歌唱をすべきタイミングよりも僅かに早くなるよう設定される。
(Data storage)
The data storage unit 100 stores timing data. The timing data is data indicating the timing of changing the display color of the lyrics telop as the karaoke performance progresses. The timing for changing the display color of the lyrics telop is set to be slightly earlier than the timing for singing karaoke in time with the karaoke performance.

データ記憶部100は、タイミングが異なる複数のタイミングデータを記憶する。以下の説明では、データ記憶部100が、30msec、60msec、90msec、120msec、150msec、180msec、210msec、240msecの8種類のタイミングデータを記憶しているとする。なお、タイミングデータの数(8種類)や、タイミングデータ間の差(30msec毎)はこの例に限られない。 The data storage unit 100 stores a plurality of timing data having different timings. In the following description, it is assumed that the data storage unit 100 stores eight types of timing data of 30 msec, 60 msec, 90 msec, 120 msec, 150 msec, 180 msec, 210 msec, and 240 msec. The number of timing data (8 types) and the difference between timing data (every 30 msec) are not limited to this example.

[通信手段・入力手段]
通信手段10bは、サーバ装置Sとの通信を行うためのインターフェースを提供する。入力手段10cは、利用者が各種の指示入力を行うための構成である。入力手段10cは、カラオケ本体10に設けられたボタン等である。或いは、リモコン装置50が入力手段10cとして機能してもよい。
[Communication means / input means]
The communication means 10b provides an interface for communicating with the server device S. The input means 10c is configured for the user to input various instructions. The input means 10c is a button or the like provided on the karaoke body 10. Alternatively, the remote control device 50 may function as the input means 10c.

[制御手段]
制御手段10dは、カラオケ装置Kにおける各種の制御を行う。制御手段10dは、CPUおよびメモリ(いずれも図示無し)を備える。CPUは、メモリに記憶されたプログラムを実行することにより各種の機能を実現する。
[Control means]
The control means 10d performs various controls on the karaoke device K. The control means 10d includes a CPU and a memory (neither of which is shown). The CPU realizes various functions by executing a program stored in the memory.

本実施形態においてはCPUがメモリに記憶されるプログラムを実行することにより、制御手段10dは、取得部200、表示制御部300、評価部400、及び送信処理部500として機能する。 In the present embodiment, the control means 10d functions as an acquisition unit 200, a display control unit 300, an evaluation unit 400, and a transmission processing unit 500 by executing a program stored in the memory by the CPU.

(取得部)
取得部200は、カラオケ歌唱を行う利用者の利用者識別情報を取得する。利用者識別情報は、利用者を識別するための利用者ID等、各利用者に固有の情報である。
(Acquisition department)
The acquisition unit 200 acquires user identification information of a user who sings karaoke. The user identification information is information unique to each user, such as a user ID for identifying the user.

たとえば、利用者Uがカラオケ装置Kを利用するとする。この場合、利用者Uは、リモコン装置50を介して、自己の利用者ID及びパスワードを入力する。カラオケ装置Kは、入力された利用者ID及びパスワードをログイン要求としてサーバ装置Sに送信する。サーバ装置Sは、カラオケ装置Kから受信した利用者Uのログイン要求に基づいて、利用者の利用者IDを記憶手段60(後述)に記憶させることにより、カラオケシステム1に対する利用者Uのログインを完了させる。 For example, suppose user U uses the karaoke device K. In this case, the user U inputs his / her own user ID and password via the remote controller device 50. The karaoke device K transmits the input user ID and password to the server device S as a login request. The server device S logs in the user U to the karaoke system 1 by storing the user ID of the user in the storage means 60 (described later) based on the login request of the user U received from the karaoke device K. Complete.

その後、利用者Uがリモコン装置50を介して楽曲Xを選曲したとする。この場合、カラオケ装置Kは、楽曲Xの楽曲ID及び選曲した利用者Uの利用者IDを予約待ち行列に登録することで楽曲Xの予約を行う。 After that, it is assumed that the user U selects the music X via the remote controller 50. In this case, the karaoke device K reserves the music X by registering the music ID of the music X and the user ID of the selected user U in the reservation queue.

楽曲Xの演奏順となった場合、カラオケ装置Kは、楽曲Xの楽曲IDに基づいて記憶手段10aから楽曲Xの楽曲データを読み出し、楽曲データに含まれる伴奏データに基づいてカラオケ演奏を開始する。 When the performance order of the music X is reached, the karaoke device K reads the music data of the music X from the storage means 10a based on the music ID of the music X, and starts the karaoke performance based on the accompaniment data included in the music data. ..

この際、取得部200は、予約待ち行列から楽曲Xのカラオケ歌唱を行う利用者Uの利用者IDを取得する。 At this time, the acquisition unit 200 acquires the user ID of the user U who sings the karaoke of the music X from the reservation queue.

(表示制御部)
表示制御部300は、カラオケ装置Kにおける各種表示制御を行う。
(Display control unit)
The display control unit 300 performs various display controls on the karaoke device K.

本実施形態に係る表示制御部300は、利用者の利用者識別情報に紐付けられた所定のタイミングデータが記憶されている場合、当該所定のタイミングデータに基づいて歌詞テロップの表示色を変更する。 When the predetermined timing data associated with the user identification information of the user is stored, the display control unit 300 according to the present embodiment changes the display color of the lyrics telop based on the predetermined timing data. ..

所定のタイミングデータは、サーバ装置Sから送信されたタイミングデータである。カラオケ装置Kは、サーバ装置Sから所定のタイミングデータを受信した場合、記憶手段10aに記憶させる。所定のタイミングデータの詳細については後述する。 The predetermined timing data is the timing data transmitted from the server device S. When the karaoke device K receives the predetermined timing data from the server device S, the karaoke device K stores the predetermined timing data in the storage means 10a. The details of the predetermined timing data will be described later.

たとえば、表示制御部300は、楽曲Xのカラオケ演奏の進行に伴い、楽曲Xの歌詞テロップデータに基づく歌詞テロップを表示装置30に表示させる。 For example, the display control unit 300 causes the display device 30 to display the lyrics telop based on the lyrics telop data of the music X as the karaoke performance of the music X progresses.

ここで、利用者Uが楽曲Xのカラオケ歌唱を行う際、記憶手段10aに利用者Uの利用者IDに紐付けられた所定のタイミングデータが記憶されているとする。 Here, it is assumed that when the user U sings the karaoke of the music X, the storage means 10a stores the predetermined timing data associated with the user ID of the user U.

この場合、表示制御部300は、楽曲Xのカラオケ演奏の進行に伴い、所定のタイミングデータに基づいて歌詞テロップの表示色を変更する。歌詞テロップの表示色を変更する処理は、公知の手法を用いることができる。 In this case, the display control unit 300 changes the display color of the lyrics telop based on the predetermined timing data as the karaoke performance of the music X progresses. A known method can be used for the process of changing the display color of the lyrics telop.

一方、本実施形態に係る表示制御部300は、所定のタイミングデータが記憶されていない場合、データ記憶部100に記憶された複数のタイミングデータの中から選択した一のタイミングデータに基づいて歌詞テロップの表示色を変更する。 On the other hand, when the predetermined timing data is not stored, the display control unit 300 according to the present embodiment lyric telop based on one timing data selected from a plurality of timing data stored in the data storage unit 100. Change the display color of.

一のタイミングデータを選択する基準は様々である。たとえば、表示制御部300は、複数のタイミングデータの中から都度、ランダムに一つを選択してもよい。或いは、表示制御部300は、データ記憶部100に記憶された複数のタイミングデータを所定の順序で選択してもよい。たとえば、データ記憶部100に上述の8種類のタイミングデータが記憶されている場合、表示制御部300は、最初のカラオケ演奏に対しては30msecのタイミングデータを選択し、次のカラオケ演奏に対しては60msecのタイミングデータを選択し、・・・・というように順番にタイミングデータを選択してもよい。 There are various criteria for selecting one timing data. For example, the display control unit 300 may randomly select one from a plurality of timing data each time. Alternatively, the display control unit 300 may select a plurality of timing data stored in the data storage unit 100 in a predetermined order. For example, when the above-mentioned eight types of timing data are stored in the data storage unit 100, the display control unit 300 selects the timing data of 30 msec for the first karaoke performance, and for the next karaoke performance. May select timing data of 60 msec, and select timing data in order such as ...

ここで、利用者Uが楽曲Xのカラオケ歌唱を行う際、記憶手段10aに利用者Uの利用者IDに紐付けられた所定のタイミングデータが記憶されていなかったとする。 Here, it is assumed that when the user U sings the karaoke of the music X, the storage means 10a does not store the predetermined timing data associated with the user ID of the user U.

この場合、表示制御部300は、楽曲Xのカラオケ演奏の進行に伴って、選択した一のタイミングデータに基づいて歌詞テロップの表示色を変更する。たとえば、表示制御部300は、8種類のタイミングデータの中から一のタイミングデータ(ここでは150msecのタイミングデータとする)を選択し、当該タイミングデータに基づいて歌詞テロップの表示色を変更する。具体的に、表示制御部300は、表示されている楽曲Xの歌詞テロップに含まれる一の語句の表示色を、当該語句をカラオケ歌唱すべきタイミングより150msec先行したタイミングで変更する。 In this case, the display control unit 300 changes the display color of the lyrics telop based on the selected timing data as the karaoke performance of the music X progresses. For example, the display control unit 300 selects one timing data (here, the timing data is 150 msec) from eight types of timing data, and changes the display color of the lyrics telop based on the timing data. Specifically, the display control unit 300 changes the display color of one phrase included in the lyrics telop of the displayed song X at a timing 150 msec ahead of the timing at which the phrase should be sung in karaoke.

利用者Uは、歌詞テロップを参照しながら、楽曲Xのカラオケ歌唱を行う。 The user U sings the karaoke of the song X while referring to the lyrics telop.

(評価部)
評価部400は、利用者が行うカラオケ歌唱を評価する。
(Evaluation department)
The evaluation unit 400 evaluates the karaoke singing performed by the user.

カラオケ歌唱の評価は公知の手法を用いることができる。たとえば、利用者Uが楽曲Xのカラオケ歌唱を行った場合、評価部400は、利用者Uのカラオケ歌唱に基づく歌唱音声信号と、楽曲Xのリファレンスデータとを比較し、その一致度に応じて採点値を求める。採点値は、たとえば、100点を満点とする数値で求めることができる。 A known method can be used for evaluation of karaoke singing. For example, when the user U sings the karaoke of the music X, the evaluation unit 400 compares the singing audio signal based on the karaoke singing of the user U with the reference data of the music X, and according to the degree of matching. Find the scoring value. The scoring value can be obtained, for example, by a numerical value with a maximum of 100 points.

なお、本実施形態における評価部400は、利用者が希望するか否かに関わらず、カラオケ歌唱の評価を行う。また、カラオケ歌唱の評価は、少なくともサーバ装置Sから所定のタイミングデータを受信するまで行われる。 The evaluation unit 400 in the present embodiment evaluates the karaoke singing regardless of whether or not the user desires it. Further, the evaluation of the karaoke singing is performed at least until a predetermined timing data is received from the server device S.

(送信処理部)
送信処理部500は、所定のタイミングデータが記憶されていない場合、一のタイミングデータ、利用者が当該一のタイミングデータに基づいて表示色が変更された歌詞テロップを参照しながら行ったカラオケ歌唱の評価、及び当該利用者の利用者識別情報を紐付け、集計情報としてサーバ装置Sに送信する。
(Transmission processing unit)
When the predetermined timing data is not stored, the transmission processing unit 500 refers to the one timing data and the lyrics telop whose display color is changed based on the one timing data, and performs the karaoke singing. The evaluation and the user identification information of the user are linked and transmitted to the server device S as aggregated information.

たとえば、所定のタイミングデータが記憶されていない場合に、150msecのタイミングデータに基づいて表示色が変更される歌詞テロップを参照しながら、利用者Uが楽曲Xのカラオケ歌唱を行ったとする。そして、その結果、評価部400が87.0点という評価を求めたとする。この場合、送信処理部500は、150msecのタイミングデータ、カラオケ歌唱の評価(87.0点)、及び利用者Uの利用者IDを紐付け、集計情報AIとしてサーバ装置Sに送信する。 For example, it is assumed that the user U sings the karaoke song of the music X while referring to the lyrics telop whose display color is changed based on the timing data of 150 msec when the predetermined timing data is not stored. Then, as a result, it is assumed that the evaluation unit 400 requests an evaluation of 87.0 points. In this case, the transmission processing unit 500 associates the timing data of 150 msec, the evaluation of karaoke singing (87.0 points), and the user ID of the user U, and transmits the aggregated information AI to the server device S.

少なくともサーバ装置Sから所定のタイミングデータを受信するまで、送信処理部500は、利用者Uがカラオケ歌唱を行う都度、集計情報をサーバ装置Sに送信する。 At least until the predetermined timing data is received from the server device S, the transmission processing unit 500 transmits the aggregated information to the server device S each time the user U sings a karaoke song.

==サーバ装置==
サーバ装置Sは、各種情報の管理や処理を実行するコンピュータである。図4はサーバ装置Sの構成を示す図である。サーバ装置Sは、記憶手段60、通信手段70、及び制御手段80を備える。各構成はインターフェース(図示なし)を介してバスBに接続されている。
== Server device ==
The server device S is a computer that manages and processes various types of information. FIG. 4 is a diagram showing the configuration of the server device S. The server device S includes a storage means 60, a communication means 70, and a control means 80. Each configuration is connected to bus B via an interface (not shown).

[記憶手段]
記憶手段60は、各種のデータを記憶する大容量の記憶装置である。本実施形態において、記憶手段60は、カラオケ装置Kから取得した集計情報を利用者毎に記憶する。
[Memory means]
The storage means 60 is a large-capacity storage device that stores various types of data. In the present embodiment, the storage means 60 stores the aggregated information acquired from the karaoke device K for each user.

図5Aは、記憶手段60に記憶されている利用者Uの集計情報を示した図である。図5Aに示したように、記憶手段60は、8種類のタイミングデータ毎に、カラオケ歌唱を行った回数(歌唱回数。すなわち受信した集計情報の数)、及び評価の平均値を記憶している。なお、記憶手段60は、評価の平均値の代わりに他の統計値(中央値等)を記憶してもよいし、最も高い評価(たとえば最高得点)のみを記憶してもよい。 FIG. 5A is a diagram showing aggregated information of the user U stored in the storage means 60. As shown in FIG. 5A, the storage means 60 stores the number of times the karaoke singing is performed (the number of singing times, that is, the number of the received aggregated information) and the average value of the evaluations for each of the eight types of timing data. .. The storage means 60 may store other statistical values (median value, etc.) instead of the average value of the evaluations, or may store only the highest evaluation (for example, the highest score).

[通信手段]
通信手段70は、カラオケ装置Kとの通信を行うためのインターフェースを提供する。
[Communication means]
The communication means 70 provides an interface for communicating with the karaoke device K.

[制御手段]
制御手段80は、サーバ装置Sにおける各種の制御を行う。制御手段80は、CPUおよびメモリ(いずれも図示無し)を備える。CPUは、メモリに記憶されたプログラムを実行することにより各種の機能を実現する。
[Control means]
The control means 80 performs various controls on the server device S. The control means 80 includes a CPU and a memory (neither of which is shown). The CPU realizes various functions by executing a program stored in the memory.

本実施形態においてはCPUがメモリに記憶されるプログラムを実行することにより、制御手段80は、記憶処理部80a及び決定部80bとして機能する。 In the present embodiment, the control means 80 functions as the storage processing unit 80a and the determination unit 80b by executing the program stored in the memory by the CPU.

(記憶処理部)
記憶処理部80aは、カラオケ装置Kから受信した集計情報を利用者毎に記憶させる。
(Memory processing unit)
The storage processing unit 80a stores the aggregated information received from the karaoke device K for each user.

たとえば、図5Aに示した利用者Uの集計情報が記憶手段60に記憶されている状態において、サーバ装置Sが、カラオケ装置Kから集計情報AI(150msecのタイミングデータ、カラオケ歌唱の評価「87.0点」、及び利用者Uの利用者ID)を受信したとする。 For example, in a state where the aggregated information of the user U shown in FIG. 5A is stored in the storage means 60, the server device S sends the aggregated information AI (timing data of 150 msec, evaluation of karaoke singing “87. It is assumed that "0 points" and the user ID of the user U) are received.

この場合、記憶処理部80aは、150msecのタイミングデータに対応する歌唱回数の数を7回から8回に更新し、且つ「87.0点」を加味した評価の平均値(88.1点)に更新する。図5Bは、図5Aにおける利用者Uの集計情報に対して、集計情報AIを追加したものである。 In this case, the storage processing unit 80a updates the number of singing times corresponding to the timing data of 150 msec from 7 times to 8 times, and adds "87.0 points" to the average value of the evaluation (88.1 points). Update to. FIG. 5B shows the aggregated information AI added to the aggregated information of the user U in FIG. 5A.

(決定部)
決定部80bは、利用者の利用者識別情報を含む集計情報が所定条件を満たした場合、当該集計情報に基づいて所定のタイミングデータを決定し、当該所定のタイミングデータを当該利用者の利用者識別情報と紐付けてカラオケ装置Kに送信する。
(Decision part)
When the aggregated information including the user identification information of the user satisfies the predetermined condition, the determination unit 80b determines the predetermined timing data based on the aggregated information, and the predetermined timing data is used by the user of the user. It is linked with the identification information and transmitted to the karaoke device K.

所定条件は、所定のタイミングデータを決定する処理を開始するための基準であり、予め設定されている。所定条件は、たとえば、集計情報の数(40個以上等)や期間(最初に集計情報を記憶してから3か月経過後等)である。所定のタイミングデータは、記憶手段60に記憶されているある利用者の集計情報に含まれるタイミングデータのうち、当該ある利用者にとって表示色を変更する最適なタイミングを示す少なくとも一のデータである。 The predetermined condition is a reference for starting the process of determining the predetermined timing data, and is set in advance. The predetermined conditions are, for example, the number of aggregated information (40 or more, etc.) and the period (after 3 months have passed since the aggregated information was first stored, etc.). The predetermined timing data is at least one of the timing data included in the aggregated information of a certain user stored in the storage means 60, which indicates the optimum timing for changing the display color for the certain user.

たとえば、所定条件が「集計情報の数が40個以上」と設定されているとする。この場合、図5Bの状態において、利用者Uの利用者IDを含む集計情報は所定条件を満たしている。従って、決定部80bは、図5Bに示した集計情報に基づいて所定のタイミングデータを決定する。 For example, it is assumed that the predetermined condition is set as "the number of aggregated information is 40 or more". In this case, in the state of FIG. 5B, the aggregated information including the user ID of the user U satisfies the predetermined condition. Therefore, the determination unit 80b determines predetermined timing data based on the aggregated information shown in FIG. 5B.

所定のタイミングデータの決定は、様々な基準を用いて行うことができる。たとえば、決定部80bは、各タイミングデータに対応する評価の平均値に基づいて所定のタイミングデータを決定することができる。あるタイミングデータに対応する評価の平均値が他のタイミングデータに対応する評価の平均値よりも高い場合、当該あるタイミングデータが示すタイミングに基づいて歌詞テロップの表示色を変えることにより、利用者Uがカラオケ歌唱を行い易かった(その結果、評価が高い値となった)と考えることができる。 The determination of predetermined timing data can be made using various criteria. For example, the determination unit 80b can determine predetermined timing data based on the average value of evaluations corresponding to each timing data. When the average value of the evaluation corresponding to a certain timing data is higher than the average value of the evaluation corresponding to another timing data, the user U is changed by changing the display color of the lyrics telop based on the timing indicated by the certain timing data. It can be considered that was easy to sing karaoke (as a result, the evaluation was high).

図5Bの例において、最も高い評価の平均値に対応するタイミングデータは、120msecのタイミングデータである。よって、決定部80bは、120msecのタイミングデータを所定のタイミングデータPTとして決定する。 In the example of FIG. 5B, the timing data corresponding to the highest evaluation average value is the timing data of 120 msec. Therefore, the determination unit 80b determines the timing data of 120 msec as the predetermined timing data PT.

そして、決定部80bは、決定した所定のタイミングデータPTを利用者Uの利用者IDと紐付けてカラオケ装置Kに送信する。カラオケ装置Kの記憶手段10aは、受信した所定のタイミングデータPTを利用者Uの利用者IDと紐付けて記憶する。 Then, the determination unit 80b transmits the determined predetermined timing data PT to the karaoke device K in association with the user ID of the user U. The storage means 10a of the karaoke device K stores the received predetermined timing data PT in association with the user ID of the user U.

これ以降、利用者Uがカラオケ装置Kにおいて楽曲のカラオケ歌唱を行う際、カラオケ装置Kの表示制御部300は、所定のタイミングデータPTに基づいて歌詞テロップの表示色を変更する。 After that, when the user U sings a karaoke song on the karaoke device K, the display control unit 300 of the karaoke device K changes the display color of the lyrics telop based on the predetermined timing data PT.

==カラオケシステムにおける処理について==
次に、図6を参照して本実施形態に係るカラオケシステム1における処理の具体例について述べる。図6は、カラオケシステム1における処理例を示すフローチャートである。この例では、データ記憶部100は、タイミングが異なる複数のタイミングデータを記憶している。
== Processing in the karaoke system ==
Next, a specific example of the processing in the karaoke system 1 according to the present embodiment will be described with reference to FIG. FIG. 6 is a flowchart showing a processing example in the karaoke system 1. In this example, the data storage unit 100 stores a plurality of timing data having different timings.

カラオケ装置Kは、カラオケシステム1にログインした利用者Uが選曲した楽曲Xのカラオケ演奏を開始する(カラオケ演奏を開始。ステップ10)。 The karaoke device K starts the karaoke performance of the music X selected by the user U who has logged in to the karaoke system 1 (starts the karaoke performance. Step 10).

取得部200は、予約待ち行列から楽曲Xのカラオケ歌唱を行う利用者Uの利用者IDを取得する(利用者IDを取得。ステップ11)。 The acquisition unit 200 acquires the user ID of the user U who sings the karaoke of the music X from the reservation queue (acquires the user ID. Step 11).

楽曲Xのカラオケ演奏の進行に伴い、表示制御部300は、楽曲Xの歌詞テロップを表示装置30に表示させる(歌詞テロップを表示。ステップ12)。利用者Uは、歌詞テロップを参照しながらカラオケ歌唱を行う。 As the karaoke performance of the music X progresses, the display control unit 300 displays the lyrics telop of the music X on the display device 30 (displays the lyrics telop. Step 12). User U sings karaoke while referring to the lyrics telop.

ここで、利用者Uの利用者IDに紐付けられた所定のタイミングデータが記憶されている場合(ステップ13でYの場合)、表示制御部300は、所定のタイミングデータに基づいて歌詞テロップの表示色を変更する(所定のタイミングデータに基づいて表示色を変更。ステップ14)。 Here, when the predetermined timing data associated with the user ID of the user U is stored (in the case of Y in step 13), the display control unit 300 determines the lyrics telop based on the predetermined timing data. Change the display color (change the display color based on predetermined timing data. Step 14).

一方、利用者Uの利用者IDに紐付けられた所定のタイミングデータが記憶されていない場合(ステップ13でNの場合)、表示制御部300は、データ記憶部100に記憶された複数のタイミングデータの中から選択した一のタイミングデータに基づいて歌詞テロップの表示色を変更する(選択した一のタイミングデータに基づいて表示色を変更。ステップ15)。 On the other hand, when the predetermined timing data associated with the user ID of the user U is not stored (in the case of N in step 13), the display control unit 300 has a plurality of timings stored in the data storage unit 100. The display color of the lyrics telop is changed based on the one timing data selected from the data (the display color is changed based on the one selected timing data. Step 15).

楽曲Xのカラオケ演奏が終了した後、評価部400は、利用者Uが行ったカラオケ歌唱を評価する(カラオケ歌唱を評価。ステップ16)。 After the karaoke performance of the music X is completed, the evaluation unit 400 evaluates the karaoke singing performed by the user U (evaluate the karaoke singing. Step 16).

送信処理部500は、ステップ15で選択した一のタイミングデータ、ステップ16で求めたカラオケ歌唱の評価、及び利用者Uの利用者IDを紐付け、集計情報としてサーバ装置Sに送信する(集計情報を送信。ステップ17)。 The transmission processing unit 500 associates the one timing data selected in step 15, the evaluation of the karaoke singing obtained in step 16, and the user ID of the user U, and transmits the aggregated information to the server device S (aggregated information). Is sent. Step 17).

記憶処理部80aは、記憶手段60に、カラオケ装置Kから受信した集計情報を利用者毎に記憶させる(集計情報を記憶。ステップ18)。 The storage processing unit 80a stores the total information received from the karaoke device K in the storage means 60 for each user (stores the total information. Step 18).

利用者Uの利用者IDを含む集計情報が所定条件を満たした場合(ステップ19でYの場合)、決定部80bは、集計情報に基づいて所定のタイミングデータを決定し、当該所定のタイミングデータを利用者Uの利用者IDと紐付けてカラオケ装置Kに送信する(所定のタイミングデータを送信。ステップ20)。カラオケ装置Kは、受信した所定のタイミングデータを利用者Uの利用者IDと紐付けて記憶手段10aに記憶させる(所定のタイミングデータを記憶。ステップ21)。 When the aggregated information including the user ID of the user U satisfies the predetermined condition (in the case of Y in step 19), the determination unit 80b determines the predetermined timing data based on the aggregated information, and the predetermined timing data Is transmitted to the karaoke device K in association with the user ID of the user U (predetermined timing data is transmitted. Step 20). The karaoke device K associates the received predetermined timing data with the user ID of the user U and stores it in the storage means 10a (stores the predetermined timing data. Step 21).

以上から明らかなように、本実施形態に係るカラオケシステム1は、カラオケ装置K及びサーバ装置Sが通信可能に接続されている。カラオケ装置Kは、カラオケ演奏の進行に伴って歌詞テロップの表示色を変えるタイミングを示すタイミングデータについて、当該タイミングが異なる複数のタイミングデータを記憶するデータ記憶部100と、カラオケ歌唱を行う利用者の利用者識別情報を取得する取得部200と、利用者の利用者識別情報に紐付けられた所定のタイミングデータが記憶されている場合、当該所定のタイミングデータに基づいて歌詞テロップの表示色を変更し、当該所定のタイミングデータが記憶されていない場合、データ記憶部100に記憶された複数のタイミングデータの中から選択した一のタイミングデータに基づいて歌詞テロップの表示色を変更する表示制御部300と、利用者が行うカラオケ歌唱を評価する評価部400と、所定のタイミングデータが記憶されていない場合、一のタイミングデータ、利用者が当該一のタイミングデータに基づいて表示色が変更された歌詞テロップを参照しながら行ったカラオケ歌唱の評価、及び当該利用者の利用者識別情報を紐付け、集計情報としてサーバ装置Sに送信する送信処理部500と、を備える。サーバ装置Sは、カラオケ装置Kから受信した集計情報を利用者毎に記憶させる記憶処理部80aと、利用者の利用者識別情報を含む集計情報が所定条件を満たした場合、当該集計情報に基づいて所定のタイミングデータを決定し、当該所定のタイミングデータを当該利用者の利用者識別情報と紐付けてカラオケ装置Kに送信する決定部80bと、を備える。 As is clear from the above, in the karaoke system 1 according to the present embodiment, the karaoke device K and the server device S are communicably connected to each other. The karaoke device K has a data storage unit 100 that stores a plurality of timing data having different timings for timing data indicating the timing of changing the display color of the lyrics telop as the karaoke performance progresses, and a user who sings karaoke. When the acquisition unit 200 that acquires the user identification information and the predetermined timing data associated with the user identification information of the user are stored, the display color of the lyrics telop is changed based on the predetermined timing data. Then, when the predetermined timing data is not stored, the display control unit 300 changes the display color of the lyrics telop based on one timing data selected from the plurality of timing data stored in the data storage unit 100. And the evaluation unit 400 that evaluates the karaoke singing performed by the user, and if the predetermined timing data is not stored, one timing data, and the lyrics whose display color is changed by the user based on the one timing data. It is provided with a transmission processing unit 500 that evaluates the karaoke singing performed while referring to the telop, associates the user identification information of the user, and transmits the aggregated information to the server device S. The server device S is based on the storage processing unit 80a that stores the aggregated information received from the karaoke apparatus K for each user, and when the aggregated information including the user identification information of the user satisfies a predetermined condition, the aggregated information is based on the aggregated information. It is provided with a determination unit 80b that determines predetermined timing data and transmits the predetermined timing data to the karaoke apparatus K in association with the user identification information of the user.

このようなカラオケシステム1によれば、利用者の集計情報に基づいて、当該利用者にとって歌詞テロップの表示色を変更する最適なタイミングを示すタイミングデータを決定することができる。このようなタイミングデータに基づいて歌詞テロップの表示色を変更することにより、利用者はカラオケ歌唱を行い易くなる。すなわち、本実施形態に係るカラオケシステム1によれば、利用者毎に適したタイミングで歌詞テロップの表示色を変更することができる。 According to such a karaoke system 1, it is possible to determine timing data indicating the optimum timing for changing the display color of the lyrics telop for the user based on the aggregated information of the user. By changing the display color of the lyrics telop based on such timing data, the user can easily perform karaoke singing. That is, according to the karaoke system 1 according to the present embodiment, the display color of the lyrics telop can be changed at a timing suitable for each user.

<変形例1>
上記実施形態において、ある利用者に対して決定された所定のタイミングデータは、当該ある利用者がカラオケ歌唱を行う全ての楽曲に対して使用される。たとえば、利用者Uに対して決定された所定のタイミングデータPTは、楽曲Xだけでなく、利用者Uが他の楽曲をカラオケ歌唱する際にも使用される。
<Modification example 1>
In the above embodiment, the predetermined timing data determined for a certain user is used for all the songs that the certain user sings karaoke. For example, the predetermined timing data PT determined for the user U is used not only for the music X but also when the user U sings another song in karaoke.

一方、利用者がカラオケ歌唱を行い易いと感じる歌詞テロップの表示色を変更するタイミングは、楽曲毎に異なる場合もありうる。 On the other hand, the timing of changing the display color of the lyrics telop that the user feels easy to sing karaoke may differ for each song.

そこで、カラオケシステム1は楽曲毎に所定のタイミングデータを決定してもよい。 Therefore, the karaoke system 1 may determine predetermined timing data for each song.

==カラオケ装置==
(取得部)
本変形例に係る取得部200は、カラオケ歌唱を行う利用者の利用者識別情報と併せて、利用者がカラオケ歌唱を行うある楽曲の楽曲識別情報を取得する。
== Karaoke device ==
(Acquisition department)
The acquisition unit 200 according to this modification acquires the music identification information of a certain music in which the user sings karaoke, in addition to the user identification information of the user who sings karaoke.

たとえば、カラオケシステム1にログインした利用者Uがリモコン装置50を介して楽曲Xを選曲したとする。この場合、カラオケ装置Kは、楽曲Xの楽曲ID及び選曲した利用者Uの利用者IDを予約待ち行列に登録することで楽曲Xの予約を行う。 For example, it is assumed that the user U who has logged in to the karaoke system 1 selects the music X via the remote control device 50. In this case, the karaoke device K reserves the music X by registering the music ID of the music X and the user ID of the selected user U in the reservation queue.

楽曲Xの演奏順となった場合、カラオケ装置Kは、楽曲Xの楽曲IDに基づいて記憶手段10aから楽曲Xの楽曲データを読み出し、楽曲データに含まれる伴奏データに基づいてカラオケ演奏を開始する。 When the performance order of the music X is reached, the karaoke device K reads the music data of the music X from the storage means 10a based on the music ID of the music X, and starts the karaoke performance based on the accompaniment data included in the music data. ..

この際、取得部200は、予約待ち行列から、楽曲Xのカラオケ歌唱を行う利用者Uの利用者ID及び楽曲Xの楽曲IDを取得する。 At this time, the acquisition unit 200 acquires the user ID of the user U who sings the karaoke song of the music X and the music ID of the music X from the reservation queue.

(表示制御部)
本変形例に係る表示制御部300は、所定のタイミングデータとして、利用者の利用者識別情報及びある楽曲の楽曲識別情報に紐付けられたタイミングデータが記憶されている場合、当該所定のタイミングデータに基づいてある楽曲の歌詞テロップの表示色を変更する。
(Display control unit)
When the display control unit 300 according to this modification stores the user identification information of the user and the timing data associated with the music identification information of a certain music as the predetermined timing data, the predetermined timing data Change the display color of the lyrics telop of a certain song based on.

たとえば、利用者Uが楽曲Xのカラオケ歌唱を行う際、記憶手段10aに利用者Uの利用者ID及び楽曲Xの楽曲IDに紐付けられた所定のタイミングデータが記憶されているとする。 For example, when the user U sings a karaoke song of the music X, it is assumed that the storage means 10a stores the user ID of the user U and the predetermined timing data associated with the music ID of the music X.

この場合、表示制御部300は、楽曲Xのカラオケ演奏の進行に伴い、所定のタイミングデータに基づいて歌詞テロップの表示色を変更する。 In this case, the display control unit 300 changes the display color of the lyrics telop based on the predetermined timing data as the karaoke performance of the music X progresses.

一方、本変形例に係る表示制御部300は、所定のタイミングデータが記憶されていない場合、データ記憶部100に記憶された複数のタイミングデータの中から選択した一のタイミングデータに基づいて歌詞テロップの表示色を変更する。この場合の表示制御部300の処理は、実施形態と同様である。 On the other hand, when the predetermined timing data is not stored, the display control unit 300 according to this modification is a lyric telop based on one timing data selected from a plurality of timing data stored in the data storage unit 100. Change the display color of. The processing of the display control unit 300 in this case is the same as that of the embodiment.

(送信処理部)
本変形例に係る送信処理部500は、所定のタイミングデータが記憶されていない場合、一のタイミングデータ、利用者が当該一のタイミングデータに基づいて表示色が変更された歌詞テロップを参照しながら行ったある楽曲のカラオケ歌唱の評価、当該利用者の利用者識別情報、及び当該ある楽曲の楽曲識別情報を紐付け、集計情報としてサーバ装置Sに送信する。
(Transmission processing unit)
When the predetermined timing data is not stored, the transmission processing unit 500 according to this modification refers to one timing data and the lyrics telop whose display color is changed based on the one timing data. The evaluation of the karaoke singing of a certain song, the user identification information of the user, and the song identification information of the certain song are linked and transmitted to the server device S as aggregated information.

たとえば、150msecのタイミングデータに基づいて表示色が変更される歌詞テロップを参照しながら、利用者Uが楽曲Xのカラオケ歌唱を行ったとする。そして、その結果、評価部400が87.0点という評価を求めたとする。この場合、送信処理部500は、150msecのタイミングデータ、カラオケ歌唱の評価(87.0点)、利用者Uの利用者ID、及び楽曲Xの楽曲IDを紐付け、集計情報AI−Xとしてサーバ装置Sに送信する。 For example, it is assumed that the user U sings the karaoke of the music X while referring to the lyrics telop whose display color is changed based on the timing data of 150 msec. Then, as a result, it is assumed that the evaluation unit 400 requests an evaluation of 87.0 points. In this case, the transmission processing unit 500 associates the timing data of 150 msec, the evaluation of karaoke singing (87.0 points), the user ID of the user U, and the music ID of the music X, and sets the server as the aggregated information AI-X. It is transmitted to the device S.

==サーバ装置==
[記憶手段]
本変形例に係る記憶手段60は、カラオケ装置Kから取得した集計情報を利用者毎且つ楽曲毎に記憶する。
== Server device ==
[Memory means]
The storage means 60 according to this modification stores the aggregated information acquired from the karaoke device K for each user and each music.

図7Aは、記憶手段60に記憶されている利用者Uの楽曲Xについての集計情報を示した図である。図7Aに示したように、記憶手段60は、8種類のタイミングデータ毎に、楽曲Xのカラオケ歌唱を行った回数(歌唱回数。すなわち受信した集計情報の数)、及び評価の平均値を記憶している。 FIG. 7A is a diagram showing aggregated information about the music X of the user U stored in the storage means 60. As shown in FIG. 7A, the storage means 60 stores the number of times the karaoke singing of the music X is performed (the number of singing times, that is, the number of the received aggregated information) and the average value of the evaluations for each of the eight types of timing data. is doing.

(記憶処理部)
本変形例に係る記憶処理部80aは、カラオケ装置Kから受信した集計情報を利用者毎且つ楽曲毎に記憶させる。
(Memory processing unit)
The storage processing unit 80a according to this modification stores the aggregated information received from the karaoke device K for each user and each song.

たとえば、図7Aに示した集計情報が記憶手段60に記憶されている状態において、サーバ装置Sが、カラオケ装置Kから集計情報AI−X(150msecのタイミングデータ、カラオケ歌唱の評価「87.0点」、利用者Uの利用者ID、及び楽曲Xの楽曲ID)を受信したとする。 For example, in a state where the aggregated information shown in FIG. 7A is stored in the storage means 60, the server device S sends the aggregated information AI-X (timing data of 150 msec, evaluation of karaoke singing "87.0 points" from the karaoke device K. , The user ID of the user U, and the music ID of the music X).

この場合、記憶処理部80aは、記憶手段60に記憶されている利用者Uの集計情報のうち、楽曲Xの集計情報について、150msecのタイミングデータに対応する歌唱回数の数を7回から8回に更新し、且つ「87.0点」を加味した評価の平均値(88.1点)に更新する。図7Bは、図7Aにおける利用者Uの集計情報に対して、集計情報AI−Xを追加したものである。 In this case, the storage processing unit 80a sets the number of singing times corresponding to the timing data of 150 msec to 7 to 8 times for the aggregated information of the music X among the aggregated information of the user U stored in the storage means 60. And update to the average value (88.1 points) of the evaluation including "87.0 points". FIG. 7B shows the aggregated information AI-X added to the aggregated information of the user U in FIG. 7A.

(決定部)
本変形例に係る決定部80bは、利用者の利用者識別情報及びある楽曲の楽曲識別情報を含む集計情報が所定条件を満たした場合、当該集計情報に基づいて所定のタイミングデータを決定し、当該所定のタイミングデータを当該利用者の利用者識別情報及び当該ある楽曲の楽曲識別情報と紐付けてカラオケ装置Kに送信する。
(Decision part)
When the aggregated information including the user identification information of the user and the music identification information of a certain song satisfies the predetermined condition, the determination unit 80b according to this modification determines the predetermined timing data based on the aggregated information. The predetermined timing data is transmitted to the karaoke device K in association with the user identification information of the user and the music identification information of the certain music.

たとえば、所定条件が「集計情報の数が40個以上」と設定されているとする。この場合、図7Bの状態においては、利用者Uの利用者ID及び楽曲Xの楽曲IDを含む集計情報は、所定条件を満たしている。従って、決定部80bは、図7Bに示した集計情報に基づいて所定のタイミングデータを決定する。 For example, it is assumed that the predetermined condition is set as "the number of aggregated information is 40 or more". In this case, in the state of FIG. 7B, the aggregated information including the user ID of the user U and the music ID of the music X satisfies the predetermined conditions. Therefore, the determination unit 80b determines predetermined timing data based on the aggregated information shown in FIG. 7B.

図7Bの例において、最も高い評価の平均値に対応するタイミングデータは、90msecのタイミングデータである。よって、決定部80bは、90msecのタイミングデータを楽曲Xに対する所定のタイミングデータPT−Xとして決定する。 In the example of FIG. 7B, the timing data corresponding to the highest evaluation average value is the timing data of 90 msec. Therefore, the determination unit 80b determines the timing data of 90 msec as the predetermined timing data PT-X for the music X.

そして、決定部80bは、決定した所定のタイミングデータPT−Xを利用者Uの利用者ID及び楽曲Xの楽曲IDと紐付けてカラオケ装置Kに送信する。カラオケ装置Kの記憶手段10aは、受信した所定のタイミングデータPT−Xを利用者Uの利用者ID及び楽曲Xの楽曲IDと紐付けて記憶する。 Then, the determination unit 80b transmits the determined predetermined timing data PT-X to the karaoke device K in association with the user ID of the user U and the music ID of the music X. The storage means 10a of the karaoke device K stores the received predetermined timing data PT-X in association with the user ID of the user U and the music ID of the music X.

これ以降、利用者Uがカラオケ装置Kにおいて楽曲Xのカラオケ歌唱を行う際、カラオケ装置Kの表示制御部300は、所定のタイミングデータPT−Xに基づいて歌詞テロップの表示色を変更する。一方、利用者Uがカラオケ装置Kにおいて楽曲X以外の楽曲のカラオケ歌唱を行う際には、所定のタイミングデータPT−Xが使用されることはない。 After that, when the user U sings the karaoke of the music X on the karaoke device K, the display control unit 300 of the karaoke device K changes the display color of the lyrics telop based on the predetermined timing data PT-X. On the other hand, when the user U sings a karaoke song of a song other than the song X on the karaoke device K, the predetermined timing data PT-X is not used.

以上から明らかなように、本変形例に係るカラオケシステム1において、取得部200は、利用者がカラオケ歌唱を行うある楽曲の楽曲識別情報を取得し、表示制御部300は、所定のタイミングデータとして、利用者の利用者識別情報及びある楽曲の楽曲識別情報に紐付けられたタイミングデータが記憶されている場合、当該所定のタイミングデータに基づいてある楽曲の歌詞テロップの表示色を変更し、当該所定のタイミングデータが記憶されていない場合、データ記憶部100に記憶された複数のタイミングデータの中から選択した一のタイミングデータに基づいてある楽曲の歌詞テロップの表示色を変更し、送信処理部500は、所定のタイミングデータが記憶されていない場合、一のタイミングデータ、利用者が当該一のタイミングデータに基づいて表示色が変更された歌詞テロップを参照しながら行ったある楽曲のカラオケ歌唱の評価、当該利用者の利用者識別情報、及び当該ある楽曲の楽曲識別情報を紐付け、集計情報としてサーバ装置Sに送信し、記憶処理部80aは、カラオケ装置Kから受信した集計情報を利用者毎且つ楽曲毎に記憶させ、決定部80bは、利用者の利用者識別情報及びある楽曲の楽曲識別情報を含む集計情報が所定条件を満たした場合、当該集計情報に基づいて所定のタイミングデータを決定し、当該所定のタイミングデータを当該利用者の利用者識別情報及び当該ある楽曲の楽曲識別情報と紐付けてカラオケ装置Kに送信する。 As is clear from the above, in the karaoke system 1 according to the present modification, the acquisition unit 200 acquires the music identification information of a certain music in which the user sings a karaoke song, and the display control unit 300 uses the display control unit 300 as predetermined timing data. , When the timing data associated with the user identification information of the user and the music identification information of a certain music is stored, the display color of the lyrics telop of the music is changed based on the predetermined timing data. When the predetermined timing data is not stored, the display color of the lyrics telop of a certain song is changed based on one timing data selected from a plurality of timing data stored in the data storage unit 100, and the transmission processing unit. In 500, when the predetermined timing data is not stored, the karaoke singing of a certain song performed by the user while referring to the one timing data and the lyrics telop whose display color is changed based on the one timing data. The evaluation, the user identification information of the user, and the music identification information of the certain music are linked and transmitted to the server device S as the aggregated information, and the storage processing unit 80a uses the aggregated information received from the karaoke apparatus K as the aggregated information. When the user identification information of the user and the aggregated information including the music identification information of a certain song satisfy the predetermined conditions, the determination unit 80b stores the predetermined timing data based on the aggregated information. It is determined, and the predetermined timing data is transmitted to the karaoke device K in association with the user identification information of the user and the music identification information of the music.

このようなカラオケシステム1によれば、利用者毎且つ楽曲毎に適したタイミングで歌詞テロップの表示色を変更することができる。 According to such a karaoke system 1, the display color of the lyrics telop can be changed at a timing suitable for each user and each song.

<変形例2>
上記実施形態において、たとえば評価部400によるカラオケ歌唱の評価が高かった場合に、その高い評価が、使用したタイミングデータが利用者に適していたことに起因するのか、カラオケ歌唱し易い楽曲であったことに起因するのかを区別することができない。そこで、楽曲毎の難易度に応じて評価部400による評価を補正してもよい。
<Modification 2>
In the above embodiment, for example, when the evaluation unit 400 has a high evaluation of karaoke singing, the high evaluation may be due to the timing data used being suitable for the user, or the music is easy to sing karaoke. It is not possible to distinguish whether it is caused by. Therefore, the evaluation by the evaluation unit 400 may be corrected according to the difficulty level of each song.

図8に示すように、本変形例においてはCPUがメモリに記憶されるプログラムを実行することにより、制御手段10dは、取得部200、表示制御部300、評価部400、送信処理部500、及び補正部600として機能する。 As shown in FIG. 8, in this modification, the CPU executes a program stored in the memory, so that the control means 10d includes an acquisition unit 200, a display control unit 300, an evaluation unit 400, a transmission processing unit 500, and a transmission processing unit 500. It functions as a correction unit 600.

(取得部)
変形例1と同様、本変形例にける取得部200は、カラオケ歌唱を行う利用者の利用者識別情報と併せて、利用者がカラオケ歌唱を行うある楽曲の楽曲識別情報を取得する。
(Acquisition department)
Similar to the first modification, the acquisition unit 200 in this modification acquires the music identification information of a certain song in which the user sings karaoke, in addition to the user identification information of the user who sings karaoke.

(補正部)
補正部600は、評価部400によるある楽曲のカラオケ歌唱の評価を、当該ある楽曲の楽曲識別情報に紐付けられた難易度に応じて補正する。
(Correction part)
The correction unit 600 corrects the evaluation of the karaoke singing of a certain song by the evaluation unit 400 according to the difficulty level associated with the song identification information of the certain song.

難易度は、楽曲毎に設定されている。難易度は、たとえば楽曲データの属性情報に含まれている。難易度は、楽曲をカラオケ歌唱する際の難しさである。一般に、音高が高い楽曲やテンポが速い楽曲は、カラオケ歌唱が難しい。よって、このような楽曲には高い難易度が設定される。難易度は、たとえば「難しい」、「やや難しい」、「普通」、「やや簡単」、「簡単」といった分類をすることができる。 The difficulty level is set for each song. The difficulty level is included in the attribute information of the music data, for example. Difficulty is the difficulty of singing a song in karaoke. In general, it is difficult to sing karaoke for songs with high pitches and fast tempos. Therefore, a high degree of difficulty is set for such a song. The difficulty level can be classified into, for example, "difficult", "somewhat difficult", "normal", "somewhat easy", and "easy".

難易度に応じた補正は様々な方法で行うことができる。たとえば、難易度に応じた補正値を予め設定しておく。具体例として、難易度が「難しい」、「やや難しい」、「普通」、「やや簡単」、「簡単」の場合、補正値は、「+5.0点」、「+2.5点」、「±0点」、「−2.5点」、「−5.0点」とすることができる。補正部600は、難易度に応じた補正値を用いて評価を補正する。 Corrections according to the difficulty level can be made in various ways. For example, a correction value according to the difficulty level is set in advance. As a specific example, when the difficulty level is "difficult", "somewhat difficult", "normal", "somewhat easy", and "easy", the correction values are "+5.0 points", "+2.5 points", and " It can be "± 0 points", "-2.5 points", and "-5.0 points". The correction unit 600 corrects the evaluation by using the correction value according to the difficulty level.

ここで、利用者Uが楽曲Xのカラオケ歌唱を行った結果、評価部400が「88.0点」と評価したとする。また楽曲Xの難易度は「やや難しい」であるとする。 Here, it is assumed that as a result of the user U singing the karaoke of the music X, the evaluation unit 400 evaluates it as "88.0 points". Further, it is assumed that the difficulty level of the music X is "somewhat difficult".

この場合、補正部600は、楽曲Xのカラオケ歌唱の評価「88.0点」を、楽曲Xの楽曲IDに紐付けられた難易度「やや難しい」に対応する補正値「+2.5点」に応じて補正し、「90.5点」を求める。 In this case, the correction unit 600 sets the evaluation "88.0 points" of the karaoke song of the music X to the correction value "+2.5 points" corresponding to the difficulty level "slightly difficult" associated with the music ID of the music X. It is corrected according to the above, and "90.5 points" is obtained.

送信処理部500は、補正された評価を、利用者ID等と紐付け、集計情報としてサーバ装置Sに送信する。 The transmission processing unit 500 associates the corrected evaluation with the user ID and the like, and transmits the corrected evaluation to the server device S as aggregated information.

このようなカラオケシステム1によれば、楽曲毎の難易度によらず、利用者に適した所定のタイミングデータを決定することができる。なお、補正部600は、サーバ装置S側に設けられていてもよい。 According to such a karaoke system 1, predetermined timing data suitable for the user can be determined regardless of the difficulty level of each song. The correction unit 600 may be provided on the server device S side.

<その他>
上記実施形態は、例として提示したものであり、発明の範囲を限定するものではない。上記の構成は、適宜組み合わせて実施することが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。上記実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
<Others>
The above embodiment is presented as an example and does not limit the scope of the invention. The above configurations can be implemented in appropriate combinations, and various omissions, replacements, and changes can be made without departing from the gist of the invention. The above-described embodiments and modifications thereof are included in the scope and gist of the invention, as well as in the scope of the invention described in the claims and the equivalent scope thereof.

1 カラオケシステム
100 データ記憶部
200 取得部
300 表示制御部
400 評価部
500 送信処理部
80a 記憶処理部
80b 決定部
K カラオケ装置
S サーバ装置
1 Karaoke system 100 Data storage unit 200 Acquisition unit 300 Display control unit 400 Evaluation unit 500 Transmission processing unit 80a Storage processing unit 80b Decision unit K Karaoke device S Server device

Claims (3)

カラオケ装置及びサーバ装置が通信可能に接続されたカラオケシステムであって、
前記カラオケ装置は、
カラオケ演奏の進行に伴って歌詞テロップの表示色を変えるタイミングを示すタイミングデータについて、当該タイミングが異なる複数のタイミングデータを記憶するデータ記憶部と、
カラオケ歌唱を行う利用者の利用者識別情報を取得する取得部と、
前記利用者の利用者識別情報に紐付けられた所定のタイミングデータが前記データ記憶部に記憶されている場合、当該所定のタイミングデータに基づいて歌詞テロップの表示色を変更し、当該所定のタイミングデータが前記データ記憶部に記憶されていない場合、前記データ記憶部に記憶された複数のタイミングデータの中から選択した一のタイミングデータに基づいて歌詞テロップの表示色を変更する表示制御部と、
前記利用者が行うカラオケ歌唱を評価する評価部と、
前記所定のタイミングデータが前記データ記憶部に記憶されていない場合、前記一のタイミングデータ、前記利用者が当該一のタイミングデータに基づいて表示色が変更された歌詞テロップを参照しながら行ったカラオケ歌唱の評価、及び当該利用者の利用者識別情報を紐付け、集計情報として前記サーバ装置に送信する送信処理部と、
を備え、
前記サーバ装置は、
前記カラオケ装置から受信した集計情報を利用者毎に記憶させる記憶処理部と、
前記利用者の利用者識別情報を含む集計情報が所定条件を満たした場合、当該集計情報に基づいて前記所定のタイミングデータを決定し、当該所定のタイミングデータを当該利用者の利用者識別情報と紐付けて前記カラオケ装置に送信する決定部と、
を備えるカラオケシステム。
A karaoke system in which a karaoke device and a server device are communicatively connected.
The karaoke device
Regarding the timing data indicating the timing to change the display color of the lyrics telop as the karaoke performance progresses, a data storage unit that stores a plurality of timing data having different timings, and a data storage unit.
An acquisition unit that acquires user identification information of users who sing karaoke,
When the predetermined timing data associated with the user identification information of the user is stored in the data storage unit, the display color of the lyrics telop is changed based on the predetermined timing data, and the predetermined timing is used. If the data is not stored in the data storage unit, a display control unit for changing the display color of the lyrics telop based on one of the timing data selected from among a plurality of timing data stored in the data storage unit,
An evaluation unit that evaluates karaoke singing performed by the user,
When the predetermined timing data is not stored in the data storage unit, the karaoke performed by the user with reference to the one timing data and the lyrics telop whose display color is changed based on the one timing data. A transmission processing unit that associates singing evaluation and user identification information of the user and transmits it to the server device as aggregated information.
With
The server device
A storage processing unit that stores the aggregated information received from the karaoke device for each user, and
When the aggregated information including the user identification information of the user satisfies a predetermined condition, the predetermined timing data is determined based on the aggregated information, and the predetermined timing data is used as the user identification information of the user. A decision unit that links and sends to the karaoke device,
Karaoke system equipped with.
前記取得部は、前記利用者がカラオケ歌唱を行うある楽曲の楽曲識別情報を取得し、
前記表示制御部は、前記所定のタイミングデータとして、前記利用者の利用者識別情報及び前記ある楽曲の楽曲識別情報に紐付けられたタイミングデータが前記データ記憶部に記憶されている場合、当該所定のタイミングデータに基づいて前記ある楽曲の歌詞テロップの表示色を変更し、当該所定のタイミングデータが前記データ記憶部に記憶されていない場合、前記データ記憶部に記憶された複数のタイミングデータの中から選択した一のタイミングデータに基づいて前記ある楽曲の歌詞テロップの表示色を変更し、
前記送信処理部は、前記所定のタイミングデータが前記データ記憶部に記憶されていない場合、前記一のタイミングデータ、前記利用者が当該一のタイミングデータに基づいて表示色が変更された歌詞テロップを参照しながら行ったある楽曲のカラオケ歌唱の評価、当該利用者の利用者識別情報、及び当該ある楽曲の楽曲識別情報を紐付け、集計情報として前記サーバ装置に送信し、
前記記憶処理部は、前記カラオケ装置から受信した集計情報を利用者毎且つ楽曲毎に記憶させ、
前記決定部は、前記利用者の利用者識別情報及び前記ある楽曲の楽曲識別情報を含む集計情報が所定条件を満たした場合、当該集計情報に基づいて前記所定のタイミングデータを決定し、当該所定のタイミングデータを当該利用者の利用者識別情報及び当該ある楽曲の楽曲識別情報と紐付けて前記カラオケ装置に送信することを特徴とする請求項1記載のカラオケシステム。
The acquisition unit acquires the music identification information of a certain music in which the user sings karaoke.
When the display control unit stores the user identification information of the user and the timing data associated with the music identification information of the certain music as the predetermined timing data in the data storage unit, the display control unit performs the predetermined timing data. to change the color of the lyrics telop piece of music that on the basis of the timing data, if the predetermined timing data is not stored in the data storage unit, among the plurality of timing data stored in the data storage unit Change the display color of the lyrics telop of the above-mentioned song based on the one timing data selected from
When the predetermined timing data is not stored in the data storage unit, the transmission processing unit outputs the one timing data and the lyrics telop whose display color is changed by the user based on the one timing data. The evaluation of the karaoke singing of a certain song performed while referring to it, the user identification information of the user, and the song identification information of the certain song are linked and transmitted to the server device as aggregated information.
The storage processing unit stores the aggregated information received from the karaoke device for each user and each song.
When the user identification information of the user and the aggregated information including the music identification information of the certain music satisfy the predetermined conditions, the determination unit determines the predetermined timing data based on the aggregated information, and determines the predetermined timing data. The karaoke system according to claim 1, wherein the timing data of the above is associated with the user identification information of the user and the music identification information of the certain music and transmitted to the karaoke apparatus.
前記取得部は、前記利用者がカラオケ歌唱を行うある楽曲の楽曲識別情報を取得し、
前記カラオケ装置または前記サーバ装置は、前記評価部による前記ある楽曲のカラオケ歌唱の評価を、当該ある楽曲の楽曲識別情報に紐付けられた難易度に応じて補正する補正部を有することを特徴とする請求項1記載のカラオケシステム。
The acquisition unit acquires the music identification information of a certain music in which the user sings karaoke.
The karaoke device or the server device is characterized by having a correction unit that corrects the evaluation of the karaoke singing of the music by the evaluation unit according to the difficulty level associated with the music identification information of the music. The karaoke system according to claim 1.
JP2020051738A 2020-03-23 2020-03-23 Karaoke system Active JP6913783B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020051738A JP6913783B1 (en) 2020-03-23 2020-03-23 Karaoke system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020051738A JP6913783B1 (en) 2020-03-23 2020-03-23 Karaoke system

Publications (2)

Publication Number Publication Date
JP6913783B1 true JP6913783B1 (en) 2021-08-04
JP2021149064A JP2021149064A (en) 2021-09-27

Family

ID=77057453

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020051738A Active JP6913783B1 (en) 2020-03-23 2020-03-23 Karaoke system

Country Status (1)

Country Link
JP (1) JP6913783B1 (en)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5839956B2 (en) * 2011-11-21 2016-01-06 株式会社エクシング Karaoke system, karaoke lyrics display method, karaoke terminal device, and computer program
JP2013122561A (en) * 2011-12-12 2013-06-20 Brother Ind Ltd Information processing program, communication system, information processing device, and method for drawing lyric telop
JP5741625B2 (en) * 2013-04-12 2015-07-01 ブラザー工業株式会社 Karaoke system, karaoke equipment
JP6196569B2 (en) * 2014-03-14 2017-09-13 株式会社エクシング DATA GENERATION / EDITION DEVICE, PROGRAM, AND DATA GENERATION / EDITION METHOD

Also Published As

Publication number Publication date
JP2021149064A (en) 2021-09-27

Similar Documents

Publication Publication Date Title
JP6913783B1 (en) Karaoke system
JP6065703B2 (en) Reference data creation system and performance terminal device
JP5622679B2 (en) Karaoke equipment
JP6944357B2 (en) Communication karaoke system
JP6894766B2 (en) Karaoke equipment
JP6693803B2 (en) Karaoke equipment
JP4395493B2 (en) Karaoke equipment
JP6141737B2 (en) Karaoke device for singing in consideration of stretch tuning
JP6774844B2 (en) Karaoke system
JP6920135B2 (en) Karaoke equipment
JP7329436B2 (en) karaoke system
JP7117239B2 (en) karaoke device
JP5741625B2 (en) Karaoke system, karaoke equipment
JP6944364B2 (en) Karaoke equipment
JP2020034752A (en) Karaoke system, and karaoke device
JP6876170B1 (en) Karaoke equipment
JP2010085658A (en) Difficulty level estimation system and program
JP7554111B2 (en) Karaoke equipment
JP7465194B2 (en) Karaoke equipment
JP2023144910A (en) Karaoke device
JP6765980B2 (en) Karaoke system
JP6842356B2 (en) Karaoke equipment
JP2018189735A (en) Karaoke device
JP6892800B2 (en) Karaoke equipment
JP6468934B2 (en) Karaoke equipment

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200323

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210511

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210602

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210706

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210712

R150 Certificate of patent or registration of utility model

Ref document number: 6913783

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150