JP2019132980A - Karaoke device - Google Patents
Karaoke device Download PDFInfo
- Publication number
- JP2019132980A JP2019132980A JP2018014552A JP2018014552A JP2019132980A JP 2019132980 A JP2019132980 A JP 2019132980A JP 2018014552 A JP2018014552 A JP 2018014552A JP 2018014552 A JP2018014552 A JP 2018014552A JP 2019132980 A JP2019132980 A JP 2019132980A
- Authority
- JP
- Japan
- Prior art keywords
- singer
- user
- emotion
- karaoke
- music
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Analysis (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
Abstract
Description
本発明はカラオケ装置に関する。 The present invention relates to a karaoke apparatus.
複数の利用者でカラオケ歌唱を行う際、お互いに遠慮し合ってしまい、最初にカラオケ歌唱を行う利用者を決定するまでに時間を要する場合がある。 When karaoke singing is performed by a plurality of users, they may refrain from each other, and it may take time to determine a user who performs karaoke singing first.
そこで、たとえば、特許文献1には、最初の利用者がログインした後、所定時間経過しても楽曲のカラオケ演奏が開始されない時には、各利用者の歌唱履歴を参照し、全歌唱回数、所定期間の歌唱回数、歌唱時刻等の情報を用いることで、カラオケ歌唱を行う利用者を指名する技術が開示されている。
Therefore, for example, in
また、出願人による特許文献2には、各利用者が入室して最初に予約した回数をカウントしておき、予約回数が最も多い利用者を最初の歌唱者として特定する技術が開示されている。 Further, Patent Document 2 by the applicant discloses a technique for counting the number of times each user enters the room and making a reservation first, and specifying the user who has the highest number of reservations as the first singer. .
ここで、特許文献1や特許文献2の技術によれば、最初にカラオケ歌唱を行う利用者(最初の歌唱者)を自動的に指名することができる。一方、各利用者はその日の体調やその場の雰囲気等によって、カラオケ歌唱に乗り気である場合もあれば、逆にあまり乗り気でない場合もある。しかし、特許文献1や特許文献2の技術によれば、カラオケ歌唱に乗り気でない場合であっても、最初の歌唱者として指名される恐れがある。
Here, according to the technique of
また、カラオケ歌唱を行う利用者は、リモコン装置等を利用して楽曲を選曲し、予約を行う。一方、特許文献1や特許文献2のように歌唱者の指名が自動的になされる場合、利用者は自分の意思とは関係なく、急に歌唱順を指定されることになるため、選曲に戸惑う恐れがある。
In addition, a user who performs karaoke singing uses a remote control device or the like to select music and make a reservation. On the other hand, when the singer's nomination is made automatically as in
本発明の目的は、複数の利用者でカラオケ歌唱を行う際に、各利用者の気分を考慮して、最初の歌唱者及びカラオケ歌唱に適した楽曲を報知することが可能なカラオケ装置を提供することにある。 An object of the present invention is to provide a karaoke apparatus capable of notifying the first singer and music suitable for karaoke singing in consideration of the mood of each user when performing karaoke singing by a plurality of users. There is to do.
上記目的を達成するための主たる発明は、複数の利用者が順番にカラオケ歌唱を行うことが可能なカラオケ装置であって、楽曲毎に、当該楽曲のカラオケ歌唱を行った際に利用者が感じる楽しさを示す感情スコアを関連付けて記憶するスコア記憶部と、撮影部で取得した利用者の顔画像に基づいて、当該利用者の感情分析を行う感情分析部と、前記複数の利用者それぞれの前記感情分析の結果に基づいて、当該複数の利用者のうち、楽しさを示す感情の度合いが最も高い利用者を最初の歌唱者として特定する歌唱者特定部と、前記最初の歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、前記楽しさを示す感情スコアが最も高い楽曲を当該最初の歌唱者に対するリコメンド楽曲として特定するリコメンド楽曲特定部と、前記最初の歌唱者及び当該最初の歌唱者に対する前記リコメンド楽曲を報知する報知部と、を有するカラオケ装置である。
本発明の他の特徴については、後述する明細書及び図面の記載により明らかにする。
The main invention for achieving the above object is a karaoke apparatus in which a plurality of users can perform karaoke singing in order, and the user feels when performing karaoke singing of the music for each music A score storage unit that associates and stores emotion scores indicating fun, an emotion analysis unit that performs emotion analysis of the user based on the face image of the user acquired by the imaging unit, and each of the plurality of users Based on the result of the emotion analysis, among the plurality of users, a singer identification unit that identifies a user having the highest degree of emotion indicating pleasure as the first singer, and the singing of the first singer Among the karaoke songs already included in the history, a recommended song identifying unit that identifies a song having the highest emotion score indicating the fun as a recommended song for the first singer, and the first song A singer in and the notification section for notifying the recommended music for the first singer, a karaoke apparatus having a.
Other characteristics of the present invention will be made clear by the description and drawings described later.
本発明によれば、複数の利用者でカラオケ歌唱を行う際に、各利用者の気分を考慮して、最初の歌唱者及びカラオケ歌唱に適した楽曲を報知することができる。 According to the present invention, when performing karaoke singing by a plurality of users, it is possible to report the music suitable for the first singer and karaoke singing in consideration of the mood of each user.
<第1実施形態>
図1〜図6を参照して、第1実施形態に係るカラオケ装置について説明する。
<First Embodiment>
With reference to FIGS. 1-6, the karaoke apparatus which concerns on 1st Embodiment is demonstrated.
==カラオケ装置==
カラオケ装置1は、カラオケ演奏及び利用者がカラオケ歌唱を行うための装置である。カラオケ装置1は、たとえばカラオケ店舗の各部屋に設置される。一台のカラオケ装置を利用して、複数の利用者が順番にカラオケ歌唱を行うことができる。図1に示すように、カラオケ装置1は、カラオケ本体10、スピーカ20、表示装置30、マイク40、リモコン装置50、及び撮影部60を備える。
== Karaoke equipment ==
The
カラオケ本体10は、選曲されたカラオケ楽曲の演奏制御、歌詞や背景映像等の表示制御、マイク40を通じて入力された音声信号の処理といった、カラオケ演奏やカラオケ歌唱に関する各種の制御を行う。スピーカ20はカラオケ本体10からの放音信号に基づいて放音するための構成である。表示装置30はカラオケ本体10からの信号に基づいて映像や画像を画面に表示するための構成である。マイク40は利用者の歌唱音声をアナログの音声信号に変換してカラオケ本体10に入力するための構成である。リモコン装置50は、カラオケ本体10に対する各種操作をおこなうための装置である。
The karaoke
撮影部60は、利用者の顔を撮影し、顔画像(顔画像データ)を取得するための装置である。撮影部60は、カラオケ装置1が設置されているカラオケルームに少なくとも1台設置される。撮影部60は、取得した顔画像をカラオケ本体10に出力する。撮影部60による撮影タイミングは様々である。たとえば、撮影部60は、利用者がカラオケ装置1において、自己の利用者IDを用いてログイン操作を行った際に撮影を行う。カラオケ本体10は、撮影された顔画像を利用者IDと関連付けて記憶する。なお、撮影部60は、たとえばリモコン装置50に設けられていてもよいし、カラオケ装置1と別に設けられていてもよい。
The photographing
==カラオケ本体10==
図2に示すように、本実施形態に係るカラオケ本体10は、記憶部10a、通信部10b、入力部10c、及び制御部10dを備える。各構成はインターフェース(図示なし)を介してバスBに接続されている。
==
As shown in FIG. 2, the karaoke
[記憶部]
記憶部10aは、カラオケ演奏を行うための楽曲データ等、各種のデータを記憶する大容量の記憶装置である。本実施形態における記憶部10aの記憶領域の一部は、スコア記憶部100として機能する。
[Storage unit]
The
(スコア記憶部)
スコア記憶部100は、楽曲毎に、当該楽曲のカラオケ歌唱を行った際に利用者が感じる楽しさを示す感情スコアを関連付けて記憶する。
(Score memory)
The
ある楽曲のカラオケ歌唱を行った際に利用者が楽しい気分であると感じられるかどうかは、感情分析に関する公知技術(たとえば、特開平10−187178号公報や「音声こころ分析サービス」(株式会社日立システムズ))により求めることができる。 Whether or not a user feels pleasant when performing a karaoke singing of a certain piece of music depends on known techniques relating to emotion analysis (for example, Japanese Laid-Open Patent Publication No. 10-187178 and “Speech Mind Analysis Service” (Hitachi Corporation). Systems)).
たとえば、新たな楽曲が配信される都度、サーバ装置(図示無し)は、当該新たな楽曲を歌唱する歌手の歌唱音声から、感情の込め方と相関のある感情特徴量を抽出する。サーバ装置は、抽出された感情特徴量に基づいて、歌唱に込められた「楽しさ」に関する感情を分析する。そして、サーバ装置は、感情分析により得られた情報をスコア化する(「楽しさ」に関する感情が強いほど高いスコアとなる)ことで、新たな楽曲の「楽しさ」に関するスコアを生成する。サーバ装置は、生成したスコアを新たな楽曲の識別情報(楽曲ID)と関連付けてカラオケ装置1に配信する。カラオケ装置1のスコア記憶部100は、配信されたスコアを順次記憶する。
For example, each time a new music piece is distributed, a server device (not shown) extracts an emotion feature quantity that correlates with how to put in emotion from the singing voice of a singer who sings the new music piece. Based on the extracted emotion feature quantity, the server device analyzes the emotion related to “fun” included in the singing. Then, the server device scores the information obtained by the emotion analysis (the higher the emotion related to “fun”, the higher the score), thereby generating a score related to “fun” of the new music. The server device distributes the generated score to the
図3は、スコア記憶部100に記憶されるデータの具体例を示した図である。図3の例では、「楽しさ」を0〜100点のスコアとして示している。また、図3の例では、スコアの高い順に楽曲を並べて記憶する例を示している。
FIG. 3 is a diagram illustrating a specific example of data stored in the
[通信部、入力部]
通信部10bは、カラオケ本体10とカラオケ装置1の他の構成(或いは、サーバ装置)との通信を行うためのインターフェースを提供する。入力部10cは、利用者が各種の指示入力を行うための構成である。なお、表示装置30やリモコン装置50の表示画面に表示された各種アイコンを選択することで、各種の指示入力を行うことも可能である。この場合、表示装置30やリモコン装置50が入力部10cとして機能する。
[Communication section, input section]
The communication unit 10b provides an interface for performing communication between the karaoke
[制御部]
制御部10dは、カラオケ装置1における各種の制御を行う。制御部10dは、CPUおよびメモリ(いずれも図示無し)を備える。CPUは、メモリに記憶されたプログラムを実行することにより各種の機能を実現する。本実施形態においてはCPUがメモリに記憶されるプログラムを実行することにより、制御部10dは、感情分析部200、歌唱者特定部300、リコメンド楽曲特定部400、及び報知部500として機能する。
[Control unit]
The
(感情分析部)
感情分析部200は、撮影部60で取得した利用者の顔画像に基づいて、当該利用者の感情分析を行う。
(Emotion Analysis Department)
The
顔画像(顔画像データ)を用いた感情分析の処理は、公知技術を利用することができる。たとえば、「BeesightMARKII」(株式会社アーツエイハン。「Beesight」は登録商標)によれば、人の顔画像から6種類の感情を分析し、感情毎のパラメータを得ることができる。また、特開2017−156854号公報に記載されている畳み込みニューラルネットワーク(Convolutional Neural Network:CNN/ConvNet)によれば、ある特定の感情のパラメータを得ることができる。 A publicly known technique can be used for the emotion analysis process using the face image (face image data). For example, according to “BeesightMARKII” (Arts Aihan Co., Ltd., “Beesight” is a registered trademark), six types of emotions can be analyzed from a human face image, and parameters for each emotion can be obtained. Further, according to a convolutional neural network (CNN / ConvNet) described in Japanese Patent Application Laid-Open No. 2017-156854, a specific emotion parameter can be obtained.
感情分析部200は、これらの公知技術を利用して利用者の顔画像を分析し、「楽しさ」に関するパラメータ(BeesightMARKIIの例であれば「幸せ」に関するパラメータ)を求める。パラメータは、たとえば、0〜100点のスコアとして求めてもよいし、1〜10の10段階のスコアとして求めてもよい。
The
感情分析部200は、カラオケ装置1を利用している複数の利用者それぞれについて、顔画像の解析を行い、各利用者の感情分析を行う。感情分析部200は、分析結果を利用者IDと併せて歌唱者特定部300に出力する。たとえば、利用者A〜利用者Cぞれぞれの顔画像について感情分析を行った結果、「楽しさ」に関するパラメータが図4のように得られたとする(図4は、「楽しさ」を10段階のスコアで示している)。感情分析部200は、各パラメータを利用者IDと関連付けて歌唱者特定部300に出力する。
The
(歌唱者特定部)
歌唱者特定部300は、複数の利用者それぞれの感情分析の結果に基づいて、当該複数の利用者のうち、楽しさを示す感情の度合いが最も高い利用者を最初の歌唱者として特定する。
(Singer specific part)
The
楽しさを示す感情の度合いは、感情分析部200による分析結果(パラメータ)に相当する。たとえば図4の例において、利用者Aの楽しさを示す感情の度合いは「9」であり、利用者Bの楽しさを示す感情の度合いは「6」であり、利用者Cの楽しさを示す感情の度合いは「3」である。この場合、利用者Aが「楽しさを示す感情の度合いが最も高い利用者」に相当する。また、最初の歌唱者とは、複数の利用者でカラオケ歌唱を行う機会において、最初にカラオケ歌唱を行う利用者(カラオケルームに入室後、1番目にカラオケ歌唱を行う利用者)である。
The degree of emotion indicating enjoyment corresponds to an analysis result (parameter) by the
歌唱者特定部300は、各利用者の感情分析の結果を比較することにより、最初の歌唱者を特定する。たとえば、図4のような感情分析結果が得られた場合、歌唱者特定部300は、利用者Aを最初の歌唱者として特定する。歌唱者特定部300は、特定した最初の歌唱者(利用者A)の利用者IDをリコメンド楽曲特定部400に出力する。
The
(リコメンド楽曲特定部)
リコメンド楽曲特定部400は、最初の歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、楽しさを示す感情スコアが最も高い楽曲を当該最初の歌唱者に対するリコメンド楽曲として特定する。
(Recommended music identification part)
The recommended
歌唱履歴は、ある利用者が過去に行ったカラオケ歌唱に関する各種データ(過去にカラオケ歌唱した楽曲情報等)を含む。歌唱履歴は、たとえばサーバ装置(図示無し)に記憶されている。リコメンド楽曲は、利用者に対してカラオケ歌唱を推奨する楽曲である。 The singing history includes various data related to karaoke singing performed by a certain user in the past (music information sung in the past, etc.). The singing history is stored in, for example, a server device (not shown). The recommended music is music that recommends karaoke singing to the user.
ここで、上記例に示したように利用者Aが最初の歌唱者として特定されたとする。この場合、リコメンド楽曲特定部400は、通信部10bを介してサーバ装置にアクセスし、利用者Aの歌唱履歴を参照する。ここで利用者Aの歌唱履歴には、過去にカラオケ歌唱した楽曲情報(楽曲ID)として図5に示すデータが含まれていたとする。この場合、リコメンド楽曲特定部400は、利用者Aの歌唱履歴に含まれる楽曲とスコア記憶部100に記憶された楽曲を比較し、利用者Aの歌唱履歴に含まれる楽曲(利用者Aがカラオケ歌唱済みの楽曲)、且つ楽しさを示す感情スコアが最も高い楽曲(図3のID−090に相当する楽曲)をリコメンド楽曲として特定する。
Here, it is assumed that user A is specified as the first singer as shown in the above example. In this case, the recommended
なお、特定するリコメンド楽曲は一の楽曲に限られない。たとえば、利用者Aの歌唱履歴に含まれる楽曲、且つ楽しさを示す感情スコアが最も高い楽曲が2曲以上ある場合(感情スコアが同じ楽曲が複数ある場合)、複数の楽曲をリコメンド楽曲として特定してもよい。或いは、たとえば、予め楽しさを示す感情スコアの閾値(たとえば、スコア「90」以上)を決定しておき、利用者の歌唱履歴に含まれる楽曲のうち、閾値を越える楽曲が複数ある場合にはそれら全ての楽曲をリコメンド楽曲として特定してもよい。 Note that the recommended music to be identified is not limited to one music. For example, when there are two or more songs included in the singing history of user A and two or more songs with the highest emotion score indicating fun (when there are multiple songs with the same emotion score), a plurality of songs are identified as recommended songs May be. Alternatively, for example, when a threshold of emotion score indicating fun (for example, score “90” or more) is determined in advance, and there are a plurality of songs exceeding the threshold among songs included in the user's singing history All of these music pieces may be specified as recommended music pieces.
また、利用者Aがカラオケ装置1においてログイン操作を行った場合、サーバ装置が利用者Aの歌唱履歴を読み出してカラオケ装置1に送信し、カラオケ装置1の記憶部10aにおいて一時的に記憶しておくことでもよい。この場合、リコメンド楽曲特定部400は、記憶部10aに記憶された歌唱履歴を参照することでリコメンド楽曲を特定することができる。
Moreover, when the user A performs login operation in the
(報知部)
報知部500は、最初の歌唱者及び当該最初の歌唱者に対するリコメンド楽曲を報知する。
(Notification part)
The alerting | reporting
報知は様々な方法で可能である。たとえば報知部500は、表示装置30の表示画面に最初の歌唱者の名前とリコメンド楽曲に相当する楽曲の曲名及び歌手名とを表示させる。或いは、報知部500は、スピーカ20を介し「●●さん。●●(曲名)を歌って盛り上げてください」といったメッセージを放音することでもよい。
Notification can be made in various ways. For example, the
更に、報知部500は、リコメンド楽曲を報知した後、当該リコメンド楽曲を予約することでもよい。たとえば、報知部500は、利用者Aに対してリコメンド楽曲の報知を行った後、自動的にリコメンド楽曲の楽曲ID「ID−090」を予約待ち行列に登録することでカラオケ演奏予約を行うことができる。
Further, the
==カラオケ装置における処理について==
次に、図6を参照して本実施形態に係るカラオケ装置1における処理の具体例について述べる。図6は、カラオケ装置1における処理例を示すフローチャートである。
== About processing in karaoke equipment ==
Next, a specific example of processing in the
カラオケルームに入室した複数の利用者は、リモコン装置50等を介して自己の利用者IDでログインを行う(ログイン。ステップ10)。撮影部60は、ログインした利用者の撮影を行い、顔画像を取得する。
A plurality of users who have entered the karaoke room log in with their own user ID via the
カラオケ装置1は、全ての利用者がログインしてからの経過時間を測定する。所定時間を経過しても楽曲の予約が行われない場合(ステップ11でYの場合)、感情分析部200は、撮影部60で取得した利用者の顔画像に基づいて、各利用者の感情分析を行う(顔画像に基づく感情分析。ステップ12)。
The
歌唱者特定部300は、ステップ12における感情分析の結果に基づいて、複数の利用者のうち、楽しさを示す感情の度合いが最も高い利用者を最初の歌唱者として特定する(最初の歌唱者を特定。ステップ13)。
The
リコメンド楽曲特定部400は、ステップ13で特定した最初の歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、楽しさを示す感情スコアが最も高い楽曲を当該最初の歌唱者に対するリコメンド楽曲として特定する(リコメンド楽曲を特定。ステップ14)。
The recommended
報知部500は、ステップ13で特定した最初の歌唱者、及びステップ14で特定した最初の歌唱者に対するリコメンド楽曲を報知する(最初の歌唱者及びリコメンド楽曲の報知。ステップ15)。
The alerting | reporting
なお、カラオケ装置1は、ログインからの経過時間に関わらず、所定のタイミング(たとえば各利用者の顔画像の取得が完了したタイミング)でステップ12以降の処理を行ってもよい。
Note that the
このように、本実施形態に係るカラオケ装置1は、楽曲毎に、当該楽曲のカラオケ歌唱を行った際に利用者が感じる楽しさを示す感情スコアを関連付けて記憶するスコア記憶部100と、撮影部60で取得した利用者の顔画像に基づいて、当該利用者の感情分析を行う感情分析部200と、複数の利用者それぞれの感情分析の結果に基づいて、当該複数の利用者のうち、楽しさを示す感情の度合いが最も高い利用者を最初の歌唱者として特定する歌唱者特定部300と、最初の歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、楽しさを示す感情スコアが最も高い楽曲を当該最初の歌唱者に対するリコメンド楽曲として特定するリコメンド楽曲特定部400と、最初の歌唱者及び当該最初の歌唱者に対するリコメンド楽曲を報知する報知部500と、を有する。
As described above, the
このようなカラオケ装置1によれば、顔画像を用いた感情分析結果に基づいて、楽しさの感情を示す度合いが最も高い利用者を歌唱者として特定することができる。一般に、楽しさの感情を示す度合いが高い場合、カラオケ歌唱に対して乗り気であると考えることができる。従って、カラオケ歌唱に乗り気でない利用者が最初の歌唱者として指名されるといったことが生じ難い。また、特定された歌唱者の歌唱履歴を用いてリコメンド楽曲を特定することにより、急に最初の歌唱者として指名された利用者であっても、自分がカラオケ歌唱可能な楽曲、且つそのときの気分(楽しい気分)に合った楽曲がリコメンドされるため、選曲に戸惑うことなく、カラオケ歌唱を楽しむことができる。すなわち、本実施形態に係るカラオケ装置1によれば、複数の利用者でカラオケ歌唱を行う際に、各利用者の気分を考慮して、最初の歌唱者及びカラオケ歌唱に適した楽曲を報知することができる。
According to such a
また、報知部500は、リコメンド楽曲を報知した後、当該リコメンド楽曲を予約することができる。このように、報知したリコメンド楽曲を自動的に予約することにより、最初の歌唱者として指名された利用者は、予約作業を行う手間をかけずにスムーズにカラオケ歌唱を行うことができる。
Moreover, the alerting | reporting
<第2実施形態>
次に、図7を参照して、第2実施形態に係るカラオケ装置について説明する。本実施形態では、感情分析の結果を用いて、最初の歌唱者以降にカラオケ歌唱を行う新たな歌唱者、及び当該新たな歌唱者に対するリコメンド楽曲を特定する例について説明する。なお、第1実施形態と同様の構成については詳細な説明を省略する。
<Second Embodiment>
Next, a karaoke apparatus according to the second embodiment will be described with reference to FIG. In the present embodiment, an example in which a new singer who performs karaoke singing after the first singer and a recommended tune for the new singer will be described using the result of emotion analysis. Detailed description of the same configuration as that of the first embodiment will be omitted.
(歌唱者特定部)
本実施形態に係る歌唱者特定部300は、感情分析の結果に基づいて、楽しさを示す感情の度合いが高い順に、最初の歌唱者、及び最初の歌唱者以外の新たな歌唱者を特定する。
(Singer specific part)
The
新たな歌唱者は、カラオケ歌唱を行う複数の利用者のうち、最初の歌唱者として特定された利用者以外の利用者である。たとえば第1実施形態の図4の例において、利用者Aの楽しさを示す感情の度合いは「9」であり、利用者Bの楽しさを示す感情の度合いは「6」であり、利用者Cの楽しさを示す感情の度合いは「3」である。この場合、歌唱者特定部300は、楽しさを示す感情の度合いが高い順に歌唱者を特定する。具体的に、歌唱者特定部300は、「楽しさを示す感情の度合いが最も高い利用者」である利用者Aを最初の歌唱者として特定した後、利用者A以外の利用者B及び利用者Cについて、楽しさを示す感情の度合いが高い順に新たな歌唱者として特定する。利用者B及び利用者Cのうち、楽しさを示す感情の度合いがより高い利用者は、利用者Bである。この場合、歌唱者特定部300は、利用者B、利用者Cの順で新たな歌唱者を特定する。なお、最初の歌唱者として利用者Aを特定した後、利用者A以外の各利用者の感情分析に関しては、最初の歌唱者のカラオケ歌唱が歌唱中または歌唱終了した後に行い、その時の楽しさを示す感情の度合いによって歌唱者を特定してもよい。
The new singer is a user other than the user specified as the first singer among a plurality of users who perform karaoke singing. For example, in the example of FIG. 4 of the first embodiment, the degree of emotion indicating the enjoyment of the user A is “9”, the degree of emotion indicating the enjoyment of the user B is “6”, and the user The degree of emotion indicating the enjoyment of C is “3”. In this case, the
(リコメンド楽曲特定部)
本実施形態に係るリコメンド楽曲特定部400は、新たな歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、楽しさを示す感情スコアが最も高い楽曲を当該新たな歌唱者に対するリコメンド楽曲として特定する。
(Recommended music identification part)
The recommendation music specific |
たとえば、上記例に示した順で新たな歌唱者が特定されたとする。この場合、まず、リコメンド楽曲特定部400は、通信部10bを介してサーバ装置にアクセスし、利用者Bの歌唱履歴を参照する。リコメンド楽曲特定部400は、利用者Bの歌唱履歴に含まれる楽曲とスコア記憶部100に記憶された楽曲を比較し、利用者Bの歌唱履歴に含まれる楽曲(利用者Bがカラオケ歌唱済みの楽曲)、且つ楽しさを示す感情スコアが最も高い楽曲をリコメンド楽曲として特定する。次に、リコメンド楽曲特定部400は、通信部10bを介してサーバ装置にアクセスし、利用者Cの歌唱履歴を参照する。リコメンド楽曲特定部400は、利用者Cの歌唱履歴に含まれる楽曲とスコア記憶部100に記憶された楽曲を比較し、利用者Cの歌唱履歴に含まれる楽曲(利用者Cがカラオケ歌唱済みの楽曲)、且つ楽しさを示す感情スコアが最も高い楽曲をリコメンド楽曲として特定する。
For example, assume that a new singer is identified in the order shown in the above example. In this case, first, the recommended
(報知部)
本実施形態に係る報知部500は、最初の歌唱者及び当該最初の歌唱者に対するリコメンド楽曲を報知した後、楽しさを示す感情の度合いが高い順に、新たな歌唱者及び当該新たな歌唱者に対するリコメンド楽曲を報知する。
(Notification part)
After notifying the first singer and the recommended song for the first singer, the notifying
たとえば、報知部500は、表示装置30の表示画面に最初の歌唱者(利用者A)の名前とリコメンド楽曲に相当する楽曲の曲名及び歌手名とを表示させる。その後、報知部500は、利用者Aの次に楽しさを示す感情の度合いが高い利用者Bの名前とリコメンド楽曲に相当する楽曲の曲名及び歌手名とを表示させる。更に、利用者Bの名前等を表示させた後、報知部500は、利用者Cの次に楽しさを示す感情の度合いが高い利用者Cの名前とリコメンド楽曲に相当する楽曲の曲名及び歌手名とを表示させる。
For example, the
なお、新たな歌唱者及び当該新たな歌唱者に対するリコメンド楽曲の報知を行うタイミングは、最初の歌唱者及び当該最初の歌唱者に対するリコメンド楽曲を報知した後であればいつでもよい。たとえば、報知部500は、最初の歌唱者及び当該最初の歌唱者に対するリコメンド楽曲を報知した後、リコメンド楽曲の予約がなされた場合に、新たな歌唱者等の報知を行ってもよい。或いは、報知部500は、最初の歌唱者のカラオケ歌唱が終了した後、新たな歌唱者等の報知を行ってもよい。
In addition, the timing which alert | reports the recommendation music with respect to a new singer and the said new singer may be any time, as long as it is after informing the recommendation tune with respect to the first singer and the said first singer. For example, the
==カラオケ装置における処理について==
次に、図7を参照して本実施形態に係るカラオケ装置1における処理の具体例について述べる。図7は、カラオケ装置1における処理例を示すフローチャートである。
== About processing in karaoke equipment ==
Next, a specific example of processing in the
ステップ20〜22は、第1実施形態のステップ10〜12と同様である。
歌唱者特定部300は、ステップ22における感情分析の結果に基づいて、複数の利用者のうち、楽しさを示す感情の度合いが高い順に歌唱者を特定する(歌唱者の順番を特定。ステップ23)。
Based on the result of the emotion analysis in
リコメンド楽曲特定部400は、ステップ23で特定した歌唱者の順に沿って、最初の歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、楽しさを示す感情スコアが最も高い楽曲を当該最初の歌唱者に対するリコメンド楽曲として特定する(最初の歌唱者のリコメンド楽曲を特定。ステップ24)。
The recommended
報知部500は、ステップ23で特定した順に沿った最初の歌唱者、及びステップ24で特定した最初の歌唱者に対するリコメンド楽曲を報知する(最初の歌唱者及びリコメンド楽曲の報知。ステップ25)。
The alerting | reporting
次に、報知部500は、ステップ23で特定した順に沿った新たな歌唱者(次の歌唱者)、及びステップ24で特定した新たな歌唱者に対するリコメンド楽曲を報知する(新たな歌唱者及びリコメンド楽曲の報知。ステップ26)。
Next, the alerting | reporting
報知部500は、全ての歌唱者及びリコメンド楽曲の報知が完了するまで(ステップ27でY)、繰り返し報知の処理を行う。
The
なお、本実施形態の構成によれば、カラオケルーム居る全ての利用者について順番に指名がなされることとなる。一方、カラオケ歌唱を行うこと自体に抵抗がある利用者も存在する。そこで、歌唱者特定部300は、感情分析の結果が、予め設定された閾値以上の利用者についてのみ、歌唱者としての特定を行うことでもよい。閾値は、カラオケ歌唱の指名を行うかどうかを決定する基準となる値であり、たとえば、図4に示したように楽しさを示す感情の度合いを10段階で示す場合であれば、閾値は「5」や「6」といった数値で示すことができる。また、リコメンド楽曲特定部400は、一の利用者が歌唱者に特定された際のリコメンド楽曲の識別情報を記憶しておく。そして、他の利用者が歌唱者に特定された際のリコメンド楽曲として同じ楽曲が特定された場合、リコメンド楽曲特定部400は、当該楽曲の次に楽しさを示す感情スコアが高い楽曲を、当該他の歌唱者に対するリコメンド楽曲として特定し直してもよい。
In addition, according to the structure of this embodiment, nomination will be made in order about all the users who are in a karaoke room. On the other hand, there are users who are reluctant to perform karaoke singing. Therefore, the
このように、本実施形態に係る歌唱者特定部300は、感情分析の結果に基づいて、最初の歌唱者以外の利用者について、楽しさを示す感情の度合いが高い順に新たな歌唱者として特定し、リコメンド楽曲特定部400は、新たな歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、楽しさを示す感情スコアが最も高い楽曲を当該新たな歌唱者に対するリコメンド楽曲として特定し、報知部500は、最初の歌唱者及び当該最初の歌唱者に対するリコメンド楽曲を報知した後、楽しさを示す感情の度合いが高い順に、新たな歌唱者及び当該新たな歌唱者に対するリコメンド楽曲を報知する。
As described above, the
このようなカラオケ装置1によれば、顔画像を用いた感情分析結果に基づいて、楽しさの感情を示す度合いが高い順に歌唱者を特定することができる。従って、楽しさの感情を示す度合いが高い順にカラオケ歌唱を行う機会が得られるため、場の雰囲気がより盛り上がりやすくなる。また、歌唱者に適したリコメンド楽曲が特定されるため、第1実施形態のカラオケ装置1と同様、選曲に戸惑うことなく、カラオケ歌唱を楽しむことができる。
According to such a
<その他>
上記実施形態では、感情スコア及び感情分析の対象として「楽しさ」を例に説明したが、「楽しさ」以外の感情を用いて(或いは複数の感情を総合して)、歌唱者やリコメンド楽曲を特定することも可能である。たとえば、ストレス発散のためにカラオケ歌唱を行おうと考える利用者の場合、その顔には「悲しさ」や「怒り」を示す感情が現れる。そして、このような感情の度合いが高い利用者からカラオケ歌唱を行うことでストレス発散の目的を達成できる。
<Others>
In the above embodiment, “fun” has been described as an example of the emotion score and emotion analysis. However, using emotions other than “fun” (or combining multiple emotions), singers and recommended songs It is also possible to specify. For example, in the case of a user who wants to sing a karaoke song to relieve stress, emotions indicating “sadness” and “anger” appear on the face. And the purpose of stress relief can be achieved by performing karaoke singing from a user with a high degree of emotion.
このため、スコア記憶部100は、楽曲毎に、当該楽曲のカラオケ歌唱を行った際に利用者が感じる悲しさ及び/または怒りを示す感情スコアを関連付けて記憶する。感情分析部200は、撮影部60で取得した利用者の顔画像に基づいて、当該利用者の悲しさや怒りに関する感情分析を行う。歌唱者特定部300は、複数の利用者それぞれの感情分析の結果に基づいて、当該複数の利用者のうち、悲しさ及び/または怒りを示す感情の度合いが最も高い利用者を最初の歌唱者として特定する。リコメンド楽曲特定部400は、最初の歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、悲しさ及び/または怒りを示す感情スコアが最も高い楽曲を当該最初の歌唱者に対するリコメンド楽曲として特定する。
For this reason, the score memory |
上記実施形態は、例として提示したものであり、発明の範囲を限定するものではない。上記の構成は、適宜組み合わせて実施することが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。上記実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 The above embodiment is presented as an example and does not limit the scope of the invention. The above configurations can be implemented in appropriate combination, and various omissions, replacements, and changes can be made without departing from the scope of the invention. The above-described embodiments and modifications thereof are included in the invention described in the claims and equivalents thereof in the same manner as included in the scope and spirit of the invention.
1 カラオケ装置
100 スコア記憶部
200 感情分析部
300 歌唱者特定部
400 リコメンド楽曲特定部
500 報知部
DESCRIPTION OF
Claims (3)
楽曲毎に、当該楽曲のカラオケ歌唱を行った際に利用者が感じる楽しさを示す感情スコアを関連付けて記憶するスコア記憶部と、
撮影部で取得した利用者の顔画像に基づいて、当該利用者の感情分析を行う感情分析部と、
前記複数の利用者それぞれの前記感情分析の結果に基づいて、当該複数の利用者のうち、楽しさを示す感情の度合いが最も高い利用者を最初の歌唱者として特定する歌唱者特定部と、
前記最初の歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、前記楽しさを示す感情スコアが最も高い楽曲を当該最初の歌唱者に対するリコメンド楽曲として特定するリコメンド楽曲特定部と、
前記最初の歌唱者及び当該最初の歌唱者に対する前記リコメンド楽曲を報知する報知部と、
を有するカラオケ装置。 A karaoke apparatus in which a plurality of users can perform karaoke singing in order,
A score storage unit that stores an emotional score indicating the enjoyment felt by the user when performing karaoke singing of the song for each song;
An emotion analysis unit that performs an emotion analysis of the user based on the face image of the user acquired by the imaging unit;
Based on the results of the emotion analysis of each of the plurality of users, a singer identifying unit that identifies a user who has the highest degree of emotion as a first singer among the plurality of users,
Among the songs that have already been sung karaoke included in the singing history of the first singer, a recommended song identifying unit that identifies a song having the highest emotion score indicating the fun as a recommended song for the first singer,
A notifying unit for notifying the recommended song for the first singer and the first singer;
Karaoke apparatus having
前記リコメンド楽曲特定部は、前記新たな歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、楽しさを示す感情スコアが最も高い楽曲を当該新たな歌唱者に対するリコメンド楽曲として特定し、
前記報知部は、前記最初の歌唱者及び当該最初の歌唱者に対するリコメンド楽曲を報知した後、前記楽しさを示す感情の度合いが高い順に、前記新たな歌唱者及び当該新たな歌唱者に対する前記リコメンド楽曲を報知することを特徴とする請求項1記載のカラオケ装置。 The singer identification unit identifies the first singer and a new singer other than the first singer in descending order of the degree of emotion indicating fun based on the result of the emotion analysis,
The recommended song specifying unit specifies a song having the highest emotion score indicating fun among the songs already karaoke singing included in the singing history of the new singer as a recommended song for the new singer,
The notification unit notifies the recommended song for the first singer and the first singer, and then the recommendation for the new singer and the new singer in descending order of the degree of emotion indicating the fun. The karaoke apparatus according to claim 1, wherein music is notified.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018014552A JP6944391B2 (en) | 2018-01-31 | 2018-01-31 | Karaoke equipment |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018014552A JP6944391B2 (en) | 2018-01-31 | 2018-01-31 | Karaoke equipment |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019132980A true JP2019132980A (en) | 2019-08-08 |
JP6944391B2 JP6944391B2 (en) | 2021-10-06 |
Family
ID=67546783
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018014552A Active JP6944391B2 (en) | 2018-01-31 | 2018-01-31 | Karaoke equipment |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6944391B2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7453712B2 (en) | 2021-04-16 | 2024-03-21 | 深▲せん▼地平▲線▼机器人科技有限公司 | Audio reproduction method, device, computer readable storage medium and electronic equipment |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20090011685A (en) * | 2007-07-27 | 2009-02-02 | 주식회사 케이티 | System and method for providing a singing room service using a image-inference and a server |
JP2016114852A (en) * | 2014-12-16 | 2016-06-23 | 株式会社第一興商 | Karaoke system |
JP2016188978A (en) * | 2015-03-30 | 2016-11-04 | ブラザー工業株式会社 | Karaoke device and program |
JP2016194614A (en) * | 2015-03-31 | 2016-11-17 | 株式会社エクシング | Music recommendation system, program, and music recommendation method |
JP2018021942A (en) * | 2016-08-01 | 2018-02-08 | 株式会社第一興商 | Karaoke system |
-
2018
- 2018-01-31 JP JP2018014552A patent/JP6944391B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20090011685A (en) * | 2007-07-27 | 2009-02-02 | 주식회사 케이티 | System and method for providing a singing room service using a image-inference and a server |
JP2016114852A (en) * | 2014-12-16 | 2016-06-23 | 株式会社第一興商 | Karaoke system |
JP2016188978A (en) * | 2015-03-30 | 2016-11-04 | ブラザー工業株式会社 | Karaoke device and program |
JP2016194614A (en) * | 2015-03-31 | 2016-11-17 | 株式会社エクシング | Music recommendation system, program, and music recommendation method |
JP2018021942A (en) * | 2016-08-01 | 2018-02-08 | 株式会社第一興商 | Karaoke system |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7453712B2 (en) | 2021-04-16 | 2024-03-21 | 深▲せん▼地平▲線▼机器人科技有限公司 | Audio reproduction method, device, computer readable storage medium and electronic equipment |
Also Published As
Publication number | Publication date |
---|---|
JP6944391B2 (en) | 2021-10-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6535497B2 (en) | Music recommendation system, program and music recommendation method | |
JP6409652B2 (en) | Karaoke device, program | |
JP6944391B2 (en) | Karaoke equipment | |
JP2010176544A (en) | Conference support device | |
JP2023175013A (en) | Taste determination system, taste determination method, and program | |
JP2015045671A (en) | Singing part decision system | |
JP2016102961A (en) | Karaoke rating system considering listener evaluation | |
JP7358265B2 (en) | Characterization system and method | |
JP2019101148A (en) | Communication karaoke system | |
JP6176934B2 (en) | Singing ranking display system | |
JP6920135B2 (en) | Karaoke equipment | |
JP2019066552A (en) | Musical piece recommendation device | |
JP7502921B2 (en) | Karaoke equipment | |
JP6954780B2 (en) | Karaoke equipment | |
JP2020042557A (en) | Excitement promotion system | |
JP6678535B2 (en) | Karaoke system | |
JP7401235B2 (en) | karaoke equipment | |
JP6876170B1 (en) | Karaoke equipment | |
JP7069389B1 (en) | Solution provision system and mobile terminal | |
JP6913783B1 (en) | Karaoke system | |
JP2023162958A (en) | Karaoke device | |
JP7285090B2 (en) | karaoke equipment | |
WO2022079777A1 (en) | Analysis device, analysis system, analysis method, and non-transitory computer-readable medium having program stored thereon | |
JP7082549B2 (en) | Karaoke equipment | |
JP7478076B2 (en) | Karaoke equipment, karaoke system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201002 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210827 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210907 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210910 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6944391 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |