JP2019132980A - Karaoke device - Google Patents

Karaoke device Download PDF

Info

Publication number
JP2019132980A
JP2019132980A JP2018014552A JP2018014552A JP2019132980A JP 2019132980 A JP2019132980 A JP 2019132980A JP 2018014552 A JP2018014552 A JP 2018014552A JP 2018014552 A JP2018014552 A JP 2018014552A JP 2019132980 A JP2019132980 A JP 2019132980A
Authority
JP
Japan
Prior art keywords
singer
user
emotion
karaoke
music
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018014552A
Other languages
Japanese (ja)
Other versions
JP6944391B2 (en
Inventor
紀久 伊藤
Norihisa Ito
紀久 伊藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Daiichikosho Co Ltd
Original Assignee
Daiichikosho Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daiichikosho Co Ltd filed Critical Daiichikosho Co Ltd
Priority to JP2018014552A priority Critical patent/JP6944391B2/en
Publication of JP2019132980A publication Critical patent/JP2019132980A/en
Application granted granted Critical
Publication of JP6944391B2 publication Critical patent/JP6944391B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)

Abstract

To provide a karaoke device capable of notifying a first singer and music suitable for karaoke singing in consideration of each user's mood when performing karaoke singing by a plurality of users.SOLUTION: The karaoke device includes a score storage unit which stores an emotional score indicating fun in association with each piece of music, an emotion analysis unit which analyzes the user's emotion based on the face image of the user, a singer identification unit which identifies a user who has the highest degree of feeling of emotion as a first singer based on a result of emotion analysis of each of a plurality of users, a recommended song specifying unit which specifies a song with the highest emotion score indicating fun as a recommended song for the first singer among sung songs included in the singing history of the first singer, and a notifying unit for notifying the first singer and the recommended song for the first singer.SELECTED DRAWING: Figure 2

Description

本発明はカラオケ装置に関する。   The present invention relates to a karaoke apparatus.

複数の利用者でカラオケ歌唱を行う際、お互いに遠慮し合ってしまい、最初にカラオケ歌唱を行う利用者を決定するまでに時間を要する場合がある。   When karaoke singing is performed by a plurality of users, they may refrain from each other, and it may take time to determine a user who performs karaoke singing first.

そこで、たとえば、特許文献1には、最初の利用者がログインした後、所定時間経過しても楽曲のカラオケ演奏が開始されない時には、各利用者の歌唱履歴を参照し、全歌唱回数、所定期間の歌唱回数、歌唱時刻等の情報を用いることで、カラオケ歌唱を行う利用者を指名する技術が開示されている。   Therefore, for example, in Patent Document 1, when the karaoke performance of the music is not started even after a predetermined time has elapsed after the first user logs in, the singing history of each user is referred to, the total number of singing times, and the predetermined time period. The technique of nominating the user who performs karaoke singing by using information such as the number of times of singing and the singing time is disclosed.

また、出願人による特許文献2には、各利用者が入室して最初に予約した回数をカウントしておき、予約回数が最も多い利用者を最初の歌唱者として特定する技術が開示されている。   Further, Patent Document 2 by the applicant discloses a technique for counting the number of times each user enters the room and making a reservation first, and specifying the user who has the highest number of reservations as the first singer. .

特開2016−114852号公報Japanese Patent Laid-Open No. 2006-114852 特願2016−150934号公報Japanese Patent Application No. 2006-150934

ここで、特許文献1や特許文献2の技術によれば、最初にカラオケ歌唱を行う利用者(最初の歌唱者)を自動的に指名することができる。一方、各利用者はその日の体調やその場の雰囲気等によって、カラオケ歌唱に乗り気である場合もあれば、逆にあまり乗り気でない場合もある。しかし、特許文献1や特許文献2の技術によれば、カラオケ歌唱に乗り気でない場合であっても、最初の歌唱者として指名される恐れがある。   Here, according to the technique of patent document 1 or patent document 2, the user (first singer) who performs karaoke singing first can be automatically appointed. On the other hand, each user may be fond of karaoke singing or may not be fond of karaoke singing depending on the physical condition of the day and the atmosphere of the place. However, according to the techniques of Patent Document 1 and Patent Document 2, even if the user is not comfortable with karaoke singing, there is a risk of being nominated as the first singer.

また、カラオケ歌唱を行う利用者は、リモコン装置等を利用して楽曲を選曲し、予約を行う。一方、特許文献1や特許文献2のように歌唱者の指名が自動的になされる場合、利用者は自分の意思とは関係なく、急に歌唱順を指定されることになるため、選曲に戸惑う恐れがある。   In addition, a user who performs karaoke singing uses a remote control device or the like to select music and make a reservation. On the other hand, when the singer's nomination is made automatically as in Patent Document 1 and Patent Document 2, the user is suddenly assigned the singing order regardless of his / her intention, May be confused.

本発明の目的は、複数の利用者でカラオケ歌唱を行う際に、各利用者の気分を考慮して、最初の歌唱者及びカラオケ歌唱に適した楽曲を報知することが可能なカラオケ装置を提供することにある。   An object of the present invention is to provide a karaoke apparatus capable of notifying the first singer and music suitable for karaoke singing in consideration of the mood of each user when performing karaoke singing by a plurality of users. There is to do.

上記目的を達成するための主たる発明は、複数の利用者が順番にカラオケ歌唱を行うことが可能なカラオケ装置であって、楽曲毎に、当該楽曲のカラオケ歌唱を行った際に利用者が感じる楽しさを示す感情スコアを関連付けて記憶するスコア記憶部と、撮影部で取得した利用者の顔画像に基づいて、当該利用者の感情分析を行う感情分析部と、前記複数の利用者それぞれの前記感情分析の結果に基づいて、当該複数の利用者のうち、楽しさを示す感情の度合いが最も高い利用者を最初の歌唱者として特定する歌唱者特定部と、前記最初の歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、前記楽しさを示す感情スコアが最も高い楽曲を当該最初の歌唱者に対するリコメンド楽曲として特定するリコメンド楽曲特定部と、前記最初の歌唱者及び当該最初の歌唱者に対する前記リコメンド楽曲を報知する報知部と、を有するカラオケ装置である。
本発明の他の特徴については、後述する明細書及び図面の記載により明らかにする。
The main invention for achieving the above object is a karaoke apparatus in which a plurality of users can perform karaoke singing in order, and the user feels when performing karaoke singing of the music for each music A score storage unit that associates and stores emotion scores indicating fun, an emotion analysis unit that performs emotion analysis of the user based on the face image of the user acquired by the imaging unit, and each of the plurality of users Based on the result of the emotion analysis, among the plurality of users, a singer identification unit that identifies a user having the highest degree of emotion indicating pleasure as the first singer, and the singing of the first singer Among the karaoke songs already included in the history, a recommended song identifying unit that identifies a song having the highest emotion score indicating the fun as a recommended song for the first singer, and the first song A singer in and the notification section for notifying the recommended music for the first singer, a karaoke apparatus having a.
Other characteristics of the present invention will be made clear by the description and drawings described later.

本発明によれば、複数の利用者でカラオケ歌唱を行う際に、各利用者の気分を考慮して、最初の歌唱者及びカラオケ歌唱に適した楽曲を報知することができる。   According to the present invention, when performing karaoke singing by a plurality of users, it is possible to report the music suitable for the first singer and karaoke singing in consideration of the mood of each user.

第1実施形態に係るカラオケ装置の概略を示す図である。It is a figure which shows the outline of the karaoke apparatus which concerns on 1st Embodiment. 第1実施形態に係るカラオケ本体のハードウェア構成例を示す図である。It is a figure which shows the hardware structural example of the karaoke main body which concerns on 1st Embodiment. 第1実施形態に係るスコア記憶部に記憶されているテーブルデータの例を示す図である。It is a figure which shows the example of the table data memorize | stored in the score memory | storage part which concerns on 1st Embodiment. 第1実施形態に係る感情分析結果を示す図である。It is a figure which shows the emotion analysis result which concerns on 1st Embodiment. 第1実施形態に係る利用者の歌唱履歴を示す図である。It is a figure showing a user's singing history concerning a 1st embodiment. 第1実施形態に係るカラオケ装置の処理を示すフローチャートである。It is a flowchart which shows the process of the karaoke apparatus which concerns on 1st Embodiment. 第2実施形態に係るカラオケ装置の処理を示すフローチャートである。It is a flowchart which shows the process of the karaoke apparatus which concerns on 2nd Embodiment.

<第1実施形態>
図1〜図6を参照して、第1実施形態に係るカラオケ装置について説明する。
<First Embodiment>
With reference to FIGS. 1-6, the karaoke apparatus which concerns on 1st Embodiment is demonstrated.

==カラオケ装置==
カラオケ装置1は、カラオケ演奏及び利用者がカラオケ歌唱を行うための装置である。カラオケ装置1は、たとえばカラオケ店舗の各部屋に設置される。一台のカラオケ装置を利用して、複数の利用者が順番にカラオケ歌唱を行うことができる。図1に示すように、カラオケ装置1は、カラオケ本体10、スピーカ20、表示装置30、マイク40、リモコン装置50、及び撮影部60を備える。
== Karaoke equipment ==
The karaoke apparatus 1 is an apparatus for performing karaoke performance and karaoke singing by a user. The karaoke apparatus 1 is installed in each room of a karaoke store, for example. Using one karaoke device, a plurality of users can perform karaoke singing in order. As shown in FIG. 1, the karaoke apparatus 1 includes a karaoke main body 10, a speaker 20, a display device 30, a microphone 40, a remote control device 50, and a photographing unit 60.

カラオケ本体10は、選曲されたカラオケ楽曲の演奏制御、歌詞や背景映像等の表示制御、マイク40を通じて入力された音声信号の処理といった、カラオケ演奏やカラオケ歌唱に関する各種の制御を行う。スピーカ20はカラオケ本体10からの放音信号に基づいて放音するための構成である。表示装置30はカラオケ本体10からの信号に基づいて映像や画像を画面に表示するための構成である。マイク40は利用者の歌唱音声をアナログの音声信号に変換してカラオケ本体10に入力するための構成である。リモコン装置50は、カラオケ本体10に対する各種操作をおこなうための装置である。   The karaoke main body 10 performs various controls related to karaoke performance and karaoke singing, such as performance control of selected karaoke music, display control of lyrics and background video, and processing of audio signals input through the microphone 40. The speaker 20 is configured to emit sound based on the sound emission signal from the karaoke main body 10. The display device 30 is configured to display a video or an image on the screen based on a signal from the karaoke main body 10. The microphone 40 is configured to convert a user's singing voice into an analog voice signal and input it to the karaoke main body 10. The remote control device 50 is a device for performing various operations on the karaoke main body 10.

撮影部60は、利用者の顔を撮影し、顔画像(顔画像データ)を取得するための装置である。撮影部60は、カラオケ装置1が設置されているカラオケルームに少なくとも1台設置される。撮影部60は、取得した顔画像をカラオケ本体10に出力する。撮影部60による撮影タイミングは様々である。たとえば、撮影部60は、利用者がカラオケ装置1において、自己の利用者IDを用いてログイン操作を行った際に撮影を行う。カラオケ本体10は、撮影された顔画像を利用者IDと関連付けて記憶する。なお、撮影部60は、たとえばリモコン装置50に設けられていてもよいし、カラオケ装置1と別に設けられていてもよい。   The photographing unit 60 is an apparatus for photographing a user's face and acquiring a face image (face image data). At least one photographing unit 60 is installed in a karaoke room where the karaoke apparatus 1 is installed. The imaging unit 60 outputs the acquired face image to the karaoke main body 10. There are various shooting timings by the shooting unit 60. For example, the imaging unit 60 performs imaging when the user performs a login operation using his / her user ID in the karaoke apparatus 1. The karaoke main body 10 stores the photographed face image in association with the user ID. Note that the photographing unit 60 may be provided in the remote control device 50, for example, or may be provided separately from the karaoke device 1.

==カラオケ本体10==
図2に示すように、本実施形態に係るカラオケ本体10は、記憶部10a、通信部10b、入力部10c、及び制御部10dを備える。各構成はインターフェース(図示なし)を介してバスBに接続されている。
== Karaoke body 10 ==
As shown in FIG. 2, the karaoke main body 10 according to the present embodiment includes a storage unit 10a, a communication unit 10b, an input unit 10c, and a control unit 10d. Each component is connected to the bus B via an interface (not shown).

[記憶部]
記憶部10aは、カラオケ演奏を行うための楽曲データ等、各種のデータを記憶する大容量の記憶装置である。本実施形態における記憶部10aの記憶領域の一部は、スコア記憶部100として機能する。
[Storage unit]
The storage unit 10a is a large-capacity storage device that stores various data such as music data for performing a karaoke performance. A part of the storage area of the storage unit 10 a in this embodiment functions as the score storage unit 100.

(スコア記憶部)
スコア記憶部100は、楽曲毎に、当該楽曲のカラオケ歌唱を行った際に利用者が感じる楽しさを示す感情スコアを関連付けて記憶する。
(Score memory)
The score storage unit 100 stores, for each piece of music, an emotional score indicating the enjoyment felt by the user when performing a karaoke singing of the piece of music.

ある楽曲のカラオケ歌唱を行った際に利用者が楽しい気分であると感じられるかどうかは、感情分析に関する公知技術(たとえば、特開平10−187178号公報や「音声こころ分析サービス」(株式会社日立システムズ))により求めることができる。   Whether or not a user feels pleasant when performing a karaoke singing of a certain piece of music depends on known techniques relating to emotion analysis (for example, Japanese Laid-Open Patent Publication No. 10-187178 and “Speech Mind Analysis Service” (Hitachi Corporation). Systems)).

たとえば、新たな楽曲が配信される都度、サーバ装置(図示無し)は、当該新たな楽曲を歌唱する歌手の歌唱音声から、感情の込め方と相関のある感情特徴量を抽出する。サーバ装置は、抽出された感情特徴量に基づいて、歌唱に込められた「楽しさ」に関する感情を分析する。そして、サーバ装置は、感情分析により得られた情報をスコア化する(「楽しさ」に関する感情が強いほど高いスコアとなる)ことで、新たな楽曲の「楽しさ」に関するスコアを生成する。サーバ装置は、生成したスコアを新たな楽曲の識別情報(楽曲ID)と関連付けてカラオケ装置1に配信する。カラオケ装置1のスコア記憶部100は、配信されたスコアを順次記憶する。   For example, each time a new music piece is distributed, a server device (not shown) extracts an emotion feature quantity that correlates with how to put in emotion from the singing voice of a singer who sings the new music piece. Based on the extracted emotion feature quantity, the server device analyzes the emotion related to “fun” included in the singing. Then, the server device scores the information obtained by the emotion analysis (the higher the emotion related to “fun”, the higher the score), thereby generating a score related to “fun” of the new music. The server device distributes the generated score to the karaoke device 1 in association with the new music identification information (music ID). The score storage unit 100 of the karaoke apparatus 1 sequentially stores the distributed scores.

図3は、スコア記憶部100に記憶されるデータの具体例を示した図である。図3の例では、「楽しさ」を0〜100点のスコアとして示している。また、図3の例では、スコアの高い順に楽曲を並べて記憶する例を示している。   FIG. 3 is a diagram illustrating a specific example of data stored in the score storage unit 100. In the example of FIG. 3, “fun” is shown as a score of 0 to 100 points. In the example of FIG. 3, an example is shown in which music is arranged and stored in descending order of score.

[通信部、入力部]
通信部10bは、カラオケ本体10とカラオケ装置1の他の構成(或いは、サーバ装置)との通信を行うためのインターフェースを提供する。入力部10cは、利用者が各種の指示入力を行うための構成である。なお、表示装置30やリモコン装置50の表示画面に表示された各種アイコンを選択することで、各種の指示入力を行うことも可能である。この場合、表示装置30やリモコン装置50が入力部10cとして機能する。
[Communication section, input section]
The communication unit 10b provides an interface for performing communication between the karaoke main body 10 and another configuration (or server device) of the karaoke apparatus 1. The input unit 10c is configured for a user to input various instructions. It is possible to input various instructions by selecting various icons displayed on the display screen of the display device 30 or the remote control device 50. In this case, the display device 30 and the remote control device 50 function as the input unit 10c.

[制御部]
制御部10dは、カラオケ装置1における各種の制御を行う。制御部10dは、CPUおよびメモリ(いずれも図示無し)を備える。CPUは、メモリに記憶されたプログラムを実行することにより各種の機能を実現する。本実施形態においてはCPUがメモリに記憶されるプログラムを実行することにより、制御部10dは、感情分析部200、歌唱者特定部300、リコメンド楽曲特定部400、及び報知部500として機能する。
[Control unit]
The control unit 10d performs various controls in the karaoke apparatus 1. The control unit 10d includes a CPU and a memory (both not shown). The CPU realizes various functions by executing programs stored in the memory. In the present embodiment, when the CPU executes a program stored in the memory, the control unit 10d functions as the emotion analysis unit 200, the singer identification unit 300, the recommended song identification unit 400, and the notification unit 500.

(感情分析部)
感情分析部200は、撮影部60で取得した利用者の顔画像に基づいて、当該利用者の感情分析を行う。
(Emotion Analysis Department)
The emotion analysis unit 200 performs emotion analysis of the user based on the user's face image acquired by the imaging unit 60.

顔画像(顔画像データ)を用いた感情分析の処理は、公知技術を利用することができる。たとえば、「BeesightMARKII」(株式会社アーツエイハン。「Beesight」は登録商標)によれば、人の顔画像から6種類の感情を分析し、感情毎のパラメータを得ることができる。また、特開2017−156854号公報に記載されている畳み込みニューラルネットワーク(Convolutional Neural Network:CNN/ConvNet)によれば、ある特定の感情のパラメータを得ることができる。   A publicly known technique can be used for the emotion analysis process using the face image (face image data). For example, according to “BeesightMARKII” (Arts Aihan Co., Ltd., “Beesight” is a registered trademark), six types of emotions can be analyzed from a human face image, and parameters for each emotion can be obtained. Further, according to a convolutional neural network (CNN / ConvNet) described in Japanese Patent Application Laid-Open No. 2017-156854, a specific emotion parameter can be obtained.

感情分析部200は、これらの公知技術を利用して利用者の顔画像を分析し、「楽しさ」に関するパラメータ(BeesightMARKIIの例であれば「幸せ」に関するパラメータ)を求める。パラメータは、たとえば、0〜100点のスコアとして求めてもよいし、1〜10の10段階のスコアとして求めてもよい。   The emotion analysis unit 200 analyzes the user's face image using these known techniques, and obtains a parameter relating to “joy” (a parameter relating to “happiness” in the case of BeesightMARK II). For example, the parameter may be obtained as a score of 0 to 100 points, or may be obtained as a 10-level score of 1 to 10.

感情分析部200は、カラオケ装置1を利用している複数の利用者それぞれについて、顔画像の解析を行い、各利用者の感情分析を行う。感情分析部200は、分析結果を利用者IDと併せて歌唱者特定部300に出力する。たとえば、利用者A〜利用者Cぞれぞれの顔画像について感情分析を行った結果、「楽しさ」に関するパラメータが図4のように得られたとする(図4は、「楽しさ」を10段階のスコアで示している)。感情分析部200は、各パラメータを利用者IDと関連付けて歌唱者特定部300に出力する。   The emotion analysis unit 200 analyzes a face image for each of a plurality of users who use the karaoke apparatus 1 and performs emotion analysis of each user. The emotion analysis unit 200 outputs the analysis result to the singer identification unit 300 together with the user ID. For example, as a result of the emotion analysis on the face images of each of the users A to C, it is assumed that a parameter relating to “fun” is obtained as shown in FIG. 4 (FIG. 4 shows “fun” (Shown with a 10-point score). The emotion analysis unit 200 outputs each parameter to the singer identification unit 300 in association with the user ID.

(歌唱者特定部)
歌唱者特定部300は、複数の利用者それぞれの感情分析の結果に基づいて、当該複数の利用者のうち、楽しさを示す感情の度合いが最も高い利用者を最初の歌唱者として特定する。
(Singer specific part)
The singer identification unit 300 identifies, as the first singer, the user who has the highest degree of emotion indicating fun among the plurality of users, based on the emotion analysis results of the plurality of users.

楽しさを示す感情の度合いは、感情分析部200による分析結果(パラメータ)に相当する。たとえば図4の例において、利用者Aの楽しさを示す感情の度合いは「9」であり、利用者Bの楽しさを示す感情の度合いは「6」であり、利用者Cの楽しさを示す感情の度合いは「3」である。この場合、利用者Aが「楽しさを示す感情の度合いが最も高い利用者」に相当する。また、最初の歌唱者とは、複数の利用者でカラオケ歌唱を行う機会において、最初にカラオケ歌唱を行う利用者(カラオケルームに入室後、1番目にカラオケ歌唱を行う利用者)である。   The degree of emotion indicating enjoyment corresponds to an analysis result (parameter) by the emotion analysis unit 200. For example, in the example of FIG. 4, the degree of emotion indicating the enjoyment of the user A is “9”, the degree of emotion indicating the enjoyment of the user B is “6”, and the enjoyment of the user C is indicated. The degree of emotion shown is “3”. In this case, the user A corresponds to “a user with the highest degree of emotion indicating fun”. Moreover, the first singer is a user who performs karaoke singing first (a user who performs karaoke singing first after entering the karaoke room) on the occasion of performing karaoke singing by a plurality of users.

歌唱者特定部300は、各利用者の感情分析の結果を比較することにより、最初の歌唱者を特定する。たとえば、図4のような感情分析結果が得られた場合、歌唱者特定部300は、利用者Aを最初の歌唱者として特定する。歌唱者特定部300は、特定した最初の歌唱者(利用者A)の利用者IDをリコメンド楽曲特定部400に出力する。   The singer specifying unit 300 specifies the first singer by comparing the results of emotion analysis of each user. For example, when the emotion analysis result as shown in FIG. 4 is obtained, the singer specifying unit 300 specifies the user A as the first singer. The singer identification unit 300 outputs the user ID of the identified first singer (user A) to the recommended song identification unit 400.

(リコメンド楽曲特定部)
リコメンド楽曲特定部400は、最初の歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、楽しさを示す感情スコアが最も高い楽曲を当該最初の歌唱者に対するリコメンド楽曲として特定する。
(Recommended music identification part)
The recommended song specifying unit 400 specifies a song having the highest emotion score indicating fun among the songs that have been karaoke sung included in the singing history of the first singer as a recommended song for the first singer.

歌唱履歴は、ある利用者が過去に行ったカラオケ歌唱に関する各種データ(過去にカラオケ歌唱した楽曲情報等)を含む。歌唱履歴は、たとえばサーバ装置(図示無し)に記憶されている。リコメンド楽曲は、利用者に対してカラオケ歌唱を推奨する楽曲である。   The singing history includes various data related to karaoke singing performed by a certain user in the past (music information sung in the past, etc.). The singing history is stored in, for example, a server device (not shown). The recommended music is music that recommends karaoke singing to the user.

ここで、上記例に示したように利用者Aが最初の歌唱者として特定されたとする。この場合、リコメンド楽曲特定部400は、通信部10bを介してサーバ装置にアクセスし、利用者Aの歌唱履歴を参照する。ここで利用者Aの歌唱履歴には、過去にカラオケ歌唱した楽曲情報(楽曲ID)として図5に示すデータが含まれていたとする。この場合、リコメンド楽曲特定部400は、利用者Aの歌唱履歴に含まれる楽曲とスコア記憶部100に記憶された楽曲を比較し、利用者Aの歌唱履歴に含まれる楽曲(利用者Aがカラオケ歌唱済みの楽曲)、且つ楽しさを示す感情スコアが最も高い楽曲(図3のID−090に相当する楽曲)をリコメンド楽曲として特定する。   Here, it is assumed that user A is specified as the first singer as shown in the above example. In this case, the recommended music specifying unit 400 accesses the server device via the communication unit 10b and refers to the singing history of the user A. Here, it is assumed that the singing history of the user A includes data shown in FIG. 5 as music information (music ID) sung in the past. In this case, the recommended music specifying unit 400 compares the music included in the singing history of the user A and the music stored in the score storage unit 100, and the music included in the singing history of the user A (the user A karaoke A song that has been sung) and a song with the highest emotion score indicating fun (a song corresponding to ID-090 in FIG. 3) is identified as a recommended song.

なお、特定するリコメンド楽曲は一の楽曲に限られない。たとえば、利用者Aの歌唱履歴に含まれる楽曲、且つ楽しさを示す感情スコアが最も高い楽曲が2曲以上ある場合(感情スコアが同じ楽曲が複数ある場合)、複数の楽曲をリコメンド楽曲として特定してもよい。或いは、たとえば、予め楽しさを示す感情スコアの閾値(たとえば、スコア「90」以上)を決定しておき、利用者の歌唱履歴に含まれる楽曲のうち、閾値を越える楽曲が複数ある場合にはそれら全ての楽曲をリコメンド楽曲として特定してもよい。   Note that the recommended music to be identified is not limited to one music. For example, when there are two or more songs included in the singing history of user A and two or more songs with the highest emotion score indicating fun (when there are multiple songs with the same emotion score), a plurality of songs are identified as recommended songs May be. Alternatively, for example, when a threshold of emotion score indicating fun (for example, score “90” or more) is determined in advance, and there are a plurality of songs exceeding the threshold among songs included in the user's singing history All of these music pieces may be specified as recommended music pieces.

また、利用者Aがカラオケ装置1においてログイン操作を行った場合、サーバ装置が利用者Aの歌唱履歴を読み出してカラオケ装置1に送信し、カラオケ装置1の記憶部10aにおいて一時的に記憶しておくことでもよい。この場合、リコメンド楽曲特定部400は、記憶部10aに記憶された歌唱履歴を参照することでリコメンド楽曲を特定することができる。   Moreover, when the user A performs login operation in the karaoke apparatus 1, a server apparatus reads the singing history of the user A, transmits to the karaoke apparatus 1, and memorize | stores it temporarily in the memory | storage part 10a of the karaoke apparatus 1. It may be left. In this case, the recommended music specifying unit 400 can specify the recommended music by referring to the singing history stored in the storage unit 10a.

(報知部)
報知部500は、最初の歌唱者及び当該最初の歌唱者に対するリコメンド楽曲を報知する。
(Notification part)
The alerting | reporting part 500 alert | reports the recommended music with respect to the first singer and the said first singer.

報知は様々な方法で可能である。たとえば報知部500は、表示装置30の表示画面に最初の歌唱者の名前とリコメンド楽曲に相当する楽曲の曲名及び歌手名とを表示させる。或いは、報知部500は、スピーカ20を介し「●●さん。●●(曲名)を歌って盛り上げてください」といったメッセージを放音することでもよい。   Notification can be made in various ways. For example, the notification unit 500 causes the display screen of the display device 30 to display the name of the first singer and the song name and singer name of the song corresponding to the recommended song. Alternatively, the notification unit 500 may emit a message such as “Mr. ●●. Please sing and excite ●● (song name)” via the speaker 20.

更に、報知部500は、リコメンド楽曲を報知した後、当該リコメンド楽曲を予約することでもよい。たとえば、報知部500は、利用者Aに対してリコメンド楽曲の報知を行った後、自動的にリコメンド楽曲の楽曲ID「ID−090」を予約待ち行列に登録することでカラオケ演奏予約を行うことができる。   Further, the notification unit 500 may make a reservation for the recommended music after notifying the recommended music. For example, after notifying the recommended music to the user A, the notification unit 500 automatically reserves the karaoke performance reservation by automatically registering the music ID “ID-090” of the recommended music in the reservation queue. Can do.

==カラオケ装置における処理について==
次に、図6を参照して本実施形態に係るカラオケ装置1における処理の具体例について述べる。図6は、カラオケ装置1における処理例を示すフローチャートである。
== About processing in karaoke equipment ==
Next, a specific example of processing in the karaoke apparatus 1 according to the present embodiment will be described with reference to FIG. FIG. 6 is a flowchart illustrating a processing example in the karaoke apparatus 1.

カラオケルームに入室した複数の利用者は、リモコン装置50等を介して自己の利用者IDでログインを行う(ログイン。ステップ10)。撮影部60は、ログインした利用者の撮影を行い、顔画像を取得する。   A plurality of users who have entered the karaoke room log in with their own user ID via the remote control device 50 or the like (login, step 10). The imaging unit 60 captures a logged-in user and acquires a face image.

カラオケ装置1は、全ての利用者がログインしてからの経過時間を測定する。所定時間を経過しても楽曲の予約が行われない場合(ステップ11でYの場合)、感情分析部200は、撮影部60で取得した利用者の顔画像に基づいて、各利用者の感情分析を行う(顔画像に基づく感情分析。ステップ12)。   The karaoke apparatus 1 measures the elapsed time since all users logged in. If the music is not reserved even after a predetermined time has elapsed (Y in Step 11), the emotion analysis unit 200 determines the emotion of each user based on the user's face image acquired by the photographing unit 60. Analysis is performed (emotion analysis based on face image. Step 12).

歌唱者特定部300は、ステップ12における感情分析の結果に基づいて、複数の利用者のうち、楽しさを示す感情の度合いが最も高い利用者を最初の歌唱者として特定する(最初の歌唱者を特定。ステップ13)。   The singer identification unit 300 identifies, as the first singer, the user having the highest degree of emotion indicating fun among the plurality of users based on the result of the emotion analysis in step 12 (first singer). Step 13).

リコメンド楽曲特定部400は、ステップ13で特定した最初の歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、楽しさを示す感情スコアが最も高い楽曲を当該最初の歌唱者に対するリコメンド楽曲として特定する(リコメンド楽曲を特定。ステップ14)。   The recommended music specifying unit 400 sets, as the recommended music for the first singer, the music having the highest emotion score indicating fun among the singing songs included in the singing history of the first singer specified in step 13. Identify (specify recommended music. Step 14).

報知部500は、ステップ13で特定した最初の歌唱者、及びステップ14で特定した最初の歌唱者に対するリコメンド楽曲を報知する(最初の歌唱者及びリコメンド楽曲の報知。ステップ15)。   The alerting | reporting part 500 alert | reports the recommended music with respect to the first singer specified at step 13 and the first singer specified at step 14 (notification of the first singer and recommended music. Step 15).

なお、カラオケ装置1は、ログインからの経過時間に関わらず、所定のタイミング(たとえば各利用者の顔画像の取得が完了したタイミング)でステップ12以降の処理を行ってもよい。   Note that the karaoke apparatus 1 may perform the processing from step 12 onward at a predetermined timing (for example, when the acquisition of each user's face image is completed) regardless of the elapsed time since login.

このように、本実施形態に係るカラオケ装置1は、楽曲毎に、当該楽曲のカラオケ歌唱を行った際に利用者が感じる楽しさを示す感情スコアを関連付けて記憶するスコア記憶部100と、撮影部60で取得した利用者の顔画像に基づいて、当該利用者の感情分析を行う感情分析部200と、複数の利用者それぞれの感情分析の結果に基づいて、当該複数の利用者のうち、楽しさを示す感情の度合いが最も高い利用者を最初の歌唱者として特定する歌唱者特定部300と、最初の歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、楽しさを示す感情スコアが最も高い楽曲を当該最初の歌唱者に対するリコメンド楽曲として特定するリコメンド楽曲特定部400と、最初の歌唱者及び当該最初の歌唱者に対するリコメンド楽曲を報知する報知部500と、を有する。   As described above, the karaoke apparatus 1 according to the present embodiment captures, for each music piece, the score storage unit 100 that stores the emotion score indicating the enjoyment felt by the user when performing karaoke singing of the music piece in association with each other. Based on the user's face image acquired by the unit 60, the emotion analysis unit 200 that performs emotion analysis of the user, and based on the results of emotion analysis of each of the plurality of users, among the plurality of users, The singer identification unit 300 that identifies the user who has the highest degree of emotion indicating fun as the first singer, and the emotion that indicates fun among the songs that have been sung karaoke included in the singing history of the first singer The recommended music specifying unit 400 that specifies the music with the highest score as the recommended music for the first singer, and the recommended music for the first singer and the first singer are notified. It has a notification unit 500, a.

このようなカラオケ装置1によれば、顔画像を用いた感情分析結果に基づいて、楽しさの感情を示す度合いが最も高い利用者を歌唱者として特定することができる。一般に、楽しさの感情を示す度合いが高い場合、カラオケ歌唱に対して乗り気であると考えることができる。従って、カラオケ歌唱に乗り気でない利用者が最初の歌唱者として指名されるといったことが生じ難い。また、特定された歌唱者の歌唱履歴を用いてリコメンド楽曲を特定することにより、急に最初の歌唱者として指名された利用者であっても、自分がカラオケ歌唱可能な楽曲、且つそのときの気分(楽しい気分)に合った楽曲がリコメンドされるため、選曲に戸惑うことなく、カラオケ歌唱を楽しむことができる。すなわち、本実施形態に係るカラオケ装置1によれば、複数の利用者でカラオケ歌唱を行う際に、各利用者の気分を考慮して、最初の歌唱者及びカラオケ歌唱に適した楽曲を報知することができる。   According to such a karaoke apparatus 1, a user who has the highest degree of fun emotion can be identified as a singer based on the emotion analysis result using the face image. In general, when the degree of pleasure is high, it can be considered to be enthusiastic about karaoke singing. Therefore, it is unlikely that a user who is not interested in karaoke singing will be designated as the first singer. Moreover, even if it is a user suddenly nominated as the first singer by specifying a recommended song using the singing history of the specified singer, a song that can be sung by karaoke, and at that time Because music that matches the mood (fun mood) is recommended, you can enjoy karaoke singing without being confused by the selection. That is, according to the karaoke apparatus 1 according to the present embodiment, when performing karaoke singing by a plurality of users, the music suitable for the first singer and karaoke singing is notified in consideration of the mood of each user. be able to.

また、報知部500は、リコメンド楽曲を報知した後、当該リコメンド楽曲を予約することができる。このように、報知したリコメンド楽曲を自動的に予約することにより、最初の歌唱者として指名された利用者は、予約作業を行う手間をかけずにスムーズにカラオケ歌唱を行うことができる。   Moreover, the alerting | reporting part 500 can reserve the said recommendation music, after alert | reporting a recommendation music. In this way, by automatically reserving the notified recommended music, the user designated as the first singer can smoothly perform karaoke singing without taking the trouble of performing reservation work.

<第2実施形態>
次に、図7を参照して、第2実施形態に係るカラオケ装置について説明する。本実施形態では、感情分析の結果を用いて、最初の歌唱者以降にカラオケ歌唱を行う新たな歌唱者、及び当該新たな歌唱者に対するリコメンド楽曲を特定する例について説明する。なお、第1実施形態と同様の構成については詳細な説明を省略する。
<Second Embodiment>
Next, a karaoke apparatus according to the second embodiment will be described with reference to FIG. In the present embodiment, an example in which a new singer who performs karaoke singing after the first singer and a recommended tune for the new singer will be described using the result of emotion analysis. Detailed description of the same configuration as that of the first embodiment will be omitted.

(歌唱者特定部)
本実施形態に係る歌唱者特定部300は、感情分析の結果に基づいて、楽しさを示す感情の度合いが高い順に、最初の歌唱者、及び最初の歌唱者以外の新たな歌唱者を特定する。
(Singer specific part)
The singer identification unit 300 according to the present embodiment identifies the first singer and a new singer other than the first singer in descending order of the degree of emotion indicating fun based on the result of emotion analysis. .

新たな歌唱者は、カラオケ歌唱を行う複数の利用者のうち、最初の歌唱者として特定された利用者以外の利用者である。たとえば第1実施形態の図4の例において、利用者Aの楽しさを示す感情の度合いは「9」であり、利用者Bの楽しさを示す感情の度合いは「6」であり、利用者Cの楽しさを示す感情の度合いは「3」である。この場合、歌唱者特定部300は、楽しさを示す感情の度合いが高い順に歌唱者を特定する。具体的に、歌唱者特定部300は、「楽しさを示す感情の度合いが最も高い利用者」である利用者Aを最初の歌唱者として特定した後、利用者A以外の利用者B及び利用者Cについて、楽しさを示す感情の度合いが高い順に新たな歌唱者として特定する。利用者B及び利用者Cのうち、楽しさを示す感情の度合いがより高い利用者は、利用者Bである。この場合、歌唱者特定部300は、利用者B、利用者Cの順で新たな歌唱者を特定する。なお、最初の歌唱者として利用者Aを特定した後、利用者A以外の各利用者の感情分析に関しては、最初の歌唱者のカラオケ歌唱が歌唱中または歌唱終了した後に行い、その時の楽しさを示す感情の度合いによって歌唱者を特定してもよい。   The new singer is a user other than the user specified as the first singer among a plurality of users who perform karaoke singing. For example, in the example of FIG. 4 of the first embodiment, the degree of emotion indicating the enjoyment of the user A is “9”, the degree of emotion indicating the enjoyment of the user B is “6”, and the user The degree of emotion indicating the enjoyment of C is “3”. In this case, the singer specifying unit 300 specifies the singer in descending order of the degree of emotion indicating fun. Specifically, the singer specifying unit 300 specifies the user A who is the “user with the highest degree of emotion indicating fun” as the first singer, and then uses the user B and the user other than the user A. About the person C, it specifies as a new singer in order with the high degree of the emotion which shows pleasure. Among the users B and C, the user who has a higher degree of emotion indicating fun is the user B. In this case, the singer specifying unit 300 specifies a new singer in the order of the user B and the user C. After user A is identified as the first singer, the emotion analysis of each user other than user A is performed after the first singer's karaoke song is being sung or after singing, and the fun at that time The singer may be specified by the degree of emotion indicating.

(リコメンド楽曲特定部)
本実施形態に係るリコメンド楽曲特定部400は、新たな歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、楽しさを示す感情スコアが最も高い楽曲を当該新たな歌唱者に対するリコメンド楽曲として特定する。
(Recommended music identification part)
The recommendation music specific | specification part 400 which concerns on this embodiment uses the music with the highest emotion score which shows fun among the music already completed in the karaoke song contained in the song history of a new singer as a recommendation music with respect to the said new singer. Identify.

たとえば、上記例に示した順で新たな歌唱者が特定されたとする。この場合、まず、リコメンド楽曲特定部400は、通信部10bを介してサーバ装置にアクセスし、利用者Bの歌唱履歴を参照する。リコメンド楽曲特定部400は、利用者Bの歌唱履歴に含まれる楽曲とスコア記憶部100に記憶された楽曲を比較し、利用者Bの歌唱履歴に含まれる楽曲(利用者Bがカラオケ歌唱済みの楽曲)、且つ楽しさを示す感情スコアが最も高い楽曲をリコメンド楽曲として特定する。次に、リコメンド楽曲特定部400は、通信部10bを介してサーバ装置にアクセスし、利用者Cの歌唱履歴を参照する。リコメンド楽曲特定部400は、利用者Cの歌唱履歴に含まれる楽曲とスコア記憶部100に記憶された楽曲を比較し、利用者Cの歌唱履歴に含まれる楽曲(利用者Cがカラオケ歌唱済みの楽曲)、且つ楽しさを示す感情スコアが最も高い楽曲をリコメンド楽曲として特定する。   For example, assume that a new singer is identified in the order shown in the above example. In this case, first, the recommended music specifying unit 400 accesses the server device via the communication unit 10b and refers to the singing history of the user B. The recommended music specifying unit 400 compares the music included in the singing history of the user B with the music stored in the score storage unit 100, and the music included in the singing history of the user B (the user B has already singed the karaoke song). Music) and the music with the highest emotion score indicating fun are identified as recommended music. Next, the recommendation music specific | specification part 400 accesses a server apparatus via the communication part 10b, and refers the user C's singing log | history. The recommended music specifying unit 400 compares the music included in the singing history of the user C with the music stored in the score storage unit 100, and the music included in the singing history of the user C (the user C has already sung the karaoke song). Music) and the music with the highest emotion score indicating fun are identified as recommended music.

(報知部)
本実施形態に係る報知部500は、最初の歌唱者及び当該最初の歌唱者に対するリコメンド楽曲を報知した後、楽しさを示す感情の度合いが高い順に、新たな歌唱者及び当該新たな歌唱者に対するリコメンド楽曲を報知する。
(Notification part)
After notifying the first singer and the recommended song for the first singer, the notifying unit 500 according to the present embodiment provides the new singer and the new singer in descending order of the feeling of fun. Notify recommended music.

たとえば、報知部500は、表示装置30の表示画面に最初の歌唱者(利用者A)の名前とリコメンド楽曲に相当する楽曲の曲名及び歌手名とを表示させる。その後、報知部500は、利用者Aの次に楽しさを示す感情の度合いが高い利用者Bの名前とリコメンド楽曲に相当する楽曲の曲名及び歌手名とを表示させる。更に、利用者Bの名前等を表示させた後、報知部500は、利用者Cの次に楽しさを示す感情の度合いが高い利用者Cの名前とリコメンド楽曲に相当する楽曲の曲名及び歌手名とを表示させる。   For example, the notification unit 500 causes the display screen of the display device 30 to display the name of the first singer (user A) and the song name and singer name of the song corresponding to the recommended song. Thereafter, the notification unit 500 displays the name of the user B who has the next highest degree of emotion after the user A and the song name and singer name of the song corresponding to the recommended song. Further, after displaying the name of the user B and the like, the notification unit 500 displays the name of the user C who has the highest degree of emotion next to the user C and the song name and singer of the music corresponding to the recommended music. Display the name.

なお、新たな歌唱者及び当該新たな歌唱者に対するリコメンド楽曲の報知を行うタイミングは、最初の歌唱者及び当該最初の歌唱者に対するリコメンド楽曲を報知した後であればいつでもよい。たとえば、報知部500は、最初の歌唱者及び当該最初の歌唱者に対するリコメンド楽曲を報知した後、リコメンド楽曲の予約がなされた場合に、新たな歌唱者等の報知を行ってもよい。或いは、報知部500は、最初の歌唱者のカラオケ歌唱が終了した後、新たな歌唱者等の報知を行ってもよい。   In addition, the timing which alert | reports the recommendation music with respect to a new singer and the said new singer may be any time, as long as it is after informing the recommendation tune with respect to the first singer and the said first singer. For example, the notification unit 500 may notify a new singer or the like when a recommendation tune is reserved after notifying the first singer and the recommended tune for the first singer. Or the alerting | reporting part 500 may alert | report new singers etc., after the karaoke song of the first singer is complete | finished.

==カラオケ装置における処理について==
次に、図7を参照して本実施形態に係るカラオケ装置1における処理の具体例について述べる。図7は、カラオケ装置1における処理例を示すフローチャートである。
== About processing in karaoke equipment ==
Next, a specific example of processing in the karaoke apparatus 1 according to the present embodiment will be described with reference to FIG. FIG. 7 is a flowchart showing a processing example in the karaoke apparatus 1.

ステップ20〜22は、第1実施形態のステップ10〜12と同様である。   Steps 20 to 22 are the same as steps 10 to 12 of the first embodiment.

歌唱者特定部300は、ステップ22における感情分析の結果に基づいて、複数の利用者のうち、楽しさを示す感情の度合いが高い順に歌唱者を特定する(歌唱者の順番を特定。ステップ23)。   Based on the result of the emotion analysis in step 22, the singer identification unit 300 identifies the singer in descending order of the degree of emotion indicating fun among the plurality of users (identifies the singer's order. Step 23). ).

リコメンド楽曲特定部400は、ステップ23で特定した歌唱者の順に沿って、最初の歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、楽しさを示す感情スコアが最も高い楽曲を当該最初の歌唱者に対するリコメンド楽曲として特定する(最初の歌唱者のリコメンド楽曲を特定。ステップ24)。   The recommended music specifying unit 400 first selects the music having the highest emotion score indicating fun among the songs already sung in the singing history of the first singer along the order of the singers specified in step 23. Is identified as a recommended song for the singer (recommended song of the first singer is identified. Step 24).

報知部500は、ステップ23で特定した順に沿った最初の歌唱者、及びステップ24で特定した最初の歌唱者に対するリコメンド楽曲を報知する(最初の歌唱者及びリコメンド楽曲の報知。ステップ25)。   The alerting | reporting part 500 alert | reports the recommended music with respect to the first singer who followed the order specified at step 23, and the first singer specified at step 24 (notification of the first singer and recommended music. Step 25).

次に、報知部500は、ステップ23で特定した順に沿った新たな歌唱者(次の歌唱者)、及びステップ24で特定した新たな歌唱者に対するリコメンド楽曲を報知する(新たな歌唱者及びリコメンド楽曲の報知。ステップ26)。   Next, the alerting | reporting part 500 alert | reports the recommended music with respect to the new singer (next singer) along the order specified at step 23, and the new singer specified at step 24 (new singer and recommendation). Notification of music, step 26).

報知部500は、全ての歌唱者及びリコメンド楽曲の報知が完了するまで(ステップ27でY)、繰り返し報知の処理を行う。   The notification unit 500 repeatedly performs notification processing until notification of all singers and recommended music is completed (Y in step 27).

なお、本実施形態の構成によれば、カラオケルーム居る全ての利用者について順番に指名がなされることとなる。一方、カラオケ歌唱を行うこと自体に抵抗がある利用者も存在する。そこで、歌唱者特定部300は、感情分析の結果が、予め設定された閾値以上の利用者についてのみ、歌唱者としての特定を行うことでもよい。閾値は、カラオケ歌唱の指名を行うかどうかを決定する基準となる値であり、たとえば、図4に示したように楽しさを示す感情の度合いを10段階で示す場合であれば、閾値は「5」や「6」といった数値で示すことができる。また、リコメンド楽曲特定部400は、一の利用者が歌唱者に特定された際のリコメンド楽曲の識別情報を記憶しておく。そして、他の利用者が歌唱者に特定された際のリコメンド楽曲として同じ楽曲が特定された場合、リコメンド楽曲特定部400は、当該楽曲の次に楽しさを示す感情スコアが高い楽曲を、当該他の歌唱者に対するリコメンド楽曲として特定し直してもよい。   In addition, according to the structure of this embodiment, nomination will be made in order about all the users who are in a karaoke room. On the other hand, there are users who are reluctant to perform karaoke singing. Therefore, the singer specifying unit 300 may specify the singer only for users whose emotion analysis results are equal to or greater than a preset threshold. The threshold value is a reference value for determining whether or not to designate a karaoke song. For example, as shown in FIG. 4, if the degree of emotion indicating fun is shown in 10 levels, the threshold value is “ It can be indicated by a numerical value such as “5” or “6”. Moreover, the recommendation music specific | specification part 400 memorize | stores the identification information of the recommendation music when one user is specified as a singer. And when the same music is specified as the recommended music when other users are specified as singers, the recommended music specifying unit 400 selects the music with the highest emotion score indicating the next fun of the music. You may re-specify as a recommendation music with respect to another singer.

このように、本実施形態に係る歌唱者特定部300は、感情分析の結果に基づいて、最初の歌唱者以外の利用者について、楽しさを示す感情の度合いが高い順に新たな歌唱者として特定し、リコメンド楽曲特定部400は、新たな歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、楽しさを示す感情スコアが最も高い楽曲を当該新たな歌唱者に対するリコメンド楽曲として特定し、報知部500は、最初の歌唱者及び当該最初の歌唱者に対するリコメンド楽曲を報知した後、楽しさを示す感情の度合いが高い順に、新たな歌唱者及び当該新たな歌唱者に対するリコメンド楽曲を報知する。   As described above, the singer identification unit 300 according to the present embodiment identifies the users other than the first singer as new singers in descending order of the degree of emotion indicating fun based on the result of emotion analysis. And the recommendation music specific | specification part 400 specifies the music with the highest emotion score which shows pleasure among the music already performed in karaoke singing contained in the song history of a new singer as a recommendation music with respect to the said new singer, After notifying the recommended song for the first singer and the first singer, the notification unit 500 notifies the new singer and the recommended song for the new singer in descending order of the degree of emotion indicating fun. .

このようなカラオケ装置1によれば、顔画像を用いた感情分析結果に基づいて、楽しさの感情を示す度合いが高い順に歌唱者を特定することができる。従って、楽しさの感情を示す度合いが高い順にカラオケ歌唱を行う機会が得られるため、場の雰囲気がより盛り上がりやすくなる。また、歌唱者に適したリコメンド楽曲が特定されるため、第1実施形態のカラオケ装置1と同様、選曲に戸惑うことなく、カラオケ歌唱を楽しむことができる。   According to such a karaoke apparatus 1, it is possible to specify a singer in descending order of the degree of fun feeling based on the emotion analysis result using the face image. Accordingly, an opportunity to perform karaoke singing in the order of higher degree of feeling of fun is obtained, so that the atmosphere of the place becomes easier to excite. Moreover, since the recommended music suitable for a singer is specified, karaoke singing can be enjoyed without being confused about music selection similarly to the karaoke apparatus 1 of 1st Embodiment.

<その他>
上記実施形態では、感情スコア及び感情分析の対象として「楽しさ」を例に説明したが、「楽しさ」以外の感情を用いて(或いは複数の感情を総合して)、歌唱者やリコメンド楽曲を特定することも可能である。たとえば、ストレス発散のためにカラオケ歌唱を行おうと考える利用者の場合、その顔には「悲しさ」や「怒り」を示す感情が現れる。そして、このような感情の度合いが高い利用者からカラオケ歌唱を行うことでストレス発散の目的を達成できる。
<Others>
In the above embodiment, “fun” has been described as an example of the emotion score and emotion analysis. However, using emotions other than “fun” (or combining multiple emotions), singers and recommended songs It is also possible to specify. For example, in the case of a user who wants to sing a karaoke song to relieve stress, emotions indicating “sadness” and “anger” appear on the face. And the purpose of stress relief can be achieved by performing karaoke singing from a user with a high degree of emotion.

このため、スコア記憶部100は、楽曲毎に、当該楽曲のカラオケ歌唱を行った際に利用者が感じる悲しさ及び/または怒りを示す感情スコアを関連付けて記憶する。感情分析部200は、撮影部60で取得した利用者の顔画像に基づいて、当該利用者の悲しさや怒りに関する感情分析を行う。歌唱者特定部300は、複数の利用者それぞれの感情分析の結果に基づいて、当該複数の利用者のうち、悲しさ及び/または怒りを示す感情の度合いが最も高い利用者を最初の歌唱者として特定する。リコメンド楽曲特定部400は、最初の歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、悲しさ及び/または怒りを示す感情スコアが最も高い楽曲を当該最初の歌唱者に対するリコメンド楽曲として特定する。   For this reason, the score memory | storage part 100 links | relates and memorize | stores the emotion score which shows the sadness and / or anger which a user feels when performing the karaoke song of the said music for every music. The emotion analysis unit 200 performs emotion analysis on the sadness and anger of the user based on the face image of the user acquired by the photographing unit 60. Based on the results of the emotion analysis of each of the plurality of users, the singer specifying unit 300 selects the user who has the highest degree of feeling of sadness and / or anger among the plurality of users as the first singer. As specified. The recommended song specifying unit 400 specifies a song with the highest emotion score indicating sadness and / or anger among the songs that have been karaoke sung included in the singing history of the first singer as a recommended song for the first singer. To do.

上記実施形態は、例として提示したものであり、発明の範囲を限定するものではない。上記の構成は、適宜組み合わせて実施することが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。上記実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。   The above embodiment is presented as an example and does not limit the scope of the invention. The above configurations can be implemented in appropriate combination, and various omissions, replacements, and changes can be made without departing from the scope of the invention. The above-described embodiments and modifications thereof are included in the invention described in the claims and equivalents thereof in the same manner as included in the scope and spirit of the invention.

1 カラオケ装置
100 スコア記憶部
200 感情分析部
300 歌唱者特定部
400 リコメンド楽曲特定部
500 報知部
DESCRIPTION OF SYMBOLS 1 Karaoke apparatus 100 Score memory | storage part 200 Emotion analysis part 300 Singer specific part 400 Recommended music specific part 500 Notification part

Claims (3)

複数の利用者が順番にカラオケ歌唱を行うことが可能なカラオケ装置であって、
楽曲毎に、当該楽曲のカラオケ歌唱を行った際に利用者が感じる楽しさを示す感情スコアを関連付けて記憶するスコア記憶部と、
撮影部で取得した利用者の顔画像に基づいて、当該利用者の感情分析を行う感情分析部と、
前記複数の利用者それぞれの前記感情分析の結果に基づいて、当該複数の利用者のうち、楽しさを示す感情の度合いが最も高い利用者を最初の歌唱者として特定する歌唱者特定部と、
前記最初の歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、前記楽しさを示す感情スコアが最も高い楽曲を当該最初の歌唱者に対するリコメンド楽曲として特定するリコメンド楽曲特定部と、
前記最初の歌唱者及び当該最初の歌唱者に対する前記リコメンド楽曲を報知する報知部と、
を有するカラオケ装置。
A karaoke apparatus in which a plurality of users can perform karaoke singing in order,
A score storage unit that stores an emotional score indicating the enjoyment felt by the user when performing karaoke singing of the song for each song;
An emotion analysis unit that performs an emotion analysis of the user based on the face image of the user acquired by the imaging unit;
Based on the results of the emotion analysis of each of the plurality of users, a singer identifying unit that identifies a user who has the highest degree of emotion as a first singer among the plurality of users,
Among the songs that have already been sung karaoke included in the singing history of the first singer, a recommended song identifying unit that identifies a song having the highest emotion score indicating the fun as a recommended song for the first singer,
A notifying unit for notifying the recommended song for the first singer and the first singer;
Karaoke apparatus having
前記歌唱者特定部は、前記感情分析の結果に基づいて、楽しさを示す感情の度合いが高い順に、前記最初の歌唱者、及び前記最初の歌唱者以外の新たな歌唱者を特定し、
前記リコメンド楽曲特定部は、前記新たな歌唱者の歌唱履歴に含まれるカラオケ歌唱済みの楽曲のうち、楽しさを示す感情スコアが最も高い楽曲を当該新たな歌唱者に対するリコメンド楽曲として特定し、
前記報知部は、前記最初の歌唱者及び当該最初の歌唱者に対するリコメンド楽曲を報知した後、前記楽しさを示す感情の度合いが高い順に、前記新たな歌唱者及び当該新たな歌唱者に対する前記リコメンド楽曲を報知することを特徴とする請求項1記載のカラオケ装置。
The singer identification unit identifies the first singer and a new singer other than the first singer in descending order of the degree of emotion indicating fun based on the result of the emotion analysis,
The recommended song specifying unit specifies a song having the highest emotion score indicating fun among the songs already karaoke singing included in the singing history of the new singer as a recommended song for the new singer,
The notification unit notifies the recommended song for the first singer and the first singer, and then the recommendation for the new singer and the new singer in descending order of the degree of emotion indicating the fun. The karaoke apparatus according to claim 1, wherein music is notified.
前記報知部は、前記リコメンド楽曲を報知した後、当該リコメンド楽曲を予約することを特徴とする請求項1または2記載のカラオケ装置。   3. The karaoke apparatus according to claim 1, wherein the notifying unit reserves the recommended music after notifying the recommended music. 4.
JP2018014552A 2018-01-31 2018-01-31 Karaoke equipment Active JP6944391B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018014552A JP6944391B2 (en) 2018-01-31 2018-01-31 Karaoke equipment

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018014552A JP6944391B2 (en) 2018-01-31 2018-01-31 Karaoke equipment

Publications (2)

Publication Number Publication Date
JP2019132980A true JP2019132980A (en) 2019-08-08
JP6944391B2 JP6944391B2 (en) 2021-10-06

Family

ID=67546783

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018014552A Active JP6944391B2 (en) 2018-01-31 2018-01-31 Karaoke equipment

Country Status (1)

Country Link
JP (1) JP6944391B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7453712B2 (en) 2021-04-16 2024-03-21 深▲せん▼地平▲線▼机器人科技有限公司 Audio reproduction method, device, computer readable storage medium and electronic equipment

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090011685A (en) * 2007-07-27 2009-02-02 주식회사 케이티 System and method for providing a singing room service using a image-inference and a server
JP2016114852A (en) * 2014-12-16 2016-06-23 株式会社第一興商 Karaoke system
JP2016188978A (en) * 2015-03-30 2016-11-04 ブラザー工業株式会社 Karaoke device and program
JP2016194614A (en) * 2015-03-31 2016-11-17 株式会社エクシング Music recommendation system, program, and music recommendation method
JP2018021942A (en) * 2016-08-01 2018-02-08 株式会社第一興商 Karaoke system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090011685A (en) * 2007-07-27 2009-02-02 주식회사 케이티 System and method for providing a singing room service using a image-inference and a server
JP2016114852A (en) * 2014-12-16 2016-06-23 株式会社第一興商 Karaoke system
JP2016188978A (en) * 2015-03-30 2016-11-04 ブラザー工業株式会社 Karaoke device and program
JP2016194614A (en) * 2015-03-31 2016-11-17 株式会社エクシング Music recommendation system, program, and music recommendation method
JP2018021942A (en) * 2016-08-01 2018-02-08 株式会社第一興商 Karaoke system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7453712B2 (en) 2021-04-16 2024-03-21 深▲せん▼地平▲線▼机器人科技有限公司 Audio reproduction method, device, computer readable storage medium and electronic equipment

Also Published As

Publication number Publication date
JP6944391B2 (en) 2021-10-06

Similar Documents

Publication Publication Date Title
JP6535497B2 (en) Music recommendation system, program and music recommendation method
JP6409652B2 (en) Karaoke device, program
JP6944391B2 (en) Karaoke equipment
JP2010176544A (en) Conference support device
JP2023175013A (en) Taste determination system, taste determination method, and program
JP2015045671A (en) Singing part decision system
JP2016102961A (en) Karaoke rating system considering listener evaluation
JP7358265B2 (en) Characterization system and method
JP2019101148A (en) Communication karaoke system
JP6176934B2 (en) Singing ranking display system
JP6920135B2 (en) Karaoke equipment
JP2019066552A (en) Musical piece recommendation device
JP7502921B2 (en) Karaoke equipment
JP6954780B2 (en) Karaoke equipment
JP2020042557A (en) Excitement promotion system
JP6678535B2 (en) Karaoke system
JP7401235B2 (en) karaoke equipment
JP6876170B1 (en) Karaoke equipment
JP7069389B1 (en) Solution provision system and mobile terminal
JP6913783B1 (en) Karaoke system
JP2023162958A (en) Karaoke device
JP7285090B2 (en) karaoke equipment
WO2022079777A1 (en) Analysis device, analysis system, analysis method, and non-transitory computer-readable medium having program stored thereon
JP7082549B2 (en) Karaoke equipment
JP7478076B2 (en) Karaoke equipment, karaoke system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201002

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210827

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210907

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210910

R150 Certificate of patent or registration of utility model

Ref document number: 6944391

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150