JP7336292B2 - カラオケ装置 - Google Patents

Description

本発明はカラオケ装置に関する。

カラオケ店舗は、カラオケ装置が設置されているカラオケルームに飲食物を提供するサービスを提供している。カラオケルームの利用者は、カラオケルームから所望の飲食物を注文し、カラオケ歌唱と併せて飲食を楽しむことができる。

ここで、提供される飲食物は高カロリーのものから低カロリーのものまで様々である。たとえば、ビール１杯の摂取カロリーは１００ｍｌ辺り約１５０ｋｃａｌであるのに対し、ハイボール１杯（ウイスキー１：ソーダ４）は１００ｍｌ辺り約５０ｋｃａｌである。

そこで、特許文献１には、飲食物の摂取予定カロリー合計値と飲食物注文データに対応づけられている個人ＩＤに対応する歌唱者のカロリー消費量積算値とを比較し、比較結果に応じて飲食物注文データの取り扱い処理を切り替えるようにする技術が開示されている。このような技術によれば、歌唱者のダイエット計画を確実に支援することができるとされている。

特開２００１－１５４６７８号公報

ところで、一のカラオケルームを複数の利用者で利用する際、代表者が適当な飲食物をまとめて注文する場合がある。

このような場合、提供された飲食物を各利用者が自由に取り分けることになるため、各利用者が何をどれだけ飲食したかを把握することは難しい。よって、特許文献１の技術を利用する場合に、各利用者の摂取カロリーを正しく算出することは困難である。

本発明の目的は、一のカラオケルームを複数の利用者で利用する際に、各利用者の飲食に伴う摂取カロリーの算出精度を高めることが可能なカラオケ装置を提供することにある。

上記目的を達成するための一の発明は、カラオケ店舗で提供される飲食物を識別するための第１の識別情報と、飲食物のカロリーとを紐付けて記憶するカロリー記憶部と、前記カラオケ店舗の部屋内にいる複数の利用者を撮影して得られる映像から、各利用者の顔画像を抽出し、利用者識別情報として取得する第１の取得部と、前記映像に基づいて、前記複数の利用者が部屋内で行った飲食に関する飲食記録を取得する第２の取得部と、取得した前記飲食記録及び前記カロリー記憶部に記憶されている飲食物のカロリーに基づいて、前記複数の利用者毎の摂取カロリーを示す明細データを生成する生成部と、を有するカラオケ装置である。
本発明の他の特徴については、後述する明細書及び図面の記載により明らかにする。

本発明によれば、一のカラオケルームを複数の利用者で利用する際に、各利用者の飲食に伴う摂取カロリーの算出精度を高めることができる。

第１実施形態に係るカラオケ装置を示す図である。 第１実施形態に係るカラオケ本体を示す図である。 第１実施形態に係るカロリー記憶部に記憶されているカロリーテーブルを示す図である。 第１実施形態に係る撮影手段により撮影されたカラオケルーム内の映像を示す図である。 第１実施形態に係る記憶手段に記憶されている顔画像毎の飲食記録を示す図である。 第１実施形態に係る表示装置３０に表示される明細を示す図である。 第１実施形態に係るカラオケ装置の処理を示すフローチャートである。 第２実施形態に係るカラオケ本体を示す図である。 第２実施形態に係る表示装置３０に表示される明細を示す図である。 第２実施形態に係るカラオケ装置の処理を示すフローチャートである。 変形例に係るカロリー記憶部に記憶されているカロリーテーブルを示す図である。 変形例に係る記憶手段に記憶されている顔画像毎の飲食記録を示す図である。

＜第１実施形態＞
図１～図７を参照して、第１実施形態に係るカラオケ装置について説明する。

＝＝カラオケ装置＝＝
カラオケ装置Ｋは、楽曲のカラオケ演奏、及び利用者がカラオケ歌唱を行うための装置である。カラオケ装置Ｋは、カラオケ店舗のカラオケルーム内に設置される。図１に示すように、カラオケ装置Ｋは、カラオケ本体１０、スピーカ２０、表示装置３０、マイク４０、リモコン装置５０、及び撮影手段６０を備える。

カラオケ本体１０は、選曲された楽曲の演奏制御、歌詞や背景映像等の表示制御、マイク４０を通じて入力された音声信号の処理といった、カラオケ演奏やカラオケ歌唱に関する各種の制御を行う。スピーカ２０はカラオケ本体１０からの放音信号に基づいて放音するための構成である。表示装置３０はカラオケ本体１０からの信号に基づいて映像や画像を画面に表示するための構成である。マイク４０はカラオケ歌唱の歌唱音声をアナログの歌唱音声信号に変換してカラオケ本体１０に入力するための構成である。リモコン装置５０は、カラオケ本体１０に対する各種操作をおこなうための装置である。撮影手段６０は、カラオケルーム内を撮影するためのカメラである。なお、撮影手段６０は、カラオケルーム内に複数設けられていてもよい。

図２に示すように、本実施形態に係るカラオケ本体１０は、記憶手段１０ａ、通信手段１０ｂ、入力手段１０ｃ、及び制御手段１０ｄを備える。各構成はインターフェース（図示なし）を介してバスＢに接続されている。

［記憶手段］
記憶手段１０ａは、各種のデータを記憶する大容量の記憶装置であり、たとえばハードディスクドライブなどである。記憶手段１０ａは、カラオケ装置Ｋによりカラオケ演奏を行うための複数の楽曲データを記憶する。

本実施形態において、記憶手段１０ａの記憶領域の一部はカロリー記憶部１００として機能する。

カロリー記憶部１００は、カラオケ店舗で提供される飲食物を識別するための第１の識別情報と、飲食物のカロリーとを紐付けて記憶する。第１の識別情報は、専用の識別ＩＤ等、飲食物毎に付与されている固有の情報である。飲食物のカロリーは、当該飲食物を摂取した場合に体内に吸収される熱量である。

図３は、カロリー記憶部１００に記憶されているカロリーテーブルの例を示している。たとえば、フードＦ１について、第１の識別情報は「ＩＤ－Ｆ０１」であり、カロリーは「８００ｋｃａｌ」である。また、ドリンクＤ１について、第１の識別情報は「ＩＤ－Ｄ０１」であり、カロリーは「１００ｋｃａｌ」である。カロリーテーブルは、カラオケ店舗毎に提供可能な飲食物に応じて予め設定されている。

［通信手段・入力手段］
通信手段１０ｂは、リモコン装置５０との通信を行うためのインターフェースを提供する。入力手段１０ｃは、利用者が各種の指示入力を行うための構成である。入力手段１０ｃは、カラオケ本体１０に設けられたボタン等である。或いは、リモコン装置５０が入力手段１０ｃとして機能してもよい。たとえば、カラオケ装置Ｋが設置されている一のカラオケルームを複数の利用者で利用する場合に、一の利用者（代表者）がリモコン装置５０を介して適当な飲食物の注文を行う。カラオケ店舗の店員は、注文に応じた飲食物を準備し、カラオケルームの利用者に提供する。

［制御手段］
制御手段１０ｄは、カラオケ装置Ｋにおける各種の制御を行う。制御手段１０ｄは、ＣＰＵおよびメモリ（いずれも図示無し）を備える。ＣＰＵは、メモリに記憶されたプログラムを実行することにより各種の機能を実現する。

本実施形態においてはＣＰＵがメモリに記憶されるプログラムを実行することにより、制御手段１０ｄは、第１の取得部２００、第２の取得部３００、生成部４００、及び報知部５００として機能する。

（第１の取得部）
第１の取得部２００は、カラオケ店舗の部屋内にいる複数の利用者を撮影して得られる映像から、各利用者の顔画像を抽出し、利用者識別情報として取得する。

映像から利用者の顔画像を抽出する手法は、公知の画像認識処理の手法を利用することができる。また、利用者識別情報は、複数の利用者を区別するための情報である。

たとえば、カラオケ装置Ｋが設置されているカラオケルームに３名の利用者が入室したとする。撮影手段６０は、利用者が入室した時点からカラオケルーム内の撮影を開始する。従って、撮影手段６０により得られる映像には、３名の利用者の姿（顔や動作）が含まれる。

第１の取得部２００は、撮影手段６０により得られた映像を解析し、映像に含まれる利用者の顔画像を抽出する。この例において、第１の取得部２００は、３名の顔画像Ｘ１、Ｘ２、及びＸ３を利用者識別情報として取得する。

（第２の取得部）
第２の取得部３００は、映像に基づいて、複数の利用者が部屋内で行った飲食に関する飲食記録を取得する。飲食記録は、ある利用者が、何を飲食したか、ある飲食物をどれくらい飲食したか（たとえば飲食した割合）等を記録したものである。

ここで、図４を参照して、飲食記録の取得の具体例について説明する。図４は、撮影手段６０により撮影されたカラオケルーム内の映像である。この映像によれば、カラオケルームには、顔画像Ｘ１～Ｘ３に対応する利用者が在席しており、中央に置かれたテーブルＴには、注文した飲食物であるフードＦ１～Ｆ３、ドリンクＤＰ、ドリンクＤ１～Ｄ３、フードを取り分けるための取り皿Ｐ１～Ｐ３、及びドリンクＤＰを注ぎ分けるグラスＧ１～Ｇ３が置かれた状態となっている。なお、記憶手段１０ａには、カラオケ店舗で提供される飲食物の画像が、当該飲食物を識別するための第１の識別情報と紐付けられて記憶されている。また、第２の取得部３００は、飲食物と同様に空の取り皿やグラスの種類を認識できるものとする。

第２の取得部３００は、映像に含まれる利用者の動きに基づいて、当該利用者の利用者識別情報に対応する飲食記録を取得する。

たとえば、顔画像Ｘ１に対応する利用者がフードＦ１に手を伸ばして飲食する一方、顔画像Ｘ２に対応する利用者がフードＦ１を取り皿Ｐ２に取り分けた映像が撮影されたとする。以下、飲食だけでなく、取り皿への取り分けやグラスへの注ぎ分けを含めて「飲食」とする。なお、一の利用者が他の利用者の取り皿へ取り分けた場合には、取り分け後に当該取り皿が置かれた位置に最も近い利用者が飲食したものとする。

第２の取得部３００は、顔画像Ｘ１に対応する利用者の動きを解析し、当該利用者が手を伸ばした先にあるフードの画像と、予め記憶手段１０ａに記憶されている画像とを比較することにより、当該利用者が飲食したフードがフードＦ１であることを特定する。また、第２の取得部３００は、フードＦ１に対応する第１の識別情報を取得する。なお、第２の取得部３００は、あるフードをフードＦ１であると特定した場合には、フードＦ１に対応する第１の識別情報をテーブル上の位置情報と紐付けて記憶し、以後は位置情報に基づいてフードＦ１に対応する第１の識別情報を特定することができる。この場合、利用者がフードを移動させた際には位置情報を更新するものとする。

一方、第２の取得部３００は、提供された飲食物毎に各利用者が飲食した割合を特定し、特定した割合を飲食記録として取得する。

上記例において、第２の取得部３００は、顔画像Ｘ１に対応する利用者の動きを解析し、特定したフードＦ１について、当該利用者が飲食した割合を算出する。このような割合の算出は、公知の手法を用いて映像を解析することにより行うことができる。また、飲食物の種類に応じて、利用者が飲食した後に残っている割合から逆算してもよい。

なお、飲食した割合は、たとえば、「焼きそば」や「ピラフ」のようなフードの場合には、飲食した体積を、予め記憶した当該フードの模範的な元の体積で除すことにより、割合を算出することができる。また、ピッチャーで提供されるドリンクの場合には、飲食した容量を、予め記憶したピッチャーの容量で除すことにより、算出することができる。また、「ポテトフライ」や「枝豆」のように複数の飲食物が多数まとまって提供される場合には、利用者が飲食した数を、予め所定の総重量と１個あたりの平均的な重量に基づいて記憶した平均的な総数で除すことにより、割合を算出することができる。また、「唐揚げ」や均等に切り分けられて提供される「ピザ」のように一皿当たりの個数が比較的少ない飲食物の場合、利用者が飲食した数を求め、予め記憶した所定の元の数で除することにより、割合を算出することができる。

上記例において、第２の取得部３００は、顔画像Ｘ１に対応する利用者がフードＦ１を飲食した割合を６０％と算出し、顔画像Ｘ２に対応する利用者がフードＦ１を飲食した割合を４０％と算出したとする。一方、顔画像Ｘ３に対応する利用者はフードＦ１を飲食しなかったとする。この場合、第２の取得部３００は、顔画像Ｘ３に対応する利用者がフードＦ１を飲食した割合を０％と算出する。

第２の取得部３００は、取得したフードＦ１の第１の識別情報に対し、顔画像Ｘ１に対応する利用者が飲食した割合６０％を紐付け、顔画像Ｘ１に関する飲食記録として取得する。また、第２の取得部３００は、取得したフードＦ１の第１の識別情報に対し、顔画像Ｘ２に対応する利用者が飲食した割合４０％を紐付け、顔画像Ｘ２に関する飲食記録として取得する。更に、第２の取得部３００は、取得したフードＦ１の第１の識別情報に対し、顔画像Ｘ３に対応する利用者が飲食した割合０％を紐付け、顔画像Ｘ３に関する飲食記録として取得する。第２の取得部３００は、取得したこれらの飲食記録を顔画像毎に記憶手段１０ａに記憶させる。

図５は、記憶手段１０ａに記憶されている顔画像毎の飲食記録である。図５の例によれば、たとえば、フードＦ２については、顔画像Ｘ１に対応する利用者が６０％飲食し、顔画像Ｘ２に対応する利用者及び顔画像Ｘ３に対応する利用者がそれぞれ２０％飲食している。また、フードＦ３については、顔画像Ｘ１に対応する利用者が３０％飲食し、顔画像Ｘ２に対応する利用者が５０％飲食し、顔画像Ｘ３に対応する利用者が２０％飲食している。ドリンクＤＰについては、顔画像Ｘ１に対応する利用者が５０％飲食し、顔画像Ｘ２に対応する利用者が４０％飲食し、顔画像Ｘ３に対応する利用者が１０％飲食している。一方、ドリンクＤ１～Ｄ３については、それぞれ顔画像Ｘ１～Ｘ３に対応する利用者が１００％飲食している。

なお、一の利用者が同じ飲食物を複数回に分けて飲食する場合もありうる。この場合、第２の取得部３００は、利用者が飲食する映像が得られる都度、当該利用者が飲食した割合を特定し、特定した割合を合計することにより飲食記録を取得する。

また、カラオケルームの利用時間が終了した時点で飲食物の食べ残しがない場合、利用者の飲食した割合の合計が１００％になるように適宜調整し、食べ残しがある場合、第２の取得部３００は、食べ残しは除外して飲食された分を１００％とした場合における飲食した割合を改めて特定し、飲食記録として取得する。

或いは、小皿の料理を複数注文した場合等、飲食物毎に飲食した割合を求めることが煩雑な場合もありうる。このような場合、第２の取得部３００は、映像に基づいて、飲食した利用者の数で均等に割合を特定することにより、飲食記録を取得してもよい。たとえば、フードＦ１を飲食した利用者が、顔画像Ｘ１に対応する利用者及び顔画像Ｘ３に対応する利用者の２名いる場合、第２の取得部３００は、飲食した割合によらず、顔画像Ｘ１に対応する利用者及び顔画像Ｘ３に対応する利用者の割合をそれぞれ５０％として飲食記録を取得する。

（生成部）
生成部４００は、取得した飲食記録及びカロリー記憶部１００に記憶されている飲食物のカロリーに基づいて、複数の利用者毎の摂取カロリーを示す明細データを生成する。

上記例において、カラオケルームの利用時間が経過したとする。この場合、生成部４００は、顔画像Ｘ１～Ｘ３に対応する利用者それぞれの摂取カロリーを求める。ここでは、図３のカロリーテーブル、及び図５の飲食記録を例に説明する。

生成部４００は、顔画像Ｘ１に対応する利用者の摂取カロリーＣＩ１を求める。摂取カロリーＣＩ１は、（フードＦ１のカロリー８００ｋｃａｌ×６０％）＋（フードＦ２のカロリー５００ｋｃａｌ×６０％）＋（フードＦ３のカロリー１０００ｋｃａｌ×３０％）＋（ドリンクＤＰのカロリー７００ｋｃａｌ×５０％）＋（ドリンクＤ１のカロリー１００ｋｃａｌ×１００％）＝１５３０ｋａｃｌとなる。

また、生成部４００は、顔画像Ｘ２に対応する利用者の摂取カロリーＣＩ２を求める。摂取カロリーＣＩ２は、（フードＦ１のカロリー８００ｋｃａｌ×４０％）＋（フードＦ２のカロリー５００ｋｃａｌ×２０％）＋（フードＦ３のカロリー１０００ｋｃａｌ×５０％）＋（ドリンクＤＰのカロリー７００ｋｃａｌ×４０％）＋（ドリンクＤ２のカロリー１５０ｋｃａｌ×１００％）＝１３５０ｋｃａｌとなる。

また、生成部４００は、顔画像Ｘ３に対応する利用者の摂取カロリーＣＩ３を求める。摂取カロリーＣＩ３は、（フードＦ１のカロリー８００ｋｃａｌ×０％）＋（フードＦ２のカロリー５００ｋｃａｌ×２０％）＋（フードＦ３のカロリー１０００ｋｃａｌ×２０％）＋（ドリンクＤＰのカロリー７００ｋｃａｌ×１０％）＋（ドリンクＤ３のカロリー２００ｋｃａｌ×１００％）＝５７０ｋｃａｌとなる。

生成部４００は、算出した摂取カロリーと顔画像とを紐付けた明細データを生成する。なお、生成部４００は、算出した摂取カロリーのうち、端数（たとえば１０ｋｃａｌ以下）を四捨五入した値に基づいて明細データを生成してもよい。

（報知部）
報知部５００は、生成した明細データに基づく明細を複数の利用者に報知する。

明細の報知は、様々な方法で行うことができる。たとえば、報知部５００は、カラオケ装置Ｋの表示装置３０に明細データに基づく明細を表示させる。

図６は、表示装置３０に表示される明細の例を示している。この明細によれば、顔画像Ｘ１に対応する利用者の摂取カロリーが１５３０ｋｃａｌであり、顔画像Ｘ２に対応する利用者の摂取カロリーが１３５０ｋｃａｌであり、顔画像Ｘ３に対応する利用者の摂取カロリーが５７０ｋｃａｌである。各利用者は、自らの顔画像を元に飲食に伴う摂取カロリーを把握することができる。

明細の報知に関するその他の方法として、たとえば報知部５００は、公知の近距離無線通信を用いて各利用者の携帯端末に明細データを送信してもよい。或いは、報知部５００は、明細データを二次元コードに変換し、表示装置３０に表示させる。各利用者は、自己の携帯端末で二次元コードを読み取ることにより、携帯端末上で明細を確認し、自己の摂取カロリーを把握することができる。なお、報知部５００はカラオケ装置Ｋが備える必須の構成ではない。たとえば、生成部４００は、生成した明細データをサーバ装置（図示なし）に送信する。そして、サーバ装置が各利用者の携帯端末に対して明細データを送信することでもよい。

＝＝カラオケ装置における処理について＝＝
次に、図７を参照して本実施形態に係るカラオケ装置Ｋにおける処理について述べる。図７は、カラオケ装置Ｋにおける処理を示すフローチャートである。この例では、カロリー記憶部１００が、カラオケ店舗で提供される飲食物を識別するための第１の識別情報と、飲食物のカロリーとを紐付けて記憶している。

カラオケ装置Ｋが設置されているカラオケルームに複数の利用者が入室した場合、撮影手段６０はカラオケルーム内の撮影を開始する（カラオケルーム内の撮影開始。ステップ１０）。

第１の取得部２００は、カラオケ店舗の部屋内にいる複数の利用者を撮影して得られる映像から、各利用者の顔画像を抽出し、利用者識別情報として取得する（利用者識別情報を取得。ステップ１１）。

第２の取得部３００は、映像に基づいて、複数の利用者が部屋内で行った飲食に関する飲食記録を取得する（利用者毎の飲食記録を取得。ステップ１２）。

カラオケルームの利用時間が経過した場合（ステップ１３でＹの場合）、生成部４００は、ステップ１２で取得した飲食記録及びカロリー記憶部１００に記憶されている飲食物のカロリーに基づいて、複数の利用者毎の摂取カロリーを示す明細データを生成する（摂取カロリーを示す明細データを生成。ステップ１４）。

報知部５００は、生成した明細データに基づく明細を複数の利用者に報知する（明細を報知。ステップ１５）。

以上から明らかなように、本実施形態に係るカラオケ装置Ｋは、カラオケ店舗で提供される飲食物を識別するための第１の識別情報と、飲食物のカロリーとを紐付けて記憶するカロリー記憶部１００と、カラオケ店舗の部屋内にいる複数の利用者を撮影して得られる映像から、各利用者の顔画像を抽出し、利用者識別情報として取得する第１の取得部２００と、映像に基づいて、複数の利用者が部屋内で行った飲食に関する飲食記録を取得する第２の取得部３００と、取得した飲食記録及びカロリー記憶部１００に記憶されている飲食物のカロリーに基づいて、複数の利用者毎の摂取カロリーを示す明細データを生成する生成部４００と、を有する。

このようなカラオケ装置Ｋによれば、実際に行った飲食に関する飲食記録に基づいて利用者毎の摂取カロリーを算出することができる。従って、多くの飲食を行った利用者の摂取カロリーは多くなり、あまり飲食を行っていない利用者の摂取カロリーは少なくなる。たとえば、上記実施形態の例において、仮に全ての飲食物を飲食した場合の摂取カロリー３４５０ｋｃａｌを３名の利用者で均等に分けると、利用者一人あたりの摂取カロリーは１１５０ｋｃａｌとなる。一方、本実施形態に係るカラオケ装置Ｋによれば、多くの飲食を行った顔画像Ｘ１に対応する利用者の摂取カロリーは１５３０ｋｃａｌとなる一方、あまり飲食を行っていない顔画像Ｘ３に対応する利用者の摂取カロリーは５７０ｋｃａｌとなる。

すなわち、本実施形態に係るカラオケ装置Ｋによれば、一のカラオケルームを複数の利用者で利用する際に、各利用者の飲食に伴う摂取カロリーの算出精度を高めることができる。

また、本実施形態に係るカラオケ装置Ｋは、生成した明細データに基づく明細を複数の利用者に報知する報知部５００を有する。このようなカラオケ装置Ｋによれば、各利用者に対し、算出された摂取カロリーを報知することができる。

また、第２の取得部３００は、提供された飲食物毎に各利用者が飲食した割合を特定し、特定した割合を飲食記録として取得する。このように飲食した割合を飲食記録とすることで、各利用者の飲食に伴う摂取カロリーの算出精度を高めることができる。

＜第２実施形態＞
次に、図８～図１０を参照して、第２実施形態に係るカラオケ装置について説明する。本実施形態では、明細データに、各利用者の摂取カロリーだけでなく、カラオケ歌唱に伴って消費したカロリー（消費カロリー）を含める例について述べる。消費カロリーは、マイク４０で変換された歌唱音声信号に基づいて算出される（詳細は後述）。第１実施形態と同様の構成については詳細な説明を省略する。

［制御手段］
図８に示すように、本実施形態においてはＣＰＵがメモリに記憶されるプログラムを実行することにより、制御手段１０ｄは、第１の取得部２００、第２の取得部３００、生成部４００、報知部５００、及び第３の取得部６００として機能する。

（第３の取得部）
第３の取得部６００は、カラオケ店舗の部屋内にいる複数の利用者毎のカラオケ歌唱により得られる歌唱音声信号及び映像に基づいて、複数の利用者毎のカラオケ歌唱による消費カロリーを取得する。

たとえば、第１実施形態で述べたように、カラオケ装置Ｋが設置されているカラオケルームに３名の利用者が入室し、ある利用者がカラオケ歌唱を開始したとする。この場合、第３の取得部６００は、撮影手段６０により得られる映像からカラオケ歌唱を行っている利用者の顔画像を取得する。

また、第３の取得部６００は、マイク４０から出力される歌唱音声信号に基づいて、消費カロリーを算出する。歌唱音声信号から消費カロリーを算出する手法は、特許文献１等、公知の技術を用いることができる。

第３の取得部６００は、利用者の顔画像毎に算出した消費カロリーを紐付けて記憶手段１０ａに記憶させる。一の利用者が複数回のカラオケ歌唱を行った場合、第３の取得部６００は、カラオケルームの利用時間が経過した際、利用者の顔画像毎に消費カロリーの合計値を取得する。

（生成部）
本実施形態に係る生成部４００は、複数の利用者毎の摂取カロリー及び消費カロリーを示す明細データを生成する。

たとえば、カラオケルームの利用時間中に、顔画像Ｘ１に対応する利用者が６曲のカラオケ歌唱を行った結果、第３の取得部６００が消費カロリー１５０ｋｃａｌを取得したとする。同様に、第３の取得部６００は、顔画像Ｘ２に対応する利用者が１０曲のカラオケ歌唱を行った結果として消費カロリー２５０ｋｃａｌを取得し、顔画像Ｘ３に対応する利用者が８曲のカラオケ歌唱を行った結果として消費カロリー２００ｋｃａｌを取得したとする。

この場合、生成部４００は、各顔画像に紐付けられている飲食記録に基づいて算出された摂取カロリーと第３の取得部６００により取得された消費カロリーを含む明細データを生成する。報知部５００は、カラオケ装置Ｋの表示装置３０に明細データに基づく明細を表示させる。

図９は、表示装置３０に表示される明細の例を示している。図９の明細は、第１実施形態で説明した摂取カロリーと上述の消費カロリーとを含む明細データに基づいている。なお、図９に示したように、明細には、利用者毎に、摂取カロリーから消費カロリーを減算した値である合計カロリーが含まれていてもよい。この場合、生成部４００は、明細データを生成する際、合計カロリーの値を算出し、明細データに含める。

＝＝カラオケ装置における処理について＝＝
次に、図１０を参照して本実施形態に係るカラオケ装置Ｋにおける処理について述べる。図１０は、カラオケ装置Ｋにおける処理を示すフローチャートである。この例では、カロリー記憶部１００が、カラオケ店舗で提供される飲食物を識別するための第１の識別情報と、飲食物のカロリーとを紐付けて記憶している。ステップ２０からステップ２２は第１実施形態のステップ１０からステップ１２と同様の処理であるため詳細な説明を省略する。

第３の取得部６００は、カラオケ店舗の部屋内にいる複数の利用者毎のカラオケ歌唱により得られる歌唱音声信号及びステップ２０で撮影された映像に基づいて、複数の利用者毎のカラオケ歌唱による消費カロリーを取得する（利用者毎の消費カロリーを取得。ステップ２３）。

カラオケルームの利用時間が経過した場合（ステップ２４でＹの場合）、生成部４００は、ステップ２２で取得した飲食記録及びカロリー記憶部１００に記憶されている飲食物のカロリーに基づく複数の利用者毎の摂取カロリーと、ステップ２３で取得された複数の利用者毎の消費カロリーとを示す明細データを生成する（摂取カロリー及び消費カロリーを示す明細データを生成。ステップ２５）。

報知部５００は、生成した明細データに基づく明細を複数の利用者に報知する（明細を報知。ステップ２６）。

以上から明らかなように、本実施形態に係るカラオケ装置Ｋは、カラオケ店舗の部屋内にいる複数の利用者毎のカラオケ歌唱により得られる歌唱音声信号及び映像に基づいて、複数の利用者毎のカラオケ歌唱による消費カロリーを取得する第３の取得部６００を有する。また、生成部４００は、複数の利用者毎の摂取カロリー及び消費カロリーを示す明細データを生成する。このようなカラオケ装置Ｋによれば、明細データに、利用者毎の摂取カロリーと消費カロリーを含めることができる。

＜変形例＞
ところで、提供される飲食物の中には、一つの皿に２以上の異なる飲食物（以下、それぞれを「副飲食物」という）がセットで提供されるものもある。このような副飲食物は、それぞれカロリーが異なる。

たとえば、副飲食物として「唐揚げ」と「サラダ」を含む「唐揚げセット」を注文した場合、「サラダ」のカロリーに比べ「唐揚げ」のカロリーのほうが高い。

そこで、本変形例のカロリー記憶部１００は、一の飲食物に含まれる異なるカロリーの副飲食物毎に、当該副飲食物を識別するための第２の識別情報と、当該副飲食物のカロリーとを紐付けて記憶する。第２の識別情報は、専用の識別ＩＤ等、副飲食物毎に付与されている固有の情報である。

図１１は、カロリー記憶部１００に記憶されているカロリーテーブルの例を示している。たとえば、フード「唐揚げセット」について、第１の識別情報は「ＩＤ－Ｆ０４」であり、カロリーは「１０５０ｋｃａｌ」である。また、フード「唐揚げセット」は、副飲食物として、「唐揚げ（１０個）」と「サラダ（皿の半分）」を含んでいる。副飲食物「唐揚げ」について、第２の識別情報は「ＩＤ－Ｆ０４－０１」であり、カロリーは「１０００ｋｃａｌ」である。副飲食物「サラダ」について、第２の識別情報は「ＩＤ－Ｆ０４－０２」であり、カロリーは「５０ｋｃａｌ」である。なお、カロリーテーブルには、副飲食物を含む飲食物と、副飲食物を含まない飲食物の双方が含まれていてもよい。

ここで、提供されたフード「唐揚げセット」について、顔画像Ｘ１に対応する利用者が唐揚げを５個食べ、顔画像Ｘ２に対応する利用者が唐揚げを３個とサラダを全体の６０％食べ、顔画像Ｘ３に対応する利用者が唐揚げを２個とサラダを全体の４０％食べたとする。

第２の取得部３００は、映像から顔画像Ｘ１に対応する利用者の動きを解析し、当該利用者が手を伸ばした先にある「唐揚げ」の画像と、予め記憶手段１０ａに記憶されている画像とを比較することにより、当該利用者が飲食した飲食物が「唐揚げセット」の「唐揚げ」であることを特定する。また、第２の取得部３００は、「唐揚げ」に対応する第２の識別情報を取得する。

一方、第２の取得部３００は、提供された副飲食物毎に各利用者が飲食した割合を特定し、特定した割合を飲食記録として取得する。

上記例において、第２の取得部３００は、顔画像Ｘ１に対応する利用者の動きを解析し、特定した「唐揚げ」について、当該利用者が飲食した割合（（５個÷１０個）×１００％＝５０％）を算出する。

第２の取得部３００は、取得した「唐揚げ」の第２の識別情報に対し、顔画像Ｘ１に対応する利用者が飲食した割合５０％を紐付け、顔画像Ｘ１に関する飲食記録として取得する。なお、「サラダ」については、飲食していないため割合は０％となる。また、第２の取得部３００は、取得した「唐揚げ」の第２の識別情報に対し、顔画像Ｘ２に対応する利用者が飲食した割合３０％を紐付け、且つ取得した「サラダ」の第２の識別情報に対し、顔画像Ｘ２に対応する利用者が飲食した割合６０％を紐付け、顔画像Ｘ２に関する飲食記録として取得する。同様に、第２の取得部３００は、取得した「唐揚げ」の第２の識別情報に対し、顔画像Ｘ３に対応する利用者が飲食した割合２０％を紐付け、且つ取得した「サラダ」の第２の識別情報に対し、顔画像Ｘ３に対応する利用者が飲食した割合４０％を紐付け、顔画像Ｘ３に関する飲食記録として取得する。図１２は、記憶手段１０ａに記憶されている顔画像毎の飲食記録である。

生成部４００は、顔画像Ｘ１に対応する利用者の摂取カロリーＣＩ４、顔画像Ｘ２に対応する利用者の摂取カロリーＣＩ５、及び顔画像Ｘ３に対応する利用者の摂取カロリーＣＩ６を求める。具体的に、摂取カロリーＣＩ４は、（唐揚げのカロリー１０００ｋｃａｌ×５０％）＋（サラダのカロリー５０ｋｃａｌ×０％）＝５００ｋｃａｌとなる。摂取カロリーＣＩ５は、（唐揚げのカロリー１０００ｋｃａｌ×３０％）＋（サラダのカロリー５０ｋｃａｌ×６０％）＝３３０ｋｃａｌとなる。摂取カロリーＣＩ６は、（唐揚げのカロリー１０００ｋｃａｌ×２０％）＋（サラダのカロリー５０ｋｃａｌ×４０％）＝２２０ｋｃａｌとなる。

このように、本変形例において、カロリー記憶部１００は、一の飲食物に含まれる異なるカロリーの副飲食物毎に、当該副飲食物を識別するための第２の識別情報と、当該副飲食物のカロリーとを紐付けて記憶し、第２の取得部３００は、提供された副飲食物毎に各利用者が飲食した割合を特定し、特定した割合を飲食記録として取得する。副飲食物毎に飲食記録を行うことにより、摂取カロリーの算出精度をさらに高めることができる。

＜その他＞
上記実施形態では、カラオケルームの利用時間が経過した場合に、明細を報知する例について述べたがこれに限られない。たとえば、カラオケルームの利用中、所定時間毎（たとえば、１０分毎）に明細を報知してもよい。この場合、実施形態で述べたように、その時点で飲食された分を１００％として飲食記録を取得する。

また、第２の取得部３００は、映像に含まれる利用者の動きではなく、映像に含まれる飲食物の状態に基づいて、当該飲食物の第１の識別情報に対応する飲食記録を取得してもよい。

たとえば、映像において、フードＦ１の一部が減ったとする。この場合、第２の取得部３００は、一部が減っているフードの画像と、予め記憶手段１０ａに記憶されている画像とを比較することにより、飲食されたフードがフードＦ１であることを特定する。また、第２の取得部３００は、前後の映像からフードＦ１を飲食した利用者の顔画像を特定する。

第２の取得部３００は、提供された飲食物毎に各利用者が飲食した割合を特定し、特定した割合を飲食記録として取得する。

上記例において、第２の取得部３００は、特定したフードＦ１について、飲食した後に残っている割合を算出する。第２の取得部３００は、算出した割合を特定した利用者の顔画像と紐付け飲食記録として取得する。

上記実施形態は、例として提示したものであり、発明の範囲を限定するものではない。上記の構成は、適宜組み合わせて実施することが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。上記実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１００ カロリー記憶部
２００ 第１の取得部
３００ 第２の取得部
４００ 生成部
５００ 報知部
６００ 第３の取得部
Ｋ カラオケ装置

Claims (4)

1. カラオケ店舗で提供される飲食物を識別するための第１の識別情報と、飲食物のカロリーとを紐付けて記憶するカロリー記憶部と、
   前記カラオケ店舗の部屋内にいる複数の利用者を撮影して得られる映像から、各利用者の顔画像を抽出し、利用者識別情報として取得する第１の取得部と、
   取得した前記利用者識別情報、及び前記映像に含まれる利用者の動きまたは飲食物の状態に基づいて、各利用者が飲食した飲食物を特定し、且つ前記映像を解析することにより、特定された当該飲食物毎に各利用者が飲食した割合を特定し、特定した当該割合を飲食記録として取得する第２の取得部と、
   取得した前記飲食記録及び前記カロリー記憶部に記憶されている飲食物のカロリーに基づいて、前記複数の利用者毎の摂取カロリーを示す明細データを生成する生成部と、
   を有し、
   前記カロリー記憶部は、一の飲食物に含まれる異なるカロリーの副飲食物毎に、当該副飲食物を識別するための第２の識別情報と、当該副飲食物のカロリーとを紐付けて記憶し、
   前記第２の取得部は、前記映像を解析することにより、提供された副飲食物毎に各利用者が飲食した割合を特定し、特定した割合を前記飲食記録として取得するカラオケ装置。
2. 生成した前記明細データに基づく明細を前記複数の利用者に報知する報知部を有することを特徴とする請求項１記載のカラオケ装置。
3. 前記生成部は、前記複数の利用者が前記カラオケ店舗の部屋内にいる間、所定時間毎にその時点の飲食記録に基づいて明細データを生成し、
   前記報知部は、前記生成部が前記明細データを生成する毎に明細を前記複数の利用者に報知することを特徴とする請求項２記載のカラオケ装置。
4. 前記カラオケ店舗の部屋内にいる複数の利用者毎のカラオケ歌唱により得られる歌唱音声信号及び前記映像に基づいて、前記複数の利用者毎のカラオケ歌唱による消費カロリーを取得する第３の取得部を有し、
   前記生成部は、前記複数の利用者毎の摂取カロリー及び消費カロリーを示す明細データを生成することを特徴とする請求項１から３のいずれか一つに記載のカラオケ装置。

Images