JP7478077B2

JP7478077B2 - カラオケ装置

Info

Publication number: JP7478077B2
Application number: JP2020177519A
Authority: JP
Inventors: 里恵執行
Original assignee: Daiichikosho Co Ltd
Current assignee: Daiichikosho Co Ltd
Priority date: 2020-10-22
Filing date: 2020-10-22
Publication date: 2024-05-02
Anticipated expiration: 2040-10-22
Also published as: JP2022068700A

Description

本発明はカラオケ装置に関する。

複数の利用者でカラオケ歌唱を行う際、ある利用者のカラオケ歌唱に合わせて、他の利用者がハーモニー歌唱を行うことがある。ハーモニー歌唱は、楽曲の主旋律のメロディーに沿ったカラオケ歌唱（以下、「通常のカラオケ歌唱」）に合わせて、当該主旋律のメロディーとは異なるピッチで歌唱することである。

このようなハーモニー歌唱を支援する技術として、特許文献１には、第１表示手段に対し、カラオケ楽曲の歌詞テロップを表示すると共に、第２表示手段に対し、歌詞テロップにおけるハーモニー歌唱部をそれ以外の歌唱部と識別可能に表示制御する技術が開示されている。

特開２００６－１２６５２４号公報

ところで、ハーモニー歌唱を行う利用者の中には、主旋律のメロディーのピッチよりも高いピッチで歌唱を行うことが得意な者や、主旋律のメロディーのピッチよりも低いピッチで歌唱を行うことが得意な者がいる。一方、ある楽曲については主旋律のメロディーのピッチよりも高いピッチでハーモニー歌唱を行うことが好ましい等、楽曲毎に最適なハーモニー歌唱が存在する。

本発明の目的は、利用者及び楽曲のハーモニー歌唱のタイプに応じて、適当な利用者に対しハーモニー歌唱をレコメンドすることが可能なカラオケ装置を提供することにある。

上記目的を達成するための一の発明は、利用者を識別するための利用者識別情報と、当該利用者の声紋データとを紐付けて記憶するデータ記憶部と、楽曲のカラオケ歌唱を行った複数の利用者の歌唱音声信号に基づいて、ある利用者が行ったハーモニー歌唱のタイプを判定し、且つ当該ハーモニー歌唱に対応する歌唱音声信号から抽出した声紋データに基づいて、当該ある利用者の利用者識別情報を特定する信号処理部と、判定された前記ハーモニー歌唱のタイプと、特定された前記利用者識別情報とを紐付けて記憶手段に記憶させる記憶処理部と、複数の利用者の中の一の利用者が選曲したある楽曲のハーモニー歌唱のタイプと、前記記憶手段に記憶された、利用者のハーモニー歌唱のタイプとに基づいて、当該一の利用者以外の他の利用者の利用者識別情報を特定し、当該利用者識別情報に対応する他の利用者に対して、当該ある楽曲のカラオケ歌唱に合わせたハーモニー歌唱をレコメンドするレコメンド部と、を有するカラオケ装置である。
本発明の他の特徴については、後述する明細書及び図面の記載により明らかにする。

本発明によれば、利用者及び楽曲のハーモニー歌唱のタイプに応じて、適当な利用者に対しハーモニー歌唱をレコメンドすることができる。

第１実施形態に係るカラオケ装置を示す図である。第１実施形態に係るカラオケ本体を示す図である。第１実施形態に係る記憶手段が記憶するテーブルを示す図である。第１実施形態に係る記憶手段が記憶するテーブルを示す図である。第１実施形態に係るカラオケ装置の処理を示すフローチャートである。第１実施形態に係るカラオケ装置の処理を示すフローチャートである。第２実施形態に係るカラオケ本体を示す図である。第２実施形態に係るカラオケ装置の処理を示すフローチャートである。第３実施形態に係るカラオケ本体を示す図である。第３実施形態に係る記憶手段が記憶するテーブルを示す図である。第３実施形態に係る記憶手段が記憶するテーブルを示す図である。第３実施形態に係るカラオケ装置の処理を示すフローチャートである。第３実施形態に係るカラオケ装置の処理を示すフローチャートである。

＜第１実施形態＞
図１から図６を参照して、第１実施形態に係るカラオケ装置について説明する。

＝＝カラオケ装置＝＝
カラオケ装置Ｋは、楽曲のカラオケ演奏、及び利用者がカラオケ歌唱を行うための装置である。図１に示すように、カラオケ装置Ｋは、カラオケ本体１０、スピーカ２０、表示装置３０、マイク４０ａ、マイク４０ｂ、及びリモコン装置５０を備える。

カラオケ本体１０は、選曲された楽曲のカラオケ演奏制御、歌詞や背景映像等の表示制御、マイク４０ａ及びマイク４０ｂを通じて入力された歌唱音声信号の処理といった、カラオケ演奏やカラオケ歌唱に関する各種の制御を行う。スピーカ２０はカラオケ本体１０からの放音信号に基づいて放音するための構成である。表示装置３０はカラオケ本体１０からの信号に基づいて映像や画像を画面に表示するための構成である。マイク４０ａ及びマイク４０ｂは利用者のカラオケ歌唱の歌唱音声をアナログの歌唱音声信号に変換してカラオケ本体１０に入力するための構成である。リモコン装置５０は、カラオケ本体１０に対する各種操作をおこなうための装置である。

図２に示すように、本実施形態に係るカラオケ本体１０は、記憶手段１０ａ、通信手段１０ｂ、入力手段１０ｃ、演奏手段１０ｄ、及び制御手段１０ｅを備える。各構成はインターフェース（図示なし）を介してバスＢに接続されている。

［記憶手段］
記憶手段１０ａは、各種のデータを記憶する大容量の記憶装置であり、たとえばハードディスクドライブなどである。記憶手段１０ａは、楽曲データを記憶する。

楽曲データは、個々の楽曲を特定するための楽曲識別情報が付与されている。楽曲識別情報は、楽曲を識別するための楽曲ＩＤ等、各楽曲に固有の情報である。楽曲データは、伴奏データ、リファレンスデータ等を含む。伴奏データは、カラオケ演奏音の元となるデータである。リファレンスデータは、カラオケ演奏された楽曲の主旋律を示すデータである。

また、記憶手段１０ａは、カラオケ演奏時に表示装置３０等に表示される背景映像等の背景映像データ、及び楽曲の属性情報を記憶する。

本実施形態において、属性情報には、楽曲のハーモニー歌唱のタイプが含まれる。楽曲のハーモニー歌唱のタイプは、当該楽曲について最適なタイプを示すものである。具体的に、ハーモニー歌唱のタイプは、楽曲の主旋律のメロディーのピッチよりも高いピッチでカラオケ歌唱を行うタイプ（上ハモタイプ）、主旋律のメロディーのピッチよりも低いピッチでカラオケ歌唱を行うタイプ（下ハモタイプ）、或いはその両方が最適なタイプ（両ハモタイプ）のいずれかである。

ここで、本実施形態において、記憶手段１０ａの記憶領域の一部は、データ記憶部１００として機能する。データ記憶部１００は、利用者を識別するための利用者識別情報と、当該利用者の声紋データとを紐付けて記憶する。

利用者識別情報は、利用者毎に付与される利用者ＩＤ等、各利用者に固有の情報である。声紋データは、利用者の声を特定するためのデータ（たとえばフォルマントデータ）である。

たとえば、利用者は、初めてカラオケ装置Ｋを使用する場合、リモコン装置５０を介して個人情報（氏名、ニックネーム、好きなジャンル等）を入力する。カラオケ装置Ｋは、当該利用者に対して固有の利用者ＩＤを割り当てる。また、利用者は、マイク４０ａまたはマイク４０ｂを介して音声を入力する。カラオケ装置Ｋは、入力された音声を解析することで声紋データを取得する。カラオケ装置Ｋは、割り当てた利用者ＩＤと取得した声紋データを紐付けてデータ記憶部１００に記憶させる。なお、声紋データは、公知の手法（たとえば特開２００８－１６５０７９号公報）により取得することができる。

また、利用者識別情報、及び当該利用者の声紋データは、サーバ装置（図示なし）に記憶されていてもよい。この場合、利用者は、カラオケ装置Ｋを利用する際、リモコン装置５０を介して自己の利用者ＩＤを入力する。カラオケ装置Ｋは、入力された利用者ＩＤをサーバ装置に送信する。サーバ装置は、受信した利用者ＩＤに紐付けられた声紋データを記憶手段から読み出し、カラオケ装置Ｋに送信する。カラオケ装置Ｋは、受信した声紋データを利用者ＩＤと紐付けてデータ記憶部１００に記憶させる。

［通信手段・入力手段］
通信手段１０ｂは、リモコン装置５０との通信を行うためのインターフェースを提供する。入力手段１０ｃは、利用者が各種の指示入力を行うための構成である。入力手段１０ｃは、カラオケ本体１０に設けられたボタン等である。或いは、リモコン装置５０が入力手段１０ｃとして機能してもよい。

［演奏手段］
演奏手段１０ｄは、制御手段１０ｅの制御に基づき、楽曲のカラオケ演奏、及びマイク４０ａ、マイク４０ｂを通じて入力された歌唱音声信号の処理を行う。演奏手段１０ｄは、音源、ミキサ、アンプ等を含む（いずれも図示なし）。

［制御手段］
制御手段１０ｅは、カラオケ装置Ｋにおける各種の制御を行う。制御手段１０ｅは、ＣＰＵおよびメモリ（いずれも図示無し）を備える。ＣＰＵは、メモリに記憶されたプログラムを実行することにより各種の機能を実現する。

本実施形態においてはＣＰＵがメモリに記憶されるプログラムを実行することにより、制御手段１０ｅは、信号処理部２００、記憶処理部３００、及びレコメンド部４００として機能する。

（信号処理部）
信号処理部２００は、楽曲のカラオケ歌唱を行った複数の利用者の歌唱音声信号に基づいて、ある利用者が行ったハーモニー歌唱のタイプを判定し、且つ当該ハーモニー歌唱に対応する歌唱音声信号から抽出した声紋データに基づいて、当該ある利用者の利用者識別情報を特定する。

楽曲のカラオケ歌唱は、通常のカラオケ歌唱及びハーモニー歌唱のいずれかである。利用者のハーモニー歌唱のタイプは、上述の「上ハモタイプ」、または「下ハモタイプ」のいずれかである。

ハーモニー歌唱のタイプの判定は、特開平１０－１６１６７２号公報や特開２００４－２７９７８６号公報に記載の技術等、様々な方法を利用することができる。

たとえば、信号処理部２００は、マイク４０ａまたはマイク４０ｂから出力された歌唱音声信号と、カラオケ歌唱された楽曲のリファレンスデータとを比較し、ピッチの差を求める。ピッチの差はたとえば、楽曲のサビ部分の平均値や、楽曲全体の平均値として求めることができる。信号処理部２００は、ピッチの差が小さい方の歌唱音声信号を通常のカラオケ歌唱の歌唱音声信号と判断し、ピッチの差が大きい方の歌唱音声信号をハーモニー歌唱の歌唱音声信号と判断する。更に、信号処理部２００は、ハーモニー歌唱の歌唱音声信号とリファレンスデータとのピッチの差に基づいて、ハーモニー歌唱のタイプを判定する。具体的に、信号処理部２００は、ピッチの差が正の場合、「上ハモタイプ」であると判定し、ピッチの差が負の場合、「下ハモタイプ」であると判定する。

また、歌唱音声信号からの声紋データの抽出は、特開２００８－１６５０７９号公報に記載の技術等、公知の方法を利用することができる。たとえば、信号処理部２００は、楽曲のカラオケ歌唱に合わせてハーモニー歌唱を行った利用者の歌唱音声信号から声紋データを抽出し、データ記憶部１００に記憶されている声紋データと対比する。信号処理部２００は、一致した声紋データに紐付けられている利用者識別情報を、ハーモニー歌唱を行った利用者の利用者識別情報として特定する。

ここで、具体例として、利用者Ｕ１がマイク４０ａを介して楽曲Ｘ１のカラオケ歌唱を行うのと同時に、利用者Ｕ２がマイク４０ｂを介して楽曲Ｘ１のカラオケ歌唱を行ったとする。なお、楽曲Ｘ１の楽曲識別情報は、楽曲ＩＤ＊＊＊Ｘ１であるとする。

信号処理部２００は、マイク４０ａまたはマイク４０ｂから出力された歌唱音声信号と、楽曲Ｘ１のリファレンスデータとを比較し、ピッチの差を求める。

この例では、信号処理部２００は、ピッチの差が小さいマイク４０ａから出力された歌唱音声信号を通常のカラオケ歌唱の歌唱音声信号と判断し、ピッチの差が大きいマイク４０ｂから出力された歌唱音声信号をハーモニー歌唱の歌唱音声信号と判断したとする。そして、信号処理部２００は、ハーモニー歌唱の歌唱音声信号とリファレンスデータとのピッチの差に基づいて、ハーモニー歌唱のタイプとして「上ハモタイプ」を判定したとする。

この場合、利用者Ｕ１が楽曲Ｘ１の通常のカラオケ歌唱を行い、それに合わせて利用者Ｕ２が上ハモタイプのハーモニー歌唱を行ったこととなる。

また、信号処理部２００は、ハーモニー歌唱を行った利用者Ｕ２の歌唱音声信号から声紋データを抽出し、データ記憶部１００に記憶されている利用者毎の声紋データと対比する。ここでは、データ記憶部１００に、利用者Ｕ２の声紋データ及び利用者識別情報ＩＤ＊＊＊Ｕ２が記憶されているとする。信号処理部２００は、一致した声紋データに紐付けられている利用者Ｕ２の利用者識別情報ＩＤ＊＊＊Ｕ２を、ハーモニー歌唱を行った利用者の利用者識別情報として特定する。

信号処理部２００は、判定した利用者Ｕ２のハーモニー歌唱のタイプ（上ハモタイプ）、特定した利用者Ｕ２の利用者識別情報ＩＤ＊＊＊Ｕ２、及びハーモニー歌唱を行った楽曲Ｘ１の楽曲ＩＤ＊＊＊Ｘ１を記憶処理部３００に出力する。なお、信号処理部２００は、少なくとも判定したハーモニー歌唱のタイプ、及び特定した利用者識別情報を記憶処理部３００に出力することでよい。

（記憶処理部）
記憶処理部３００は、判定されたハーモニー歌唱のタイプと、特定された利用者識別情報とを紐付けて記憶手段１０ａに記憶させる。

たとえば、上述の通り、信号処理部２００から利用者Ｕ２のハーモニー歌唱のタイプ、利用者Ｕ２の利用者識別情報ＩＤ＊＊＊Ｕ２、及び楽曲Ｘ１の楽曲ＩＤ＊＊＊Ｘ１が出力されたとする。この場合、記憶処理部３００は、それらを紐付けて記憶手段１０ａに記憶させる。

図３及び図４は、記憶手段１０ａに記憶された、利用者毎のハーモニー歌唱タイプを示すテーブルである。具体的に、図３は、利用者Ｕ２の楽曲毎のハーモニー歌唱のタイプを示し、図４は、利用者Ｕ３の楽曲毎のハーモニー歌唱のタイプを示す。たとえば、図３のテーブルからは、利用者Ｕ２が、楽曲Ｘ１のカラオケ歌唱に合わせて、上ハモタイプのハーモニー歌唱を行ったことがわかる。一方、図４のテーブルからは、利用者Ｕ３が、楽曲Ｘ１のカラオケ歌唱に合わせて、下ハモタイプのハーモニー歌唱を行ったことがわかる。

（レコメンド部）
レコメンド部４００は、複数の利用者の中の一の利用者が選曲したある楽曲のハーモニー歌唱のタイプと、記憶手段１０ａに記憶された、利用者のハーモニー歌唱のタイプとに基づいて、当該一の利用者以外の他の利用者の利用者識別情報を特定し、当該利用者識別情報に対応する他の利用者に対して、当該ある楽曲のカラオケ歌唱に合わせたハーモニー歌唱をレコメンドする。

他の利用者の利用者識別情報の特定は、様々方法により行うことができる。本実施形態において、レコメンド部４００は、一の利用者が選曲したある楽曲のハーモニー歌唱のタイプと、利用者毎の利用者識別情報に紐付けられた複数のハーモニー歌唱のタイプのうち、数が多い方のタイプとに基づいて、他の利用者の利用者識別情報を特定する。

レコメンドは様々な方法により行うことができる。たとえば、レコメンド部４００は、特定された利用者識別情報に対応する利用者の利用者ＩＤを、ハーモニー歌唱を勧めるメッセージと共に、表示装置３０やリモコン装置５０の表示画面に表示させる。或いは、レコメンド部４００は、利用者の利用者ＩＤ等を含んだ、ハーモニー歌唱を勧めるメッセージをスピーカ２０から放音させる。また、レコメンド部４００は、通信手段１０ｂを介して利用者の所有する携帯端末にハーモニー歌唱を勧めるメッセージを送信することも可能である。この場合、利用者は、携帯端末で専用のアプリケーションソフトウェアを実行することにより、当該メッセージを確認することが可能となる。

ここで、利用者Ｕ１～利用者Ｕ３がカラオケ装置Ｋを利用するとする。データ記憶部１００には、各利用者の利用者識別情報及び声紋データが記憶されているとする。また、記憶手段１０ａには、利用者Ｕ２及び利用者Ｕ３について、図３及び図４に示すテーブルが記憶されているとする。更に、各利用者は、カラオケ装置Ｋの利用にあたって、リモコン装置５０を介して自己の利用者ＩＤの入力を行っているとする。利用者Ｕ１～利用者Ｕ３は「複数の利用者」の一例である。

利用者Ｕ１は、カラオケ装置Ｋのリモコン装置５０を介し、たとえば、自己の利用者ＩＤを選択した後、カラオケ歌唱を行う楽曲Ｘ１を選曲する。この場合、利用者Ｕ１と楽曲Ｘ１とが紐付けされることとなる。利用者Ｕ１は「一の利用者」の一例であり、楽曲Ｘ１は「ある楽曲」の一例である。

レコメンド部４００は、利用者Ｕ１が選曲した楽曲Ｘ１の属性情報から、楽曲Ｘ１のハーモニー歌唱のタイプ（ここでは「上ハモタイプ」であるとする）を取得する。

次に、レコメンド部４００は、予め入力されている利用者Ｕ１～利用者Ｕ３の利用者ＩＤと、楽曲Ｘ１を選曲する際に選択された利用者Ｕ１の利用者ＩＤとを対比することで、カラオケ歌唱を行う利用者Ｕ１と、それ以外の利用者Ｕ２及び利用者Ｕ３とを特定する。利用者Ｕ２及び利用者Ｕ３は「他の利用者」の一例である。

レコメンド部４００は、利用者Ｕ２及び利用者Ｕ３毎の利用者識別情報に紐付けられた複数のハーモニー歌唱のタイプのうち、数が多い方のタイプを特定する。具体的に、レコメンド部４００は、図３のテーブルを参照し、利用者Ｕ２の利用者ＩＤに紐付けられた４つのハーモニー歌唱のタイプのうち、数が多い方の「上ハモタイプ」を特定する。また、レコメンド部４００は、図４のテーブルを参照し、利用者Ｕ３の利用者ＩＤに紐付けられた４つのハーモニー歌唱のタイプのうち、数が多い方の「下ハモタイプ」を特定する。

そして、レコメンド部４００は、利用者Ｕ１が選曲した楽曲Ｘ１のハーモニー歌唱のタイプ（上ハモタイプ）と、利用者Ｕ２の利用者ＩＤに紐付けられたハーモニー歌唱のタイプのうち、数が多い方のタイプ（上ハモタイプ）、及び利用者Ｕ３の利用者ＩＤに紐付けられたハーモニー歌唱のタイプのうち、数が多い方のタイプ（下ハモタイプ）とを対比し、一致するハーモニー歌唱タイプ（上ハモタイプ）に紐付けられた利用者Ｕ２の利用者ＩＤを特定する。

その後、レコメンド部４００は、利用者Ｕ２に対して、楽曲Ｘ１のカラオケ歌唱に合わせたハーモニー歌唱をレコメンドする。なお、この例から明らかなように、記憶手段１０ａに記憶される情報としては、判定したハーモニー歌唱のタイプ、及び特定した利用者識別情報があればよく、楽曲ＩＤは必須の情報ではない。

＝＝カラオケ装置の動作について＝＝
次に、図５及び図６を参照して本実施形態におけるカラオケ装置Ｋの動作の具体例について述べる。図５は、ハーモニー歌唱のタイプを記憶させる場合のカラオケ装置Ｋの動作例を示すフローチャートである。この例において、データ記憶部１００は、利用者を識別するための利用者識別情報と、当該利用者の声紋データとを紐付けて記憶しているとする。図６は、ハーモニー歌唱のレコメンドを行う場合のカラオケ装置Ｋの動作例を示すフローチャートである。

［ハーモニー歌唱のタイプの記憶］
利用者Ｕ１がマイク４０ａを介して楽曲Ｘ１のカラオケ歌唱を行うのと同時に、利用者Ｕ２がマイク４０ｂを介して楽曲Ｘ１のカラオケ歌唱を行ったとする（複数の利用者によるカラオケ歌唱。ステップ１０）。

この場合、信号処理部２００は、マイク４０ａまたはマイク４０ｂから出力された歌唱音声信号に基づいて、ある利用者が行ったハーモニー歌唱のタイプを判定する（ハーモニー歌唱のタイプを判定。ステップ１１）。ここでは利用者Ｕ２が「ある利用者（ハーモニー歌唱を行った利用者）」であるとする。

また、信号処理部２００は、ハーモニー歌唱を行った利用者Ｕ２の歌唱音声信号から声紋データを抽出し、当該声紋データに基づいて、利用者Ｕ２の利用者識別情報を、ハーモニー歌唱を行った利用者の利用者識別情報として特定する（ハーモニー歌唱を行った利用者の利用者識別情報を特定。ステップ１２）。

記憶処理部３００は、ステップ１１で判定されたハーモニー歌唱のタイプと、ステップ１２で特定された利用者識別情報とを紐付けて記憶手段１０ａに記憶させる（ハーモニー歌唱のタイプ及び利用者識別情報を紐付けて記憶。ステップ１３）。

［ハーモニー歌唱のレコメンド］
利用者Ｕ１～利用者Ｕ３がカラオケ装置Ｋを利用するとする。また、各利用者は、カラオケ装置Ｋの利用にあたって、リモコン装置５０を介して自己の利用者ＩＤの入力を行っているとする。

利用者Ｕ１は、カラオケ装置Ｋのリモコン装置５０を介し、自己の利用者ＩＤを選択した後、カラオケ歌唱を行う楽曲Ｘ１を選曲する（楽曲を選曲。ステップ２０）。レコメンド部４００は、利用者Ｕ１が選曲した楽曲Ｘ１の属性情報から、楽曲Ｘ１のハーモニー歌唱のタイプを取得する（選曲した楽曲のハーモニー歌唱のタイプを取得。ステップ２１）。

次に、レコメンド部４００は、予め入力されている利用者の利用者ＩＤと、楽曲Ｘ１を選曲する際に選択された利用者Ｕ１の利用者ＩＤとを対比することで、カラオケ歌唱を行う利用者Ｕ１と、他の利用者（利用者Ｕ２及び利用者Ｕ３）とを特定する（他の利用者を特定。ステップ２２）。

そして、レコメンド部４００は、ステップ２１で取得した楽曲Ｘ１のハーモニー歌唱のタイプと、ステップ２２で特定した他の利用者毎の利用者ＩＤに紐付けられたハーモニー歌唱のタイプに基づいて、たとえば、利用者Ｕ２の利用者ＩＤを特定する（他の利用者の利用者ＩＤを特定。ステップ２３）。

その後、レコメンド部４００は、ステップ２３で特定した利用者ＩＤに対応する利用者Ｕ２に対して、楽曲Ｘ１のカラオケ歌唱に合わせたハーモニー歌唱をレコメンドする（ハーモニー歌唱をレコメンド。ステップ２４）。

以上から明らかなように、本実施形態に係るカラオケ装置Ｋは、利用者を識別するための利用者識別情報と、当該利用者の声紋データとを紐付けて記憶するデータ記憶部１００と、楽曲のカラオケ歌唱を行った複数の利用者の歌唱音声信号に基づいて、ある利用者が行ったハーモニー歌唱のタイプを判定し、且つ当該ハーモニー歌唱に対応する歌唱音声信号から抽出した声紋データに基づいて、当該ある利用者の利用者識別情報を特定する信号処理部２００と、判定されたハーモニー歌唱のタイプと、特定された利用者識別情報とを紐付けて記憶手段１０ａに記憶させる記憶処理部３００と、複数の利用者の中の一の利用者が選曲したある楽曲のハーモニー歌唱のタイプと、記憶手段１０ａに記憶された、利用者のハーモニー歌唱のタイプとに基づいて、当該一の利用者以外の他の利用者の利用者識別情報を特定し、当該利用者識別情報に対応する他の利用者に対して、当該ある楽曲のカラオケ歌唱に合わせたハーモニー歌唱をレコメンドするレコメンド部４００と、を有する。

このようなカラオケ装置Ｋによれば、カラオケ歌唱される楽曲のハーモニー歌唱のタイプと共通するタイプのハーモニー歌唱を行った利用者に対して、ハーモニー歌唱をレコメンドすることができる。このようにハーモニー歌唱がレコメンドされることにより、他の利用者は、自らが得意とするタイプのハーモニー歌唱を行いやすくなる。また、カラオケ歌唱を行う利用者にとっても、自己のカラオケ歌唱に合ったハーモニー歌唱を聴くことでカラオケ歌唱をより楽しむことができる。すなわち、本実施形態に係るカラオケ装置Ｋによれば、利用者及び楽曲のハーモニー歌唱のタイプに応じて、適当な利用者に対しハーモニー歌唱をレコメンドすることができる。

また、本実施形態に係るカラオケ装置Ｋにおけるレコメンド部４００は、一の利用者が選曲したある楽曲のハーモニー歌唱のタイプと、利用者毎の利用者識別情報に紐付けられた複数のハーモニー歌唱のタイプのうち、数が多い方のタイプとに基づいて、他の利用者の利用者識別情報を特定する。ある利用者の利用者識別情報に紐付けられたハーモニー歌唱のタイプの数が多い場合、当該ある利用者はそのタイプのハーモニー歌唱を得意とする可能性が高い。すなわち、複数のハーモニー歌唱のタイプのうち、数が多い方のタイプを用いて利用者識別情報を特定することにより、ハーモニー歌唱のレコメンドをより適切に行うことができる。

＜第２実施形態＞
次に、図７及び図８を参照して、第２実施形態に係るカラオケ装置について説明する。本実施形態では、選曲した楽曲のハーモニー歌唱のタイプを判定する例について述べる。本実施形態において、記憶手段１０ａに記憶されている楽曲の属性情報には、楽曲のハーモニー歌唱のタイプは含まれない。第１実施形態と同様の構成については説明を省略する。

［制御手段］
図７に示すように、本実施形態においてはＣＰＵがメモリに記憶されるプログラムを実行することにより、制御手段１０ｅは、信号処理部２００、記憶処理部３００、レコメンド部４００、及び判定部５００として機能する。

（判定部）
判定部５００は、一の利用者が、選曲したある楽曲に対応する自動ハーモニーをキャンセルした場合、当該ある楽曲の自動ハーモニーに対応するデータに基づき、選曲したある楽曲のハーモニー歌唱のタイプを判定する。

自動ハーモニーは、楽曲のカラオケ演奏に合わせてハーモニー歌唱を自動で再生する機能である。自動ハーモニーは、たとえば、リファレンスデータの各ピッチを所定値だけシフトして生成されるハーモニーデータ（たとえば特開２００４－２７９７８６参照）、または予め録音されたハーモニー音声データに基づいて実行される。これらのデータは、たとえば、楽曲の楽曲データとして記憶手段１０ａに記憶されている。或いは、ハーモニーデータの場合、判定部５００が、都度、リファレンスデータから生成してもよい。ハーモニーデータ及びハーモニー音声データは、「自動ハーモニーに対応するデータ」の一例である。

通常のカラオケ歌唱を行う利用者は、楽曲を選曲する際等、カラオケ歌唱を開始する前に、リモコン装置５０を介して自動ハーモニーを使用するかキャンセルするかを決定することができる。たとえば、判定部５００は、利用者によるリモコン装置５０の表示画面に表示されるアイコンの選択に応じて、自動ハーモニーの使用またはキャンセルの判断を行う。

ハーモニー歌唱のタイプの判定は、様々な手法を用いることができる。たとえば、ハーモニーデータを用いる場合、判定部５００は、シフトされたピッチを確認し、ピッチが＋方向にシフトされていれば「上ハモタイプ」、ピッチが－方向にシフトされていれば「下ハモタイプ」であると判定する。また、ハーモニー音声データを用いる場合、判定部５００は、ハーモニー音声データとリファレンスデータとのピッチの差を求め、ピッチの差が正の場合、「上ハモタイプ」であると判定し、ピッチの差が負の場合、「下ハモタイプ」であると判定する。

ここで、第１実施形態と同様、利用者Ｕ１～利用者Ｕ３がカラオケ装置Ｋを利用するとする。データ記憶部１００には、各利用者の利用者識別情報及び声紋データが記憶されているとする。また、記憶手段１０ａには、利用者Ｕ２及び利用者Ｕ３については、図３及び図４に示すテーブルが記憶されているとする。更に、各利用者は、カラオケ装置Ｋの利用にあたって、リモコン装置５０を介して自己の利用者ＩＤの入力を行っているとする。

利用者Ｕ１は、カラオケ装置Ｋのリモコン装置５０を介し、自己の利用者ＩＤを選択した後、カラオケ歌唱を行う楽曲Ｘ１を選曲し、且つ自動ハーモニーをキャンセルしたとする。この場合、判定部５００は、楽曲Ｘ１の自動ハーモニーに対応するデータに基づき、選曲したある楽曲のハーモニー歌唱のタイプを判定する。判定部５００は、判定したハーモニー歌唱のタイプと、利用者Ｕ１の利用者ＩＤを紐付けてレコメンド部４００に出力する。

（レコメンド部）
本実施形態に係るレコメンド部４００は、判定されたある楽曲のハーモニー歌唱のタイプと、記憶手段１０ａに記憶された、利用者のハーモニー歌唱のタイプとに基づいて、他の利用者の利用者識別情報を特定する。

たとえば、判定部５００から、利用者Ｕ１が選曲した楽曲Ｘ１のハーモニー歌唱のタイプ（上ハモタイプ）及び利用者Ｕ１の利用者ＩＤが出力されたとする。

この場合、レコメンド部４００は、予め入力されている利用者Ｕ１～利用者Ｕ３の利用者ＩＤと、出力された利用者Ｕ１の利用者ＩＤとを対比することで、カラオケ歌唱を行う利用者Ｕ１と、それ以外の利用者Ｕ２及び利用者Ｕ３とを特定する。

そして、レコメンド部４００は、判定部５００から出力された楽曲Ｘ１のハーモニー歌唱のタイプ（上ハモタイプ）と、利用者Ｕ２の利用者ＩＤに紐付けられたハーモニー歌唱のタイプのうち、数が多い方のタイプ（上ハモタイプ）、及び利用者Ｕ３の利用者ＩＤに紐付けられたハーモニー歌唱のタイプのうち、数が多い方のタイプ（下ハモタイプ）とを対比し、一致するハーモニー歌唱タイプ（上ハモタイプ）に紐付けられた利用者Ｕ２の利用者ＩＤを特定する。

その後、レコメンド部４００は、利用者Ｕ２に対して、楽曲Ｘ１のカラオケ歌唱に合わせたハーモニー歌唱をレコメンドする。なお、自動ハーモニーをキャンセルしない場合には、レコメンド部４００はハーモニー歌唱のレコメンドを行わない。

＝＝カラオケ装置の動作について＝＝
次に、図８を参照して本実施形態におけるカラオケ装置Ｋの動作の具体例について述べる。図８は、ハーモニー歌唱のレコメンドを行う場合のカラオケ装置Ｋの動作例を示すフローチャートである。なお、ハーモニー歌唱のタイプを記憶させる場合のカラオケ装置Ｋの動作は、第１実施形態と同様である。

利用者Ｕ１は、カラオケ装置Ｋのリモコン装置５０を介し、自己の利用者ＩＤを選択した後、カラオケ歌唱を行う楽曲Ｘ１を選曲する（楽曲を選曲。ステップ３０）。また、利用者Ｕ１は、カラオケ装置Ｋのリモコン装置５０を介し、選曲した楽曲Ｘ１に対応する自動ハーモニーをキャンセルする（自動ハーモニーをキャンセル。ステップ３１）。

この場合、判定部５００は、楽曲Ｘ１の自動ハーモニーに対応するデータに基づき、選曲した楽曲Ｘ１のハーモニー歌唱のタイプを判定する（選曲された楽曲のハーモニー歌唱のタイプを判定。ステップ３２）。

次に、レコメンド部４００は、予め入力されている利用者の利用者ＩＤと、楽曲Ｘ１を選曲する際に選択された利用者Ｕ１の利用者ＩＤとを対比することで、カラオケ歌唱を行う利用者Ｕ１と、他の利用者（利用者Ｕ２及び利用者Ｕ３）とを特定する（他の利用者を特定。ステップ３３）。

そして、レコメンド部４００は、ステップ３２で判定された楽曲Ｘ１のハーモニー歌唱のタイプと、ステップ３３で特定した他の利用者毎の利用者ＩＤに紐付けられたハーモニー歌唱のタイプに基づいて、たとえば、利用者Ｕ２の利用者ＩＤを特定する（他の利用者の利用者ＩＤを特定。ステップ３４）。

その後、レコメンド部４００は、ステップ３４で特定した利用者ＩＤに対応する利用者Ｕ２に対して、楽曲Ｘ１のカラオケ歌唱に合わせたハーモニー歌唱をレコメンドする（ハーモニー歌唱をレコメンド。ステップ３５）。

以上から明らかなように、本実施形態に係るカラオケ装置Ｋは、一の利用者が、選曲したある楽曲に対応する自動ハーモニーをキャンセルした場合、当該ある楽曲の自動ハーモニーに対応するデータに基づき、選曲したある楽曲のハーモニー歌唱のタイプを判定する判定部５００を有し、レコメンド部４００は、判定されたある楽曲のハーモニー歌唱のタイプと、記憶手段１０ａに記憶された、利用者のハーモニー歌唱のタイプとに基づいて、他の利用者の利用者識別情報を特定する。このようなカラオケ装置Ｋによれば、自動ハーモニーのキャンセルに応じて、適当な利用者に対しハーモニー歌唱をレコメンドすることができる。

＜第３実施形態＞
次に、図９～図１３を参照して、第３実施形態に係るカラオケ装置について説明する。本実施形態では、ハーモニー歌唱の評価を用いて利用者識別情報を特定する例について述べる。第１実施形態または第２実施形態と同様の構成については説明を省略する。

［制御手段］
図９に示すように、本実施形態においてはＣＰＵがメモリに記憶されるプログラムを実行することにより、制御手段１０ｅは、信号処理部２００、記憶処理部３００、レコメンド部４００、及び評価部６００として機能する。

（評価部）
評価部６００は、ハーモニー歌唱を行った利用者の歌唱音声信号に基づいて、ハーモニー歌唱の巧拙を評価する。

ハーモニー歌唱の巧拙の評価は、様々な方法で行うことができる。たとえば、評価部６００は、ある楽曲のハーモニー歌唱を行った利用者の歌唱音声信号に含まれる各ノートのピッチと、当該ある楽曲の自動ハーモニーに対応するハーモニーデータに含まれる各ノートのピッチとを比較し、その差に応じて所定の採点値を付与することにより、評価を行うことができる。なお、この場合、記憶手段１０ａは、楽曲データとしてハーモニーデータを記憶している。

（記憶処理部）
本実施形態に係る憶処理部３００は、判定されたハーモニー歌唱のタイプ、特定された利用者識別情報、及びハーモニー歌唱の評価を紐付けて記憶手段１０ａに記憶させる。

たとえば、第１実施形態で述べたように、信号処理部２００から利用者Ｕ２のハーモニー歌唱のタイプ、利用者Ｕ２の利用者識別情報ＩＤ＊＊＊Ｕ２、及び楽曲Ｘ１の楽曲ＩＤ＊＊＊Ｘ１が出力されたとする。また、評価部６００から利用者Ｕ２のハーモニー歌唱の評価として採点値「９０点」が出力されたとする。この場合、記憶処理部３００は、それらを紐付けて記憶手段１０ａに記憶させる。

図１０及び図１１は、記憶手段１０ａに記憶された、利用者毎のハーモニー歌唱タイプ及び評価を示すテーブルである。具体的に、図１０は、利用者Ｕ２の楽曲毎のハーモニー歌唱のタイプ及び評価を示し、図１１は、利用者Ｕ３の楽曲毎のハーモニー歌唱のタイプ及び評価を示す。たとえば、図１０のテーブルからは、利用者Ｕ２が、楽曲Ｘ１のカラオケ歌唱に合わせて、上ハモタイプのハーモニー歌唱を行い、その評価が「８０点」であったことがわかる。一方、図１１のテーブルからは、利用者Ｕ３が、楽曲Ｘ１のカラオケ歌唱に合わせて、下ハモタイプのハーモニー歌唱を行い、その評価が「８０点」であったことがわかる。

（レコメンド部）
本実施形態に係るレコメンド部４００は、一の利用者が選曲したある楽曲のハーモニー歌唱のタイプと、利用者毎の利用者識別情報に紐付けられた複数のハーモニー歌唱のタイプのうち、ハーモニー歌唱の評価が高い方のタイプとに基づいて、他の利用者の利用者識別情報を特定する。

ここで、利用者Ｕ１～利用者Ｕ３がカラオケ装置Ｋを利用するとする。データ記憶部１００には、各利用者の利用者識別情報及び声紋データが記憶されているとする。また、記憶手段１０ａには、利用者Ｕ２及び利用者Ｕ３については、図１０及び図１１に示すテーブルが記憶されているとする。更に、各利用者は、カラオケ装置Ｋの利用にあたって、リモコン装置５０を介して自己の利用者ＩＤの入力を行っているとする。

利用者Ｕ１は、カラオケ装置Ｋのリモコン装置５０を介し、自己の利用者ＩＤを選択した後、カラオケ歌唱を行う楽曲Ｘ１を選曲する。楽曲Ｘ１は「ある楽曲」の一例である。

次に、レコメンド部４００は、予め入力されている利用者Ｕ１～利用者Ｕ３の利用者ＩＤと、楽曲Ｘ１を選曲する際に入力された利用者Ｕ１の利用者ＩＤとを対比することで、カラオケ歌唱を行う利用者Ｕ１と、それ以外の利用者Ｕ２及び利用者Ｕ３とを特定する。利用者Ｕ２及び利用者Ｕ３は「他の利用者」の一例である。

レコメンド部４００は、利用者Ｕ２及び利用者Ｕ３毎の利用者識別情報に紐付けられた複数のハーモニー歌唱のタイプのうち、ハーモニー歌唱の評価が高い方のタイプを特定する。具体的に、図１０のテーブルによれば、利用者Ｕ２の利用者ＩＤに紐付けられた４つのハーモニー歌唱のタイプの評価について、上ハモタイプの平均点は、７３．３点であり、下ハモタイプの平均点は、６５点である。この場合、レコメンド部４００は、平均点が高い方の「上ハモタイプ」を特定する。また、図１１のテーブルによれば、利用者Ｕ３の利用者ＩＤに紐付けられた４つのハーモニー歌唱のタイプの評価について、上ハモタイプの平均点は、６８点であり、下ハモタイプの平均点は、８６．３点である。この場合、レコメンド部４００は、平均点が高い方の「下ハモタイプ」を特定する。

なお、レコメンド部４００は、利用者の利用者ＩＤに紐付けられたハーモニー歌唱のタイプの評価について、最も点数が高いタイプを特定してもよい。たとえば、図１０のテーブルによれば、レコメンド部４００は、最も点数が高い「８０点」に対応する「上ハモタイプ」を特定することができる。

そして、レコメンド部４００は、利用者Ｕ１が選曲した楽曲Ｘ１のハーモニー歌唱のタイプ（上ハモタイプ）と、利用者Ｕ２の利用者ＩＤに紐付けられたハーモニー歌唱のタイプのうち、評価が高い方のタイプ（上ハモタイプ）、及び利用者Ｕ３の利用者ＩＤに紐付けられたハーモニー歌唱のタイプのうち、評価が高い方のタイプ（下ハモタイプ）とを対比し、一致するハーモニー歌唱タイプ（上ハモタイプ）に紐付けられた利用者Ｕ２の利用者ＩＤを特定する。

その後、レコメンド部４００は、利用者Ｕ２に対して、楽曲Ｘ１のカラオケ歌唱に合わせたハーモニー歌唱をレコメンドする。

＝＝カラオケ装置の動作について＝＝
次に、図１２及び図１３を参照して本実施形態におけるカラオケ装置Ｋの動作の具体例について述べる。図１２は、ハーモニー歌唱のタイプを記憶させる場合のカラオケ装置Ｋの動作例を示すフローチャートである。この例において、データ記憶部１００は、利用者を識別するための利用者識別情報と、当該利用者の声紋データとを紐付けて記憶しているとする。図１３は、ハーモニー歌唱のレコメンドを行う場合のカラオケ装置Ｋの動作例を示すフローチャートである。

［ハーモニー歌唱のタイプの記憶］
ステップ４０～ステップ４２は、第１実施形態のステップ１０～１２と同様である。

評価部６００は、ハーモニー歌唱を行った利用者Ｕ２の歌唱音声信号に基づいて、ハーモニー歌唱の巧拙を評価する（ハーモニー歌唱を評価。ステップ４３）。

記憶処理部３００は、ステップ４１で判定されたハーモニー歌唱のタイプ、ステップ４２で特定された利用者識別情報、及びステップ４３で得られたハーモニー歌唱の評価を紐付けて記憶手段１０ａに記憶させる（ハーモニー歌唱のタイプ、利用者識別情報、ハーモニー歌唱の評価を紐付けて記憶。ステップ４４）。

［ハーモニー歌唱のレコメンド］
ステップ５０～ステップ５２は、第１実施形態のステップ２０～２２と同様である。

レコメンド部４００は、ステップ５１で取得した楽曲Ｘ１のハーモニー歌唱のタイプと、利用者毎の利用者識別情報に紐付けられた複数のハーモニー歌唱のタイプのうち、ハーモニー歌唱の評価が高い方のタイプとに基づいて、たとえば、利用者Ｕ２の利用者ＩＤを特定する（ハーモニー歌唱の評価に基づいて、他の利用者の利用者ＩＤを特定。ステップ５３）。

その後、レコメンド部４００は、ステップ５３で特定した利用者ＩＤに対応する利用者Ｕ２に対して、楽曲Ｘ１のカラオケ歌唱に合わせたハーモニー歌唱をレコメンドする（ハーモニー歌唱をレコメンド。ステップ５４）。

以上から明らかなように、本実施形態に係るカラオケ装置Ｋは、ハーモニー歌唱を行った利用者の歌唱音声信号に基づいて、ハーモニー歌唱の巧拙を評価する評価部６００を有し、記憶処理部３００は、判定されたハーモニー歌唱のタイプ、特定された利用者識別情報、及びハーモニー歌唱の評価を紐付けて記憶手段１０ａに記憶させ、レコメンド部４００は、一の利用者が選曲したある楽曲のハーモニー歌唱のタイプと、利用者毎の利用者識別情報に紐付けられた複数のハーモニー歌唱のタイプのうち、ハーモニー歌唱の評価が高い方のタイプとに基づいて、他の利用者の利用者識別情報を特定する。ある利用者の利用者識別情報に紐付けられた特定のハーモニー歌唱のタイプの評価が高い場合、当該ある利用者はそのタイプのハーモニー歌唱を得意とする可能性が高い。すなわち、複数のハーモニー歌唱のタイプのうち、評価が高い方のタイプを用いて利用者識別情報を特定することにより、ハーモニー歌唱のレコメンドをより適切に行うことができる。

＜その他＞
上記実施形態は、例として提示したものであり、発明の範囲を限定するものではない。上記の構成は、適宜組み合わせて実施することが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。上記実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１００データ記憶部
２００信号処理部
３００記憶処理部
４００レコメンド部
５００判定部
６００評価部
Ｋカラオケ装置

Claims

利用者を識別するための利用者識別情報と、当該利用者の声紋データとを紐付けて記憶するデータ記憶部と、
楽曲のカラオケ歌唱を行った複数の利用者の歌唱音声信号に基づいて、ある利用者が行ったハーモニー歌唱のタイプを判定し、且つ当該ハーモニー歌唱に対応する歌唱音声信号から抽出した声紋データに基づいて、当該ある利用者の利用者識別情報を特定する信号処理部と、
判定された前記ハーモニー歌唱のタイプと、特定された前記利用者識別情報とを紐付けて記憶手段に記憶させる記憶処理部と、
複数の利用者の中の一の利用者が選曲したある楽曲のハーモニー歌唱のタイプと、前記記憶手段に記憶された、利用者のハーモニー歌唱のタイプとに基づいて、当該一の利用者以外の他の利用者の利用者識別情報を特定し、当該利用者識別情報に対応する他の利用者に対して、当該ある楽曲のカラオケ歌唱に合わせたハーモニー歌唱をレコメンドするレコメンド部と、
を有するカラオケ装置。
前記一の利用者が、選曲したある楽曲に対応する自動ハーモニーをキャンセルした場合、当該ある楽曲の自動ハーモニーに対応するデータに基づき、選曲したある楽曲のハーモニー歌唱のタイプを判定する判定部を有し、
前記レコメンド部は、判定されたある楽曲のハーモニー歌唱のタイプと、前記記憶手段に記憶された、前記利用者のハーモニー歌唱のタイプとに基づいて、前記他の利用者の利用者識別情報を特定することを特徴とする請求項１記載のカラオケ装置。
前記レコメンド部は、一の利用者が選曲したある楽曲のハーモニー歌唱のタイプと、前記利用者毎の利用者識別情報に紐付けられた複数のハーモニー歌唱のタイプのうち、数が多い方のタイプとに基づいて、前記他の利用者の利用者識別情報を特定することを特徴とする請求項１または２記載のカラオケ装置。
前記ハーモニー歌唱を行った利用者の歌唱音声信号に基づいて、ハーモニー歌唱の巧拙を評価する評価部を有し、
前記記憶処理部は、判定された前記ハーモニー歌唱のタイプ、特定された前記利用者識別情報、及び前記ハーモニー歌唱の評価を紐付けて前記記憶手段に記憶させ、
前記レコメンド部は、一の利用者が選曲したある楽曲のハーモニー歌唱のタイプと、前記利用者毎の利用者識別情報に紐付けられた複数のハーモニー歌唱のタイプのうち、前記ハーモニー歌唱の評価が高い方のタイプとに基づいて、前記他の利用者の利用者識別情報を特定することを特徴とする請求項１または２記載のカラオケ装置。