JP2016102962A5 - - Google Patents

Description

歌唱採点手段は、任意のカラオケ楽曲の演奏に際して、歌唱者用マイクロホンから出力される歌唱音声信号と、当該カラオケ楽曲の歌唱採点リファレンスデータとを比較して歌唱採点値を算出するとともに、特定歌唱技法検出手段により特定の歌唱技法を検出した際に算出された歌唱技法点を、特定動作検知手段により検知された聴取者の特定動作を評価した評価値に応じて加点し、歌唱採点値と評価値に応じて加点された歌唱技法点とに基づいて総合歌唱採点値を算出するための手段である。

＜カラオケ採点システムの概要＞
本発明の実施形態に係るカラオケ採点システム１００は、歌唱採点リファレンスデータを用いた歌唱採点及び歌唱技法を検出して評価することにより算出した歌唱技法点に加えて、聴取者の評価を適切に反映することが可能なシステムであり、図１に示すように、カラオケ演奏装置１０に適用するシステムである。このカラオケ採点システム１００は、特定動作検知手段として機能する聴取者音声用マイクロホン１４、生体センサ１５、カメラ１６と、特定歌唱技法検出手段２７と、歌唱採点手段２８とを備えており、歌唱採点手段２８では、歌唱採点リファレンスデータに基づいて歌唱採点を行うとともに、特定歌唱技法検出手段２７により特定の歌唱技法を検出し評価することにより算出した歌唱技法点に、聴取者の特定動作の検出結果に応じて加点を行い、総合的な歌唱採点値を算出する。

＜歌唱採点手段＞
歌唱採点手段２８は、基本的に、カラオケ演奏時に入力される歌唱音声から歌唱の巧拙を評価して採点値（採点データ）を生成するためのプログラムからなり、本発明では、歌唱採点が指示されたカラオケ楽曲の演奏に際して、例えば１５ｍｓｅｃといった微小区間毎に、歌唱用マイクロホン１３から入力された歌唱音声信号から、音高データ、音量データ等の歌唱音声データを抽出し、現在演奏しているカラオケ楽曲の主旋律からなる歌唱採点リファレンスデータと、抽出した歌唱音声データとを比較することにより、歌唱採点値を算出するとともに、特定歌唱技法検出手段２７により特定の歌唱技法を検出して歌唱技法点を算出した際に、当該歌唱技法が検出されてから所定時間内に特定動作検知手段（聴取者用マイクロホン１４、生体センサ１５、カメラ１６）により聴取者の特定動作が検出された場合には、その検出結果に応じて歌唱技法点を加点し、歌唱採点値と加点された歌唱技法点とに基づいて総合歌唱採点値を算出するようになっている。一方、当該歌唱技法が検出されてから所定時間内に特定動作検知手段により聴取者の特定動作が検出されなかった場合には、歌唱採点値と特定歌唱技法検出手段２７により算出されたそのままの歌唱技法点とに基づいて総合歌唱採点値を算出する。

すなわち、歌唱採点手段２８は、歌唱採点リファレンスデータと歌唱音声を所定の歌唱区間ごとに比較することにより歌唱の巧拙を評価して歌唱採点値を求め、さらに、特定の歌唱技法（例えば、シャウト）を検出して歌唱技法点を算出した際に、聴取者の特定動作（例えば、興奮度の上昇）が検出されるとその歌唱技法点を加点して、歌唱採点値と共に総合的な歌唱採点結果データを出力する。歌唱採点手段２８による採点結果は、総合的な歌唱採点結果として表示装置１７の表示画面やカラオケリモコン装置１２の入出力表示部１２ｄ等に表示される。

図２を参照して、本実施形態における歌唱採点方法について説明する。上述したように、歌唱採点手段２８は、歌唱採点リファレンスデータと歌唱音声を比較することにより歌唱の巧拙を評価して歌唱採点値を算出する。ここで、歌唱採点値が例えば９０点であったとする。また、特定歌唱技法検出手段２７により特定の歌唱技法（例えば、シャウト）を検出して歌唱技法点を算出した際に、当該特定の歌唱技法が検出されてから所定時間内に聴取者の特定動作（興奮度の上昇）が検知されると歌唱技法点を加点する。

図２に示す例では、特定の歌唱技法としてシャウト２回及びこぶし１回を検出し、それぞれの歌唱技法点が特定歌唱技法検出手段２７により１．０点（シャウト１）、０．８点（シャウト２）、０．６点（こぶし１）と算出された。この時、シャウト１が検出された所定時間（例えば２秒）以内に聴取者の特定動作として閾値を超えた興奮度が検出されその評価値が１．１５と評価されたので、シャウト１の歌唱技法点は１．０＊１．１５＝１．１５と加算された。同様にシャウト２においては評価値が１．２０と評価され、歌唱技法点は０．８＊１．２０＝０．９６と加算された。他方、こぶし１が検出された所定時間以内には聴取者の特定動作として閾値を超えた興奮度は検出されなかったため、その歌唱技法点は０．６のままとなった。

したがって、３回の歌唱技法の合計点は２．４０点から２．７１点に加点され、歌唱採点手段は歌唱採点値９０点と歌唱技法点２．７１点とに基づいて、総合歌唱採点値９２．７１点を出力するものである。なお、歌唱技法としてシャウト及びこぶしにより歌唱技法点を算出し、聴取者の特定動作として興奮度を評価しているが、他の歌唱技法について、興奮度だけではなく他の評価項目を用いてもよいし、任意の歌唱技法と任意の聴取者の特定動作とを関連付けて重み付けを行ってもよい。また、歌唱者が特定の歌唱技法を駆使した（シャウトした）にも関わらず、聴取者の興奮度が上昇しなかった場合には、減点（マイナス点を加算）してもよい。

Claims (1)

1. 聴取者の評価を適切に反映して歌唱採点を行うことが可能なカラオケ採点システムであって、
   歌唱音声の入力に基づいて歌唱音声信号を出力する歌唱者用マイクロホンと、
   聴取者の特定動作を検知する特定動作検知手段と、
   各カラオケ楽曲について、少なくとも主旋律データを含む歌唱採点リファレンスデータと、
   前記歌唱者用マイクロホンから出力される歌唱音声信号に基づいて、特定の歌唱技法を検出し、評価することにより歌唱技法点を算出する特定歌唱技法検出手段と、
   任意のカラオケ楽曲の演奏に際して、前記歌唱者用マイクロホンから出力される歌唱音声信号と、当該カラオケ楽曲の前記歌唱採点リファレンスデータとを比較して歌唱採点値を算出するとともに、前記特定歌唱技法検出手段により前記特定の歌唱技法を検出した際に算出された歌唱技法点を、前記特定動作検知手段により検知された聴取者の前記特定動作を評価した評価値に応じて加点し、前記歌唱採点値と前記評価値に応じて加点された歌唱技法点とに基づいて総合歌唱採点値を算出する歌唱採点手段と、
   を備えたことを特徴とする聴取者評価を考慮したカラオケ採点システム。