JP7425558B2 - コード検出装置及びコード検出プログラム - Google Patents

Description

本発明は、コード検出装置及びコード検出プログラムに関する。

特許文献１には、和音データ生成装置が開示されている。音階レベル検出手段は、入力される音響信号に対して異なる特性のディジタルフィルタリング処理を時分割で順次行うことにより、その処理に対応する各々所定の複数の音階音に関する各周波数スペクトルのレベルを検出する。音階レベル積算手段は、所定のタイミング毎に、音階レベル検出手段から検出される各周波数スペクトルのレベルのうち、相対的に各オクターブ内で同じ音階関係にある周波数スペクトルのレベル同士を積算する。音階音検出手段は、所定のタイミング毎に、音階レベル積算手段で積算された１オクターブに含まれる音階夫々に対応する周波数スペクトルの積算レベルのうち値が大きい所定数を選択することにより、１オクターブ内の音階音の中から所定数の音階音を検出する。和音データ生成手段は、所定のタイミング毎に、音階音検出手段で検出された所定数の音階音に基づいて対応する和音データを生成する。

特許第３１５６２９９号公報

特許文献１は、音響信号に対して、上記の所定のタイミング毎に、周波数スペクトルのレベル同士を積算し、音階音を検出し、和音データを生成する。しかし、特許文献１は、テンポが一定でない曲では、上記の所定のタイミングを決めることが困難であるため、適切な和音データを生成することが困難である。

本発明の目的は、楽曲オーディオデータが再生されている間に、リアルタイムでコードを検出することができるようにすることである。

本発明のコード検出装置は、楽曲オーディオデータを再生する再生手段と、前記再生手段により前記楽曲オーディオデータが再生されている間にコード検出が指示されると、前記コード検出が指示されたタイミングに対応する前記楽曲オーディオデータの部分のコードを検出するコード検出手段とを有し、前記コード検出手段は、前記コード検出が指示されたタイミングから検出期間を経過するまでのタイミングに対応する前記楽曲オーディオデータのコードを検出する。

本発明によれば、楽曲オーディオデータが再生されている間に、リアルタイムでコードを検出することができる。

図１は、コード検出装置の機能構成例を示すブロック図である。 図２は、表示制御部が画像表示装置に表示する画像の例を示す図である。 図３は、コード検出装置のコード検出方法を示すフローチャートである。 図４（Ａ）～（Ｆ）は、コード検出方法を説明するための図である。

図１は、本実施形態によるコード検出装置１００の機能構成例を示すブロック図である。コード検出装置１００は、例えば、タブレット端末である。ＭＩＤＩ入力装置１４１は、演奏情報を入力するためのＭＩＤＩ機器であり、タブレット端末に接続される。ＭＩＤＩ出力装置１４２は、ＭＩＤＩ情報に応じた処理を行うＭＩＤＩ機器であり、タブレット端末に接続される。ＭＩＤＩ出力装置１４２は、例えば、ＭＩＤＩ情報に応じて楽音を発音する。ＭＩＤＩ入力装置１４１及びＭＩＤＩ出力装置１４２は、必須ではない。

コード検出装置１００は、タッチパネル装置１０１と、画像表示装置１０２と、サウンド出力装置１０３とを有する。タッチパネル装置１０１は、例えば、タブレット端末のタッチパネルであり、ユーザの指のタッチの座標を検出する。画像表示装置１０２は、例えば、タブレット端末の液晶表示装置であり、画像を表示する。サウンド出力装置１０３は、例えば、タブレット端末のスピーカであり、楽曲オーディデータ及びコード（和音）の音を発音する。

コード検出装置１００は、楽曲情報記憶部１１１と、波形情報記憶部１１２と、画像情報記憶部１１３とを有する。これらは、例えば、タブレット端末のハードディスクドライブ装置又はＲＡＭ等に対応する。楽曲情報記憶部１１１は、非圧縮形式ファイル（ＷＡＶ、ＡＩＦＦなど）や圧縮形式ファイル（ＭＰ３、ＡＡＣなど）等の一般的な楽曲オーディオファイルを記憶する。波形情報記憶部１１２は、波形情報読出部１２４により読み出された非圧縮のＰＣＭ波形情報を記憶する。画像情報記憶部１１３は、画像表示装置１０２に表示するための画像を記憶する。

コード検出装置１００は、タッチ座標検出部１２１と、再生指示部１２２と、選曲指示部１２３と、波形情報読出部１２４と、分散和音指示部１２５と、和音指示部１２６と、再生処理部１２７と、コード検出部１２８と、ＭＩＤＩ情報生成部１２９と、サウンド生成部１３０と、サウンド再生部１３１と、画像生成部１３２と、表示制御部１３３とを有する。これらは、例えば、タブレット端末のＣＰＵがプログラムを実行することにより実現される処理部である。これらの詳細は、後述する。

図２は、表示制御部１３３が画像表示装置１０２に表示する画像２００の例を示す図である。画像２００は、楽曲ＰＣＭ波形（楽曲オーディオデータ波形）２０１と、鍵盤２０２と、コード検出ボタン２０３と、テンポボタン２０４と、再生ボタン２０５と、停止ボタン２０６とを有する。

表示制御部１３３は、画像２００を画像表示装置１０２に表示するように制御する。タッチパネル装置１０１は、画像表示装置１０２の表示面に設けられる。ユーザが画像２００上を指でタッチすると、タッチ座標検出部１２１は、画像２００上のタッチされた座標を検出し、画像２００上のタッチされた領域を認識する。

図３は、コード検出装置１００のコード検出方法を示すフローチャートである。まず、ステップＳ３０１では、選曲指示部１２３は、タッチ座標検出部１２１がユーザのタッチを検出することにより、楽曲情報記憶部１１１に記憶されている複数の楽曲名の中から１つの楽曲名を選択する。

次に、ステップＳ３０２では、波形情報読出部１２４は、選曲指示部１２３により選択された楽曲名の楽曲オーディデータを読み出し、非圧縮に変換されたＰＣＭ波形情報を波形情報記憶部１１２へ書き出す。画像生成部１３２は、波形情報読出部１２４により書き込まれた楽曲ＰＣＭ波形２０１を含む画像２００を生成し、その画像２００を画像情報記憶部１１３に書き込む。表示制御部１３３は、画像情報記憶部１１３に記憶されている楽曲ＰＣＭ波形２０１を含む画像２００を画像表示装置１０２に表示するように制御する。楽曲ＰＣＭ波形２０１は、図４（Ａ）に示すように、左チャンネルの楽曲ＰＣＭ波形４０７と、右チャンネルの楽曲ＰＣＭ波形４０８を含む。

次に、ステップＳ３０３では、コード検出部１２８は、波形情報読出部１２４により読み出された楽曲ＰＣＭ波形２０１を基に、その楽曲のテンポ４０１（図４（Ａ））を検出する。テンポ４０１は、例えば、６５ｂｐｍ（beats per minute）である。画像生成部１３２は、テンポ４０１及びテンポバー４０２を含む画像２００を生成する。表示制御部１３３は、図４（Ａ）のように、テンポ４０１及びテンポバー４０２を含む画像２００を画像表示装置１０２に表示するように制御する。複数のテンポバー４０２は、楽曲ＰＣＭ波形２０１上のテンポ４０１に対応する等間隔のビートを示す。

テンポ４０１は、後述のステップＳ３０８及びＳ３１３のコード検出に用いられる。コード検出部１２８は、楽曲のコードを高精度で検出するために、コードが切り替わるタイミングに密接に関係するテンポ４０１を検出する。例えば、コード検出部１２８は、自己相関等を使って、楽曲ＰＣＭ波形２０１の周期性を解析することにより、テンポ４０１を検出する。具体的には、コード検出部１２８は、ドラム等の打楽器により周期的にリズムを刻むような現代的な楽曲の場合には、時系列的に、楽曲ＰＣＭ波形２０１の周波数解析を行った上で、特定周波数帯のパワーの周期的変化を見つけることで、テンポ４０１を検出することができる。

次に、ステップＳ３０４では、再生指示部１２２は、タッチ座標検出部１２１がユーザの再生ボタン２０５のタッチを検出することにより、再生開始が指示するまで待機し、再生開始が指示されると、ステップＳ３０５に進む。

ステップＳ３０５では、再生処理部１２７は、選択された楽曲名の楽曲ＰＣＭ波形を波形情報記憶部１１２から読み出し、その楽曲ＰＣＭ波形の再生処理を開始する。サウンド生成部１３０は、サウンド再生部１３１に対して、再生処理部１２７により再生処理された楽曲ＰＣＭ波形の出力を開始する。サウンド再生部１３１は、サウンド出力装置に対して、楽曲オーディオデータの発音を開始させる。表示制御部１３３は、図４（Ａ）に示すように、再生バー４０３を画像表示装置１０２に表示するように制御する。再生バー４０３は、楽曲ＰＣＭ波形２０１上の再生位置を示す。ユーザは、楽曲ＰＣＭ波形２０１の楽音を聞きながら、コード検出ボタン２０３又は鍵盤２０２のタッチにより、コード検出を指示することができる。

ここで、ユーザは、楽曲ＰＣＭ波形２０１の楽音を聞きながら、テンポバー４０２と再生バー４０３を参照することにより、テンポ４０１が適正値であるか否かを判断することができる。

例えば、テンポが一定でない曲、抑揚豊富なテンポが目まぐるしく変化するクラシック曲、周期的なリズムの特徴に乏しい曲などの場合には、コード検出部１２８は、高精度にテンポ４０１を検出することが困難な場合がある。

その場合、ユーザは、テンポボタン２０４を用いて、テンポ４０１を変更することができる。例えば、ユーザは、楽曲のビートに合わせて、テンポボタン２０４を略等間隔でビートをタップする。すると、コード検出部１２８は、テンポボタン２０４のタップの間隔に応じて、テンポ４０１を検出し、テンポ４０１を決定する。表示制御部１３３は、その決定されたテンポ４０１を表示するように制御する。

次に、ステップＳ３０６では、分散和音指示部１２５は、コード検出により分散和音を発音させるための鍵盤２０２がタッチされたか否かを判定する。ユーザは、鍵盤２０２の鍵をタッチすることにより、分散音の演奏情報を入力する。分散和音指示部１２５は、鍵盤２０２がタッチされた場合にはステップＳ３１１に進み、鍵盤２０２がタッチされていない場合には、ステップＳ３０７に進む。

なお、コード検出装置１００は、鍵盤２０２の代わりに、ＭＩＤＩ入力装置１４１を用いてもよい。その場合、分散和音指示部１２５は、ＭＩＤＩ入力装置１４１から単音のノートオン情報（例えば押鍵情報）が入力されたか否かを判定する。分散和音指示部１２５は、単音のノートオン情報が入力された場合には、ステップＳ３１１に進み、単音のノートオン情報が入力されていない場合には、ステップＳ３０７に進む。

ステップＳ３０７では、和音指示部１２６は、コード検出により和音を発音させるためのコード検出ボタン２０３がタッチされたか否かを判定する。和音指示部１２６は、コード検出ボタン２０３がタッチされた場合にはステップＳ３０８に進み、コード検出ボタン２０３がタッチされていない場合には、ステップＳ３１６に進む。

なお、コード検出装置１００は、コード検出ボタン２０３の代わりに、ＭＩＤＩ入力装置１４１を用いてもよい。例えば、和音指示部１２６は、ＭＩＤＩ入力装置１４１から和音入力指示用にアサインされた鍵のノートオン情報が入力されたか否かを判定する。和音指示部１２６は、和音入力指示用にアサインされた鍵のノートオン情報が入力された場合には、ステップＳ３０８に進み、和音入力指示用にアサインされた鍵のノートオン情報が入力されていない場合には、ステップＳ３１６に進む。

ステップＳ３０８では、コード検出部１２８は、図４（Ａ）のように、コード検出ボタン２０３のタッチ開始タイミングｔ３から検出期間４０４を経過するまでのタイミングｔ４に対応する楽曲ＰＣＭ波形２０１のコードを検出する。コード検出ボタン２０３のタッチ開始タイミングｔ３は、和音指示部１２６によりコード検出が指示されたタイミングである。

検出期間４０４は、初回にコード検出ボタン２０３にタッチしたときにはステップＳ３０３で検出されたテンポ４０１に基づく期間である。また、ユーザがテンポボタン２０４でテンポ４０１を指定した場合には、検出期間４０４は、ユーザがテンポボタン２０４で入力する複数のビートの間隔に基づく期間である。例えば、検出期間４０４は、テンポ４０１に基づく複数のテンポバー４０２の間隔の２倍の期間である。

一方、コード検出ボタン２０３のタッチが初回でないときには、検出期間４０４は、前回コード検出ボタン２０３にタッチしてから今回コード検出ボタン２０３にタッチするまでの時間に対応する期間とするのが望ましい。

まず、コード検出部１２８は、図４（Ａ）の検出期間４０４の楽曲ＰＣＭ波形２０１を高速フーリエ変換（ＦＦＴ）し、図４（Ｂ）の周波数スペクトラム４１０を得る。周波数スペクトラム４１０は、左チャンネルの周波数スペクトラム４１１と、右チャンネルの周波数スペクトラム４１２を含む。左チャンネルの周波数スペクトラム４１１は、左チャンネルの楽曲ＰＣＭ波形４０７を高速フーリエ変換したものである。右チャンネルの周波数スペクトラム４１２は、右チャンネルの楽曲ＰＣＭ波形４０８を高速フーリエ変換したものである。

次に、コード検出部１２８は、周波数スペクトラム４１０に含まれる音高を検出し、図４（Ｃ）のように、その検出した音高を鍵盤２０２の１オクターブ内の音高に変換し、鍵盤２０２の１オクターブ内の音高毎に周波数パワーを積算し、１オクターブ内の音高毎の周波数パワー４２１を得る。

次に、コード検出部１２８は、図４（Ｄ）のコード構成音テーブル４３１を参照し、音高毎の周波数パワー４２１のうちの閾値より大きい周波数パワーの音高を基に、コードネームを検出する。コードネームは、ルート音（根音）とコードタイプを含む。コード構成音テーブル４３１は、ルート音がＣ（ド）の場合のコードタイプと構成音フラグを示す。例えば、「Ｃｍａｊ」のコードネームは、ルート音が「Ｃ」であり、コードタイプが「ｍａｊ」である。コードネームの構成音は、構成音フラグが「＿」で表される音である。例えば、「Ｃｍａｊ」のコードネームの構成音は、構成音フラグが０であるＣ（ド）と、構成音フラグが４であるＥ（ミ）と、構成音フラグが７であるＧ（ソ）である。コード検出部１２８は、音高毎の周波数パワー４２１のうちの閾値より大きい周波数パワーの音高がＣとＥとＧである場合には、「Ｃｍａｊ」のコードネームを検出する。コード検出部１２８は、複数のコードネームの候補を推定した場合には、周波数パワー４２１の大きさを基に、第１候補のコードネームを採用する。なお、コード検出部１２８は、コード構成音テーブル４３１の構成音フラグをシフトすることにより、ルート音がＣ以外の音のコードネームを検出することができる。

次に、表示制御部１３３は、図４（Ｅ）のように、コード検出部１２８により検出されたコードネーム（例えば、Ｃ７ｓｕｓ４）をコード情報としてコード検出ボタン２０３上に表示するように制御する。また、表示制御部１３３は、図４（Ａ）の楽曲ＰＣＭ波形２０１のタイミングｔ３の位置に、図２のように、コードネーム（例えば、Ｃ７ｓｕｓ４）をコード情報として表示するように制御する。

なお、表示制御部１３３は、図４（Ａ）に示すように、タイミングｔ１でコード検出ボタン２０３がタップされた場合には、楽曲ＰＣＭ波形２０１のタイミングｔ１の位置に、コードネーム（例えば、Ｆ＃－５）４０５を表示するように制御する。

また、表示制御部１３３は、図４（Ａ）に示すように、タイミングｔ２でコード検出ボタン２０３がタップされた場合には、楽曲ＰＣＭ波形２０１のタイミングｔ２の位置に、コードネーム（例えば、Ｆ＃－５／Ｄ）４０６を表示するように制御する。

コード検出部１２８は、過去に検出したすべてのコードネーム４０５及び４０６を記憶している。表示制御部１３３は、コード検出部１２８が過去に検出したすべてのコードネーム４０５及び４０６を表示する。

また、表示制御部１３３は、図４（Ｆ）に示すように、コード検出部１２８により検出されたコードネームの構成音を、鍵盤２０２の全オクターブの鍵に丸印（○）として表示するように制御する。例えば、表示制御部１３３は、その構成音のうちのルート音を緑色の丸印で表示し、その構成音のうちのルート音以外の音を赤色の丸印で表示するように制御する。表示制御部１３３は、コード検出部１２８により検出されたコードネームの構成音を、鍵盤又はギターのフレット上に表示するように制御することができる。

次に、ステップＳ３１０では、ＭＩＤＩ情報生成部１２９は、コード検出部１２８により検出されたコードを基に、和音のノートオンのＭＩＤＩ情報を生成する。ＭＩＤＩ出力装置１４２がタブレット端末に接続されている場合には、ＭＩＤＩ情報生成部１２９は、その生成した和音のノートのＭＩＤＩ情報をＭＩＤＩ出力装置１４２に出力する。なお、ＭＩＤＩ出力装置１４２は、ＭＩＤＩ入力装置１４１と同一のＭＩＤＩ機器でもよい。

サウンド生成部１３０は、ＭＩＤＩ情報生成部１２９により生成された和音のノートのＭＩＤＩ情報と、再生処理部１２７により再生処理された楽曲ＰＣＭ波形２０１を合成し、楽曲オーディオデータを生成する。サウンド再生部１３１は、サウンド出力装置１０３に対して、サウンド生成部１３０により生成された楽曲オーディオデータを再生する。サウンド出力装置１０３は、選択された楽曲名の楽曲ＰＣＭと和音を発音する。その後、コード検出装置１００は、ステップＳ３１６に進む。

ステップＳ３１１では、コード検出部１２８は、ステップＳ３０６でタッチされた時刻を記憶する。

次に、ステップＳ３１２では、コード検出部１２８は、タッチされた時刻が前回ステップＳ３０６でタッチされた時刻から所定時間経過しているか否かを判定する。尚、ステップＳ３０６が初回の場合には、すでに所定時間経過したものとして扱う。コード検出部１２８は、所定時間経過している場合には、ステップＳ３１３に進み、所定時間経過していない場合には、ステップＳ３１６に進む。

ステップＳ３０６では、ユーザは、分散和音を演奏するために鍵盤２０２の鍵にタッチしている場合には、短期間の間隔で鍵盤２０２の鍵がタッチされる。このとき、ユーザが鍵盤２０２の鍵を短時間の間隔でタッチする毎に、コード検出部１２８がコードを検出するようにしてしまうと、ごく短期間でのＦＦＴによりコード検出精度が悪化するので好ましくない。そこで、ユーザによる鍵盤２０２の分散音の演奏情報が入力されると、コード検出部１２８は、前回のコードの検出から所定時間経過後のタッチに対して次のコードの検出を行う。コード検出部１２８は、例えば、図４（Ａ）の検出期間４０４の後に、コード検出が可能になるようにする。

ステップＳ３１３では、コード検出部１２８は、ステップＳ３０８と同様に、鍵盤２０２の鍵のタッチ開始タイミングｔ３から検出期間４０４を経過するまでのタイミングｔ４に対応する楽曲ＰＣＭ波形２０１のコードを検出する。鍵盤２０２の鍵のタッチ開始タイミングｔ３は、分散和音指示部１２５によりコード検出が指示されたタイミングである。

次に、ステップＳ３１４では、表示制御部１３３は、ステップＳ３０９と同様に、コード検出部１２８により検出されたコードネームを基に、図４（Ｅ）のコード検出ボタン２０３上のコードネームを表示し、図４（Ａ）のタイミングｔ３の位置にコードネームを表示し、図４（Ｆ）の鍵盤２０２上にコードネームの構成音を丸印で表示するように制御する。

次に、ステップＳ３１５では、ＭＩＤＩ情報生成部１２９は、ステップＳ３０６でユーザによる分散音の演奏情報が入力されると、その演奏情報に対応し、コード検出部１２８により検出されたコードの構成音の中のいずれかの音のノートのＭＩＤＩ情報を生成する。例えば、ＭＩＤＩ情報生成部１２９は、コード検出部１２８により検出されたコードの構成音の中で、入力された演奏情報の音高に最も近い音のノートのＭＩＤＩ情報を生成する。

サウンド生成部１３０は、ＭＩＤＩ情報生成部１２９により生成された構成音のノートのＭＩＤＩ情報と、再生処理部１２７により再生処理された楽曲ＰＣＭ波形２０１を合成し、楽曲オーディオデータを生成する。サウンド再生部１３１は、サウンド出力装置１０３に対して、サウンド生成部１３０により生成された楽曲オーディオデータを再生する。サウンド出力装置１０３は、選択された楽曲名の楽曲ＰＣＭと構成音を発音する。その後、コード検出装置１００は、ステップＳ３１６に進む。

ステップＳ３１６では、再生処理部１２７は、再生位置を更新し、更新された再生位置の楽曲ＰＣＭ波形に対して再生処理を行う。

次に、ステップＳ３１７では、サウンド生成部１３０及びサウンド再生部１３１は、サウンド出力装置１０３に対して、再生処理部１２７により再生処理された楽曲ＰＣＭ波形とＭＩＤＩ情報生成部１２９により生成されたＭＩＤＩ情報を基に、楽曲オーディオデータ波形を出力する。表示制御部１３３は、更新された再生位置の再生バー４０３を表示するように制御する。

次に、ステップＳ３１８では、再生処理部１２７は、再生位置が選択した楽曲名の楽曲ＰＣＭ波形２０１の中の終了位置であるか否かを判定する。再生処理部１２７は、再生位置が終了位置でない場合には、ステップＳ３１９に進み、再生位置が終了位置である場合には、ステップＳ３２０に進む。

ステップＳ３１９では、再生処理部１２７は、図２の停止ボタン２０６がタップされることにより、再生終了が指示されたか否かを判定する。再生処理部１２７は、再生終了が指示された場合には、ステップＳ３２０に進み、再生終了が指示されていない場合には、ステップＳ３０６に戻る。

ステップＳ３２０では、再生処理部１２７は、上記の楽曲ＰＣＭ波形の再生処理を終了する。以上で、コード検出装置１００は、図３のフローチャートの処理を終了する。

以上のように、コード検出部１２８は、再生処理部１２７により楽曲ＰＣＭ波形２０１が再生処理されている間に、コード検出ボタン２０３又は鍵盤２０２のタッチによりコード検出が指示されると、そのコード検出が指示されたタイミングｔ３に対応する楽曲ＰＣＭ波形２０１の部分のコードを検出する。

楽曲の再生が始まると、ユーザは、その生成されたリズム、メロディ、又は伴奏などを耳で確認しながら、コードが変化したと感じるタイミングで、コード検出ボタン２０３をタップすることにより、コード検出指示をリアルタイムで行う。すると、コード検出部１２８は、直ちに、タップされたタイミングの近傍の楽曲ＰＣＭ波形２０１の周波数解析をごく短時間で行う。表示制御部１３３は、コード検出部１２８により検出されたコードネームを即座に表示する。

また、ユーザは、鍵盤２０２の鍵をタップすることにより、再生される楽曲オーディオデータのメロディや伴奏に合わせて、リズムよく鍵盤２０２を弾くことができる。コード検出部１２８は、最初の鍵のタップ後に、即座にリアルタイムでコード検出を行う。このとき、最初に弾いた鍵が検出されたコード構成音以外の鍵であったときには、ＭＩＤＩ情報生成部１２９は、その鍵の代わりに、その鍵の最寄りのコード構成音のＭＩＤＩ情報を生成する。また、コード検出部１２８は、２番目以降のタップのたびに、短時間の間に次々にコード検出を行うと、目まぐるしく、コードが変化してしまうばかりでなく、コード検出精度が悪化するため、芳しくない。コード検出部１２８は、これを避けるため、前回のタップのコード検出時刻から所定時間経過するまでは、たとえタップがあったとしても、次のコード検出を行わない。このようにすることで、ユーザは、分散和音（アルペジオ）で鍵を次々に短時間で弾いたとしても、安定したコード進行が期待できる。

また、ユーザがタッチパネル装置１０１のタッチ操作により、コード検出部１２８は、コードネーム４０５又は４０６の時刻を変更したり、コードネーム４０５又は４０６削除したり、コードネーム４０５又は４０６を別のコードネームに変更することができる。また、ユーザがコードネーム４０５又は４０６をタップすると、表示制御部１３３は、コードネーム４０５又は４０６に対して、別のコードネームの候補を列挙表示する。ユーザは、タッチ操作により、その候補の中から和音を試聴しながら選択できる。

また、表示制御部１３３は、図４（Ｆ）のように、コード検出部１２８により検出されたコード構成音に対応する鍵に丸印等のマークや色付けなどをして、コード構成音以外の鍵と容易に識別可能とする。

次に、コード検出部１２８が、コード検出ボタン２０３又は鍵盤２０２のタッチなしで、事前に、楽曲ＰＣＭ波形２０１のすべてのコード進行を検出する場合の課題を説明する。例えば、コード検出部１２８は、テンポ４０１が一定でない曲、抑揚豊富でテンポ４０１が目まぐるしく変化するクラシック曲、又は周期的なリズムの特徴に乏しい曲などの場合、高精度にテンポ４０１を検出するのは困難である。したがって、コード検出部１２８は、楽曲ＰＣＭ波形２０１のすべてのコード進行を適切に検出することは困難である。また、コードが目まぐるしく変化したり、裏拍からコードが切り替わったり、前拍の終わりを侵食してコードが早めに切り替わったりする曲の場合、コード検出部１２８は、楽曲ＰＣＭ波形２０１のすべてのコード進行を適切に検出することは困難である。

本実施形態によれば、コード検出部１２８は、楽曲オーディオデータが再生されている間に、コード検出ボタン２０３又は鍵盤２０２のタッチにより、リアルタイムでコードを検出することができる。特に、ユーザは、楽曲のテンポに合わせて、コード検出ボタン２０３をタッチすることにより、コード検出部１２８は、コードの切り替わりタイミングで、コード検出を行うことができるので、適切なコードを検出することができる。

コード検出部１２８は、テンポが一定でない曲、リズムがはっきりしない曲、又はコードが目まぐるしく変化する曲であっても、楽曲の任意の区間で、指定したタイミングのコードを比較的高精度で検出することができる。また、コード検出部１２８は、リアルタイムで、ごく短い区間のコードのみを検出すればよいため、検出時間が非常に短く、高速に検出することができる。また、コード検出部１２８は、予め楽曲全体のコードのすべてを検出しておく必要がないので、ユーザは、コード検出のために長時間待たなくてよい。また、コード検出部１２８は、楽曲を再生しながら、コード検出を行うことができるため、効率的である。

さらに、コードの押さえ方がわからないユーザであっても、適当に鍵盤２０２を弾いているだけで、楽曲オーディオデータと音楽的に調和した音で演奏でき、鍵盤２０２上の丸印のコード構成音の表示により、コードの押さえ方も理解できるようになり、スキルアップが期待できる。

例えば、ユーザは、再生処理部１２７によりピアノソロ曲を再生させながら、鍵盤２０２又はＭＩＤＩ入力装置１４１により、ベース音で即興演奏したり、再生処理部１２７によりピアノ・ベース・ドラムトリオ曲を再生させながら、ビブラフォンで即興演奏したりする等、好きな楽曲を再生させながら、セッションを気軽に楽しむことが可能となる。

本実施形態は、コンピュータがコード検出プログラムを実行することによって、コード検出装置１００の機能を実現することができる。また、上記のプログラムを記録したコンピュータ読み取り可能な記録媒体及び上記のプログラム等のコンピュータプログラムプロダクトも本発明の実施形態として適用することができる。記録媒体としては、例えばフレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ－ＲＯＭ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等を用いることができる。

なお、上記実施形態は、何れも本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。

１００ コード検出装置
１０１ タッチパネル装置
１０２ 画像表示装置
１０３ サウンド出力装置
１１１ 楽曲情報記憶部
１１２ 波形情報記憶部
１１３ 画像情報記憶部
１２１ タッチ座標検出部
１２２ 再生指示部
１２３ 選曲指示部
１２４ 波形情報読出部
１２５ 分散和音指示部
１２６ 和音指示部
１２７ 再生処理部
１２８ コード検出部
１２９ ＭＩＤＩ情報生成部
１３０ サウンド生成部
１３１ サウンド再生部
１３２ 画像生成部
１３３ 表示制御部
１４１ ＭＩＤＩ入力装置
１４２ ＭＩＤＩ出力装置

Claims (15)

1. 楽曲オーディオデータを再生する再生手段と、
   前記再生手段により前記楽曲オーディオデータが再生されている間にコード検出が指示されると、前記コード検出が指示されたタイミングに対応する前記楽曲オーディオデータの部分のコードを検出するコード検出手段とを有し、
   前記コード検出手段は、前記コード検出が指示されたタイミングから検出期間を経過するまでのタイミングに対応する前記楽曲オーディオデータのコードを検出することを特徴とするコード検出装置。
2. 前記コード検出手段は、前記楽曲オーディオデータのテンポを検出し、
   前記検出期間は、前記楽曲オーディオデータのテンポに基づく期間であることを特徴とする請求項１に記載のコード検出装置。
3. 前記検出期間は、ユーザが入力する複数のビートの間隔に基づく期間であることを特徴とする請求項１に記載のコード検出装置。
4. 前記検出期間は、前回コード検出が指示されてから今回コード検出が指示されるまでの間隔に基づく期間であることを特徴とする請求項１に記載のコード検出装置。
5. 楽曲オーディオデータを再生する再生手段と、
   前記再生手段により前記楽曲オーディオデータが再生されている間にコード検出が指示されると、前記コード検出が指示されたタイミングに対応する前記楽曲オーディオデータの部分のコードを検出するコード検出手段と、
   前記コード検出手段により検出されたコードに対応するコード情報を表示するように制御する表示制御手段とを有し、
   前記表示制御手段は、前記コード検出手段により検出された楽曲オーディオデータの部分に対応する位置に、前記コード情報を表示するように制御することを特徴とするコード検出装置。
6. 楽曲オーディオデータを再生する再生手段と、
   前記再生手段により前記楽曲オーディオデータが再生されている間にコード検出が指示されると、前記コード検出が指示されたタイミングに対応する前記楽曲オーディオデータの部分のコードを検出するコード検出手段と、
   前記コード検出手段により検出されたコードに対応するコード情報を表示するように制御する表示制御手段とを有し、
   前記表示制御手段は、鍵盤上に、前記コード検出手段により検出されたコードの構成音を表示するように制御することを特徴とするコード検出装置。
7. 楽曲オーディオデータを再生する再生手段と、
   前記再生手段により前記楽曲オーディオデータが再生されている間にコード検出が指示されると、前記コード検出が指示されたタイミングに対応する前記楽曲オーディオデータの部分のコードを検出するコード検出手段とを有し、
   前記再生手段は、ユーザによる分散音の演奏情報が入力されると、前記演奏情報に対応し、前記コード検出手段により検出されたコードの構成音の中のいずれかの音を再生することを特徴とするコード検出装置。
8. 前記再生手段は、前記コード検出手段により検出されたコードの構成音の中で、前記演奏情報の音高に最も近い音を再生することを特徴とする請求項７に記載のコード検出装置。
9. 楽曲オーディオデータを再生する再生手段と、
   前記再生手段により前記楽曲オーディオデータが再生されている間にコード検出が指示されると、前記コード検出が指示されたタイミングに対応する前記楽曲オーディオデータの部分のコードを検出するコード検出手段とを有し、
   ユーザによる分散音の演奏情報が入力されると、前記コード検出手段は、前記コードを検出し、前記再生手段は、前記演奏情報に対応し、前記コード検出手段により検出されたコードの構成音の中のいずれかの音を再生することを特徴とするコード検出装置。
10. ユーザによる分散音の演奏情報が入力されると、前記コード検出手段は、前回のコードの検出から所定時間経過後に次のコードの検出を行うことを特徴とする請求項９に記載のコード検出装置。
11. 前記コード検出手段は、前記楽曲オーディオデータの波形の周波数スペクトラムを基に、コードを検出することを特徴とする請求項１～１０のいずれか１項に記載のコード検出装置。
12. 前記コード検出手段により検出されたコードに対応するコード情報を表示するように制御する表示制御手段をさらに有することを特徴とする請求項１～４、７～１１のいずれか１項に記載のコード検出装置。
13. 前記再生手段は、前記コード検出手段により検出されたコードを再生することを特徴とする請求項１～１２のいずれか１項に記載のコード検出装置。
14. 前記コード検出が指示されると、前記コード検出手段は、前記コードを検出し、前記再生手段は、前記コード検出手段により検出されたコードを再生することを特徴とする請求項１～１３のいずれか１項に記載のコード検出装置。
15. コンピュータを、請求項１～１４のいずれか１項に記載されたコード検出装置の各手段として機能させるためのコード検出プログラム。

Images