JP2011525247A

JP2011525247A - モバイル仮想ギターの指板表示装置及び方法

Info

Publication number: JP2011525247A
Application number: JP2010548625A
Authority: JP
Inventors: ファング、ジェイ−イェオブ; ヤング、ギホ
Original assignee: ファング、ジェイ−イェオブ
Priority date: 2008-02-28
Filing date: 2009-03-02
Publication date: 2011-09-15
Also published as: WO2009108029A2; KR20090093766A; US20110005367A1; WO2009108029A3

Abstract

本発明はモバイル仮想ギターに関するものであって、携帯電話などのモバイル機器で仮想ギターを具現する方法及びその装置が提示されている。携帯電話などのモバイル機器は、スクリーンが小さ過ぎてギターの長い指板を演奏することに不便性がないように全て表示することが事実上不可能であった。ここに、本発明はギターの全ての指板をモバイル機器の小さなスクリーンの中に全て表示し、かつ演奏するに何も困難性がないようにするためのものである。併せて、実際のギターの演奏テクニックをそのまま使用できるようにするためのものである。モバイル機器のスクリーンは、マルチタッチをサポートするタッチスクリーンにして画面に表示される指板を手指で直接押えるようにし、モバイル機器の内に動作認識センサを付着して指板を長手方向に動くことによって、スクリーン上の指板が同期化して同一な方向及び同一な速度で移動できるようにする。モバイル機器の内にはマルチタッチをサポートするタッチスクリーンと動作認識センサとが備えられ、上記タッチスクリーンにギターの指板を表示して演奏音を手指で押えるようにし、上記指板は動作認識センサが指板と同一延長線上の動きが感知された時、動く速度及び距離だけ同一な方向の指板が表示されるようになっている。本発明を利用すると、スクリーンが小さな携帯電話などのモバイル機器で、付加装備無しで、ギターの指板を自然に全て表示することができ、また実際のギターの演奏テクニックをそのまま使用できるようにする。
【選択図】図１

Description

本発明は、モバイル仮想ギターに関し、より詳しくは、携帯電話などのモバイル機器に備えられている狭いスクリーンでギターの指板を表示する装置及びその方法に関する。

タッチスクリーン、動作認識技術

携帯電話等のモバイル機器は、スクリーンが小さ過ぎてギターの長い指板を演奏することに不便性がないように全て表示することは事実上不可能であった。

ここに、本発明はギターの全ての指板をモバイル機器の小さなスクリーンの中に全て表示し、かつ演奏することに何も困難性がないようにするためのものである。

併せて、実際のギターの演奏テクニックをそのまま使用できるようにするためのものである。

モバイル機器のスクリーンはマルチタッチをサポートするタッチスクリーンにして、画面に表示される指板を手指で直接押えるようにし、モバイル機器の内に動作認識センサを付着して指板を長手方向に動くことによってスクリーン上の指板が同期化されて同一な方向及び同一な速度で移動できるようにする。

モバイル機器の内にはマルチタッチをサポートするタッチスクリーンと動作認識センサが備えられ、上記タッチスクリーンにギターの指板を表示して演奏音を手指で押えるようにし、上記指板は動作認識センサが指板と同一延長線上の動きが感知された時、動く速度及び距離だけ同一な方向の指板が表示されるようになっている。

スクリーンが小さな携帯電話などのモバイル機器において、付加される装備無しで、ギターの指板を自然に全て表示することができ、また実際のギターの演奏テクニックをそのまま使用できるようにする。

本発明に係る指板表示装置を左右に揺して指板を移動する態様を示す図である。指板を押えている時には指板が動かないことを示す図である。スライディングボタンを押えて指板を押えている時にも指板が移動することを示す図である。本発明の構成図である。本発明の指板移動処理過程を示す図である。

本発明の課題を解決するために提示する方法は、マルチタッチをサポートするタッチスクリーンと動作認識センサである。

以下、便宜のために、右利きの場合として説明する。

一般に、左手で指板を取って、右手でギターの弦を撥ねる方法によりギターを演奏するようになる。ところが、ギターを撥ねる方法は仮想ギターでもいくらでも多様な方法があるが、指板を取る方法は易しくなかったが、それは指板を表示するスクリーンが、一般のＰＣでは広過ぎ、かつギターコードを取るにはマルチタッチがサポートされるタッチスクリーンでなければならなかったが、そのような環境を備えたＰＣは殆どなかったし、モバイル機器では指板を表示するには狭過ぎたためである。

タッチスクリーンに静電容量方式があるが、これはマルチタッチが可能である。したがって、本発明はマルチタッチをサポートするタッチスクリーンを使用してスクリーンにギターの指板を表示し、手指で直接押えるようにする。これは実際のギターのインターフェースとほぼ同一であるということができる。

ところが、問題はスクリーンのサイズが小さ過ぎてギターの長い指板が全て表示できないことにある。本発明は、これを解決するために動作認識センサを採択した。以下、図面と共に説明する。

図１は、本発明に係る指板表示装置を左右に揺して指板を移動する態様を示す図である。

動作認識センサは、タッチスクリーン２がサポートされる指板表示装置１を指板の長手方向に同一延長線上に動く動作を感知する。それで、仮に高いフレット方向に動きが感知された時にはスクリーンの表示を動いただけ、そして動いた該当速度で指板を高いフレット方向に移してくれる。逆に、低いフレット方向に動いた時にもやはり同様に動いただけ動いた速度で画面の中の指板を低いフレット方向に移してくれる。

図面で薄く見える指板３は、画面にはまだ表示されていないが、指板表示装置がその方向に動いた時に表示される指板のイメージである。これは実際に見えるものでなく、本発明を説明するために分かりやすく表示したイメージである。

現在、指板表示装置１が図面の（ａ）から見える位置にあるとし、低いフレット方向から一番目の指板位置マーク４があるフレットに指板を移そうとすれば、距離上、該当フレットがありそうな距離だけ指板表示装置１を低いフレット方向に移す。すると、動作認識センサがこれを感知して制御部に伝達すれば、制御部はスクリーンの中の指板を該当方向に、かつ該当速度で（ｂ）の位置に移してくれる。

ところが、ギターは演奏者が興に乗ってあっちこっち身体を捻ったり、甚だしくはあっちこっち駆け回ることもする。そのようになれば、動作認識センサはこれを感知して演奏者が希望しない指板に画面を変えてしまうことが発生する。これを防止するために、本発明は演奏者の行動パターンを区分した。演奏者が指板を移す場合は２つである。１つは、指板から手をすっかり離れて、新たな指板領域に移して取る場合であり、他の１つは、特定の音を押えた状態で指板の上をスライディングさせてスラー（slur）効果を出す演奏機法の場合である。この２つの差異点は、１つは指板から手が離れ、他の１つは指板に手がそのまま付いていることである。ところが、一般的にギターでスラーを演奏する場合より演奏中に身体をあっちこっち動く場合がはるかによく発生する。本発明は、手が離れた状態では動作認識センサが指板の長手方向に動く動作を感知すれば無条件指板を移し、指板に手が付いている状態では動作認識センサが上記のような動作を感知しても指板を移さない。但し、スラー奏法を具現するためには、指板を取ったままでも指板が移されなければならないので、スラーボタンを別に設けた。

図２は、指板を押えている時には指板が動かないことを示す図である。

図２の（ａ）で指板に手指を当てている状態で左側に動いたが、図２の（ｂ）で指板が動かないでそのままであることが分かる。

図３は、スライディングボタンを押えて指板を押えている時にも指板が移動することを示す図である。

図３の（ａ）は、スラーボタン５を押えたままの図であり、図３の（ｂ）は、（ａ）の状態で指板表示装置１を左側に動いた時の効果を示す図である。図３の（ｂ）に示すように、スラーボタンを押えたままで指板を動かせる動作が感知されれば、指板に手が付いているとしても画面上の指板を移してくれる。勿論、それによって出力される演奏音も当然変わる。

本発明は、前述した動作認識センサが必ず動作が進行する方向とその速度の変化を感知する必要はない。一般に、携帯電話に内蔵される動作認識センサは重力を感知するが、これによって機器が地球中心に比べてどれほど傾いているかを容易に得ることができる。このようなセンサで得られる傾き情報を利用すれば、右側が上がれば隠されて見えない右側指板がより表れ、左側が上がれば隠されて見えない左側指板がより表れるようにすることができる。このために、傾きの程度によって移動する指板の範囲を予め定めればよいが、例えば５％傾き毎に２フレットずつより表れるすることができる。更に他の方法は、傾いた程度によって表れる指板の画面上の移動速度を異なるようにし、手指でどこでも押えている状況では傾いているとしても画面移動を止めればよい。例えば、指板から手指を全て離した状態で機器を右側に若干傾けて左側が上がれば、画面上の指板が右側に鈍い速度で移動して左側の隠された指板が表れ、もっと深い角度で傾ければ、より速い速度で移動し、指板のどこでも押えられるようになれば、移動を止めるようになる。

また、手指が全て離れた状態で有効動作（十分に指板移動と見なすほど、予め定まって置いた数値以上の移動が感知される動作）とそれの方向が感知される瞬間から、予め定まった速度で有効動作と同じ方向に指板を移動させても、演奏者が自ら習熟して演奏することができる。指板を移動したい時、移動しようとする方向に少し動ければ、定まった速度で指板が動き、演奏者は希望するフレットが出る時、その個所に手指を付くと、画面が止めるようになる。ここで、定まった速度とは、有効動作の数値によって等級を分けて、多段階の速度で移動するようにすることもでき、最初は鈍く動いてから徐々に速く動くようにプログラムすることもできる。

次に、このような機能をする本発明の構成について説明する。

図４は、本発明の構成図である。

まず、本発明の構成要素を定まったプログラムに従って全て制御する制御部１０と、制御部１０にローディングされるプログラムデータを含んでいるプログラムデータ部１１と、制御部１０がプログラムの実行中に必要とするデータを臨時格納し、参照する臨時メモリ部１２と、制御部１０にプログラムを実行または中止させるか、ボリュームなどを調節する信号を送る操作命令入力部１３と、機器が動く情報を認識して制御部１０に送る動作認識部１４と、タッチスクリーンにタッチされるマルチタッチ信号を制御部１０に伝達するタッチセンサ部１５と、制御部１０の制御に従ってプログラム進行状況をタッチスクリーン画面に出力するディスプレイ部１６と、制御部１０の制御に従ってギター演奏音を出力するオーディオ出力部１７と、外部機器との通信を担当する通信部１８と、機器の全体に電源を供給する電源部１９とからなっている。

次に、このような構成を備えた本発明が動作認識情報を用いて指板を移動処理する過程を図面と共に説明する。

図５は、本発明の指板移動処理過程である。

機器の電源を付けてプログラムを実行させれば（１００）、制御部はタッチセンサ部で指板をタッチする信号がないか判断して（２００）、現在タッチしている点があればまたタッチ点が離れることを待ち、タッチ点がない時、動作認識センサからの機器移動情報を参照して（３００）、得られた移動情報がしきい値以上か（有効動作であるか）判断して（４００）、しきい値以上の時にはその方向及び数値に従って指板を移動処理する（５００）。

ここで、スライディングを処理する過程は図面に説明が省略されているが、上記ステップ２００とステップ３００との間にスラーボタンが押えられているかを判断して、スラーボタンが押えられている場合にステップ３００を遂行すればよい。

ここで、しきい値は演奏者が指板を移した動作であると十分に思われる数値であって、プログラムに予め設定されている数値である。

また、動作認識センサでより正確な数値を得るために雑音を除去する必要があり、このような雑音を除去するフィルタ過程を経るようにすることは、センサを扱う技術者であれば誰でも周知している事実である。

以上、本発明に対して説明したが、本発明は左手インターフェースに限るものであり、各種の右手インターフェースと組合可能であることは当然である。

Claims

モバイル仮想ギターの指板表示装置であって、
マルチタッチをサポートするタッチスクリーンと、
動作認識センサと、
前記タッチスクリーンにギター指板を表示し、前記動作認識センサの動作認識情報に従って指板の移動を処理する制御部と、
を備えることを特徴とするモバイル仮想ギターの指板表示装置。
動作認識センサは加速度センサであり、
前記動作認識情報は前記指板と一直線をなす方向への動き情報であり、前記動きの方向に従って指板を移動処理することを特徴とする請求項１に記載のモバイル仮想ギターの指板表示装置。
前記指板を移動処理することは動く速度に比例して移動処理することを特徴とする請求項２に記載のモバイル仮想ギターの指板表示装置。
前記指板を移動処理することは動き方向に一定の速度で移動処理することを特徴とする請求項２に記載のモバイル仮想ギターの指板表示装置。
前記動作認識情報は機器の傾き情報であり、前記傾き情報に従って指板を移動処理することを特徴とする請求項１に記載のモバイル仮想ギターの指板表示装置。
前記指板を移動処理することは傾いた方向に傾きに比例して移動処理することを特徴とする請求項５に記載のモバイル仮想ギターの指板表示装置。
前記指板を移動処理することは傾いた方向に一定の速度で移動処理することを特徴とする請求項５に記載のモバイル仮想ギターの指板表示装置。
マルチタッチをサポートするタッチスクリーンを備え、動作認識センサが内蔵されたモバイル機器でモバイル仮想ギターの指板を表示する方法であって、
前記タッチスクリーンにギターの指板を一部表示し、
前記動作認識センサから動作認識信号を得て機器に有効な動作が起こったとすべき位の信号と判断された時、前記機器が動いた方向に従って指板を移動処理することを特徴とするモバイル仮想ギターの指板を表示する方法。
前記動作認識信号を計算して機器が動いた方向と速度を得て、前記方向と速度に合せて指板を移動処理することを特徴とする請求項８に記載のモバイル仮想ギターの指板を表示する方法。
前記速度は、一定速度以上の時、同一な速度で指板を移動することを特徴とする請求項９に記載のモバイル仮想ギターの指板を表示する方法。
前記動作認識信号で機器の傾きを得て、機器が傾いた方向に傾き程度に合せて指板を移動処理することを特徴とする請求項８に記載のモバイル仮想ギターの指板を表示する方法。
前記傾きは一定傾き以上の時、同一な速度で指板を移動することを特徴とする請求項１１に記載のモバイル仮想ギターの指板を表示する方法。
指板の上にタッチ信号がある時には指板移動処理を行なわないことを特徴とする請求項８乃至１２のうち、いずれか１項に記載のモバイル仮想ギターの指板を表示する方法。
スラーボタンが押えられている時には指板の上にタッチ信号がある時にも指板移動処理を行なうことを特徴とする請求項１３に記載のモバイル仮想ギターの指板を表示する方法。