JP2008118347A - 携帯端末装置 - Google Patents

Abstract

【課題】操作キーを押したときに対応する発光色でＬＥＤを発光させる。
【解決手段】番号キーアサイナー２１は、番号キーが押されたこと及び離されたことを検出し、ＭＩＤＩ制御モジュール２２に通知する。ＭＩＤＩ制御モジュール２２は、各番号キーに対する音高又は楽器音色及びＬＥＤ１５の発光色の割り付けを設定する設定情報ファイル２３を参照して、押された番号キーに対応する音高又は楽器音色の楽音の発音を指示するノートオンメッセージを作成して音源１１に送出するとともに、対応する発光色でＬＥＤ１５を点灯又は点滅させるためのＭＩＤＩメッセージをＬＥＤコントローラ１４に送出する。また、番号キーが離されたときには、ノートオフメッセージを音源１１に送出するとともに、ＬＥＤ１５を消灯させるＭＩＤＩメッセージをＬＥＤコントローラ１４に送出する。
【選択図】図２

Description

本発明は、携帯電話やＰＨＳなどの携帯端末装置に関する。

演奏機能を有する携帯電話装置が提案されている（特許文献１）。
この携帯電話装置によれば、数字キーや「＃」キー、「＊」キーが押されている間、そのキーに割り付けられた音の高さデータを含む音源用データを音源に送り、その間だけ指定の音を出力することができる。これにより、携帯電話装置を楽器としても使用することができるようになる。
また、着信メロディ演奏時に、着信メロディ楽曲の音符の長さに応じて、カラーＬＣＤ（Liquid Crystal Display）やＥＬ（electro luminescence）、ＰＤＰ（Plasma Display Panel）などからなる発呼者情報表示装置の点灯の長さや発光色を制御するようにした通信端末装置が提案されている（特許文献２）。これにより、着信の際の表示が華やかになるとともに、使用者の遊び心を満足させることが可能となる。
特開２００１−３５６７７０号公報 特開２００１−３２０４４７号公報

楽器として使用することができる上述の携帯電話装置によれば、携帯電話装置で演奏を行うことができるが、第三者に演奏を見せる場合には、演奏者は手元を見て演奏しているため、聞き手側はどの操作キーを押しているのか、また、どのタイミングで操作キーを押しているのかが把握しにくいという問題があった。
また、着信メロディの音符の長さに応じて表示装置の点灯時間や発光色を制御するものでは、キー操作に基づく発光ではないので、演奏者がパフォーマンスをすることができない。
そこで、本発明は、携帯端末装置を使用して演奏をしている演奏者がどの操作キーを押して演奏しているのかを聞き手が知ることができる携帯端末装置を提供することを目的としている。

上記目的を達成するために、本発明の携帯端末装置は、複数の操作キーと、前記操作キーが押されている状態を検出する検出手段と、複数の発光色で発光可能な表示部と、前記検出手段に接続され、前記操作キーが押されている間、前記表示部がその操作キーに割り付けられている発光色で発光するように制御する制御手段とを有するものである。
また、前記制御手段は、前記操作キーが押されている間前記表示部の点灯を続け、前記操作キーの押圧が解除されたときに前記表示部を消灯するもの、前記操作キーが押されている間前記表示部を点滅させるもの、あるいは、前記制御手段は、前記操作キーが押されている間、前記表示部の発光色又は輝度を時間経過に応じて変化させるものである。
さらに、前記複数の操作キーにおける各操作キーと前記表示部の発光色との対応関係を規定する設定情報を記憶する記憶部を有し、前記制御手段は、前記設定情報に基づいて前記表示部を制御するものとされている。
さらにまた、前記設定情報は、ユーザーが任意に編集することができるものとされている。

さらにまた、本発明の他の携帯端末装置は、複数の操作キーと、前記操作キーが押されている状態を検出する検出手段と、複数の発光色で発光可能な表示部と、音源部と、前記検出手段に接続され、前記操作キーが押されている間、前記表示部がその操作キーに割り付けられている発光色で発光するように制御するとともに、その操作キーに割り付けられている音高又は楽器音色に対応する音源制御データを生成して前記音源部に出力する制御手段とを有するものである。
さらにまた、前記操作キーと、前記表示部の発光色及び発生する楽音の音高又は楽器音色との対応関係を規定する設定情報を記憶する記憶部を有し、前記設定情報は、ユーザーが任意に編集することができるものであり、前記制御手段は、前記設定情報に基づいて前記表示部の制御及び音源制御データの生成を行うものとされている。

このような本発明の携帯端末装置によれば、操作キーを押している間、ＬＥＤなどの発光表示部がそのキーに割り付けられた発光色で点灯するので、聞き手はどのタイミングで操作キーを押しているのか、どの操作キーを押しているのかを把握することができ、聞き手に実際に演奏している臨場感を伝えることが可能となる。
例えば、１つの携帯端末装置で１つの音高を担当し、複数の演奏者でハンドベルの合奏と同様の演奏を行う場合に、どの携帯端末装置がどの音を発しているのかを聞き手が知ることができる。
さらに、演奏者からさまざまな手法で光を放つことで、演奏者のパフォーマンス的な要因を加え、よりエンターテイメント性を発揮することができる。

図１は、本発明の携帯端末装置の一実施の形態のシステム構成図である。本発明の携帯端末装置は携帯電話機に限られることはないが、ここでは、携帯電話機である場合を例にとって説明する。
この図において、１はこの装置全体の制御を行う制御部（ＣＰＵ）、２は通信制御プログラム、楽音を発生させるためのプログラム及びＬＥＤなどの発光表示部を制御するプログラムなどの各種制御プログラムや各種定数データなどが格納されているＲＯＭ、３はワークエリアとして使用されるとともに後述する設定情報などの各種のデータを記憶するＲＡＭ、４は液晶表示装置（ＬＣＤ）などからなる表示部、５は番号キーや通話キーなどの各種操作キーを有する入力部、６は変復調部などからなる無線通信部、７は無線通信部６に接続されるアンテナ、８は音声信号の符号化及び復号を行う音声処理部、９は音声処理部８に接続される受話スピーカー、１０は同じく送話マイクである。
また、１１は複数の発音チャンネルを有する音源、１２は音源１１により生成された楽音データをアナログの楽音信号に変換するＤ／Ａコンバータ、１３は該楽音信号を再生するスピーカーである。
さらに、１４は発光表示部（この実施の形態では、ＬＥＤ）１５の発光を制御する発光制御部（ＬＥＤコントローラ）、１５は携帯電話機の筐体に設けられ、着信があったときなどに発光する発光表示部（ＬＥＤ）である。本発明の携帯端末装置では、前記発光表示部１５は複数の発光色で発光することができるものとされており、この実施の形態では複数の発光色で発光することができるＬＥＤとされているが、有機ＥＬなどであってもよい。なお、１６は前記各構成要素間でデータを転送するためのバス（データバス及びアドレスバス）である。

前記音源１１は、ＭＩＤＩプロトコルにより発音制御ができるモジュールであり、ＦＭ方式、ＰＣＭ方式など音源方式は特に指定されないが、スペックとしてはＧＭシステムレベル１を満たしている必要がある。
前記ＬＥＤ１５は、例えば、赤（Ｒ）、緑（Ｇ）及び青（Ｂ）の３色のＬＥＤを１パッケージにしたものであり、前記ＬＥＤコントローラ１４により該３色のＬＥＤの輝度を個々に制御することにより、複数の発光色で発光することができるものである。例えば、ＲＧＢをそれぞれ単独で点灯させたときは赤、緑、青の発光色となり、Ｒ＋Ｇで黄、Ｒ＋Ｂで紫（マゼンタ）、Ｇ＋Ｂで青緑（シアン）、Ｒ＋Ｇ＋Ｂで白の合計７色の発光色を得ることができる。また、ＲＧＢ各色の輝度に複数の段階を設けることでさらに多くの発光色を得ることができる。さらに、ＲＧＢ各色のＬＥＤの輝度を時間的に変化させることにより、点灯中に発光色や輝度を変化させることもできる。さらにまた、ＬＥＤ１５を複数個設けるようにしてもよいし、ＲＧＢ各色の個別のＬＥＤを複数個設けても良い。

このような構成を有する本発明の携帯端末装置において、ユーザーが前記入力部の操作キーを押圧することにより、前記ＬＥＤ１５がその操作キーに割り付けられた発光色で発光し、また、前記音源１１でその操作キーに割り付けられた音高又は楽器音色の楽音が発生され、前記スピーカー１３から放音される。
図２は、このような動作をさせるための機能構成を示す図である。
この図において、音源１１、Ｄ／Ａコンバータ１２、スピーカー１３、ＬＥＤコントローラ１４及びＬＥＤ１５は、前記図１に示したものと同一のものである。
２１は、前記入力部５に設けられている操作キーのうちの１２個の操作キー（ここでは、「０」〜「９」、「＃」及び「＊」の番号キーとする。）が押されたか否かをスキャンし、操作キーが押されたタイミング（オンとなったタイミング）と離されたタイミング（オフとなったタイミング）をリアルタイムにＭＩＤＩ制御モジュール２２に伝える番号キーアサイナー、２２は、番号キーアサイナー２１からの情報に基づいて音源１１とＬＥＤコントローラ１４に供給するＭＩＤＩメッセージを作成し、音源１１及びＬＥＤコントローラ１４に出力するＭＩＤＩ制御モジュール、２３は前記１２個の操作キーと前記ＬＥＤ１５の発光色との対応関係及び発生させる楽音の音高又は楽器音色との対応関係を示す割り付け情報を記憶した設定情報ファイルである。
ここで、前記番号キーアサイナー２１と前記ＭＩＤＩ制御モジュール２２は、前記制御部１により実行される制御プログラムにより実現される。

ユーザーは、あらかじめ、どの番号キーにＬＥＤ１５のどの発光色を割り付けるか、及び、どの音高又は楽器音色を割り付けるかを決定する。これらは設定情報ファイル２３として前記ＲＡＭ３などに保存しておき、起動時にこのファイルを読み出すことで設定が完了する。
図３は、前記設定情報ファイル２３に記憶されている割り付け情報の例を示す図である。本発明においては、前記１２個の番号キーを押したときにそのキーに割り付けられている楽音を発生させることができるが、このとき、各番号キーに楽音の音高を割り付ける形態と、ドラム（リズム）音色の楽器音色を割り付ける形態の２通りの動作形態がある。
図３の（ａ）は、発生される楽音がメロディ音色で、前述した１２個の番号キーに１オクターブ分の音程とＬＥＤ１５の７色の発光色と点灯／点滅を割り付けている例を示している。なお、この場合には、発生される楽音の音色はユーザーが指定することができる。
また、図３の（ｂ）は、前述した１２個の番号キーにドラム音色の楽器音色とＬＥＤ１５の７色の発光色と点灯／点滅を割り付けている例を示している。
なお、図示した例では、番号キーが押されていない状態（「無し」）では、無音で無灯としているが、敢えて色を割り付けることもできる。
また、点灯又は点滅するものとしたが、番号キーが押されている間に、時間の経過とともに発光色又は輝度を変化させるようにしてもよい。
さらに、ここでは、番号キーを操作したときに、ＬＥＤがそれに対応する発光色で発光するとともに、前記音源から対応する音高又は楽器音色の楽音が発生されるようにしているが、ＬＥＤを対応する発光色で発光させるのみで、楽音は発生しないようにすることもできる。この場合には、図３の（ａ）又は（ｂ）に示した割り付け表において、音名又はインスト名の欄を無くした割り当て表を用いればよい。

前記ＭＩＤＩ制御モジュール２２は、前記番号キーアサイナー２１から前述した１２個の番号キーに対する操作が検出されたとき（押されたとき、及び、離されたとき）にリアルタイムで供給される情報に基づいて、前記設定情報ファイル２３により設定された割り付けに従って、その番号キーに対応するＭＩＤＩメッセージを生成し、前記音源１１と前記ＬＥＤコントローラ１４に出力する。
前記音源１１に出力するＭＩＤＩメッセージは、前記番号キーアサイナー２１からの情報によりユーザーによる操作が検知された番号キーに対応する楽音の発音／消音のためのノートオン又はノートオフメッセージである。ユーザーにより番号キーが押されてオンとなったときに対応する音高又は楽器種別（ドラム音色の場合）に対応するノート番号を有するノートオンメッセージを発行し、その番号キーが離されてオフとなったときにノートオフメッセージを発行する。なお、全ての音色に対してノートオンを識別する必要が有るが、ノートオフの識別は音色に依存する。ドラム音色についてはノートオフは識別する必要がない。
音源１１はＭＩＤＩ制御モジュール２２からのＭＩＤＩメッセージ（ノートオン）を受けて該当する音色の楽音データを生成し、該楽音データはＤ／Ａコンバータ１２でアナログの楽音信号に変換されて、スピーカー１３から再生される。

ＬＥＤコントローラ１４に出力するＭＩＤＩメッセージは、前記図３の（ａ）又は（ｂ）に示した割り付け表に従って、押された番号キーに対応する発光色でＬＥＤを発光させるためのＭＩＤＩメッセージである。このＭＩＤＩメッセージとしては、システムエクスクルーシブメッセージ又はコントロールチェンジメッセージを用いることができる。このシステムエクスクルーシブメッセージ又はコントロールチェンジメッセージには、前記ＬＥＤの発光を制御するデータ（ＲＧＢ３色のＬＥＤそれぞれの発光輝度を指定するデータ）が含まれている。
ＬＥＤコントローラ１４は、ＬＥＤ１５中のＲＧＢ３色のＬＥＤそれぞれの輝度を指定する制御データが書き込まれるレジスタを有している。ＬＥＤコントローラ１４は、前記ＭＩＤＩ制御モジュール２２から前記ＭＩＤＩメッセージ（システムエクスクルーシブメッセージ又はコントロールチェンジメッセージ）を受信すると、その中に含まれている制御データを取りだし、前記レジスタに書き込む。ＬＥＤコントローラ１４は、該レジスタに書き込まれた制御データに基づいて、指定されたＲＧＢのＬＥＤを指定された輝度で駆動する。これにより、ＲＧＢの各ＬＥＤが指定された輝度で発光し、ＬＥＤ１５は所望の発光色で発光する。
なお、上記においては、操作キーの押し下げにより対応する楽音の発生とＬＥＤの発光の両方を行うようにしていたが、ＬＥＤ１５を発光させるだけで、音を出さないようにしてもよい。

次に、このように構成された携帯端末装置の動作について、図４のフローチャートを参照して説明する。
１．ユーザーが演奏開始指示することにより、システムのセットアップを開始する（Ｓ１）。
この処理において、ユーザーにより発生させる楽音の音色が選択される。そして、前記制御部１（ＭＩＤＩ制御モジュール２２）は、各番号キーにＬＥＤ１５のどの発光色を割り付けるか、及び、どの音高あるいは楽器音色を割り付けるかを規定する前記設定情報ファイル２３の内容を読み込む。ユーザーにより選択された音色がメロディ音色であるときには、前記図３の（ａ）のように番号キーに対して音高を割り付け、ドラム音色である場合には、楽器音色が割り付けられる。
そして、選択された音色がメロディ音色であるときには、音源１１に対して、演奏するためのチャンネルを指定し（通常は、チャンネル１）、ユーザーが演奏したい楽器の音色のプログラムチェンジメッセージをあらかじめ送信する。また、選択された音色がドラム音色であるときには、チャンネル１０を指定する。

２．次に、ユーザーは、番号キーを押したり離したりすることで、ＬＥＤ１５のコントロール、及び演奏を開始する。
番号キーアサイナー２１は、どの番号キーが押されたか離されたかを常にスキャンする（Ｓ２）。
３．押されてオンとなった番号キーがあれば（Ｓ３）、そのキーに指定された発光色でのＬＥＤ１５の点灯を制御するＭＩＤＩメッセージ（システムエクスクルーシブメッセージ又はプログラムチェンジメッセージ）を発行する（Ｓ４）。前述のように、このメッセージは、前記設定情報ファイル２３による設定に従った発光色でＬＥＤ１５が点灯あるいは点滅するように指示する制御データを含んでいる。
また、同時に発音の開始を指示するノートオンメッセージを発行する（Ｓ４）。このときのノート番号は前記設定情報ファイル２３による設定に従った値を格納する。

４．そして、離されてオフとなった番号キーがあれば（Ｓ５）、ＬＥＤオフを指示するＭＩＤＩメッセージを発行する（Ｓ６）。また、同時に発音の終了を指示するノートオフメッセージを発行する（Ｓ６）。
５．２〜４は、演奏が終了するまで続けられる（Ｓ７）。
このようにして、番号キーを押している間、あらかじめ設定されている音高又は音色の楽音が発生されるとともに、あらかじめ設定されている発光色でＬＥＤ１５が点灯又は点滅制御される。

例えば、前記図３の（ｂ）に示した割り付け表が使用される場合において、番号キー「１」が押されたときには、前記ＬＥＤ１５を黄色で点滅させるための、ＭＩＤＩメッセージが生成されて、前記ＬＥＤコントローラ１４に送出される。
すなわち、前記番号キーアサイナー２１から番号キー「１」がオンとなったことを検出した旨の情報を受信したとき（Ｓ３）、前記ＭＩＤＩ制御モジュール２２は、前記設定情報ファイル２３を参照して、ＬＥＤ１５を黄色で点滅させるべきことを判定し、それに対応するＭＩＤＩメッセージ（システムエクスクルーシブメッセージ）を生成して、適切なタイミングで前記ＬＥＤコントローラ１４に送信する（Ｓ４）。
具体的には、まず、赤（Ｒ）と緑（Ｇ）のＬＥＤの輝度を所定値とし、青（Ｂ）のＬＥＤの輝度を０とする制御データを含むＭＩＤＩメッセージをＬＥＤコントローラ１４に送出する。
ＬＥＤコントローラ１４は、このメッセージを受信すると、ＬＥＤ１５に含まれているＲとＧのＬＥＤを所定の輝度で発光させ、これによりＬＥＤ１５は黄色で点灯する。
そして、所定時間（点滅周期の１／２の時間）経過後に、前記ＭＩＤＩ制御モジュール２２は、ＲＧＢの全てのＬＥＤの輝度を０とする制御データを含むＭＩＤＩメッセージを送信してＬＥＤ１５を消灯させる。そして、さらに、所定時間経過すると、ＲとＧのＬＥＤの輝度を所定値とし、ＢのＬＥＤの輝度を０とする制御データを含むＭＩＤＩメッセージを送信する。以下、上記処理を番号キー「１」が解除されるまで繰り返す。
そして、その番号キー「１」がオフとなったことを検出した旨の情報を前記番号キーアサイナー２１から受信すると（Ｓ５）、そのときでＬＥＤ１５が点灯しているときには、ＬＥＤ１５を消灯させるメッセージを生成して前記ＬＥＤコントローラ１４に送信する（Ｓ６）。
これにより、数字「１」の番号キーが押されている間、ＬＥＤ１５が黄色で点滅することとなる。

なお、ＬＥＤの点滅周期は一定とする必要はなく、操作キーが押されてからの時間経過に応じて、点滅周期が早くなったり、あるいは遅くなったりすることもできる。また、ＬＥＤの発光色や輝度を操作キーが押されてからの時間経過に応じて変化させることもできる。
また、上述した実施の形態では、携帯端末装置の筐体に設けられたＬＥＤ１５の発光を制御していたが、携帯端末装置以外の場所にあるＬＥＤの発光を制御するようにしても良い。
例えば、携帯端末装置と離れた場所に設置されている前記ＬＥＤコントローラ１４とＬＥＤ１５に対し、ブルートゥース（Bluetooth）（登録商標）やＩｒＤＡなどの通信手段を使用して、前記ＭＩＤＩ制御モジュール２２から前述したＬＥＤ制御用のＭＩＤＩメッセージを送信する。これにより、携帯端末装置の外に設置されたＬＥＤ１５の発光を制御することができる。
また、上記図３の（ａ）、（ｂ）に示した割り付け例においては、発光色を７色としていたが、さらに多くの発光色で発光させるようにすることもできる。例えば、ＲＧＢの各ＬＥＤの輝度をそれぞれ１６段階で制御することにより、４０９６色の発光色を得ることができる。
さらにまた、上述した実施の形態においては、操作キーのうち１２個の番号キーを用いる場合について説明したが、これに限られることはなく、その他の操作キーや操作ボタンを用いるようにしてもよい。
さらにまた、上述した実施の形態においては、ＬＥＤ１５の発光を制御していたが、ＬＥＤ１５の代わりに液晶表示装置などからなる表示部４を用いて同様に発光制御してもよい。

本発明の携帯端末装置の一実施の形態の全体構成を示すブロック図である。 本発明の携帯端末装置の機能構成図である。 番号キーに対する音高、音色及びＬＥＤの発光色の割り付け情報の例を示す図である。 本発明の携帯端末装置における処理の流れを示すフローチャートである。

符号の説明

１：制御部、２：ＲＯＭ、３：ＲＡＭ、４：表示部、５：入力部、６：無線通信部、７：アンテナ、８：音声処理部、９：スピーカー、１０：マイク、１１：音源、１２：Ｄ／Ａコンバータ、１３：スピーカー、１４：ＬＥＤコントローラ、１５：ＬＥＤ、２１：番号キーアサイナー、２２：ＭＩＤＩ制御モジュール、２３：設定情報ファイル

Claims (8)

1. 複数の操作キーと、
   前記操作キーが押されている状態を検出する検出手段と、
   複数の発光色で発光可能な表示部と、
   前記検出手段に接続され、前記操作キーが押されている間、前記表示部がその操作キーに割り付けられている発光色で発光するように制御する制御手段と
   を有することを特徴とする携帯端末装置。
2. 前記制御手段は、前記操作キーが押されている間、前記表示部の点灯を続け、前記操作キーの押圧が解除されたときに、前記表示部を消灯するものであることを特徴とする請求項１記載の携帯端末装置。
3. 前記制御手段は、前記操作キーが押されている間、前記表示部を点滅させるものであることを特徴とする請求項１記載の携帯端末装置。
4. 前記制御手段は、前記操作キーが押されている間、前記表示部の発光色又は輝度を時間経過に応じて変化させるものであることを特徴とする請求項１記載の携帯端末装置。
5. 前記複数の操作キーにおける各操作キーと前記表示部の発光色との対応関係を規定する設定情報を記憶する記憶部を有し、
   前記制御手段は、前記設定情報に基づいて前記表示部を制御するものであることを特徴とする請求項１記載の携帯端末装置。
6. 前記設定情報は、ユーザーが任意に編集することができるものであることを特徴とする請求項５記載の携帯端末装置。
7. 複数の操作キーと、
   前記操作キーが押されている状態を検出する検出手段と、
   複数の発光色で発光可能な表示部と、
   音源部と、
   前記検出手段に接続され、前記操作キーが押されている間、前記表示部がその操作キーに割り付けられている発光色で発光するように制御するとともに、その操作キーに割り付けられている音高又は楽器音色に対応する音源制御データを生成して前記音源部に出力する制御手段と
   を有することを特徴とする携帯端末装置。
8. 前記操作キーと、前記表示部の発光色及び発生する楽音の音高又は楽器音色との対応関係を規定する設定情報を記憶する記憶部を有し、
   前記設定情報は、ユーザーが任意に編集することができるものであり、
   前記制御手段は、前記設定情報に基づいて前記表示部の制御及び音源制御データの生成を行うものである
   ことを特徴とする請求項７記載の携帯端末装置。

Images