JP5801138B2 - 携帯電子機器、入力処理方法および入力処理プログラム - Google Patents

Description

本発明は、タッチパネルを有する携帯電子機器、入力処理方法および入力処理プログラムに関する。

近年、直感的な操作を可能にするとともに、キーボードのように物理的に大きな面積を必要とするデバイスを具備しない小型の電子機器を実現するために、タッチパネルが広く利用されるようになっている。タッチパネルを備える電子機器では、タッチパネルによって検出されるタップ等の動作に対して特定の処理が割り当てられる（例えば、特許文献１）。

特開２００９−１６４７９４号公報

ここで、タッチパネルとしては、静電容量式のものがある。静電容量式のタッチパネルは、水滴が付着する環境下では静電容量が不安定なものとなるため、ユーザからの接触による入力操作（接触操作）が行われても接触操作を検出することが困難な場合がある。この場合、ユーザはタッチパネルを用いて携帯電子機器を操作することが困難なものとなる。特に、ハードキー等の物理的な操作を行うためのデバイスが搭載されていない場合には、なおさら、携帯電子機器を操作することがより困難となる。このように、例えば静電容量式における水滴付着状態のように、タッチパネルにとって使用しにくい状況に陥ることが生じうる。

本発明は、上記に鑑みてなされたものであって、タッチパネルに水滴が付着する環境下などのように、タッチパネルを使用しにくい状況でも、ユーザに対し多様な入力操作を提供することができる携帯電子機器、入力処理方法および入力処理プログラムを提供することを目的とする。

本発明の携帯電子機器は、筐体と、画像を表示すると共に、接触操作を入力信号として検出するタッチパネルと、入力される音を音声信号として検出するマイクと、所定のモードにおいて、音声信号を、タッチパネルに対して行われる接触操作に基づく各種入力信号のいずれかとして処理する制御部と、を備えたことを特徴とする。

また、マイクは、吹きかけられる風切り音を音声信号として検出することが好ましい。

また、制御部は、所定のモードにおいて、タッチパネルによる接触操作の検出を無効にすることが好ましい。

また、筐体は、防水性を有し、タッチパネルは、静電容量式であることが好ましい。

また、制御部は、タッチパネルに水分が付着する環境となった場合、所定のモードに移行させることが好ましい。

また、制御部は、タッチパネルにより検出された接触操作が異常であると判定すると、所定のモードに移行させることが好ましい。

また、湿度を検出する湿度検出手段をさらに備え、制御部は、湿度検出手段により検出された検出湿度が、予め設定された設定湿度以上であると判定すると、所定のモードに移行させることが好ましい。

また、制御部は、マイクにおける音声信号の検出時間の長さ、または音声信号の大小に応じて、音声信号に対して対応させる各種入力信号を異ならせることが好ましい。

また、筐体の傾きを検出する傾き検出手段をさらに備え、制御部は、音声信号が検出されたときの筐体の傾きに応じて、音声信号に対して対応させる各種入力信号を異ならせることが好ましい。

また、制御部は、所定のモードにおいて、マイクにより検出される音声信号を、各種入力信号のうち、タッチパネルに表示された画像をスクロールするスクロール操作の入力信号として処理することが好ましい。

また、筐体の傾きを検出する傾き検出手段をさらに備え、制御部は、音声信号を、傾き検出手段により検出された筐体の傾きに応じた方向のスクロール操作の入力信号として処理することが好ましい。

また、複数のソースのいずれかに基づく映像をタッチパネルに表示するための映像アプリケーションを記憶する記憶部をさらに備え、制御部は、所定のモードにおいて、映像アプリケーションが実行される状態で音声信号が検出されると、当該音声信号を、表示中の映像を他のソースに基づく映像に変更する操作の入力信号として処理することが好ましい。

また、筐体の傾きを検出する傾き検出手段をさらに備え、制御部は、表示中の映像のソース変更の内容を異ならせることが好ましい。

また、音声を出力する音声出力部と、複数のソースのいずれかに基づく音声を音声出力部から出力するための音声出力アプリケーションを記憶する記憶部と、をさらに備え、制御部は、所定のモードにおいては、音声出力アプリケーションが実行される状態で音声信号が検出されると、当該音声信号を、出力中の音声を他のソースに基づく音声に変更する操作、あるいは音声出力部における音量を調整する操作の入力信号として処理することが好ましい。

また、筐体の傾きを検出する傾き検出手段をさらに備え、制御部は、音声信号が検出されたときの筐体の傾きに応じて、出力中の音声のソース変更の内容、または音量調整の大小を異ならせることが好ましい。

また、音声を出力する音声出力部と、音楽を再生するための音楽アプリケーションを記憶する記憶部と、をさらに備え、制御部は、所定のモードにおいて、音楽アプリケーションが実行される状態で音声信号が検出されると、当該音声信号を、音楽の早送り巻戻しの操作の入力信号、音声出力部における音量を調整する操作の入力信号、または音楽の曲送り曲戻しの操作の入力信号として処理することが好ましい。

また、筐体の傾きを検出する傾き検出手段をさらに備え、制御部は、音声信号が検出されたときの筐体の傾きに応じて、早送り巻戻しの操作の内容、音量調整操作の大小、または曲送り曲戻しの操作の内容を異ならせることが好ましい。

本発明の携帯電子機器の入力処理方法は、画像を表示すると共に、接触操作を入力信号として検出するタッチパネルと、入力される音を音声信号として検出するマイクと、入力信号および音声信号を処理する制御部と、を備えた携帯電子機器の入力処理方法において、所定モードである場合、音声信号を、タッチパネルに対して行われる接触操作に基づく各種入力信号のいずれかとして、制御部により処理されることを特徴とする。

本発明の携帯電子機器の入力処理プログラムは、画像を表示すると共に、接触操作を入力信号として検出するタッチパネルと、入力される音を音声信号として検出するマイクと、入力信号および音声信号を処理する制御部と、を備えた携帯電子機器において実行される入力処理プログラムにおいて、所定モードである場合、音声信号を、タッチパネルに対して行われる接触操作に基づく各種入力信号のいずれかとして、制御部により処理するステップを備えたことを特徴とする。

本発明に係る携帯電子機器、入力処理方法および入力処理プログラムは、タッチパネルに水滴が付着する環境下などのように、タッチパネルを使用しにくい状況でも、ユーザに対し多様な入力操作を提供することができるという効果を奏する。

図１は、本実施形態の携帯電子機器を示す正面図である。 図２は、本実施形態の携帯電子機器の機能的な構成を示すブロック図である。 図３は、本実施形態の携帯電子機器に対する入力操作の一例を説明する説明図である。 図４は、信号変換テーブルを示す説明図である。 図５は、本実施形態の携帯電子機器の制御動作の一例を示すフローチャートである。 図６は、本実施形態の携帯電子機器の制御動作の一例を示すフローチャートである。

以下、本発明につき図面を参照しつつ詳細に説明する。下記の発明を実施するための形態（以下実施形態という）により本発明が限定されるものではない。また、下記の実施形態における構成要素には、当業者が容易に想定できるもの、実質的に同一のもの、いわゆる均等の範囲のものが含まれる。以下においては、携帯電子機器の一例である携帯電話機を例として説明するが、本発明の適用対象は携帯電話機に限定されるものではなく、例えば、ＰＨＳ（Personal Handyphone System）、ＰＤＡ（Personal Digital Assistant）、ポータブルナビ、ポータブルゲーム機等に対しても適用できる。

（実施形態）
図１は、本実施形態の携帯電子機器を示す正面図である。携帯電子機器１は、防水機能を有する携帯電話機である。携帯電子機器１は、表面積が最も大きい対向する２つの面を有する略直方体形状の筐体１Ｃを有し、２つの面のうち、一方（図示上側）の面が表面となっており、他方（図示下側）の面が裏面となっている。筐体１Ｃは、水密構造となっており、内部への液体の侵入を抑制することで、携帯電子機器１に対し防水機能を付与している。携帯電子機器１は、筐体１Ｃの表面に、タッチパネル２と、操作部３と、スピーカ７と、マイク８とを備える。

タッチパネル２は、所定の画像として、携帯電子機器１が受信を待機している状態のときに待受画面を表示したり、携帯電子機器１の操作を補助するために用いられるメニュー画面を表示したりする。ここで、待受画面とは、電話の発着信を待ち受けている状態の画面、または、アプリケーションプログラムの起動を待ち受けている状態の画面である。換言すると、待受画面は、携帯電子機器１が提供する各種機能画面へ画面が変わる前の画面である。待受画面は、例えば、初期画面、標準画面、デスクトップ画面、ホーム画面、または、壁紙と呼ばれることもある。

また、タッチパネル２は、指、スタイラス、ペン等（以下、単に「指」という）の被接触部を用いて行われる所定の接触操作を、所定の入力信号として検出している。このタッチパネル２は、所定の接触操作を検出する方式として、静電容量式が適用されている。

操作部３は、所定の機能が割り当てられた操作ボタンである。操作部３は、所定のボタン操作を、所定の入力信号として制御部２２へ出力する。スピーカ７は、音声出力部の一例であって、通話相手の音声、各種プログラムによって再生される音楽および効果音等を出力する。音声出力部としては、音声出力端子でもよく、ここに接続されるイヤホンまたはヘッドホンへ音を出力する。マイク８は、通話時、または音声による操作の受付時に音声を取得する。

次に、図２を参照して、携帯電子機器１の機能的な構成について説明する。図２は、本実施形態の携帯電子機器の機能的な構成を示すブロック図である。図２に示すように携帯電子機器１は、制御部２２と、記憶部２４と、通信部２６と、タッチパネル２と、操作部３と、音声処理部３０と、テレビチューナ３１と、加速度センサ３２と、湿度センサ３３と、を有する。

制御部２２は、携帯電子機器１の全体的な動作を統括的に制御する処理部、例えばＣＰＵ（Central Processing Unit）またはＭＰＵ（Micro Processing Unit）である。すなわち、制御部２２は、携帯電子機器１の各種の処理が、操作部３の操作または携帯電子機器１の記憶部２４に記憶されたアプリケーション（プログラム）に応じて適切な手順で実行されるように、通信部２６、タッチパネル２等の動作を制御する。制御部２２は、記憶部２４に記憶されているアプリケーション（例えば、オペレーティングシステムアプリケーション、メールアプリケーション等）に基づいて処理を実行する。また、制御部２２は、複数のアプリケーションを並列で実行することができる。

記憶部２４には、制御部２２での処理に利用される各種アプリケーション４１および各種データ４２が保存されている。具体的に、記憶部２４には、各種アプリケーション４１として、インターネット通信を行うブラウザアプリケーション４１ａ、メールの送受信を行うメールアプリケーション４１ｂ、画像を表示する画像ビューワアプリケーション４１ｃ、音楽の再生を行う音楽アプリケーション４１ｄ、発信、着信、通話処理を行う電話アプリケーション４１ｅ、テレビ放送処理を行うテレビアプリケーション４１ｆ等が保存されている。また、各種データ４２としては、画像データ４２ａ、音楽データ４２ｂ、電話帳データ４２ｃ等が記憶されている。さらに、詳細は後述するが、記憶部２４には、入力処理制御において用いられる信号変換テーブル４３が記憶されている。

通信部２６は、アンテナ２６ａを有し、基地局によって割り当てられるチャネルを介し、基地局との間でＣＤＭＡ方式などによる無線信号回線を確立し、基地局との間で電話通信及び情報通信を行う。また、通信部２６は、ＧＰＳ信号を受信するアンテナも備える。

テレビチューナ３１は、テレビ画像およびテレビ音声からなるテレビ放送の放送波を受信するためのアンテナ３１ａを有し、アンテナ３１ａによって受信された放送波に含まれる放送データを取得する。テレビチューナ３１は、後述するテレビアプリケーション４１ｆを介して、ユーザが選局操作を行うことにより局（チャンネル）の変更を指示すると、その指示を受け付けた制御部２２の制御に従って、放送データを取得する局を、複数の局の中から指示された局へ変更する。つまり、制御部２２は、受信するソースの変更を行うことになる。テレビチューナ３１は、例えば、日本のワンセグ放送の放送データを取得してもよいし、１２セグメント放送の放送データを取得してもよい。

タッチパネル２は、タッチセンサ２Ａと表示部２Ｂとを有し、表示部２Ｂの表示領域は、タッチセンサ２Ａの検出領域と重畳している。タッチセンサ２Ａは、指（被接触部）を用いてタッチパネル２に対して行われた所定の接触操作を、タッチパネル２の検出領域上において検出された位置と共に入力信号として検出する。そして、タッチセンサ２Ａは、検出した入力信号を制御部２２へ出力する。タッチセンサ２Ａにより検出される所定の接触操作としては、例えばタッチ操作、タップ操作、およびスイープ操作が含まれる。表示部２Ｂは、例えば、液晶ディスプレイ（ＬＣＤ、Liquid Crystal Display）、または有機ＥＬ（Organic Electro−Luminescence）パネルなどで構成され、制御部２２から供給される映像データに応じた映像、画像データ４２ａに応じた画像を表示する。

操作部３は、所定の機能が割り当てられた操作ボタンであり、ユーザによりボタン操作が行われると、ボタン操作に対応する入力信号を発生させる。そして、発生した入力信号は、制御部２２へ向けて出力される。

音声処理部３０は、マイク８から入力される音声信号、およびスピーカ７から出力される音声信号を処理する。マイク８から入力される音声信号は、制御部２２へ向けて出力される。詳細は後述するが、制御部２２は、入力処理制御を実行すると、マイク８から入力される音声信号を入力信号として処理する。

加速度センサ（傾き検出手段）３２は、筐体１Ｃの基準姿勢に対する傾きを検出している。ここで、基準姿勢とは、例えば、筐体１Ｃの表面が水平面となる姿勢である。すなわち、加速度センサ３２は、水平面に対する筐体１Ｃの表面の傾きを傾斜信号として検出している。湿度センサ（湿度検出手段）３３は、筐体１Ｃ周りの外気における湿度を検出している。

次に、本実施形態に係る携帯電子機器１の入力処理制御について説明する。図３は、本実施形態の携帯電子機器に対する入力操作の一例を説明する説明図である。携帯電子機器１に対する入力操作としては、タッチパネル２への接触による所定の入力操作（接触操作）、操作部（操作ボタン）３への押下による所定の入力操作（ボタン操作）がある。制御部２２は、タッチパネル２に対してユーザにより所定の接触操作が行われると、タッチパネル２により検出した所定の接触操作に対応する所定の入力信号を取得し、取得した所定の入力信号に応じた制御を実行する。また、制御部２２は、操作部３に対してユーザにより所定のボタン操作が行われると、操作部３により検出した所定のボタン操作に対応する所定の入力信号を取得し、取得した所定の入力信号に応じた制御を実行する。

ここで、タッチパネル２は、静電容量式であることから、タッチパネル２の表面に水滴が付着する環境下において、入力信号を検出することが困難な場合がある。具体的に、タッチパネル２の表面に水滴が付着する環境としては、お風呂場またはプール場等で携帯電子機器１を使用する環境、または降雨で携帯電子機器１を使用する環境、または炊事および洗濯等の水周りにおいて携帯電子機器１を使用する環境である。

上記のような環境下では、タッチパネル２による入力信号の検出が困難であり、特に、操作部３の操作ボタンが少ない場合、携帯電子機器１に対する入力操作が制限される。そこで、本実施形態の携帯電子機器１では、下記する入力処理制御を実行することにより、タッチパネル２の表面に水滴が付着する環境下にあってもユーザによる入力操作を実現している。以下、入力処理制御について説明する。

入力処理制御は、マイク８に入力される音声によって入力操作を行う音声操作モード（所定のモード）において、マイク８により検出される音声信号を、タッチパネル２に対して行われる接触操作の入力信号として処理する制御である。つまり、制御部２２がマイク８から入力される音声信号を、タッチパネル２からの入力信号として処理することで、ユーザは、音声による入力操作、すなわち音声操作を行うことが可能となる。

本実施形態の携帯電子機器１では、入力処理制御を実行するにあたり、タッチパネル２により入力信号の検出が困難な所定の環境下となると、制御部２２は、携帯電子機器１の通常状態におけるモードである標準モードから音声操作モードに移行する。制御部２２は、音声操作モードにおいて、マイク８による音の検出を有効とする一方、タッチパネル２による接触操作の検出を無効としている。これに対し、制御部２２は、標準モードにおいて、マイク８による音の検出を有効または無効とする一方、タッチパネル２による接触操作の検出を有効としている。つまり、標準モードは、マイク８により検出される音声信号をそのまま音声信号として処理し、タッチパネル２により検出される入力信号をそのまま入力信号として処理するモードである。また、音声操作モードは、マイク８により検出される音声信号を、タッチパネル２の入力信号として処理するモードである。そして、制御部２２は、音声操作モードにおいて、入力処理制御を実行する。音声操作モードにおいて、マイク８に入力される音としては、ユーザがマイク８に息を吹きかけることによって生ずる風切り音である。

携帯電子機器１が音声操作モードとなった場合、図３に示すように、ユーザは、携帯電子機器１のマイク８に息を吹きかける音声操作を行う。具体的には、図３のＳ１０１に示すように、ユーザは、携帯電子機器１を水平にさせた状態で、マイク８に息を吹きかける音声操作を行う。また、図３のＳ１０２に示すように、ユーザは、携帯電子機器１を手前側に傾斜させた状態で、マイク８に息を吹きかける音声操作を行う。さらに、図３のＳ１０３に示すように、ユーザは、携帯電子機器１を奥行き側に傾斜させた状態で、マイク８に息を吹きかける音声操作を行う。ユーザが図３のＳ１０１、Ｓ１０２またはＳ１０３に示す操作を行うと、制御部２２は、マイク８により検出された風切り音の音声信号を取得すると共に、加速度センサ３２により検出された傾斜信号を取得する。そして、制御部２２は、取得した音声信号をタッチパネル２の入力信号として処理するにあたり、取得した傾斜信号に応じて入力信号を異ならせている。これにより、ユーザは、携帯電子機器１のマイク８に息を吹きかける音声操作に、携帯電子機器１の筐体１Ｃの傾きを変更する操作を組み合わせることで、携帯電子機器１に対し多様な入力操作を行うことが可能となる。

また、携帯電子機器１に対する入力操作は、マイク８に息を吹きかける音声操作に、携帯電子機器１の筐体１Ｃの傾きを変更する操作を組み合わせるだけでなく、例えば、携帯電子機器１の作動状態、およびマイク８に吹きかけられる風切り音の種類を組み合わせてもよい。携帯電子機器１の作動状態としては、例えば、所定のリストを表示する作動状態であったり、画像ビューワアプリケーション４１ｃ、音楽アプリケーション４１ｄまたはテレビアプリケーション４１ｆ等のアプリケーション４１が実行された作動状態であったりする。また、マイク８に吹きかけられる風切り音の種類としては、例えば、風切り音の大きさであったり、風切り音の長さであったりする。携帯電子機器１に対する入力操作は、上記した筐体１Ｃの傾き、携帯電子機器１の作動状態、および風切り音の種類の組み合わせに限らない。

続いて、図４を参照して、所定の音声信号と所定の処理信号とを対応付けた信号変換テーブル４３について説明する。信号変換テーブル４３は、入力処理制御の実行時において、マイク８により検出された所定の音声信号を所定の入力信号として処理する際に用いられる。信号変換テーブル４３は、記憶部２４に保存されており、変換される入力信号は、携帯電子機器１の作動状態、筐体１Ｃの傾き、マイク８に入力される風切り音の種類に応じて変換される。つまり、制御部２２は、入力処理制御において、携帯電子機器１の作動状態と、加速度センサ３２により検出した筐体１Ｃの傾斜信号と、マイク８により検出した音声信号の種類とから、信号変換テーブル４３に基づいて、所定の入力信号に変換している。マイク８は、風切り音の種類として、大きな音を検出すると、信号強度の強い音声信号を出力し、小さな音を検出すると、信号強度の弱い音声信号を出力する。よって、音声信号の種類としては、信号強度の強弱がある。音声信号の種類は、信号強度の強弱に代えて、音声信号の検出時間の長短としてもよい。つまり、音声信号の信号強度の強さを、音声信号の検出時間の長さに代え、また、音声信号の信号強度の弱さを、音声信号の検出時間の短さに代えてもよい。以下では、音声信号の種類として、信号強度の強弱に適用した場合について説明する。

信号変換テーブル４３に示す携帯電子機器１の作動状態として、制御部２２がタッチパネル２に所定のリストを表示している場合について説明する。制御部２２がタッチパネル２に所定のリストを表示している場合、制御部２２は、傾斜信号に関わらず、音声信号の種類のみに応じて、所定のリストに対するスクロール操作の入力信号を異ならせている。

ユーザは、音声操作モードにおいて、制御部２２がタッチパネル２に所定のリストを表示している状態で、マイク８に大きな風切り音を入力する。すると、制御部２２には、マイク８から信号強度の強い音声信号が入力される。この場合、制御部２２は、信号変換テーブル４３に基づいて、入力された音声信号を、タッチパネル２に表示された所定のリストをスクロールする移動量の大きいスクロール操作の入力信号として処理する。また、ユーザは、音声操作モードにおいて、制御部２２がタッチパネル２に所定のリストを表示している状態で、マイク８に小さな風切り音を入力する。すると、制御部２２には、マイク８から信号強度の弱い音声信号が入力される。この場合、制御部２２は、入力された音声信号を、タッチパネル２に表示された所定のリストをスクロールする移動量の小さいスクロール操作の入力信号として処理する。

所定のリストとしては、受信メールのメールリスト、または電話帳の登録リストである。また、制御部２２は、信号強度の強弱に応じて、スクロールの移動量を異ならせたが、スクロールの速度を異ならせてもよい。また、本実施形態において、制御部２２は、傾斜信号に関わらず、音声信号の種類のみに応じて、所定のリストに対するスクロール操作の入力信号を異ならせたが、この構成に限らず、傾斜信号に応じて、所定のリストに対するスクロール操作の入力信号を異ならせてもよい。

次に、信号変換テーブル４３に示す携帯電子機器１の作動状態として、制御部２２が画像ビューワアプリケーション４１ｃ（図４では、画像ビューワアプリと略記）を実行する場合について説明する。制御部２２が画像ビューワアプリケーション４１ｃを実行する場合においても、制御部２２は、傾斜信号に関わらず、音声信号の種類のみに応じて、画像の送り操作の入力信号を異ならせている。

ユーザは、音声操作モードにおいて、制御部２２が画像ビューワアプリケーション４１ｃを実行している状態で、マイク８に大きな風切り音を入力する。すると、制御部２２には、マイク８から信号強度の強い音声信号が入力される。この場合、制御部２２は、入力された音声信号を、タッチパネル２に表示された画像から次の画像へ連続送りする連続送り操作の入力信号として処理する。また、ユーザは、音声操作モードにおいて、制御部２２が画像ビューワアプリケーション４１ｃを実行している状態で、マイク８に小さな風切り音を入力する。すると、制御部２２には、マイク８から信号強度の弱い音声信号が入力される。この場合、制御部２２は、入力された音声信号を、タッチパネル２に表示された画像から次の画像へ単送りする単送り操作の入力信号として処理する。

本実施形態において、制御部２２は、傾斜信号に関わらず、音声信号の種類のみに応じて、画像の送り操作の入力信号を異ならせたが、この構成に限らず、傾斜信号に応じて、画像の送り操作の入力信号を異ならせてもよい。

次に、信号変換テーブル４３に示す携帯電子機器１の作動状態として、制御部２２が音楽アプリケーション４１ｄ（図４では、音楽アプリと略記）を実行する場合について説明する。制御部２２は、音楽アプリケーション４１ｄを実行することで、タッチパネル２に音楽の早送り巻戻し操作の操作画像を表示すると共に、スピーカ７から音楽を出力する。音楽アプリケーション４１ｄでは、音声信号の種類だけでなく、加速度センサ３２により検出される傾斜信号に応じて、音量調整操作、早送り巻戻し操作、および曲送り戻し操作の入力信号を異ならせている。

ユーザは、音声操作モードにおいて、制御部２２が音楽アプリケーション４１ｄを実行している状態で、携帯電子機器１の筐体１Ｃを水平にしつつ（図３のＳ１０１に示す状態）、マイク８に大きな風切り音を入力する。すると、制御部２２には、加速度センサ３２から筐体１Ｃが傾斜していない（水平状態である）傾斜信号が入力されると共に、マイク８から信号強度の強い音声信号が入力される。この場合、制御部２２は、入力された音声信号を、再生している音楽の音量を大きくする音量アップ操作の入力信号として処理する。また、ユーザは、音声操作モードにおいて、制御部２２が音楽アプリケーションを実行している状態で、携帯電子機器１の筐体１Ｃを水平にしつつ（図３のＳ１０１に示す状態）、マイク８に小さな風切り音を入力する。すると、制御部２２には、加速度センサ３２から筐体１Ｃが傾斜していない（水平状態である）傾斜信号が入力されると共に、マイク８から信号強度の弱い音声信号が入力される。この場合、制御部２２は、入力された音声信号を、再生している音楽の音量を小さくする音量ダウン操作の入力信号として処理する。

ユーザは、音声操作モードにおいて、制御部２２が音楽アプリケーション４１ｄを実行している状態で、携帯電子機器１の筐体１Ｃを手前側に傾斜させつつ（図３のＳ１０２に示す状態）、マイク８に大きな風切り音を入力する。すると、制御部２２には、加速度センサ３２から筐体１Ｃが手前側に傾斜している傾斜信号が入力されると共に、マイク８から信号強度の強い音声信号が入力される。この場合、制御部２２は、入力された音声信号を、再生している音楽を早送りする早送り操作の入力信号として処理する。また、ユーザは、音声操作モードにおいて、制御部２２が音楽アプリケーション４１ｄを実行している状態で、携帯電子機器１の筐体１Ｃを手前側に傾斜させつつ（図３のＳ１０２に示す状態）、マイク８に小さな風切り音を入力する。すると、制御部２２には、加速度センサ３２から筐体１Ｃが手前側に傾斜している傾斜信号が入力されると共に、マイク８から信号強度の弱い音声信号が入力される。この場合、制御部２２は、入力された音声信号を、再生している音楽から次の音楽へ進める曲送り操作の入力信号として処理する。

ユーザは、音声操作モードにおいて、制御部２２が音楽アプリケーション４１ｄを実行している状態で、携帯電子機器１の筐体１Ｃを奥行き側に傾斜させつつ（図３のＳ１０３に示す状態）、マイク８に大きな風切り音を入力する。すると、制御部２２には、加速度センサ３２から筐体１Ｃが奥行き側に傾斜している傾斜信号が入力されると共に、マイク８から信号強度の強い音声信号が入力される。この場合、制御部２２は、入力された音声信号を、再生している音楽を巻戻しする巻戻し操作の入力信号として処理する。また、ユーザは、音声操作モードにおいて、制御部２２が音楽アプリケーション４１ｄを実行している状態で、携帯電子機器１の筐体１Ｃを奥行き側に傾斜させつつ（図３のＳ１０３に示す状態）、マイク８に小さな風切り音を入力する。すると、制御部２２には、加速度センサ３２から筐体１Ｃが奥行き側に傾斜している傾斜信号が入力されると共に、マイク８から信号強度の弱い音声信号が入力される。この場合、制御部２２は、入力された音声信号を、再生している音楽から前の音楽へ戻す曲戻し操作の入力信号として処理する。

次に、信号変換テーブル４３に示す携帯電子機器１の作動状態として、制御部２２がテレビアプリケーション４１ｆ（図４では、テレビアプリと略記）を実行する場合について説明する。制御部２２は、テレビアプリケーション４１ｆを実行することで、タッチパネル２にテレビ画像（映像）を表示すると共に、スピーカ７からテレビ音声を出力する。つまり、テレビアプリケーション４１ｆは、映像アプリケーションと音声出力アプリケーションとを組み合わせることで構成される。テレビアプリケーション４１ｆにおいても、音声信号の種類だけでなく、加速度センサ３２により検出される傾斜信号に応じて、音量調整操作および選局操作の入力信号を異ならせている。

ユーザは、音声操作モードにおいて、制御部２２がテレビアプリケーション４１ｆを実行している状態で、携帯電子機器１の筐体１Ｃを水平にしつつ（図３のＳ１０１に示す状態）、マイク８に大きな風切り音を入力する。すると、制御部２２には、加速度センサ３２から筐体１Ｃが傾斜していない（水平状態である）傾斜信号が入力されると共に、マイク８から信号強度の強い音声信号が入力される。この場合、制御部２２は、入力された音声信号を、テレビ音声の音量を大きくする音量アップ操作の入力信号として処理する。また、ユーザは、音声操作モードにおいて、制御部２２がテレビアプリケーション４１ｆを実行している状態で、携帯電子機器１の筐体１Ｃを水平にしつつ（図３のＳ１０１に示す状態）、マイク８に小さな風切り音を入力する。すると、制御部２２には、加速度センサ３２から筐体１Ｃが傾斜していない（水平状態である）傾斜信号が入力されると共に、マイク８から信号強度の弱い音声信号が入力される。この場合、制御部２２は、入力された音声信号を、テレビ音声の音量を小さくする音量ダウン操作の入力信号として処理する。

ユーザは、音声操作モードにおいて、制御部２２がテレビアプリケーション４１ｆを実行している状態で、携帯電子機器１の筐体１Ｃを手前側に傾斜させつつ（図３のＳ１０２に示す状態）、マイク８に大きな風切り音を入力する。すると、制御部２２には、加速度センサ３２から筐体１Ｃが手前側に傾斜している傾斜信号が入力されると共に、マイク８から信号強度の強い音声信号が入力される。この場合、制御部２２は、入力された音声信号を、次のチャンネルへ連続送りする連続送り選局操作の入力信号として処理する。また、ユーザは、音声操作モードにおいて、制御部２２がテレビアプリケーション４１ｆを実行している状態で、携帯電子機器１の筐体１Ｃを手前側に傾斜させつつ（図３のＳ１０２に示す状態）、マイク８に小さな風切り音を入力する。すると、制御部２２には、加速度センサ３２から筐体１Ｃが手前側に傾斜している傾斜信号が入力されると共に、マイク８から信号強度の弱い音声信号が入力される。この場合、制御部２２は、入力された音声信号を、次のチャンネルへ単送りする単送り選局操作の入力信号として処理する。

ユーザは、音声操作モードにおいて、制御部２２がテレビアプリケーション４１ｆを実行している状態で、携帯電子機器１の筐体１Ｃを奥行き側に傾斜させつつ（図３のＳ１０３に示す状態）、マイク８に大きな風切り音を入力する。すると、制御部２２には、加速度センサ３２から筐体１Ｃが奥行き側に傾斜している傾斜信号が入力されると共に、マイク８から信号強度の強い音声信号が入力される。この場合、制御部２２は、入力された音声信号を、前のチャンネルへ連続送りする連続送り選局操作の入力信号として処理する。また、ユーザは、音声操作モードにおいて、制御部２２がテレビアプリケーション４１ｆを実行している状態で、携帯電子機器１の筐体１Ｃを奥行き側に傾斜させつつ（図３のＳ１０３に示す状態）、マイク８に小さな風切り音を入力する。すると、制御部２２には、加速度センサ３２から筐体１Ｃが奥行き側に傾斜している傾斜信号が入力されると共に、マイク８から信号強度の弱い音声信号が入力される。この場合、制御部２２は、入力された音声信号を、前のチャンネルへ単送りする単送り選局操作の入力信号として処理する。つまり、制御部２２は、ユーザがチャンネルを変更することで、テレビ画像およびテレビ音声のソースの変更を行い、これにより、タッチパネル２に表示中のテレビ画像から、他のチャンネルのテレビ画像に変更すると共に、スピーカ７から出力中のテレビ音声から、他のチャンネルのテレビ音声に変更している。

続いて、図５を参照して、標準モードから音声操作モードに移行する制御動作について説明する。図５は、本実施形態の携帯電子機器の制御動作の一例を示すフローチャートである。制御部２２は、湿度センサ３３により検出された検出湿度が、予め設定された設定湿度以上になったか否かを判定する（ステップＳ１）。制御部２２は、湿度センサ３３により検出された検出湿度が設定湿度以上であると判定する（ステップＳ１：Ｙｅｓ）と、制御部２２は、音声操作モードとする（ステップＳ２）。

一方、制御部２２は、ステップＳ１において、湿度センサ３３により検出された検出湿度が設定湿度未満であると判定する（ステップＳ１：Ｎｏ）と、タッチパネル２により検出された入力信号が断続的に変化しているか否か（つまり異常な入力状態が生じたか否か）を判定する（ステップＳ３）。制御部２２は、タッチパネル２により検出された入力信号が断続的に変化していると判定する（ステップＳ３：Ｙｅｓ）と、音声操作モードとする（ステップＳ２）。

一方、制御部２２は、ステップＳ３において、タッチパネル２により検出された入力信号が断続的に変化していないと判定する（ステップＳ３：Ｎｏ）と、ユーザによるタッチパネル２または操作ボタン３を用いた所定の入力操作によって音声操作モードが設定されているか否かを判定する（ステップＳ４）。制御部２２は、ユーザによる音声操作モードの設定があると判定する（ステップＳ４：Ｙｅｓ）と、音声操作モードとする（ステップＳ２）。一方、制御部２２は、ステップＳ４において、ユーザによる音声操作モードの設定がないと判定する（ステップＳ４：Ｎｏ）と、標準モードを設定する（ステップＳ５）。

制御部２２は、標準モードから音声操作モードに移行すると、図６に示す入力処理制御を実行する。図６は、本実施形態の携帯電子機器の制御動作の一例を示すフローチャートである。先ず、制御部２２は、音声操作モードであるか否かを判定する（ステップＳ１１）。制御部２２は、音声操作モードであると判定する（ステップＳ１１：Ｙｅｓ）と、入力処理制御を実行する（ステップＳ１２）。制御部２２は、入力処理制御を実行すると、マイク８により音声信号が検出されたか否かを判定する（ステップＳ１３）。制御部２２は、マイク８により音声信号が検出されたと判定する（ステップＳ１３：Ｙｅｓ）と、加速度センサ３２によって検出された筐体１Ｃの傾斜信号を取得する（ステップＳ１４）。そして、制御部２２は、携帯電子機器１の作動状態と、ステップＳ１３において検出された所定の音声信号と、ステップＳ１４において取得した傾斜信号とから、信号変換テーブル４３に基づいて、所定の音声信号を所定の入力信号に変換する（ステップＳ１５）。制御部２２は、ステップＳ１５において変換された入力信号に基づいて、入力信号に対応する制御を実行する。

以上のように、本実施形態の構成によれば、制御部２２は、音声操作モードにおいて、マイク８により検出される音声信号を、タッチパネル２に対して行われた接触操作の入力信号として処理することができる。これにより、ユーザは、タッチパネル２の表面に水滴が付着する環境下においても、携帯電子機器１を音声操作することができる。このため、携帯電子機器１は、タッチパネル２に水滴が付着する環境下などのように、タッチパネル２を使用しにくい状況でも、ユーザに対し多様な入力操作を提供することができる。

また、本実施形態の構成によれば、マイク８は、風切り音を音声信号として検出するため、ユーザは、マイク８に息を吹きかけることで音声操作を簡単に行うことができる。

また、本実施形態の構成によれば、制御部２２は、音声操作モードにおいて、タッチパネル２による接触操作の検出を無効にすることができる。このため、制御部２２は、タッチパネル２に水滴が付着する環境下において、ユーザによりタッチパネル２に対して接触操作が行われた場合であっても、断続的な入力信号による誤制御の実行を抑制することができる。

また、本実施形態の構成によれば、携帯電子機器１は、筐体１Ｃが水密構造となっており、防水機能を有することから、ユーザは、タッチパネル２に水滴が付着する環境下において、携帯電子機器１を使用することができる。

また、本実施形態の構成によれば、制御部２２は、タッチパネル２により検出された入力信号が断続的に変化しているか否かを判定することで、携帯電子機器１が、タッチパネル２に水滴が付着する環境下にあるか否かを適切に判定することができる。これにより、制御部２２は、標準モードから音声操作モードに適切に移行させることができるため、ユーザは、タッチパネル２に水滴が付着する環境下において、携帯電子機器１を確実に操作することができる。

また、本実施形態の構成によれば、制御部２２は、湿度センサ３３により検出された検出湿度が設定湿度以上であるか否かを判定することで、携帯電子機器１が、タッチパネル２に水滴が付着する環境下にあるか否かを適切に判定することができる。これにより、制御部２２は、標準モードから音声操作モードに適切に移行させることができるため、ユーザは、タッチパネル２に水滴が付着する環境下において、携帯電子機器１を確実に操作することができる。

また、本実施形態の構成によれば、制御部２２は、加速度センサ３２により検出された筐体１Ｃの傾きに応じた入力信号とすることができる。また、制御部２２は、音声信号の検出時間の長さまたは音声信号の信号強度の強さに応じた入力信号とすることができる。このため、携帯電子機器１は、ユーザに対し、多様な音声操作として、所定のリストに対するスクロール操作、画像ビューワアプリケーション４１ｃの実行時における画像の連続送り操作および単送り操作、音楽アプリケーション４１ｄの実行時における音楽の音量アップ操作、音量ダウン操作、早送り操作、巻戻し操作、曲送り操作および曲戻し操作、テレビアプリケーション４１ｆの実行時におけるテレビ音声の音量アップ操作、音量ダウン操作、チャンネルの連続送り操作および単送り操作等を提供することができる。

ところで、本実施形態においては、タッチパネル２を静電容量式とし、水滴付着状態での操作性低下をアシストするための手段として音声操作モードを説明したが、本発明は静電容量式タッチパネルを搭載する携帯電子機器に限定されるものではない。薄膜抵抗式などのタッチパネルにおいても、タッチパネルの不良などで操作性が低下している状態、ユーザの手が汚れていてタッチパネルを操作しにくい状態、あるいはユーザが手袋を装着していてタッチパネルを操作しにくい状態などにおいても、本実施形態における説明と同様、音声操作モードは有効に機能する。

また、本実施形態においては、アプリケーションの例として、画像ビューワアプリケーション４１ｃ、音楽アプリケーション４１ｄまたはテレビアプリケーション４１ｆを示したが、これに限定されるものではなく、例えば、映像の有無は問わず、音声データを取得して出力するためのラジオアプリケーションでもよい。

１ 携帯電子機器
１Ｃ 筐体
２ タッチパネル
２Ａ タッチセンサ
２Ｂ 表示部
３ 操作部
７ スピーカ
８ マイク
２２ 制御部
２４ 記憶部
２６ 通信部
３０ 音声処理部
３１ テレビチューナ
３２ 加速度センサ
３３ 湿度センサ
４１ アプリケーション
４１ａ ブラウザアプリケーション
４１ｂ メールアプリケーション
４１ｃ 画像ビューワアプリケーション
４１ｄ 音楽アプリケーション
４１ｅ 電話アプリケーション
４１ｆ テレビアプリケーション
４２ａ 画像データ
４２ｂ 音楽データ
４２ｃ 電話帳データ
４３ 信号変換テーブル

Claims (18)

1. 画像を表示すると共に、接触操作を入力信号として検出するタッチパネルと、
   当該タッチパネルと異なる入力デバイスと、
   湿度を検出する湿度検出手段と、
   制御部と、を備え、
   当該制御部は、
   自機の操作モードとして、
   前記タッチパネルに対して行われる前記接触操作に基づく各種入力信号に応じて制御を行う第１モードと、
   前記入力デバイスに対して行われる入力操作に基づく各種入力信号に応じて制御を行う第２モードと、を切り替え可能であって、
   前記第１モードにおいて、前記湿度検出手段により検出された検出湿度が、予め設定された設定湿度以上であると判定すると、
   前記第１モードから前記第２モードに移行させることを特徴とする携帯電子機器。
2. 前記制御部は、前記第２モードにおいて、前記タッチパネルによる前記接触操作の検出を無効にすることを特徴とする請求項１に記載の携帯電子機器。
3. 前記入力デバイスはマイクであって、
   前記制御部は、
   前記第２モードにおいて、前記マイクに対して行われる音の入力操作に基づく各種音声信号を、前記タッチパネルに対して行われる前記接触操作に基づく各種入力信号のいずれかとして処理することを特徴とする請求項１または２に記載の携帯電子機器。
4. 前記マイクは、吹きかけられる風切り音に基づく音声信号を検出することを特徴とする請求項３に記載の携帯電子機器。
5. 前記制御部は、前記マイクにおける前記音声信号の検出時間の長さ、または前記音声信号の大小に応じて、前記音声信号に対して対応させる前記各種入力信号を異ならせることを特徴とする請求項３または４に記載の携帯電子機器。
6. 筺体と、当該筐体の傾きを検出する傾き検出手段と、をさらに備え、
   前記制御部は、前記音声信号が検出されたときの前記筐体の傾きに応じて、前記音声信号に対して対応させる前記各種入力信号を異ならせることを特徴とする請求項３から５のいずれか１項に記載の携帯電子機器。
7. 前記制御部は、前記第２モードにおいて、前記マイクにより検出される前記音声信号を、前記各種入力信号のうち、前記タッチパネルに表示された前記画像をスクロールするスクロール操作の入力信号として処理することを特徴とする請求項３から５のいずれか１項に記載の携帯電子機器。
8. 筺体と、当該筐体の傾きを検出する傾き検出手段と、をさらに備え、
   前記制御部は、前記音声信号を、前記傾き検出手段により検出された前記筐体の傾きに応じた方向のスクロール操作の入力信号として処理することを特徴とする請求項７に記載の携帯電子機器。
9. 複数のソースのいずれかに基づく映像を前記タッチパネルに表示するための映像アプリケーションを記憶する記憶部をさらに備え、
   前記制御部は、前記第２モードにおいて、前記入力デバイスに対して行われる入力操作に基づく入力信号が検出されると、当該入力デバイスに対して行われる入力操作に基づく入力信号を、表示中の前記映像を他のソースに基づく前記映像に変更する操作の入力信号として処理することを特徴とする請求項１から４のいずれか１項に記載の携帯電子機器。
10. 筺体と、当該筐体の傾きを検出する傾き検出手段と、をさらに備え、
    前記制御部は、前記入力デバイスに対して行われる入力操作に基づく入力信号が検出されたときの前記筐体の傾きに応じて、表示中の映像のソース変更の内容を異ならせることを特徴とする請求項９に記載の携帯電子機器。
11. 音声を出力する音声出力部と、
    複数のソースのいずれかに基づく前記音声を前記音声出力部から出力するための音声出力アプリケーションを記憶する記憶部と、をさらに備え、
    前記制御部は、前記第２モードにおいては、前記音声出力アプリケーションが実行される状態で前記音声信号が検出されると、当該音声信号を、出力中の前記音声を他のソースに基づく前記音声に変更する操作、あるいは前記音声出力部における音量を調整する操作の入力信号として処理することを特徴とする請求項３から５のいずれか１項に記載の携帯電子機器。
12. 筺体と、当該筐体の傾きを検出する傾き検出手段と、をさらに備え、
    前記制御部は、前記音声信号が検出されたときの前記筐体の傾きに応じて、出力中の前記音声のソース変更の内容、または前記音量調整の大小を異ならせることを特徴とする請求項１１に記載の携帯電子機器。
13. 音声を出力する音声出力部と、
    音楽を再生するための音楽アプリケーションを記憶する記憶部と、をさらに備え、
    前記制御部は、前記第２モードにおいて、前記音楽アプリケーションが実行される状態で前記音声信号が検出されると、当該音声信号を、前記音楽の早送り巻戻しの操作の入力信号、前記音声出力部における音量を調整する操作の入力信号、または前記音楽の曲送り曲戻しの操作の入力信号として処理することを特徴とする請求項３から５のいずれか１項に記載の携帯電子機器。
14. 筺体と、当該筐体の傾きを検出する傾き検出手段をさらに備え、
    前記制御部は、前記音声信号が検出されたときの前記筐体の傾きに応じて、前記早送り巻戻しの操作の内容、前記音量調整操作の大小、または前記曲送り曲戻しの操作の内容を異ならせることを特徴とする請求項１３に記載の携帯電子機器。
15. 前記入力デバイスは、ハードキーであることを特徴とする請求項１または２に記載の携帯電子機器。
16. 前記タッチパネルは、静電容量式であることを特徴とする請求項１から１５のいずれか１項に記載の携帯電子機器。
17. 画像を表示すると共に、接触操作を入力信号として検出するタッチパネルと、
    当該タッチパネルと異なる入力デバイスと、
    湿度を検出する湿度検出手段と、
    自機の操作モードとして、
    前記タッチパネルに対して行われる前記接触操作に基づく各種入力信号に応じて制御を行う第１モードと、
    前記入力デバイスに対して行われる入力操作に基づく各種入力信号に応じて制御を行う第２モードと、を切り替え可能な
    制御部と、
    を備えた携帯電子機器の入力処理方法において、
    前記第１モードのとき、前記湿度検出手段により検出された検出湿度が、予め設定された設定湿度以上であると判定すると、前記第１モードから前記第２モードに移行させる制御が前記制御部により処理されることを特徴とする携帯電子機器の入力処理方法。
18. 画像を表示すると共に、接触操作を入力信号として検出するタッチパネルと、
    当該タッチパネルと異なる入力デバイスと、
    湿度を検出する湿度検出手段と、
    自機の操作モードとして、
    タッチパネルに対して行われる前記接触操作に基づく各種入力信号に応じて制御を行う第１モードと、
    前記入力デバイスに対して行われる入力操作に基づく各種入力信号に応じて制御を行う第２モードと、を切り替え可能な
    制御部と、を備えた携帯電子機器において実行される入力処理プログラムにおいて、
    前記第１モードのとき、前記湿度検出手段により検出された検出湿度が、予め設定された設定湿度以上であると判定すると、前記第１モードから前記第２モードに移行させる制御を前記制御部により処理するステップを備えたことを特徴とする携帯電子機器の入力処理プログラム。

Images