JP2005352924A

JP2005352924A - ユーザインタフェース装置

Info

Publication number: JP2005352924A
Application number: JP2004174782A
Authority: JP
Inventors: Tomoteru Tsukada; 智輝束田; Tsutomu Matsubara; 勉松原
Original assignee: Mitsubishi Electric Corp
Current assignee: Mitsubishi Electric Corp
Priority date: 2004-06-11
Filing date: 2004-06-11
Publication date: 2005-12-22
Anticipated expiration: 2024-06-11
Also published as: JP5132028B2

Abstract

【課題】誤操作の防止に、より適したユーザインタフェース装置を提供する。
【解決手段】液晶画面のユーザ操作領域に表示されたボタンを押下する際に、まずユーザによるタッチパネル５への接触操作が検出されると、制御部１５は、位置特定部１２により特定されたユーザ接触位置に対応したボタンを特定し、そのボタンを表示制御部１１に拡大表示させる。ユーザが更に液晶画面を押し込むと、第２操作検出部１４がその押下を検出する。制御部１５は、上記接触操作に続けて行われたユーザによる押下操作を入力確定操作とみなす。
【選択図】図３

Description

本発明は、ユーザインタフェース装置、特に数字キーや操作ボタン等を可変に表示可能な液晶パネル等を表示部として有するユーザインタフェース装置の操作性に関する。

例えばＡＴＭ（Automatic Teller Machine）で代表されるように、従来から液晶パネルなどのディスプレイの表面にタッチパネルを配設したユーザインタフェース装置が実用化されている。このユーザインタフェース装置は、液晶パネルに表示するキー画像等をユーザ操作に応じて変更することができる。近年、タッチパネルを配設したユーザインタフェース装置は、携帯電話などの小型機器の操作手段としても利用されてきている。

ただ、このタイプのインタフェース装置を携帯電話等の小型機器に適用する場合には、操作領域が必然的に狭くなってしまうため、同等数の操作ボタンを表示しようとすると、各操作ボタンの大きさは相対的に小さくなってしまう。そうすると、この種のユーザインタフェースは、物理的な操作ボタン等と異なり凹凸を設けることができないため、ユーザは、操作しようとするキーの存在を触覚により確認することができない。このため、誤操作を招きやすくなる。

このような誤操作を削減するために、従来においては、ユーザ操作を検出したときに操作された、若しくは操作されると思われるキー若しくはキー入力受付領域を拡大するなどしてデータ入力を容易にする入力装置が提案されている（例えば特許文献１，２）。

特開平５−７３１９６号公報特開２００２−９１６７７号公報

しかしながら、特許文献１においては、キー画像の境界線が押下された場合に次回以降の入力ミスを低減させるためにキー入力受付領域を拡大変更するが、キー自体の表示を変更するものではない。また、「押下」という１回の操作に応じて操作されたキーの表示形態を変更することなく入力が確定されてしまうので、誤操作したことに気づかない場合も起こり得る。

これに対し、特許文献２においては、キーが選択されたときにその選択されたキー及びその周辺のキーを拡大表示するので、選択したキーをユーザに容易に確認させることができる。更に、ユーザは、選択したキーが誤っていた場合には指をずらすことで選択し直すことができるので、一見するとユーザフレンドリであるようにも考えられる。しかしながら、特許文献２においては、拡大表示した後に入力を中止したいときでも、タッチパネルから指を離した位置のキーで入力が無条件に確定されてしまうため、必ずしも使い勝手がよいとは言い難い。

本発明は、以上のような課題を解決するためになされたものであり、その目的は、誤操作の防止に、より適したユーザインタフェース装置を提供することにある。

以上のような目的を達成するために、本発明に係るユーザインタフェース装置は、ユーザにより操作される操作項目を表示するユーザ操作領域が設定された表示手段と、ユーザ操作領域に対する第１のユーザアクセスを検出すると共に、第１のユーザアクセスより更にユーザ操作領域方向への移動を伴うユーザ操作領域に対する第２のユーザアクセスを検出する検出手段と、前記検出手段により検出された第２のユーザアクセスを、ユーザによる確定操作と判定する制御手段とを有するものである。

また、前記検出手段は、ユーザによる接触操作を検出するタッチパネルと、前記タッチパネル接触後におけるユーザの押下操作を検出する押下検出部とを有し、前記タッチパネルに対する接触操作を第１のユーザアクセスとして検出し、前記タッチパネルに対する押下操作を第２のユーザアクセスとして検出するものである。

あるいは、前記検出手段は、ユーザによる接触操作を検出するタッチパネルと、前記タッチパネルの表面側に配設され、照射している赤外線が遮断されることによって前記タッチパネルへ接触しようとするユーザ操作を検出する赤外線センサ手段とを有し、前記赤外線センサ手段により検出されたユーザ操作を第１のユーザアクセスとして検出し、前記タッチパネルに対する接触操作を第２のユーザアクセスとして検出するものである。

あるいは、前記検出手段は、ユーザによる接触操作を検出するタッチパネルを有し、前記タッチパネルに対する最初の接触操作を第１のユーザアクセスとして検出し、第１のユーザアクセス時の前記タッチパネルに対する接触面積に対して、予め決められた基準値以上に前記タッチパネルに対する接触面積が増加したときの接触操作を第２のユーザアクセスとして検出するものである。

あるいは、前記検出手段は、ユーザによる非接触及び接触による操作を検出する静電タッチパネルを有し、ユーザによる前記静電タッチパネルに対する非接触操作を第１のユーザアクセスとして検出し、ユーザによる前記静電タッチパネルに対する接触操作を第２のユーザアクセスとして検出するものである。

また、前記制御手段は、ユーザ操作領域上の第２のユーザアクセスにより特定される位置に表示された操作項目を、ユーザにより確定された入力項目と判定するものである。

また、前記表示手段に表示する操作項目の表示形態を制御する表示制御手段と、前記検出手段により第１のユーザアクセスが検出されたときに、ユーザ操作領域上における第１のユーザアクセス位置を特定する位置特定手段とを有し、前記表示制御手段は、前記検出手段により第１のユーザアクセスが検出されたときに、ユーザ操作領域に表示された操作項目の表示形態を変更するものである。

また、前記制御手段は、前記位置特定手段により特定された第１のユーザアクセス位置に対応した操作項目を特定し、前記表示制御手段は、前記制御手段により特定された操作項目が視認できるように、当該操作項目の表示形態を変更するものである。

更に、前記表示制御手段は、前記制御手段により特定された操作項目の表示領域内に当該操作項目の内容を示す情報が表示される場合において、第１のユーザアクセスをした操作部位によって当該操作項目の内容を示す情報が視認できなくなる場合には、当該操作項目を拡大表示すると共に、当該操作項目の内容を示す情報を、拡大表示した操作項目表示領域内の前記操作部位からずれた位置に表示するものである。

また、前記制御手段は、前記位置特定手段により特定された第１のユーザアクセス位置に対応した操作項目を特定し、前記表示制御手段は、第１のユーザアクセス検出時点からの経過時間に応じて当該操作項目の表示形態を変化させるものである。

また、前記制御手段は、表示される操作項目毎に対応させて設定した反応領域と、前記位置特定手段により特定された第１のユーザアクセス位置とを照合することで、第１のユーザアクセス位置に対応した操作項目を特定する場合、前記検出手段により第１のユーザアクセスが検出されたときに前記位置特定手段により特定された第１のユーザアクセス位置に対応した操作項目に対応させて設定する反応領域の大きさを拡張するものである。

また、前記制御手段は、前記位置特定手段により特定された第１のユーザアクセス位置に対応した操作項目を特定し、前記表示制御手段は、前記制御手段により特定された操作項目以外の操作項目の表示形態を変更するものである。

また、前記制御手段は、前記位置特定手段により特定された第１のユーザアクセス位置に対応した操作項目を特定し、前記表示制御手段は、前記制御手段により特定された操作項目からの距離に応じて各操作項目の表示形態を決定するものである。

また、前記制御手段は、前記位置特定手段により特定された第１のユーザアクセス位置に対応した操作項目を特定し、前記表示制御手段は、前記制御手段が第１のユーザアクセス位置に対応した操作項目を特定できなかったとき、第１のユーザアクセス位置近傍の１乃至複数の操作項目を拡大表示するものである。

また、前記制御手段が第１のユーザアクセス位置に対応した操作項目を特定できなかったときにその旨をユーザに通知する通知手段を有するものである。

本発明によれば、第１及び第２という二段階のユーザアクセスを検出するように構成し、そのうち第１のユーザアクセスに続けて第２のユーザアクセスが行われてはじめてその第２のユーザアクセスを入力確定操作と判定するようにしたので、誤操作を効果的に防止することができる。

また、第１のユーザアクセス検出の際に操作された操作項目が視認できるように、操作項目の表示形態を変更するようにしたので、ユーザ操作の確認を容易に行うことができ、また誤操作の防止を図ることができる。

また、第１のユーザアクセス位置に対応した操作項目を拡大表示すると共に、当該操作項目の内容を示す情報を、拡大表示した操作項目表示領域内の操作部位からずれた位置に表示するようにしたので、どの操作項目を操作しているのかをユーザに容易に確認させることができる。

また、操作項目の拡大表示に合わせて当該操作項目に対応させて設定する反応領域の大きさも拡張するようにしたので、誤操作をより効果的に防止することができる。

また、通知手段を設けたので、ユーザが操作項目以外の箇所を操作していることをユーザに知らせることができる。

以下、図面に基づいて、本発明の好適な実施の形態について説明する。

実施の形態１．
図１は、本発明に係るユーザインタフェース装置の一実施の形態を適用した携帯電話の概略構成図である。本実施の形態における携帯電話１には、２つの液晶画面２，３が形成されている。液晶画面２には、電話番号等をガイド表示する表示領域が形成される。液晶画面３には、操作項目を表示してユーザによる入力操作を受け付けるユーザ操作領域が形成される。本実施の形態では、液晶画面３に表示されユーザにより操作されるメニュー等のボタン４や数字キー等を「操作項目」と総称する。ただ、以下の説明では、便宜的に「ボタン」を代表して用いる。

図２は、携帯電話１のユーザ操作領域が形成される液晶画面部分を横からみたときの構造を示した概略図である。図２（ａ）に示したように、液晶画面３は、携帯電話１の筐体内部においてタッチパネル５、液晶パネル６及びスイッチ７が積層された液晶タッチパネルとして形成される。液晶画面３に対する操作は、指先やペン先をタッチパネル５に接触させることで行われるが、タッチパネル５は、このユーザによる接触操作及びその接触位置を検出する。なお、携帯電話１に対しては、通常、指でボタン操作するので、本実施の形態でも、ユーザ操作は指先で行われるものとして説明する。液晶パネル６は、携帯電話１における表示制御に従ったボタン画像をユーザ操作領域内に表示する。スイッチ７は、液晶画面３が押下されたことを検出するオン／オフスイッチである。スイッチ７は、液晶パネル６と隙間を設けて配置され、液晶パネル６との接触を電気的に検出したり、あるいは液晶パネル６との接触により生じる圧力を検出するなどして、ユーザによる液晶画面３の押下を検出する。

液晶画面３は、周知な機構を用いて筐体内部方向に可動な状態で携帯電話１に取り付けられており、ユーザによりタッチパネル５側が押下されると、筐体内部方向に押し込まれる構造を有している。すなわち、この液晶画面部分の構造について図２を用いて説明すると、ユーザは、図２（ａ）に示したように液晶画面３のユーザ操作領域に表示されたいずれかのボタン（図示せず）を押下操作するとき、指先を液晶画面３に近づけるよう移動させる。指先は、その移動によっていずれ液晶画面３に接触することになる。なお、この液晶画面３への接触は、タッチパネル５により検出される。続いて、ユーザは、液晶画面３を更に押下すると、液晶画面３は、筐体内部方向に押し込まれる。図２（ｂ）では、この押し込まれた状態を、タッチパネル５と携帯電話１の筐体との間の隙間８によって示している。スイッチ７は、このタッチパネル接触後に続いて行われる押下というユーザ操作を検出する。なお、指先が離れると、液晶画面３は、図２（ａ）に示した元の位置に戻る。

本実施の形態における液晶画面３は、以上のような構造を有しているが、本実施の形態では、上記のようにタッチパネル５への接触操作と、その接触後において更にタッチパネル５を押し込む方向への指先の移動、すなわち押下操作という２段階のユーザ操作を検出できるように構成した。そして、タッチパネル５により検出された最初の接触操作を第１のユーザアクセスと、スイッチ７により検出された最初の接触後における押下操作を第２のユーザアクセスと称するならば、本実施の形態では、第１のユーザアクセス後に行われる第２のユーザアクセスをユーザによる確定操作としてみなすようにした。すなわち、本実施の形態では、液晶画面３への接触後に更に押し込むという二段操作若しくは二度押しというユーザインタフェースを提供し、その二段目（二度押し目）の操作をユーザによる確定操作として判定するようにしたことを特徴としている。

図３は、本実施の形態におけるユーザインタフェース装置のブロック構成図である。図３には、表示部１０、表示制御部１１、位置特定部１２、第１操作検出部１３、第２操作検出部１４、制御部１５及び通知部１６が示されている。表示部１０は、前述した液晶パネル６により実現される。表示制御部１１は、携帯電話本体の表示制御機能から送られてくる表示データに基づいて、ユーザにより操作されるボタン等の操作項目を表示部１０に設定されたユーザ操作領域に表示する。表示データには、液晶パネル６に表示する各操作項目の形状、表示位置、色等表示に必要なデータが含まれている。また、詳細は後述するが、表示制御部１１は、操作項目の表示形態をユーザ操作に応じて変更するなどの表示制御を行う。検出手段１７は、ユーザ操作領域に対する第１のユーザアクセスを検出する第１操作検出部１３と、第１のユーザアクセス後のユーザ操作領域に対する第２のユーザアクセスを検出する第２操作検出部１４とを有している。第１操作検出部１３が検出する第１のユーザアクセスというのは、上記例示したタッチパネル５への接触操作に相当し、タッチパネル５により実現される。一方、第２操作検出部１４は、タッチパネル５に対する押下操作に相当し、スイッチ７により実現される。

位置特定部１２は、第１のユーザアクセスが検出されたときに、ユーザ操作領域上における第１のユーザアクセスがされた位置を特定する。具体的に言うと、ユーザの指先が接触したタッチパネル５上の位置を特定可能な電気信号を出力する。位置特定部１２は、タッチパネル５により実現される。制御部１５は、位置特定部１２から送られてくる信号データに基づき得たユーザ接触位置の座標データと、表示制御部１１を介して取得した表示データから特定される各ボタンの表示位置とを比較照合してユーザが操作したボタン４を特定する。制御部１５は、またその他ユーザインタフェース装置全体の動作制御を行う。通知部１６は、制御部１５が第１のユーザアクセス位置に対応したボタンを特定できなかったときにその旨をユーザに通知する。

なお、本実施の形態におけるユーザインタフェース装置の説明に必要な構成要素を図３に示したが、これらの構成要素は、携帯電話が持つ既存の構成要素に適宜組み込んで実現することができる。例えば、制御部１５や表示制御部１１が持つ処理機能は、携帯電話１に搭載されている制御回路に組み込んで実現できる。また、通知部１６は、スピーカ等で実現できる。

次に、本実施の形態における動作について図４に示した画面表示例の遷移図を用いて説明する。

図４（ａ）に示したように、液晶画面３のユーザ操作領域には“Ａ”から“Ｌ”までの文字入力ボタンが表示されている。ここで、ユーザは、“Ｂ”を入力することを選択したとする。そこで、ユーザは、液晶画面３に表示された“Ｂ”ボタンを入力するために、“Ｂ”ボタンに指先を合わせて液晶画面３のタッチパネル５に接触する。第１操作検出部１３は、この指先の接触を検出し、またこれと同時に位置特定部１２はユーザ操作領域内の接触位置を特定する。制御部１５は、位置特定部１２により特定されたユーザ接触位置に基づいて、ユーザが操作しようとするボタンを次のようにして特定する。

制御部１５は、ユーザ操作領域に表示するための表示データを表示制御部１１から取得することで、ユーザ操作領域内における各ボタンの表示領域を位置座標データとして把握する。そして、ユーザ操作領域と同じ大きさを持つ別途用意した領域上に各ボタンの表示領域を投影する。これにより、ユーザ接触位置と比較照合するための領域情報を生成する。このユーザが操作した位置と比較照合するための領域情報を「反応領域」と称することにする。反応領域は、ボタン毎に生成され、ユーザが操作したボタンを特定するために制御部１５によって用いられる座標データである。この点で表示制御部１１が表示のために用いる表示データとは異なる。反応領域は、座標データにより範囲指定されるが、制御部１５は、位置特定部１２により特定されたユーザ接触位置に基づき得られる位置座標データと、表示されている各ボタンに対応した反応領域とを比較することでユーザ接触位置がどの反応領域に含まれるかを特定する。そして、特定した反応領域に対応するボタンがユーザにより操作されたボタンであると判定する。この制御部１５における処理によって、図４に示した例によると、“Ｂ”ボタンが操作されたと特定することができる。

ところで、ボタンには、通常、図４（ａ）に示したように各ボタンの内容を示す情報、この例の場合は“Ａ”〜“Ｌ”という文字がボタン上に表示される。携帯電話１などの小型機器の場合は特にボタンを指で操作すると、ボタン上に表示される文字が指先で覆われ視認できなくなってしまう。そこで、本実施の形態においては、上記のように第１のユーザアクセスで“Ｂ”ボタンが操作されたと制御部１５により特定されると、表示制御部１１は、図４（ｂ）に示したように該当する“Ｂ”ボタンを拡大表示する。図４（ｂ）では、“Ａ”ボタンが隠れる大きさに拡大しているが、“Ａ”ボタンは選択されていないため隠れても問題ないと考えられる。そして、表示制御部１１は、拡大表示した“Ｂ”ボタン上であって指先からずれた位置に文字“Ｂ”を表示する。これにより、ユーザは、操作したボタンが“Ｂ”ボタンであることを容易に視認することができる。

ボタンの拡大サイズ又は拡大率は、固定値として予め設定しておいてもよいが、ユーザの指先の位置は特定できるので、その位置と推測した操作部位（この例では指先）の大きさとから文字“Ｂ”の表示位置を計算により求めることができる。従って、文字“Ｂ”の表示位置が含まれるような大きさに “Ｂ”ボタンを拡大表示すればよい。これにより、ユーザは、文字“Ｂ”を常に視認することができる。

更に、小型機器の場合はボタン自体が小さいためにボタン上に表示される文字も小さい。従って、図４（ｂ）に例示したように文字自体もボタンと共に拡大表示することがユーザにとっては好適である。なお、文字とボタンの拡大倍率は、同じでも別でもよい。

ユーザがタッチパネル５に接触操作すると、上記のようにして図４（ｂ）が画面表示されることになる。ユーザは、入力しようとする“Ｂ”ボタンを操作できていることが確認できると、“Ｂ”ボタンを押下する。この押下操作をスイッチ７、すなわち第２操作検出部１４が検出すると、制御部１５は、この“Ｂ”ボタンに対する押下操作をユーザによる確定操作と判定する。なお、図４（ｃ）における“Ｐｉ！”は、押下操作により確定されたことをユーザに聴覚にて知らせるための音を示している。他の図においても同様である。

以上のように、本実施の形態によれば、ユーザ操作領域に対する接触操作（第１のユーザアクセス）によりボタンを拡大表示するなどしてどのボタンが操作されているのかをユーザに確認させ、更にその接触操作に続いて行われるユーザ操作領域に対する押下操作（第２のユーザアクセス）により入力確定させる。ユーザからしてみれば、押下により入力を確定させる前にボタンに接触した時点で押下しようとしているボタンが拡大表示されるので、誤入力を防止することができる。仮に、ボタンを押下する前に、すなわちユーザ操作領域に接触した時点で誤ったボタンを操作しようとしていることを視認した場合には、操作をやり直せばよい。この際に指先が液晶画面３から離れたとしても、この操作を入力確定操作とみなされることはない。

本実施の形態は、上記説明したとおり、ボタンの拡大表示等によるボタンの確認と、入力確定のために二段操作（二度押し操作）によるユーザインタフェースを提供するものである。しかし、二段階の操作をユーザに強要するものではない。すなわち、ユーザが確定のために押下操作をする際には、その押下操作より前に接触操作は常に行われることになるので、ユーザは、この二段階の操作を意識的に実行する必要はない。ユーザからしてみれば、一連の操作を行えばよく、本実施の形態におけるインタフェース装置が前述した内部処理にて二段階の操作として処理することになる。もちろん、ユーザは、意識的に接触操作をした時点で更なる押し込み操作をしないようにしてもよく、この場合は、ボタンの拡大表示が維持された状態になる。

図５は、図４の変形例に相当する画面表示例の遷移図である。上記説明では、図４に示したようにユーザ操作領域が形成された液晶画面３の表示範囲内でボタンを拡大表示させていた。これに対し、図５は、ガイド表示領域が形成された液晶画面２まで拡大してボタンを表示させるようにした。このように、ユーザ操作領域に限定されずにボタンを拡大表示してもよい。

図６乃至図９は、更に異なる画面表示例を示した遷移図である。図４では、接触操作されたときにその操作されたボタンの表示形態を操作前と異ならせて表示するようにした。しかし、操作されたボタン以外のボタンの表示形態を変更するようにして操作されたボタンか否かを識別できるようにしてもよい。図６には、操作された“Ｂ”ボタン以外のボタンを淡く表示するようにした例が示されている。このように、操作されていないボタンの表示を淡くしたり、消去したり、あるいは色を変更するなどすることで操作されたボタンを目立たせることができ、これにより誤入力の防止効果を向上させることができる。

図７には、操作されたボタンからの距離に応じてボタンの表示形態を決定するようにした例が示されている。すなわち、図７（ｂ）に示した表示例によると、ユーザは“Ｂ”ボタンを操作しているが、それが誤操作だとすると、正しく選択されるべきボタンは、“Ｂ”ボタン周辺にあると考えられる。そこで、操作した“Ｂ”ボタンは上記と同様に拡大表示するが、その横隣にある“Ａ”ボタンと“Ｃ”ボタンも拡大表示してボタンの存在をユーザに示す。ただ、操作された“Ｂ”ボタンとの区別が付けられるように拡大の程度を多少落とす。また、“Ｂ”ボタンの下段に位置する“Ｄ”〜“Ｆ”ボタンは、縮小表示する。“Ｄ”〜“Ｆ”ボタンの中に正しいボタンが存在する確率は、“Ａ”，“Ｃ”ボタンより低いためである。更に、下段に位置する“Ｇ”〜“Ｉ”ボタンは淡く表示する。“Ｇ”〜“Ｉ”ボタンの中に正しいボタンが存在する確率は、“Ｄ”〜“Ｆ”ボタンより更に低いためである。つまり、重要度は更に低くなる。実際には、２段ずれた位置を押し間違いすることは通常はないと考えられるので、表示しなくてもよい。

なお、本実施の形態は、操作されたボタンの位置からの距離に応じて表示形態を変更することを特徴とするものであり、例えば、“Ｂ”ボタンの直下の“Ｅ”ボタンは“Ａ”，“Ｃ”ボタンと同様に拡大表示してもよいし、“Ｂ”ボタンの周囲に位置することから“Ｄ”〜“Ｆ”ボタンも拡大表示するようにしてもよい。

図８には、図４等と同様に操作されたボタンを拡大表示するが、接触操作の検出時点からの経過時間に応じてボタンを徐々に拡大していくように表示する例が示されている。これにより、ユーザに確定操作を喚起することができる。なお、ボタンの表示形態を変化させる例として、ボタンの大きさを変化させる場合を図８に示したが、この他にも表示色等他の表示形態を変化させるようにしてもよい。

以上のように、本実施の形態では、操作されたボタンの表示形態を変更することで、どのボタンが操作されているのかをユーザに知らせることができるようにした。ボタンの表示形態を変更するためには、操作されたボタンを特定しなければならないが、この操作されたボタンは、ボタンのレイアウトが示された表示データから各ボタンの反応領域を生成し、この生成した各反応領域とユーザ接触位置とを比較することで特定している。この処理については前述している。但し、ユーザ接触位置がいずれの反応領域にも含まれない場合もあり得る。このように、ユーザ接触位置に対応したボタンが特定できなかったとき、制御部１５は、表示制御部１１にそのユーザ接触位置近傍のボタンを拡大表示させる。このときの画面表示例を図９に示す。図９（ａ）に示したように、“Ａ”ボタンと“Ｂ”ボタンの上方であっていずれのボタンも操作していないとき、制御部１５は、そのユーザ接触位置から接触位置近傍にある“Ａ”，“Ｂ”ボタンを特定する。そして、表示制御部１１は、その特定された“Ａ”，“Ｂ”ボタンを図９（ｂ）に例示したように拡大表示する。これにより、ユーザは、図９（ｃ）に示したように選択しようとしていた“Ａ”ボタンを押下することで入力を確定する。なお、図９（ｂ）では、拡大表示したボタンを明確に示すために操作部位である指を図面から省略した。

本実施の形態によれば、ボタンが表示されていないユーザ操作領域にユーザが触れたとき、どのボタンを操作しようとしたのかをそのユーザ接触位置に基づき推測し、そのボタンを拡大表示するようにしたので、ボタン操作が容易になり、誤操作防止に効果的である。なお、この例では、２つのボタンを拡大表示したが、拡大表示するボタン数は、ユーザの接触位置によって決まる。例えば、“Ａ”ボタンの左上なら“Ａ”ボタンのみを拡大表示する。また、“Ａ”，“Ｂ”，“Ｄ”，“Ｅ”ボタンの間なら４つのボタンを拡大表示する。

また、制御部１５は、ボタンが表示されていないユーザ操作領域にユーザが触れたとき、通知部１６に通知指示を出す。通知部１６は、制御部１５からの指示に従い所定の方法でユーザにその旨を知らせる。所定の方法というのは、例えば、本実施の形態のように携帯電話１の場合は、音出力でもよいし、搭載されたバイブレータを駆動制御して振動させるようにしてもよい。また、発光など他の方法でユーザの五感を通じて知らせるようにしてもよい。タッチパネル５の場合、ボタン以外の箇所に触れても、そのことが触覚として伝わらないため、通知部１６を設けてその旨をユーザに知らせるようにすることは効果的である。

ところで、ユーザがアクセス（接触、押下）したボタンは、ユーザが操作した位置の座標データを、表示データから得られるボタンの表示領域と比較するのではなく、各ボタンの表示領域を投影することで生成した各反応領域と比較して特定していることは前述したとおりである。上記のように各ボタンの表示領域を投影することによって反応領域を生成した場合には、各ボタンの表示領域と反応領域の大きさは一致する。このため、ユーザは、ボタンの表示位置を操作すれば、実際にボタン操作を行うことができる。図４乃至図８を用いて説明したように、ボタンが拡大表示されることによって正しいボタンを操作していることが確認できると、ユーザは、接触位置から指先を動かすことなくその位置で押下操作を行うと推測できる。従って、ボタンの拡大表示に連動して必ずしも反応領域を拡大させる必要はない。しかしながら、ボタンサイズの拡大に連動させて反応領域も拡張すれば、都合のよい場合もある。例えば、図９に示したようにボタン以外の箇所を接触操作した後は、指先の位置を移動させなければならない。このような場合に拡大表示した“Ａ”，“Ｂ”ボタンと表示領域（表示サイズ）と同じサイズで反応領域を生成すれば、誤操作を効果的に防止できる。なお、反応領域の生成に関しては、上記と同様で表示制御部１１によって表示形態が変更されたときに、制御部１５は、その表示データを表示制御部１１から取得して反応領域を生成し直せばよい。

この反応領域の生成は、図９に限らず、時間の経過と共にボタンの大きさが変化する図８に示したような表示の場合にも適用可能である。図８に対応する反応領域を図１０に示したが、図１０から明らかなように、ボタンの大きさの変化に応じて反応領域を再生成することで、ボタンの表示領域と反応領域の大きさを常に一致させることができる。

更に、反応領域の大きさは、ボタンの表示領域と必ずしも一致させる必要はなく、例えば表示領域より広くなるように生成してもよい。本実施の形態において例示した携帯電話、更にリモコンや車載情報機器など液晶画面を入力インタフェースとし、また表示する操作ボタン自体を小さくせざるを得ない小型機器においては、入力ミスの確率が必然的に高くなってしまう。特に、乗車中など静止していない状態、あるいは片手に持って連続して入力する頻度の高い携帯電話では、捜査中に指先がボタンからずれてしまう可能性がある。表示領域より反応領域の大きさを大きくすると、多少の操作位置のずれを許容することができるので、本実施の形態が提供するユーザインタフェースは誤操作防止に特に有効である。

なお、本実施の形態では、入力方式として二段操作（二度押し）というユーザインタフェースを提供することによって操作の確認を容易にし、かつ誤操作の防止を図ることができるようにした。上記例では、二段操作のうちユーザ操作領域に対する接触操作（第１のユーザアクセス）でボタンを拡大表示し、ユーザ操作領域に対して続けて行われる押下操作（第２のユーザアクセス）で入力確定としたが、例えば、第１のユーザアクセスが検出されたときに、当該ボタンに割り付けた情報を画面表示させるなど、各ユーザアクセスを他の処理と関連付けるようにしてもよい。

また、本実施の形態では、液晶パネル６の下方にスイッチ７を配設して第２のユーザアクセスを検出するように構成したが、この構成に限定する必要はない。例えば、携帯電話１の筐体とタッチパネル５との隙間８を検出するなど他の手段によって第２のユーザアクセスを検出するようにしてもよい。

実施の形態２．
実施の形態１では、液晶画面３を押し込むことで入力を確定させるタイプ、すなわちプッシュスイッチタイプのユーザインタフェースを示した。以下の説明する各実施の形態は、実施の形態１とは異なるタイプのインタフェースを提供するものである。なお、表示形態に関しては、実施の形態１と同じであるため説明を省略し、携帯電話１に組み込む液晶画面３部分の構造についてのみ説明する。

図１１は、本実施の形態における液晶画面３を表面側から見たときの概念図である。図１２は、携帯電話１の液晶画面３部分を横からみたときの構造を示した概略図であり、実施の形態１の説明に用いた図２に相当する図である。

本実施の形態における液晶画面３は、タッチパネル５及び液晶パネル６で形成される。そして、赤外線２２を発光する発光素子２０と赤外線を受光する受光素子２１とを組にして液晶画面３の表面側に配列する。発光素子２０は、携帯電話１の使用中は赤外線２２を常時発光しており、赤外線２２が遮断されることによってタッチパネル５に接触しようとする指先を検出するように構成した。

すなわち、実施の形態１では、タッチパネル５に対する接触操作を第１のユーザアクセスとして検出したが、本実施の形態では、図１２（ｂ）に示したように、この接触操作を第２のユーザアクセスとして検出する。そして、多数の発光素子２０と受光素子２１との組を含む赤外線センサ手段による物体の検出を、図１２（ａ）に示したように第２のユーザアクセスとして検出するように構成したことを特徴としている。

本実施の形態における装置のブロック構成は、図３で表すことができる。但し、本実施の形態の場合、第１操作検出部１３及び位置特定部１２は、発光素子２０，受光素子２１を含む赤外線センサ手段で実現され、第２操作検出部１４は、タッチパネル５で実現される。

本実施の形態における作用は、基本的には実施の形態１と同じなので説明を省略するが、第１のユーザアクセス検出時では、ユーザの指先の検出位置を特定する必要があるので、液晶画面３の大きさ等を考慮して縦横に照射する赤外線数を調整することになる。第１のユーザアクセス検出時、縦横それぞれ少なくとも１本の赤外線が指先で遮断されることになるので、制御部１５は、各受光素子２１の受光状態を検出することでユーザアクセス位置を特定することができる。

実施の形態３．
図１３は、本実施の形態における携帯電話１の液晶画面３部分を横からみたときの構造を示した概略図であり、実施の形態１の説明に用いた図２に相当する図である。本実施の形態における液晶画面３は、タッチパネル５及び液晶パネル６で形成される。そして、指先でタッチパネル５を押下するとき、指先のタッチパネル５との接触面の大きさは変化する。図１３を用いてより詳細に説明すると、図１３（ａ）に示したようにタッチパネル５に触れたときの指先の接触面３０は、図１３（ｂ）に示したように小さい。図１３（ｃ）に示したようにユーザがタッチパネル５を更に押し込むように押下操作すると、タッチパネル５に触れたときの指先の接触面３１は、図１３（ｄ）に示したように触れたときの接触面３０の面積より大きくなる。

すなわち、本実施の形態においては、指先がタッチパネル５に最初に触れたときの接触操作を第１のユーザアクセスとして検出する。この点は実施の形態１と同じである。但し、本実施の形態では、第１のユーザアクセス時のタッチパネル５に対する接触面積に対して、予め決められた基準値以上にタッチパネル５に対する接触面積が増加したときの接触操作を第２のユーザアクセスとして検出するようにした。予め決められた基準値以上にタッチパネル５に対する接触面積が増加したときというのは、第２のユーザアクセス時における接触面積が基準値（ｍｍ^２）以上になったとき、あるいは第１のユーザアクセス時において求めた接触面積に対して第２のユーザアクセス時における設置面積が基準値（増加率（％））以上に増加したときなどのことをいう。

本実施の形態における装置のブロック構成は、図３で表すことができる。但し、本実施の形態の場合、第２操作検出部１４、第１操作検出部１３及び位置特定部１２は、タッチパネル５で実現されるが、第２のユーザアクセスの検出時点の判断は、検出手段であるタッチパネル５からの電気信号に基づき予め決められた基準値に従い制御部１５によりなされる。

実施の形態４．
図１４は、本実施の形態における携帯電話１の液晶画面３部分を横からみたときの構造を示した概略図であり、実施の形態１の説明に用いた図２に相当する図である。本実施の形態における液晶画面３は、タッチパネル４０及び液晶パネル６で形成されるが、本実施の形態におけるタッチパネル４０は、静電タイプのタッチパネルであり、触れられなくても指先が近づくと静電容量が変化する。

すなわち、本実施の形態においては、図１４（ａ）に示したように、タッチパネル４０に近づいて接触しようとした指先が静電容量の変化により検出されたとき、その接触しようとした非接触操作を第１のユーザアクセスとして検出する。そして、図１４（ｂ）に示したように、指先がタッチパネル４０に更に近づきタッチパネル４０に接触したとき、この接触操作を第２のユーザアクセスとして検出する。この第２のユーザアクセスの検出に関しては、実施の形態２と同じである。

本実施の形態における装置のブロック構成は、図３で表すことができる。但し、本実施の形態の場合、第２操作検出部１４、第１操作検出部１３及び位置特定部１２は、タッチパネル４０で実現される。

以上、各実施の形態において４つのタイプのユーザインタフェースについて説明した。実施の形態１で示したスイッチタイプに限っては、液晶画面３のユーザ操作領域自体が指先と共に移動することになるが、いずれのタイプも指先が第１のユーザアクセスの検出位置から更に液晶画面３のユーザ操作領域方向に移動を伴う操作を第２のユーザアクセスとして検出した。このように、液晶画面３に向かったユーザ操作を２段階で検出するようにし、１段目で操作内容を確認させ、２段目で入力確定させるようなユーザインタフェースとしたので、操作の確認を容易にし、かつ誤操作を防止することができる。

なお、上記説明では、４タイプのユーザインタフェースについて説明したが、上記４タイプに限定されることなく、例えば指先の接触によるタッチパネルの温度変化を検出する感温式タイプを採用するなど本発明には種々の検出手段を適用することができる。

本発明に係るユーザインタフェース装置の一実施の形態を適用した携帯電話の概略構成図である。実施の形態１における携帯電話のユーザ操作領域が形成される液晶画面部分を横からみたときの構造を示した概略図である。実施の形態１におけるユーザインタフェース装置のブロック構成図である。実施の形態１における携帯電話を操作したときの画面表示例の遷移を示した図である。実施の形態１における携帯電話を操作したときの他の画面表示例の遷移を示した図である。実施の形態１における携帯電話を操作したときの他の画面表示例の遷移を示した図である。実施の形態１における携帯電話を操作したときの画面表示例の遷移を示した図である。実施の形態１における携帯電話を操作したときの画面表示例の遷移を示した図である。実施の形態１における携帯電話を操作したときの画面表示例の遷移を示した図である。実施の形態１において携帯電話に対する操作を認識する反応領域を示した図である。実施の形態２における携帯電話のユーザ操作領域が形成される液晶画面部分を外部からみたときの概略図である。実施の形態２における携帯電話のユーザ操作領域が形成される液晶画面部分を横からみたときの構造を示した概略図である。実施の形態３における携帯電話のユーザ操作領域が形成される液晶画面部分を横からみたときの構造を示した概略図である。実施の形態４における携帯電話のユーザ操作領域が形成される液晶画面部分を横からみたときの構造を示した概略図である。

符号の説明

１携帯電話、２，３液晶画面、４ボタン、５，４０タッチパネル、６液晶パネル、７スイッチ、８隙間、１０表示部、１１表示制御部、１２位置特定部、１３第１操作検出部、１４第２操作検出部、１５制御部、１６通知部、１７検出手段、２０発光素子、２１受光素子、２２赤外線、３０接触面、３１接触面。

Claims

ユーザにより操作される操作項目を表示するユーザ操作領域が設定された表示手段と、
ユーザ操作領域に対する第１のユーザアクセスを検出すると共に、第１のユーザアクセスより更にユーザ操作領域方向への移動を伴うユーザ操作領域に対する第２のユーザアクセスを検出する検出手段と、
前記検出手段により検出された第２のユーザアクセスを、ユーザによる確定操作と判定する制御手段と、
を有することを特徴とするユーザインタフェース装置。
前記検出手段は、
ユーザによる接触操作を検出するタッチパネルと、
前記タッチパネル接触後におけるユーザの押下操作を検出する押下検出部と、
を有し、前記タッチパネルに対する接触操作を第１のユーザアクセスとして検出し、前記タッチパネルに対する押下操作を第２のユーザアクセスとして検出することを特徴とする請求項１記載のユーザインタフェース装置。
前記検出手段は、
ユーザによる接触操作を検出するタッチパネルと、
前記タッチパネルの表面側に配設され、照射している赤外線が遮断されることによって前記タッチパネルへ接触しようとするユーザ操作を検出する赤外線センサ手段と、
を有し、前記赤外線センサ手段により検出されたユーザ操作を第１のユーザアクセスとして検出し、前記タッチパネルに対する接触操作を第２のユーザアクセスとして検出することを特徴とする請求項１記載のユーザインタフェース装置。
前記検出手段は、ユーザによる接触操作を検出するタッチパネルを有し、前記タッチパネルに対する最初の接触操作を第１のユーザアクセスとして検出し、第１のユーザアクセス時の前記タッチパネルに対する接触面積に対して、予め決められた基準値以上に前記タッチパネルに対する接触面積が増加したときの接触操作を第２のユーザアクセスとして検出することを特徴とする請求項１記載のユーザインタフェース装置。
前記検出手段は、ユーザによる非接触及び接触による操作を検出する静電タッチパネルを有し、ユーザによる前記静電タッチパネルに対する非接触操作を第１のユーザアクセスとして検出し、ユーザによる前記静電タッチパネルに対する接触操作を第２のユーザアクセスとして検出することを特徴とする請求項１記載のユーザインタフェース装置。
前記制御手段は、ユーザ操作領域上の第２のユーザアクセスにより特定される位置に表示された操作項目を、ユーザにより確定された入力項目と判定することを特徴とする請求項１記載のユーザインタフェース装置。
前記表示手段に表示する操作項目の表示形態を制御する表示制御手段と、
前記検出手段により第１のユーザアクセスが検出されたときに、ユーザ操作領域上における第１のユーザアクセス位置を特定する位置特定手段と、
を有し、
前記表示制御手段は、前記検出手段により第１のユーザアクセスが検出されたときに、ユーザ操作領域に表示された操作項目の表示形態を変更することを特徴とする請求項１記載のユーザインタフェース装置。
前記制御手段は、前記位置特定手段により特定された第１のユーザアクセス位置に対応した操作項目を特定し、
前記表示制御手段は、前記制御手段により特定された操作項目が視認できるように、当該操作項目の表示形態を変更することを特徴とする請求項７記載のユーザインタフェース装置。
前記表示制御手段は、前記制御手段により特定された操作項目の表示領域内に当該操作項目の内容を示す情報が表示される場合において、第１のユーザアクセスをした操作部位によって当該操作項目の内容を示す情報が視認できなくなる場合には、当該操作項目を拡大表示すると共に、当該操作項目の内容を示す情報を、拡大表示した操作項目表示領域内の前記操作部位からずれた位置に表示することを特徴とする請求項８記載のユーザインタフェース装置。
前記制御手段は、前記位置特定手段により特定された第１のユーザアクセス位置に対応した操作項目を特定し、
前記表示制御手段は、第１のユーザアクセス検出時点からの経過時間に応じて当該操作項目の表示形態を変化させることを特徴とする請求項７記載のユーザインタフェース装置。
前記制御手段は、表示される操作項目毎に対応させて設定した反応領域と、前記位置特定手段により特定された第１のユーザアクセス位置とを照合することで、第１のユーザアクセス位置に対応した操作項目を特定する場合、前記検出手段により第１のユーザアクセスが検出されたときに前記位置特定手段により特定された第１のユーザアクセス位置に対応した操作項目に対応させて設定する反応領域の大きさを拡張することを特徴とする請求項７記載のユーザインタフェース装置。
前記制御手段は、前記位置特定手段により特定された第１のユーザアクセス位置に対応した操作項目を特定し、
前記表示制御手段は、前記制御手段により特定された操作項目以外の操作項目の表示形態を変更することを特徴とする請求項７記載のユーザインタフェース装置。
前記制御手段は、前記位置特定手段により特定された第１のユーザアクセス位置に対応した操作項目を特定し、
前記表示制御手段は、前記制御手段により特定された操作項目からの距離に応じて各操作項目の表示形態を決定することを特徴とする請求項７記載のユーザインタフェース装置。
前記制御手段は、前記位置特定手段により特定された第１のユーザアクセス位置に対応した操作項目を特定し、
前記表示制御手段は、前記制御手段が第１のユーザアクセス位置に対応した操作項目を特定できなかったとき、第１のユーザアクセス位置近傍の１乃至複数の操作項目を拡大表示することを特徴とする請求項７記載のユーザインタフェース装置。
前記制御手段が第１のユーザアクセス位置に対応した操作項目を特定できなかったときにその旨をユーザに通知する通知手段を有することを特徴とする請求項７乃至１４のいずれか１項に記載のユーザインタフェース装置。