JP5624662B2 - 電子機器、表示制御方法およびプログラム - Google Patents

Description

本発明の実施形態は、タッチ入力機能を備えた電子機器の表示制御技術に関する。

近年、タブレット端末やスマートフォンといったバッテリ駆動可能で携行容易な電子機器が広く普及している。この種の電子機器の多くは、ユーザによる入力操作を容易にするために、タッチスクリーンディスプレイを備えている。

ユーザは、タッチスクリーンディスプレイ上に表示されるアイコンやメニュー等のオブジェクトを指でタッチすることにより、これらアイコンやメニューに関連づけられた機能の実行を電子機器に指示することができる。

そして、このタッチスクリーンディスプレイを使った入力操作（タッチ入力）に関しては、これまでも種々の提案が成されている。

特開２０１１−３９６３３号公報

ところで、指の太さには個人差がある。また、同じ人の指でも、例えば親指と人差し指とでは太さが異なる。さらに、同じ人の同じ指でも、タッチの仕方によってタッチスクリーンディスプレイ上に接触する面積は異なる。

しかしながら、従来、アイコンやメニュー等のオブジェクトをタッチスクリーンディスプレイ上に表示するにあたり、タッチ入力の際の接触面積は何ら考慮されていない。

本発明の一実施形態は、タッチ入力に基づき、オブジェクトを適切に表示制御することを実現した電子機器、表示制御方法およびプログラムを提供することを目的とする。

実施形態によれば、電子機器は、表示制御手段を具備する。表示制御手段は、タッチスクリーンディスプレイ上でのタッチ入力に応じて、前記タッチスクリーンディスプレイ上にオブジェクトを表示する。表示制御手段は、タッチ入力の接触領域が前記タッチスクリーンディスプレイ上の第１操作を行うための第１オブジェクトの表示領域に含まれ、第２操作を行うための第２オブジェクトの表示領域には含まれない場合、第３オブジェクトを前記タッチスクリーンディスプレイ上に表示し、タッチ入力の接触領域が前記タッチスクリーンディスプレイ上の前記第１オブジェクトの表示領域及び前記第２オブジェクトの表示領域の双方に含まれる場合、前記第３オブジェクトとは異なる第４オブジェクトを前記タッチスクリーンディスプレイ上に表示するものである。前記第１オブジェクトの表示領域と、前記第２オブジェクトの表示領域とは、前記タッチスクリーンディスプレイ上で隣り合っている。前記第３オブジェクトは、前記第３オブジェクトの表示領域上へのタッチ入力により、少なくとも１以上の第３操作が可能なオブジェクトである。前記第４オブジェクトは、前記第４オブジェクトの表示領域上へのタッチ入力により、少なくとも１以上の第３操作が可能なオブジェクトである。前記第３オブジェクトの表示領域上へのタッチ入力と前記第４オブジェクトの表示領域上へのタッチ入力とにより、少なくとも１以上、同一の第３操作が可能である。前記第４オブジェクトが表示されているとき前記第３操作を行うためにタッチ入力すべき領域の大きさは、前記第３オブジェクトが表示されているとき前記第３操作を行うためにタッチ入力すべき領域の大きさよりも大きい。

実施形態の電子機器の外観を示す斜視図。 実施形態の電子機器情報のシステム構成を示す図。 実施形態の電子機器上で動作するデジタルノートブックアプリケーションプログラムの機能ブロック図。 実施形態の電子機器上で動作するデジタルノートブックアプリケーションプログラム（オブジェクト表示制御部）の動作原理を説明するための第１の図。 実施形態の電子機器上で動作するデジタルノートブックアプリケーションプログラム（オブジェクト表示制御部）の動作原理を説明するための第２の図。 実施形態の電子機器が実行するメニュー表示制御の処理手順を示すフローチャート。

以下、実施の形態について図面を参照して説明する。

本実施形態の電子機器は、例えば、タブレット端末、ノートブック型パーソナルコンピュータおよびスマートフォン等、指によってタッチ入力可能な携帯型電子機器として実現され得る。図１は、本実施形態に係る電子機器の外観を示す斜視図である。図１に示すように、ここでは、本電子機器が、タブレット端末１０として実現されている場合を想定する。タブレット端末１０は、本体１１とタッチスクリーンディスプレイ１７とを備える。タッチスクリーンディスプレイ１７は、本体１１の上面に重ね合わせるように取り付けられている。

本体１１は、薄い箱形の筐体を有している。タッチスクリーンディスプレイ１７には、フラットパネルディスプレイと、フラットパネルディスプレイの画面上への指の接触位置を検出するように構成されたセンサとが組み込まれている。フラットパネルディスプレイは、例えば液晶表示装置（ＬＣＤ：Liquid crystal display）である。センサは、例えば静電容量方式のタッチパネルである。タッチパネルは、フラットパネルディスプレイの画面を覆うように設けられる。

図２は、タブレット端末１０のシステム構成を示す図である。

タブレット端末１０は、図２に示されるように、ＣＰＵ１０１、システムコントローラ１０２、主メモリ１０３、グラフィクスコントローラ１０４、ＢＩＯＳ−ＲＯＭ１０５、不揮発性メモリ１０６、無線通信デバイス１０７およびＥＣ（Embedded controller）１０８等を備える。

ＣＰＵ１０１は、タブレット端末１０内の各種モジュールの動作を制御するプロセッサである。ＣＰＵ１０１は、不揮発性メモリ１０６から主メモリ１０３にロードされる各種ソフトウェアを実行する。これらソフトウェアには、オペレーティングシステム（ＯＳ）２０１や各種アプリケーションプログラムが含まれている。各種アプリケーションプログラムには、デジタルノートブックアプリケーションプログラム２０２が含まれている。デジタルノートブックアプリケーションプログラム２０２は、ユーザが本タブレット端末１０に対して指示を与えるためのユーザインタフェースを提供するプログラムであり、アイコンやメニュー等のオブジェクトをタッチスクリーンディスプレイ上に表示する機能を有している。本タブレット端末１０は、このデジタルノートブックアプリケーションプログラム２０２に、タッチ入力の際の接触面積に基づき、オブジェクトを適切に表示制御する仕組みを搭載したものであり、この仕組みについては後述する。

また、ＣＰＵ１０１は、ＢＩＯＳ−ＲＯＭ１０５に格納された基本入出力システム（ＢＩＯＳ：Basic input/output system）も実行する。ＢＩＯＳは、ハードウェア制御のためのプログラムである。

システムコントローラ１０２は、ＣＰＵ１０１のローカルバスと各種コンポーネントとの間を接続するデバイスである。システムコントローラ１０２には、主メモリ１０３をアクセス制御するメモリコントローラも内蔵されている。また、システムコントローラ１０２は、ＰＣＩ ＥＸＰＲＥＳＳ規格のシリアルバスなどを介してグラフィクスコントローラ１０４との通信を実行する機能も有している。

グラフィクスコントローラ１０４は、タブレット端末１０のディスプレイモニタとして使用されるＬＣＤ１７Ａを制御する表示コントローラである。このグラフィクスコントローラ１０４によって生成される表示信号はＬＣＤ１７Ａに送られる。ＬＣＤ１７Ａは、表示信号に基づいて画面イメージを表示する。ＬＣＤ１７Ａ上にはタッチパネル１７Ｂが配置されている。タッチパネル１７Ｂは、ＬＣＤ１７Ａの画面上で入力を行うための例えば静電容量式のポインティングデバイスである。指が画面上に接触した位置は、このタッチパネル１７Ｂによって検出される。

無線通信デバイス１０７は、無線ＬＡＮまたは３Ｇ移動通信などの無線通信を実行するように構成されたデバイスである。ＥＣ１０８は、電力管理のためのエンベデッドコントローラを含むワンチップマイクロコンピュータである。ＥＣ１０８は、ユーザによるパワーボタンの操作に応じてタブレット端末１０を電源オン／オフする機能を有している。

図３は、タブレット端末１０上で動作するデジタルノートブックアプリケーションプログラム２０２の機能ブロック図である。

図３に示すように、デジタルノートブックアプリケーションプログラム２０２は、接触データ入力部３１、接触面積取得部３２、オブジェクト表示制御部３３等を有している。

前述したように、タッチスクリーンディスプレイ１７は、画面に対するタッチ入力をタッチパネル１７Ｂで検出する。接触データ入力部３１は、このタッチパネル１７Ｂから出力される検出信号を入力するモジュールである。検出信号には、座標情報（Ｘ，Ｙ）が含まれている。接触データ入力部３１によって入力された検出信号は、接触面積取得部３２およびオブジェクト表示制御部３３に供給される。

接触面積取得部３２は、接触データ入力部３１からの検出信号に基づき、指が画面上に接触した領域の面積を取得（算出）するモジュールである。接触面積の取得という目的が達成できるのであれば、その取得方法は、既存のいずれの方法でも構わない。接触面積取得部３２は、取得した接触面積を示す接触面積データをオブジェクト表示制御部３３に供給する。

オブジェクト表示制御部３３は、接触データ入力部３１からの検出信号と、接触面積取得部３２からの接触面積データとに基づき、アイコンやメニュー等のオブジェクトをＬＣＤ１７Ａに表示するモジュールである。オブジェクト表示制御部３３は、接触面積取得部３２からの接触面積データに基づき、例えば、アイコンやメニュー等のオブジェクトの表示サイズを制御する機能を有する。図４および図５を参照して、このオブジェクト表示制御部３３の動作原理について説明する。

いま、例えば、マウスの右ボタンをクリック（右クリック）することでポインタが指し示す位置にポップアップメニューを表示させるように、タッチパネル１７Ｂ上の任意の位置に指で触れると、その位置にポップアップメニューを表示させることができる状況下にあるものとする。換言すると、現在、ポップアップメニューの表示要求を受け付け可能な画面が表示されているものとする。

また、例えば、あるユーザは、図４の（Ａ）に示すように、ポップアップメニューを表示させるためのタッチ入力を指先で行い、その結果、タッチパネル１７Ｂ上の比較的狭い領域（接触面ａ１）に指を接触させるものとし、別のユーザは、図４の（Ｂ）に示すように、タッチ入力を指の腹の部分で行い、その結果、タッチパネル１７Ｂ上の比較的広い領域（接触面ａ２）に指を接触させるものとする。

オブジェクト表示制御部３３は、このタッチ入力に応答してポップアップメニューをＬＣＤ１７Ａに表示するにあたり、例えば、接触面積取得部３２から受け取った接触面積データで示される接触面積が予め定められた閾値以上か否かを判定する。接触面積が閾値未満であった場合、オブジェクト表示制御部３３は、図５の（Ａ）に示すように、ポップアップメニューを標準サイズで表示する（ｂ１）。これに対して、接触面積が閾値以上であった場合には、オブジェクト表示制御部３３は、図５の（Ｂ）に示すように、ポップアップメニューを拡大して表示する（ｂ２）。このポップアップメニューの拡大表示は、メニューに含まれる文字データを標準より大きいフォントサイズで表示することで行ってもよいし、メニュー用の画像データを拡大して表示することで行ってもよい。また、メニュー用の画像データを都度拡大するのではなく、拡大表示用の画像データを用意しておき、標準の画像データに代えて表示することで行ってもよい。

このオブジェクト表示制御部３３の表示制御により、個々人の指の太さ、タッチ入力で使用する指の太さ、タッチ入力の仕方に応じて、メニューの表示フォントやサイズを変更することが可能となり、例えば指の太いユーザが（当該ユーザにとって）細かなメニューに対する操作で苦労するといったことを防止することができる。逆に、例えば指の細いユーザに対して（提示される選択肢の数が減少する）必要以上に大きなメニューが表示されてしまうといったことを防止することができる。

また、例えばユーザが、本タブレット端末１０を手で持ちながらタッチ入力を行う場合には親指を使い、机上に置いてタッチ入力を行う場合には人差し指を使うといった指の使い分けを行うことも考えられる。このような場合も、オブジェクト表示制御部３３の表示制御により、前者の場合はポップアップメニューを拡大表示し、後者の場合は標準サイズで表示するといった使用シーンに合わせたメニュー表示を行うことが可能となる。

図６は、本タブレット端末１０が実行するメニュー表示制御の処理手順を示すフローチャートである。

タッチスクリーンディスプレイ１７上でタッチ入力が行われると、タッチパネル１７Ｂが、タッチスクリーンディスプレイ１７への指の接触を検出する（ブロックＡ１）。デジタルノートブックアプリケーションプログラム２０２は、タッチパネル１７Ｂから出力される検出信号をデータ入力部３１によって入力し、接触面積取得部３２によって指の接触面積を取得する（ブロックＡ２）。デジタルノートブックアプリケーションプログラム２０２は、オブジェクト表示制御部３３によって、接触面積に応じたサイズでメニューをＬＣＤ１７Ａに表示する（ブロックＡ３）。

ところで、以上の説明では、メニューを標準サイズで表示するか、または、拡大表示するかといった２段階でメニューを表示制御する例を示したが、指の接触面積と比較する閾値を複数設定し、メニューの表示サイズを３段階以上で制御することも可能である。

また、メニューを拡大表示するか否かに限らず、指の接触面積に基づき、表示するメニュー自体を可変とすることも可能である。例えば図４の（Ａ）に示すような指先でのタッチ入力によりメニュー１を表示させ、例えば図４の（Ｂ）に示すような指の腹の部分でのタッチ入力によりメニュー２を表示させるといったことを実施し得る。

また、以上の説明では、任意の位置でのタッチ入力によってその位置に表示されるポップアップメニューを例に挙げたが、ポップアップメニューに限らず、例えば既に表示されているメニュー項目上でのタッチ入力によってそのメニュー項目の下に表示されるプルダウンメニューについて、指の接触面積に基づき、その表示サイズを制御することも可能である。プルダウンメニューの場合、例えば画面の上部などにメニュー項目が並べて表示されているわけであるが、このメニュー項目へのタッチ入力状況によって、（実際の面積を算出することなく）指の接触面積が閾値以上であるか否かを簡易的に判定してもよい。

より具体的には、例えばあるメニュー項目のみが接触領域に含まれている場合、指の接触面積が閾値未満であると推定し、一方、接触領域が、あるメニュー項目を含み、かつ、並んで表示されている別のメニュー項目に跨っている場合、指の接触面積が閾値以上であると推定することもできる。

さらに、指の接触面積に基づき、その表示サイズを制御するオブジェクトとしては、メニューに限らず、アイコン等、様々なものに適用可能である。例えば、入力エリアとして画面上に表示されたテキストボックス上でタッチ入力を行うと、そのテキストボックス内に文字を入力するためのソフトウェアキーが表示されるものとする。この時、接触面積が閾値未満であれば、例えば（キー数は多いが各キーは小さい）パーソナルコンピュータのキーボードを模したソフトウェアキーを表示し、一方、接触面積が閾値以上であれば、例えば（キー数は少ないが各キーは大きい）携帯電話機の操作ボタンを模したソフトウェアキーを表示するといったことも可能である。この場合、タッチ入力を図４の（Ａ）に示すように指先で行うか、図４の（Ｂ）に示すように指の腹の部分で行うかによって、ユーザが２種類のソフトウェアキーを能動的に使い分けることもできる。

このように、本タブレット端末１０によれば、タッチ入力の際の接触面積に基づき、オブジェクトを適切に表示制御することが実現される。

なお、本実施形態の動作手順は全てソフトウェアによって実現することができるので、このソフトウェアをコンピュータ読み取り可能な記憶媒体を通じて通常のコンピュータに導入することにより、本実施形態と同様の効果を容易に実現することができる。

また、本発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に構成要素を適宜組み合わせてもよい。

１０…タブレット端末、１１…本体、１７…タッチスクリーンディスプレイ、１７Ａ…ＬＣＤ、１７Ｂ…タッチパネル、３１…接触データ入力部、３２…接触面積取得部、３３…オブジェクト表示制御部、１０１…ＣＰＵ、１０２…システムコントローラ、１０３…主メモリ、１０４…グラフィクスコントローラ、１０５…ＢＩＯＳ−ＲＯＭ、１０６…不揮発性メモリ、１０７…無線通信デバイス、１０８…ＥＣ、２０１…オペレーティングシステム（ＯＳ）、２０２…デジタルノートブックアプリケーションプログラム。

Claims (15)

1. タッチスクリーンディスプレイ上でのタッチ入力に応じて、前記タッチスクリーンディスプレイ上にオブジェクトを表示する表示制御手段を具備し、
   前記表示制御手段は、タッチ入力の接触領域が前記タッチスクリーンディスプレイ上の第１操作を行うための第１オブジェクトの表示領域に含まれ、第２操作を行うための第２オブジェクトの表示領域には含まれない場合、第３オブジェクトを前記タッチスクリーンディスプレイ上に表示し、タッチ入力の接触領域が前記タッチスクリーンディスプレイ上の前記第１オブジェクトの表示領域及び前記第２オブジェクトの表示領域の双方に含まれる場合、前記第３オブジェクトとは異なる第４オブジェクトを前記タッチスクリーンディスプレイ上に表示するものであって、
   前記第１オブジェクトの表示領域と、前記第２オブジェクトの表示領域とは、前記タッチスクリーンディスプレイ上で隣り合っており、
   前記第３オブジェクトは、前記第３オブジェクトの表示領域上へのタッチ入力により、少なくとも１以上の第３操作が可能なオブジェクトであって、
   前記第４オブジェクトは、前記第４オブジェクトの表示領域上へのタッチ入力により、少なくとも１以上の第３操作が可能なオブジェクトであって、
   前記第３オブジェクトの表示領域上へのタッチ入力と前記第４オブジェクトの表示領域上へのタッチ入力とにより、少なくとも１以上、同一の第３操作が可能であって、
   前記第４オブジェクトが表示されているとき前記第３操作を行うためにタッチ入力すべき領域の大きさは、前記第３オブジェクトが表示されているとき前記第３操作を行うためにタッチ入力すべき領域の大きさよりも大きい電子機器。
2. 前記第３オブジェクトおよび前記第４オブジェクトは、メニューである請求項１に記載の電子機器。
3. 前記第３オブジェクトおよび前記第４オブジェクトは、ソフトウェアキーボードである請求項１に記載の電子機器。
4. 前記第３オブジェクトして表示される第１ソフトウェアキーボードは、前記第４オブジェクトとして表示される第２ソフトウェアキーボードよりもキー数が多く、かつ、各キーの面積が小さい請求項３に記載の電子機器。
5. 前記タッチスクリーンディスプレイ上の接触面積を取得する取得手段をさらに具備し、
   前記表示制御手段は、タッチ入力の接触領域が前記タッチスクリーンディスプレイ上の前記第１オブジェクトの表示領域及び前記第２オブジェクトの表示領域の双方に含まれ、かつ、前記取得手段により取得される接触面積が第１値以上の場合、前記第４オブジェクトを前記タッチスクリーンディスプレイ上に表示する請求項１に記載の電子機器。
6. 電子機器の表示制御方法であって、
   タッチスクリーンディスプレイ上でのタッチ入力に応じて、前記タッチスクリーンディスプレイ上にオブジェクトを表示することを具備し、
   前記オブジェクトを表示することは、タッチ入力の接触領域が前記タッチスクリーンディスプレイ上の第１操作を行うための第１オブジェクトの表示領域に含まれ、第２操作を行うための第２オブジェクトの表示領域には含まれない場合、第３オブジェクトを前記タッチスクリーンディスプレイ上に表示し、タッチ入力の接触領域が前記タッチスクリーンディスプレイ上の前記第１オブジェクトの表示領域及び前記第２オブジェクトの表示領域の双方に含まれる場合、前記第３オブジェクトとは異なる第４オブジェクトを前記タッチスクリーンディスプレイ上に表示することを含み、
   前記第１オブジェクトの表示領域と、前記第２オブジェクトの表示領域とは、前記タッチスクリーンディスプレイ上で隣り合っており、
   前記第３オブジェクトは、前記第３オブジェクトの表示領域上へのタッチ入力により、少なくとも１以上の第３操作が可能なオブジェクトであって、
   前記第４オブジェクトは、前記第４オブジェクトの表示領域上へのタッチ入力により、少なくとも１以上の第３操作が可能なオブジェクトであって、
   前記第３オブジェクトの表示領域上へのタッチ入力と前記第４オブジェクトの表示領域上へのタッチ入力とにより、少なくとも１以上、同一の第３操作が可能であって、
   前記第４オブジェクトが表示されているとき前記第３操作を行うためにタッチ入力すべき領域の大きさは、前記第３オブジェクトが表示されているとき前記第３操作を行うためにタッチ入力すべき領域の大きさよりも大きい表示制御方法。
7. 前記第３オブジェクトおよび前記第４オブジェクトは、メニューである請求項６に記載の表示制御方法。
8. 前記第３オブジェクトおよび前記第４オブジェクトは、ソフトウェアキーボードである請求項６に記載の表示制御方法。
9. 前記第３オブジェクトして表示される第１ソフトウェアキーボードは、前記第４オブジェクトとして表示される第２ソフトウェアキーボードよりもキー数が多く、かつ、各キーの面積が小さい請求項８に記載の表示制御方法。
10. 前記タッチスクリーンディスプレイ上の接触面積を取得することをさらに具備し、
    前記オブジェクトを表示することは、タッチ入力の接触領域が前記タッチスクリーンディスプレイ上の前記第１オブジェクトの表示領域及び前記第２オブジェクトの表示領域の双方に含まれ、かつ、前記取得される接触面積が第１値以上の場合、前記第４オブジェクトを前記タッチスクリーンディスプレイ上に表示することを含む請求項６に記載の表示制御方法。
11. コンピュータを、
    タッチスクリーンディスプレイ上でのタッチ入力に応じて、前記タッチスクリーンディスプレイ上にオブジェクトを表示する表示制御手段として機能させ、
    前記表示制御手段は、タッチ入力の接触領域が前記タッチスクリーンディスプレイ上の第１操作を行うための第１オブジェクトの表示領域に含まれ、第２操作を行うための第２オブジェクトの表示領域には含まれない場合、第３オブジェクトを前記タッチスクリーンディスプレイ上に表示し、タッチ入力の接触領域が前記タッチスクリーンディスプレイ上の前記第１オブジェクトの表示領域及び前記第２オブジェクトの表示領域の双方に含まれる場合、前記第３オブジェクトとは異なる第４オブジェクトを前記タッチスクリーンディスプレイ上に表示するものであって、
    前記第１オブジェクトの表示領域と、前記第２オブジェクトの表示領域とは、前記タッチスクリーンディスプレイ上で隣り合っており、
    前記第３オブジェクトは、前記第３オブジェクトの表示領域上へのタッチ入力により、少なくとも１以上の第３操作が可能なオブジェクトであって、
    前記第４オブジェクトは、前記第４オブジェクトの表示領域上へのタッチ入力により、少なくとも１以上の第３操作が可能なオブジェクトであって、
    前記第３オブジェクトの表示領域上へのタッチ入力と前記第４オブジェクトの表示領域上へのタッチ入力とにより、少なくとも１以上、同一の第３操作が可能であって、
    前記第４オブジェクトが表示されているとき前記第３操作を行うためにタッチ入力すべき領域の大きさは、前記第３オブジェクトが表示されているとき前記第３操作を行うためにタッチ入力すべき領域の大きさよりも大きいプログラム。
12. 前記第３オブジェクトおよび前記第４オブジェクトは、メニューである請求項１１に記載のプログラム。
13. 前記第３オブジェクトおよび前記第４オブジェクトは、ソフトウェアキーボードである請求項１１に記載のプログラム。
14. 前記第３オブジェクトして表示される第１ソフトウェアキーボードは、前記第４オブジェクトとして表示される第２ソフトウェアキーボードよりもキー数が多く、かつ、各キーの面積が小さい請求項１３に記載のプログラム。
15. 前記コンピュータを、前記タッチスクリーンディスプレイ上の接触面積を取得する取得手段としてさらに機能させ、
    前記表示制御手段は、タッチ入力の接触領域が前記タッチスクリーンディスプレイ上の前記第１オブジェクトの表示領域及び前記第２オブジェクトの表示領域の双方に含まれ、かつ、前記取得手段により取得される接触面積が第１値以上の場合、前記第４オブジェクトを前記タッチスクリーンディスプレイ上に表示する請求項１１に記載のプログラム。

Images