JP5205157B2 - Portable image display device, control method thereof, program, and information storage medium - Google Patents
Portable image display device, control method thereof, program, and information storage medium Download PDFInfo
- Publication number
- JP5205157B2 JP5205157B2 JP2008184858A JP2008184858A JP5205157B2 JP 5205157 B2 JP5205157 B2 JP 5205157B2 JP 2008184858 A JP2008184858 A JP 2008184858A JP 2008184858 A JP2008184858 A JP 2008184858A JP 5205157 B2 JP5205157 B2 JP 5205157B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- display screen
- display device
- finger
- coordinate value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Digital Computer Display Output (AREA)
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Description
本発明は、ユーザが携帯して使用する携帯型画像表示装置、その制御方法、プログラム及び情報記憶媒体に関する。 The present invention relates to a portable image display device carried by a user, a control method thereof, a program, and an information storage medium.
近年、携帯型ゲーム機、携帯電話、携帯情報端末(PDA)など、ユーザが携帯して使用でき、ユーザに各種の情報を提示する表示画面を備えた各種の画像表示装置が登場している(例えば特許文献1参照)。このような携帯型画像表示装置は、ユーザの操作入力に応じて各種の情報処理を実行して、その結果を表示画面に表示する。
上述したような携帯型画像表示装置は、ユーザが多様な操作入力を容易に行うことのできるユーザインタフェースを備えることが望ましい。 The portable image display device as described above preferably includes a user interface that allows a user to easily perform various operation inputs.
本発明は上記実情に鑑みてなされたものであって、その目的の一つは、ユーザが容易に多様な操作入力を行うことのできる携帯型画像表示装置、その制御方法、プログラム及び情報記憶媒体を提供することにある。 The present invention has been made in view of the above circumstances, and one of its purposes is a portable image display device that allows a user to easily perform various operation inputs, a control method thereof, a program, and an information storage medium. Is to provide.
上記課題を解決するための本発明に係る携帯型画像表示装置は、略矩形の表示画面と、前記表示画面の外周を構成する少なくとも2つの辺のそれぞれに沿って設けられ、それぞれユーザの指が触れた位置を検知する複数のタッチセンサと、前記複数のタッチセンサのそれぞれにより検知される複数の指の位置の組み合わせに応じて、前記表示画面に表示する画像を変化させる表示画像制御手段と、を含むことを特徴とする。 A portable image display device according to the present invention for solving the above problems is provided along each of a substantially rectangular display screen and at least two sides constituting the outer periphery of the display screen. A plurality of touch sensors that detect touched positions, and a display image control unit that changes an image displayed on the display screen in accordance with a combination of positions of a plurality of fingers detected by each of the plurality of touch sensors; It is characterized by including.
また、上記携帯型画像表示装置において、前記表示画像制御手段は、前記複数のタッチセンサにより検知される複数の指の位置それぞれの動きの組み合わせに応じて、前記表示画面に表示する画像を変化させることとしてもよい。 Further, in the portable image display device, the display image control means changes an image displayed on the display screen according to a combination of movements of a plurality of finger positions detected by the plurality of touch sensors. It is good as well.
また、上記携帯型画像表示装置において、前記表示画像制御手段は、前記複数のタッチセンサにより検知される複数の指の位置それぞれの動く向きの組み合わせに応じて、前記表示画面に表示する画像を変化させることとしてもよい。 Further, in the portable image display device, the display image control means changes an image displayed on the display screen in accordance with a combination of movement directions of a plurality of finger positions detected by the plurality of touch sensors. It is also possible to make it.
また、前記携帯型画像表示装置は、略矩形の平板状の筐体を備え、前記表示画面は、前記筐体の表面に設けられ、前記複数のタッチセンサのそれぞれは、前記筐体の側面に設けられることとしてもよい。 The portable image display device includes a substantially rectangular flat plate-shaped housing, the display screen is provided on a surface of the housing, and each of the plurality of touch sensors is provided on a side surface of the housing. It may be provided.
また、本発明に係る携帯型画像表示装置の制御方法は、略矩形の表示画面と、前記表示画面の外周を構成する少なくとも2つの辺のそれぞれに沿って設けられ、それぞれユーザの指が触れた位置を検知する複数のタッチセンサと、を備える携帯型画像表示装置の制御方法であって、前記複数のタッチセンサのそれぞれにより検知される複数の指の位置の組み合わせに応じて、前記表示画面に表示する画像を変化させるステップ、を含むことを特徴とする。 The control method of the portable image display device according to the present invention is provided along each of a substantially rectangular display screen and at least two sides constituting the outer periphery of the display screen, each touched by a user's finger. A plurality of touch sensors for detecting positions, and a method for controlling a portable image display device, wherein the display screen is displayed in accordance with a combination of positions of a plurality of fingers detected by each of the plurality of touch sensors. And a step of changing an image to be displayed.
また、本発明に係るプログラムは、略矩形の表示画面と、前記表示画面の外周を構成する少なくとも2つの辺のそれぞれに沿って設けられ、それぞれユーザの指が触れた位置を検知する複数のタッチセンサと、を備える携帯型画像表示装置としてコンピュータを機能させるためのプログラムであって、前記複数のタッチセンサのそれぞれにより検知される複数の指の位置の組み合わせに応じて、前記表示画面に表示する画像を変化させる表示画像制御手段、として前記コンピュータを機能させるためのプログラムである。このプログラムは、コンピュータ読み取り可能な情報記憶媒体に格納されてよい。 The program according to the present invention is provided along each of a substantially rectangular display screen and at least two sides constituting the outer periphery of the display screen, and each of the touches detects a position touched by a user's finger. A program for causing a computer to function as a portable image display device comprising a sensor, and displaying on the display screen in accordance with a combination of a plurality of finger positions detected by each of the plurality of touch sensors It is a program for causing the computer to function as display image control means for changing an image. This program may be stored in a computer-readable information storage medium.
以下、本発明の実施の形態について、図面に基づき詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
図1(a)及び図1(b)は、本発明の一実施形態に係る携帯型画像表示装置1の外観を示す斜視図であって、図1(a)は携帯型画像表示装置1を表面(正面)側から見た様子を、図1(b)は同じ携帯型画像表示装置1を裏面側から見た様子を、それぞれ示している。
FIG. 1A and FIG. 1B are perspective views showing the appearance of a portable
これらの図に示されるように、携帯型画像表示装置1の筐体10は、全体として略矩形の平板状の形状をしており、その表面に第1表示画面12aが、裏面に第2表示画面12bが、それぞれ設けられている。これらの表示画面は、いずれも略矩形の形状をしており、筐体10の表面又は裏面の大部分を占めるように配置されている。第1表示画面12a及び第2表示画面12bは、例えば液晶表示パネルや有機EL表示パネル等、画像の表示が可能な各種のデバイスであってよい。また、これらの表示画面に対して、ユーザの指などが触れた位置を検知可能なタッチパネルが重ねて配置されることとしてもよい。
As shown in these drawings, the
さらに、本実施形態に係る携帯型画像表示装置1では、表示画面の外周を構成する4辺のそれぞれに沿って、4つのタッチセンサが設けられている。これらのタッチセンサは筐体10の四方の側面それぞれに配置されており、それぞれ直線状の検知領域を備えている。このように筐体10の側面に配置されることで、各タッチセンサは、筐体10の表面に配置された第1表示画面12aの外周の一辺、及び裏面に配置された第2表示画面12bの外周の一辺、の双方に沿って配置されることとなる。
Furthermore, in the portable
具体的に、本実施形態では、第1表示画面12a及び第2表示画面12bの長辺方向(左右方向)に沿った側面に、第1タッチセンサ14a及び第3タッチセンサ14cが、第1表示画面12a及び第2表示画面12bの短辺方向(上下方向)に沿った側面に、第2タッチセンサ14b及び第4タッチセンサ14dが、それぞれ配置されている。
Specifically, in the present embodiment, the
これらのタッチセンサは、携帯型画像表示装置1を使用するユーザの指が触れた位置を検知するために用いられる。各タッチセンサは、例えば静電容量式や感圧式、光学式など各種の方式のものであってよい。また、各タッチセンサは、ユーザの指が触れた位置だけでなく、例えば指の接触面積や圧力などを検知することによって、ユーザの指がタッチセンサを押さえる強さを検知することとしてもよい。これらのタッチセンサがユーザの指の位置を検知することによって、携帯型画像表示装置1は、第1表示画面12aや第2表示画面12bの外周に沿った方向のユーザの指の位置を、操作入力として受け付けることができる。
These touch sensors are used to detect a position touched by a finger of a user who uses the portable
また、筐体10表面には、第1表示画面12aに隣接して第1遠赤外線センサ16aが設けられている。さらに、筐体10裏面には、第2表示画面12bに隣接して第2遠赤外線センサ16bが設けられている。これらの遠赤外線センサは、熱源から放射される遠赤外線を検知する。これによって、携帯型画像表示装置1は、各遠赤外線センサの前方にユーザがいるか否かを検知することができる。なお、携帯型画像表示装置1は、遠赤外線センサに代えて、またはこれに加えて、例えばCCDカメラなど、ユーザの位置を検知可能な各種のデバイスを備えることとしてもよい。
A first far-
また、携帯型画像表示装置1の筐体10の内部には、加速度センサ18及びジャイロセンサ20が配置されている。加速度センサ18は3軸加速度センサであって、筐体10に対して設定された3つの基準軸(X軸、Y軸及びZ軸)それぞれの方向に生じる加速度を検知する。ここで、3つの基準軸は互いに略直交しており、X軸は筐体10表面の矩形の長辺方向、Y軸は矩形の短辺方向、Z軸は筐体10の厚さ方向にそれぞれ設定されているものとする。重力によって各基準軸に生じる加速度を加速度センサ18が検知することによって、携帯型画像表示装置1は、自分自身の姿勢(すなわち、重力が働く鉛直方向に対する筐体10の傾き)を検知することができる。
Further, an
ジャイロセンサ20は、ジャイロ基準軸(ここではZ軸)を中心とした回転の角速度を検知し、当該検知した角速度に応じた電気信号を出力する。例えばジャイロセンサ20は圧電振動型ジャイロなどであってよい。ジャイロセンサ20によって検知される角速度を積分することで、携帯型画像表示装置1はZ軸を基準とした筐体10の回転角を算出することができる。
The
なお、図1には示されていないが、携帯型画像表示装置1は、タッチセンサ以外にも、例えばボタンやスイッチなど、ユーザの操作入力を受け付けるための各種の操作部材を筐体10の表面や裏面、側面などに備えることとしてもよい。
Although not shown in FIG. 1, the portable
図2は、携帯型画像表示装置1の内部構成を示す構成ブロック図である。同図に示されるように、携帯型画像表示装置1は、制御部30と、記憶部32と、画像処理部34と、を含んで構成されている。制御部30は、例えばCPU等であって、記憶部32に格納されているプログラムに従って、各種の情報処理を実行する。記憶部32は、例えばRAMやROM等のメモリ素子や、ディスクデバイスなどであって、制御部30によって実行されるプログラムや各種のデータを格納する。また、記憶部32は、制御部30のワークメモリとしても機能する。
FIG. 2 is a configuration block diagram showing the internal configuration of the portable
画像処理部34は、例えばGPUとフレームバッファメモリとを含んで構成され、制御部30が出力する指示に従って、第1表示画面12a及び第2表示画面12bのそれぞれに表示する画像を描画する。具体例として、画像処理部34は第1表示画面12a及び第2表示画面12bのそれぞれに対応した2つのフレームバッファメモリを備え、GPUは、制御部30からの指示に従って、所定時間おきにこれら2つのフレームバッファメモリのそれぞれに対して画像を書き込む。そして、これらのフレームバッファメモリに書き込まれた画像が、所定のタイミングでビデオ信号に変換されて、それぞれ対応する表示画面に表示される。
The
本実施形態では、制御部30は、タッチセンサ14a〜14d、遠赤外線センサ16a及び16b、加速度センサ18、並びにジャイロセンサ20のそれぞれによる検知結果などに基づいて、各種の処理を実行する。特に、制御部30は、タッチセンサ14a〜14dによるユーザの指の位置の検知結果に基づいて、ユーザによる指示操作の内容を判断して、当該指示操作に応じた処理を実行し、処理結果を表示画面に表示してユーザに提示する。
In the present embodiment, the
ここで、ユーザが閲覧する表示画面は、場合によって、第1表示画面12aになったり第2表示画面12bになったりする。そこで、携帯型画像表示装置1は、ユーザが主に閲覧していると想定される表示画面(以下、主表示画面という)を特定し、この主表示画面に主として表示すべき画像を表示する。また、主表示画面と反対側の表示画面(以下、副表示画面という)には、主表示画面に表示する画像と関連する補助的な情報を表示してもよいし、あるいは主表示画面に表示する画像を生成するプログラムとは別のプログラムよって生成される、他の画像を表示してもよい。また、副表示画面は、ユーザの操作などによって主表示画面に切り替わるまで画像を表示しないこととしてもよい。
Here, the display screen browsed by the user may be the
なお、第1表示画面12a及び第2表示画面12bのどちらを主表示画面とするかは、例えば第1遠赤外線センサ16a及び第2遠赤外線センサ16bにより検知されるユーザが筐体10のどちら側に存在するかを示す情報や、加速度センサ18により検知される筐体10の姿勢などに応じて切り替えられることとしてもよい。あるいは、ユーザの明示の指示操作に応じて切り替えられることとしてもよい。
Note that which of the
以下、本実施形態において、各タッチセンサの検知結果に応じて制御部30が実行する処理の具体例について、説明する。本実施形態では、制御部30は、タッチセンサ14a〜14dにより検知されるユーザの指の複数の位置の組み合わせに応じて、主表示画面に表示する画像を変化させる処理を実行する。このような処理を実行するため、携帯型画像表示装置1は、機能的に、図3に示すように、検知位置・情報取得部40と、操作種別判定部42と、表示画像制御処理部44と、を含んでいる。これらの機能は、制御部30が記憶部32に格納されたプログラムを実行することにより実現される。このプログラムは、例えば光ディスクやメモリカード等のコンピュータ読み取り可能な各種の情報記憶媒体に格納されて提供されてもよいし、インターネット等の通信ネットワークを介して提供されてもよい。
Hereinafter, a specific example of processing executed by the
検知位置・情報取得部40は、タッチセンサ14a〜14dがユーザの指の位置を検知して出力する座標値を取得する。本実施形態において、タッチセンサ14a〜14dのそれぞれは、ユーザの指が触れた位置を検知した場合に、その位置を示す座標値を所定時間おきに出力する。なお、ここでは各タッチセンサが出力する座標値は、直線状の検知領域内の位置を示す一次元の値であることとする。検知位置・情報取得部40は、4つのタッチセンサのそれぞれが出力する座標値を所定時間おきに取得する。これによって、4つのタッチセンサに対応して、ユーザの指の位置の動き(時間変化)を示す最大で4個の座標値列が得られる。また、検知位置・情報取得部40は、検知位置を示す座標値だけでなく、その位置をユーザが押さえる強さを示す圧力値を取得してもよい。この場合、検知位置・情報取得部40は、この圧力値が所定の閾値以上となっている座標値だけを、ユーザの指が接触している位置を示す座標値として採用することとしてもよい。
The detection position /
操作種別判定部42は、検知位置・情報取得部40が取得したユーザの指の位置の動きを示す複数の座標値列に基づいて、ユーザが実行する操作の種別を判定する。例えば操作種別判定部42は、まず4つのタッチセンサのそれぞれについて、予め定められた期間にわたってユーザの指が触れ続け、かつその期間内にユーザの指が所定量以上動いたか否かを判定する。そして、ユーザの指が所定量以上動いたと判定されるタッチセンサが複数ある場合に、これらタッチセンサの組み合わせと、ユーザの指の動きの方向(すなわち、座標値列内において座標値が増大したか、あるいは減少したか)とに基づいて、ユーザによる操作の種別を判定する。これにより、複数のタッチセンサが検知するユーザの指の位置それぞれの動き(ここでは動く向き)の組み合わせに応じて、操作種別の判定を行うことができる。
The operation
表示画像制御処理部44は、操作種別判定部42によって判定される操作種別に応じて、主表示画面に表示する画像を変化させる。具体的には、例えば画面に表示されている画像を拡大又は縮小したり、左右上下の方向にスクロール(平行移動)させたりする画像処理を実行する。
The display image
以下、ユーザ操作の種別に応じた画像の変化の具体例について、図4から図9までの各図に基づいて説明する。なお、これらの図においては、第1表示画面12aを主表示画面とし、その外周を構成する4辺に沿って実際には筐体10の側面に配置されている各タッチセンサを、第1表示画面12aの各辺に並べて模式的に表している。また、ユーザの指の動きを各タッチセンサ上の矢印で示している。
Hereinafter, a specific example of the change of the image according to the type of user operation will be described with reference to FIGS. In these figures, the
図4は、ユーザの操作に応じて制御部30が第1表示画面12aに表示されている画像を左右方向にスクロールさせる場合の例について、示している。この図の例では、表示画面の左右方向に沿って配置された第1タッチセンサ14a及び第3タッチセンサ14cの双方が、表示画面に向かって左方向(すなわち、X軸負方向)にユーザの指が動く動きを検知している。この場合、制御部30は、第1表示画面12aに表示されている画像を、ユーザの指の動く方向と同じ左方向に向けてスクロールさせる処理を実行する。逆に第1タッチセンサ14a及び第3タッチセンサ14cが、表示画面に向かって右方向(X軸正方向)へのユーザの指の動きを検知した場合、制御部30は、第1表示画面12aに表示されている画像を右方向に向けてスクロールさせる。
FIG. 4 shows an example in which the
図5は、第1表示画面12aに表示されている画像を上下方向にスクロールさせる場合の例について、示している。この図に示されるように、表示画面の上下方向に沿って配置された第2タッチセンサ14b及び第4タッチセンサ14dにより、表示画面に向かって上方向(Y軸正方向)へのユーザの指の動きが検知された場合、制御部30は、第1表示画面12aに表示されている画像を上方向に向けてスクロールさせる。また、下方向(Y軸負方向)へのユーザの指の動きが検知された場合、制御部30は、表示画像を下方向に向けてスクロールさせる。
FIG. 5 shows an example in which the image displayed on the
図6は、ユーザが画像の縮小を指示する場合の例について、示している。この図の例では、第1タッチセンサ14aがX軸正方向へのユーザの指の動きを、第2タッチセンサ14bがY軸負方向へのユーザの指の動きを、それぞれ検知している。すなわち、互いに隣接する2つのタッチセンサ同士が、いずれも他方のタッチセンサに近づく向きのユーザの指の動きを検知していることになる。この場合、制御部30は、第1表示画面12aに表示された画像を縮小する処理を実行する。同様に、第2タッチセンサ14bがY軸正方向、第3タッチセンサ14cがX軸正方向へのユーザの指の動きをそれぞれ検知した場合や、第3タッチセンサ14cがX軸負方向、第4タッチセンサ14dがY軸正方向へのユーザの指の動きをそれぞれ検知した場合、また第4タッチセンサ14dがY軸負方向、第1タッチセンサ14aがX軸負方向へのユーザの指の動きをそれぞれ検知した場合にも、同様に、画像の縮小処理を実行することとしてもよい。
FIG. 6 shows an example in which the user instructs to reduce the image. In the example of this figure, the
逆に、隣接する2つのタッチセンサのそれぞれが、いずれも他方のタッチセンサから離れる向きのユーザの指の動きを検知した場合、制御部30は、第1表示画面12aに表示されている画像を拡大する処理を実行する。図7は、ユーザによるこのような画像拡大の指示の一例として、第4タッチセンサ14dがY軸正方向へのユーザの指の動きを検知するとともに、第1タッチセンサ14aがX軸正方向へのユーザの指の動きを検知している場合の例について示している。このように、前述した画像の縮小の指示と逆方向へのユーザの指の動きの組み合わせが検知された場合に、制御部30は第1表示画面12aに表示されている画像を拡大する処理を実行する。
Conversely, when each of the two adjacent touch sensors detects the movement of the user's finger in a direction away from the other touch sensor, the
図8及び図9は、回転の指示を行う際のユーザの指の動きの一例を示している。図8の例では、互いに対向する第1タッチセンサ14a及び第3タッチセンサ14cが、互いに逆向きのユーザの指の動きを検知している。すなわち、第1タッチセンサ14aはX軸正方向、第3タッチセンサ14cはX軸負方向へのユーザの指の動きを検知している。これに応じて、制御部30は、第1表示画面12aに表示されている画像を反時計回りに回転させる処理を行う。また、これとは逆に、第1タッチセンサ14aがX軸負方向、第3タッチセンサ14cがX軸正方向へのユーザの指の動きを検知した場合には、表示画像を時計回りに回転させる処理を行う。
8 and 9 show an example of the movement of the user's finger when a rotation instruction is given. In the example of FIG. 8, the
また、図9は、やはり互いに対向する第2タッチセンサ14b及び第4タッチセンサ14dが、互いに逆向きのユーザの指の動きを検知している例を示している。この図の例では、第2タッチセンサ14bはY軸正方向、第4タッチセンサ14dはY軸負方向へのユーザの指の動きを検知しており、これに応じて制御部30は表示画像を反時計回りに回転させる。また、第2タッチセンサ14bがY軸負方向、第4タッチセンサ14dがY軸正方向へのユーザの指の動きを検知した場合、制御部30は、逆に表示画像を時計回りに回転させる。
FIG. 9 shows an example in which the
なお、以上の例においては、第1表示画面12aが主表示画面であると仮定したが、第2表示画面12bが主表示画面として選択されているときにも、制御部30が同様の処理を実行することにより、ユーザは表示画面に表示されている画像を変化させる操作入力を行うことができる。ただし、この場合、制御部30は、どちらの表示画面が主表示画面として選択されているか、また主表示画面に対してどのような向きで画像が表示されているかに応じて、各タッチセンサが検出する指の位置の動く向きと、画像のスクロール方向や回転方向との対応関係を変化させることとする。これにより、ユーザが指を動かした方向に合わせて、画像を変化させることができる。
In the above example, it is assumed that the
また、以上の例において、制御部30は、各タッチセンサにより検知されるユーザの指の動く向きだけでなく、その移動量に応じて、第1表示画面12aに表示する画像を変化させてもよい。例えば、ユーザの指が動いた量に応じて、画像を変化させる際におけるスクロール量やスクロール速度、拡大率・縮小率や拡大縮小の速度、回転量や回転速度などを変化させてもよい。さらに、以上の例においては、制御部30は主表示画面に表示されている画像の全体をスクロールしたり、拡大・縮小したり、回転したりすることとしたが、これに限らず、表示されている画像の一部や、画像内に配置された操作対象のオブジェクトなどを、ユーザの指の動きに応じて移動させたり、拡大・縮小したり、回転したりする処理を実行することにより、主表示画面に表示する画像を変化させてもよい。
In the above example, the
また、これまでの説明では、複数の指の位置それぞれの動きの組み合わせに応じて表示画像を変化させる例について説明したが、これに限らず、制御部30は、例えば予め定められた複数の位置に対してユーザが単に指を触れる操作に応じて、表示画像を変化させる各種の処理を実行してもよい。
In the description so far, the example in which the display image is changed in accordance with the combination of the movements of the positions of the plurality of fingers has been described. However, the present invention is not limited thereto, and the
さらに、これまでの説明では、タッチセンサ14a〜14dは、いずれもユーザの指が触れる位置を1箇所だけ検知することとしている。しかしながら、これに限らず、タッチセンサ14a〜14dのそれぞれは、同時期に複数の指が触れる場合に、これら複数の指それぞれの位置を検知する多点検知が可能なものであってもよい。この場合、制御部30は、一つのタッチセンサが検知する複数の指の位置の組み合わせに応じて、主表示画面に表示する画像を変化させることとしてもよい。
Further, in the description so far, the
具体的に、一つのタッチセンサによって複数の指の位置が検知される場合、検知位置・情報取得部40は、当該タッチセンサが出力する複数の座標値を取得する。そして、取得した複数の座標値の間の大小(すなわち、それぞれの座標値が示す検知領域内の位置の順序)や、前回検知された指の位置との間の距離などの情報を用いて、取得した複数の座標値のそれぞれを、前回タッチセンサが出力した座標値のうち、ユーザの同じ指が触れた位置を示すと推定される座標値と関連づける。これによって、検知位置・情報取得部40は、一つのタッチセンサの出力に基づいて、ユーザの複数の指のそれぞれについて、その動きを示す複数の座標値列を取得できる。この複数の座標値列を、前述した例において複数のタッチセンサそれぞれが出力する座標値に基づいて取得された複数の座標値列と同じように用いることによって、操作種別判定部42は、ユーザが実行する操作の種別を判定する。
Specifically, when the positions of a plurality of fingers are detected by one touch sensor, the detection position /
図10は、このような多点検知型のタッチセンサにより検知されるユーザの指の動きの一例を示している。この図の例では、第1タッチセンサ14aが、ユーザの2本の指が互いに近づく動きを検知している。この場合、図6の例と同様に、表示画像制御処理部44は、表示画像を縮小する処理を実行する。また、逆に2本の指が互いに離れる動きを検知した場合には、表示画像制御処理部44は、表示画像を拡大する処理を実行する。なお、第1タッチセンサ14aに限らず、他の3つのタッチセンサが同様のユーザの指の動きを検知することにより、表示画像が縮小又は拡大されることとしてもよい。
FIG. 10 shows an example of the movement of the user's finger detected by such a multipoint detection type touch sensor. In the example of this figure, the
なお、このようにタッチセンサが多点検知型の場合、各タッチセンサからの出力に対して、位置の変化しない座標値列と、位置が時間とともに変化する座標値列と、が混在する複数の座標値列が取得される場合がある。このような場合、操作種別判定部42は、位置の変化しない座標値列を、ユーザが筐体10を把持することによってユーザの手が触れている位置であると判定して、このような座標値列を操作種別判定の対象から除外することとしてもよい。こうすれば、タッチセンサがユーザの意図しない指や手のひらの接触を検知してしまっている場合にも、ユーザがタッチセンサ上で指を動かす操作だけを対象として、図4から図9までの図で例示したような複数のタッチセンサに対するユーザの操作を特定することができる。
When the touch sensor is a multi-point detection type as described above, a plurality of coordinate value sequences in which the position does not change and a coordinate value sequence in which the position changes with time are mixed for the output from each touch sensor. A coordinate value sequence may be acquired. In such a case, the operation
また、制御部30は、1つのタッチセンサがユーザの1本の指の動きを検知しただけの場合にも、当該検知されたユーザの指の位置に応じて各種の処理を実行することとしてもよい。例えば制御部30は、前述した表示画像を上下左右のいずれかにスクロールさせる図4や図5の例と同様の処理を、いずれか一つのタッチセンサによりユーザの指の動きが検知される場合に実行してもよい。また、制御部30は、1つのタッチセンサによりユーザの指が単に予め定められた位置に接触したことが検知された場合にも、各種の処理を実行してよい。一例として、携帯型画像表示装置1がカメラデバイスを備えている場合、一般的なカメラにおいてシャッターが設けられる位置をユーザが所定の強さを超える圧力で押さえたことが検知されたときに、制御部30は、このカメラデバイスによる画像の撮像処理を実行してもよい。
Further, even when one touch sensor only detects the movement of one finger of the user, the
ここで、ユーザによる実際の指の動きを判別するために、検知位置・情報取得部40が出力する複数の座標値列に対して操作種別判定部42が実行する処理の例について、説明する。なお、以下の例では、タッチセンサ14a〜14dは多点検知型のセンサであって、検知位置・情報取得部40は、各タッチセンサについて複数の座標値列を出力可能であることとする。
Here, an example of processing executed by the operation
まず、操作種別判定部42は、各座標値列に対して、所定のカットオフ周波数(例えば5Hz程度)以下の周波数成分だけを通過させるローパスフィルタ処理を実行する。これにより、ユーザの指の検知位置を示す座標値列から、手ぶれなどによって生じる比較的高い周波数の信号成分が除去される。
First, the operation
続いて操作種別判定部42は、それぞれローパスフィルタ処理がなされた複数の座標値列を、所定の基準に従って並べ替える。この並べ替えの順序は、ユーザが何らかの操作入力を行う意図でタッチセンサに指を触れたことによって得られた可能性が高い座標値ほど、順位が高くなるような順序である。具体的に、例えば操作種別判定部42は、以下に列挙するような条件に従って各座標値列の指標値を算出し、この算出された指標値の順に座標値列を並べ替える。一例として、この指標値は、座標値列を構成する各座標値を検知したときに併せて検知された圧力値が高い座標値列ほど、高く算出される。これにより、ユーザの指が意図せずタッチセンサに触れてしまうことによって得られる座標値列の順位は低くなる。また、座標値列によって示される検知位置が比較的同じ位置に安定して存在している、または一方向に向けて安定的に変化している座標値列については、指標値が高く算出される。すなわち、短時間に極端に大きく位置が変化している座標値列や、位置の変化する方向が短時間に繰り返し変化している座標値列は、誤検出などによって生じた可能性があるので、指標値が低く算出される。また、当該座標値列によって示される検知位置の近傍に、他の座標値列による検知位置が存在しない座標値列(すなわち、他から独立した座標値列)の指標値を、高く算出する。こうすれば、複数の座標値列によって示される検知位置が比較的狭い範囲に密接している場合、このような座標値列はユーザが携帯型画像表示装置1を把持することによって得られるものと想定されるので、このような座標値列の指標値を低くすることができる。また、各座標値列を構成する座標値の数(すなわち、ユーザの指の接触が継続している期間)を、指標値の算出に用いてもよい。
Subsequently, the operation
さらに、操作種別判定部42は、この並べ替えられた順序に従って各座標値列を評価して、各座標値列が所定の操作パターンに該当するか否かを判別することによって、ユーザによる操作種別の判定を行う。こうすれば、ユーザが意図的にタッチセンサに指を触れたことによって得られたと想定される座標値列を優先的に判定対象として、操作種別の判定を行うことができる。このとき、判定の対象となる操作種別にも、予め優先順位が定められていることとしてもよい。すなわち、携帯型画像表示装置1は、判別対象となる複数の操作パターンのそれぞれに対して、優先順位を関連付けたテーブルを予め記憶しておく。そして、複数の操作パターンのそれぞれについて、優先順位の高い操作パターンから順に、当該操作パターンに該当する座標値列があるか否かを判定する。さらに、この各座標値列が当該操作パターンに該当するか否かの判定を、各座標値列について前述した並べ替えを行った順序で行うこととする。この操作パターンの順序の具体例としては、優先順位の高いものから順に、ユーザの2本以上の指の動きによる操作、1本の指の動きによる操作、1本の指が所定位置に触れる操作、1本の指が所定位置から離れる操作、といった順序が挙げられる。そして、この順序で操作種別の判定を行った結果、最初に該当する座標値列が存在すると判定された操作パターンを、ユーザが実際に行った操作入力であると判定する。こうすれば、より誤検出のおそれが低い操作を優先してユーザの操作として判定することができる。また、2本以上の指の動きによる操作や1本の指の動きによる操作などがそれぞれ複数種類ある場合、これら複数種類の操作パターンの間の優先順位も定められていることとしてもよい。また、この優先順位は、アプリケーションプログラムによって実行中の処理の内容に応じて変化することとしてもよい。こうすれば、実行中の処理の内容(状態)によって、ユーザが実行する可能性が低いと思われる操作や、誤判定してしまうことを避けたい操作(処理内容を最終的に決定するための操作など)の優先順位を低くすることができる。
Further, the operation
なお、各座標値列が所定の操作パターンに該当するか否かの判定を操作種別判定部42が行う際には、検知位置が所与の遊び量を超える量だけ変化することを、当該操作パターンに該当するか否かの判定条件に加えてもよい。こうすれば、ユーザの意図に反してわずかにユーザの指がタッチセンサに触れてしまった場合などに、ユーザがタッチセンサ上で所定の向きに指を動かす操作を行ったと判定してしまうことを避けることができる。なお、この遊び量は、複数の操作パターンの種別ごとに、互いに異なる値であってもよい。例えば図5に例示するような互いに離れたタッチセンサに対する操作パターンと、図6に例示するような互いに隣接するタッチセンサに対する操作パターンとでは、遊び量を変化させてもよい。
When the operation
以上説明した本実施の形態によれば、表示画面の外周に沿って設けられた複数のタッチセンサのそれぞれにより検知される指の位置の組み合わせに応じて、当該表示画面に表示される画像が変化する。これにより、ユーザは、表示画面に対応する複数のタッチセンサ上の位置を指で触ることで、表示画面に表示された画像に対して、容易に、かつ直感的に理解しやすい態様で操作入力を行うことができる。また、複数のタッチセンサにより複数の指の位置を検知し、その組み合わせに応じて画像を変化させることによって、本実施形態に係る携帯型画像表示装置1は、ユーザによる多様な種別の操作入力を受け付けることができる。さらに、複数のタッチセンサは表示画面の外周に沿って設けられているので、ユーザがこれらのタッチセンサを指で触って操作する際に、表示画面が指で隠れてしまうことがなく、画面の閲覧性を損ねにくくすることができる。
According to the present embodiment described above, the image displayed on the display screen changes according to the combination of finger positions detected by each of the plurality of touch sensors provided along the outer periphery of the display screen. To do. As a result, the user can easily and intuitively input an operation on the image displayed on the display screen by touching the position on the plurality of touch sensors corresponding to the display screen with a finger. It can be performed. In addition, by detecting the positions of a plurality of fingers with a plurality of touch sensors and changing an image in accordance with the combination, the portable
なお、本発明の実施の形態は以上説明したものに限られない。 The embodiments of the present invention are not limited to those described above.
例えば、携帯型画像表示装置1の筐体10の各側面にタッチセンサを設ける場合、筐体の側面を、表示画面が設けられた表面及び当該側面の双方に平行な方向から見て凹状になるように形成して、タッチセンサをこの凹部の底面に沿って直線状に配置することとしてもよい。図11は、このように側面が凹状に形成された携帯型画像表示装置の断面形状を示している。なお、この図に示される携帯型画像表示装置は、側面が凹状に形成されているほかは、図1に示す携帯型画像表示装置と同様の構造をしており、同様に各表示画面やタッチセンサが配置されていることとしている。また、この図においては、各表示画面に垂直で、第1タッチセンサ14a及び第3タッチセンサ14cを通る平面で携帯型画像表示装置1を切った様子が示されている。このようにタッチセンサを凹部の底面に沿って配置すれば、同図に示されるように、ユーザが意図的にタッチセンサに触れようとしたときにはタッチセンサに指を接触させることができ、一方でユーザが単に筐体を把持している箇所では、意図せずにユーザの指や手のひらがタッチセンサに触れてしまわないようにすることができる。
For example, when a touch sensor is provided on each side surface of the
また、以上説明した例においては、各タッチセンサを筐体10の側面に設けることとしている。しかしながら、タッチセンサは、筐体の各表示画面と同じ面上において、当該表示画面の外周を構成する各辺に隣接して設けられてもよい。また、タッチセンサは必ずしも矩形の外周を構成する4辺全てに沿って設けられていなくともよい。例えば一方の長辺と一方の短辺など、少なくとも2辺のそれぞれに沿って2つのタッチセンサが設けられていれば、これらタッチセンサのそれぞれが検知するユーザの指の位置の組み合わせに応じて制御部30が表示画面に表示する画像を変化させることにより、ユーザは表示画面に対する拡大や縮小などの各種の操作を直感的に行うことができる。
Further, in the example described above, each touch sensor is provided on the side surface of the
1 携帯型画像表示装置、10 筐体、12a 第1表示画面、12b 第2表示画面、14a〜14d タッチセンサ、16a及び16b 遠赤外線センサ、18 加速度センサ、20 ジャイロセンサ、30 制御部、32 記憶部、34 画像処理部、40 検知位置・情報取得部、42 操作種別判定部、44 表示画像制御処理部。
DESCRIPTION OF
Claims (7)
前記筐体の表面に設けられた略矩形の表示画面と、
前記筐体の互いに対向する2つの側面のそれぞれに設けられ、それぞれユーザの指が触れた位置を検知する2つのタッチセンサと、
前記2つのタッチセンサが互いに逆向きの指の動きを検知した場合に、前記表示画面に表示する画像を回転させる表示画像制御手段と、
を含むことを特徴とする携帯型画像表示装置。 A substantially rectangular flat-plate housing;
A substantially rectangular display screen provided on the surface of the housing;
It said set to each of the two sides facing each other of the housing vignetting, and two touch sensors for detecting the position where the user's finger touches respectively,
Display image control means for rotating an image to be displayed on the display screen when the two touch sensors detect movements of fingers in opposite directions ;
A portable image display device comprising:
前記2つのタッチセンサのそれぞれについて、当該タッチセンサが所定時間おきに検知した位置を示す座標値からなる1又は複数の座標値列を取得する取得手段をさらに含み、
前記表示画像制御手段は、前記取得された座標値列のうち、位置の変化しない座標値列を除外し、位置の変化する座標値列が示すユーザの指の動きに応じて、前記表示画面に表示する画像を変化させる
ことを特徴とする携帯型画像表示装置。 The portable image display device according to claim 1 ,
For each of the two touch sensors, it further comprises an acquisition means for acquiring one or a plurality of coordinate value sequences consisting of coordinate values indicating positions detected by the touch sensor at predetermined time intervals,
The display image control means excludes the coordinate value sequence whose position does not change from the acquired coordinate value sequence, and displays the display screen according to the movement of the user's finger indicated by the coordinate value sequence whose position changes. A portable image display device characterized by changing an image to be displayed.
前記2つのタッチセンサのそれぞれについて、当該タッチセンサが所定時間おきに検知した位置を示す座標値からなる1又は複数の座標値列を取得する取得手段をさらに含み、
前記表示画像制御手段は、前記取得された座標値列のそれぞれについて、当該座標値列がユーザの操作入力によって得られた可能性を示す指標値を算出し、当該算出された指標値の順序にしたがって、各座標値列が示すユーザの指の動きが複数の操作パターンのうちのどの操作パターンに該当するかを判別し、当該判別した操作パターンに応じて前記表示画面に表示する画像を変化させる
ことを特徴とする携帯型画像表示装置。 The portable image display device according to claim 1 ,
For each of the two touch sensors, it further comprises an acquisition means for acquiring one or a plurality of coordinate value sequences consisting of coordinate values indicating positions detected by the touch sensor at predetermined time intervals,
The display image control unit calculates, for each of the acquired coordinate value sequences, an index value indicating the possibility that the coordinate value sequence is obtained by a user's operation input, and sets the calculated index value in the order of the calculated index values. Therefore, it is determined which of the plurality of operation patterns the user's finger movement indicated by each coordinate value sequence corresponds to, and the image displayed on the display screen is changed according to the determined operation pattern. A portable image display device characterized by that.
前記2つのタッチセンサのそれぞれは、前記筐体の側面に形成された凹部内に配置される
ことを特徴とする携帯型画像表示装置。 The portable image display device according to any one of claims 1 to 3 ,
Each of said two touch sensors is arrange | positioned in the recessed part formed in the side surface of the said housing | casing. The portable image display apparatus characterized by the above-mentioned.
前記筐体の表面に設けられた略矩形の表示画面と、
前記筐体の互いに対向する2つの側面のそれぞれに設けられ、それぞれユーザの指が触れた位置を検知する2つのタッチセンサと、
を備える携帯型画像表示装置の制御方法であって、
前記2つのタッチセンサが互いに逆向きの指の動きを検知した場合に、前記表示画面に表示する画像を回転させるステップ、
を含むことを特徴とする携帯型画像表示装置の制御方法。 A substantially rectangular flat-plate housing;
A substantially rectangular display screen provided on the surface of the housing;
It said set to each of the two sides facing each other of the housing vignetting, and two touch sensors for detecting the position where the user's finger touches respectively,
A method for controlling a portable image display device comprising:
A step of rotating an image displayed on the display screen when the two touch sensors detect movements of fingers in opposite directions ;
A control method for a portable image display device, comprising:
前記筐体の表面に設けられた略矩形の表示画面と、
前記筐体の互いに対向する2つの側面のそれぞれに設けられ、それぞれユーザの指が触れた位置を検知する2つのタッチセンサと、
を備える携帯型画像表示装置としてコンピュータを機能させるためのプログラムであって、
前記2つのタッチセンサが互いに逆向きの指の動きを検知した場合に、前記表示画面に表示する画像を回転させる表示画像制御手段、
として前記コンピュータを機能させるためのプログラム。 A substantially rectangular flat-plate housing;
A substantially rectangular display screen provided on the surface of the housing;
It said set to each of the two sides facing each other of the housing vignetting, and two touch sensors for detecting the position where the user's finger touches respectively,
A program for causing a computer to function as a portable image display device comprising:
Display image control means for rotating an image to be displayed on the display screen when the two touch sensors detect movements of fingers in opposite directions ;
A program for causing the computer to function as
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008184858A JP5205157B2 (en) | 2008-07-16 | 2008-07-16 | Portable image display device, control method thereof, program, and information storage medium |
US13/003,751 US8854320B2 (en) | 2008-07-16 | 2009-03-25 | Mobile type image display device, method for controlling the same and information memory medium |
PCT/JP2009/056004 WO2010007813A1 (en) | 2008-07-16 | 2009-03-25 | Mobile type image display device, method for controlling the same and information memory medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008184858A JP5205157B2 (en) | 2008-07-16 | 2008-07-16 | Portable image display device, control method thereof, program, and information storage medium |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2010026638A JP2010026638A (en) | 2010-02-04 |
JP2010026638A5 JP2010026638A5 (en) | 2011-09-01 |
JP5205157B2 true JP5205157B2 (en) | 2013-06-05 |
Family
ID=41732440
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008184858A Active JP5205157B2 (en) | 2008-07-16 | 2008-07-16 | Portable image display device, control method thereof, program, and information storage medium |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5205157B2 (en) |
Families Citing this family (31)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5265433B2 (en) * | 2009-03-27 | 2013-08-14 | ソフトバンクモバイル株式会社 | Display device and program |
JP2010245843A (en) * | 2009-04-06 | 2010-10-28 | Canon Inc | Image display device |
JP2011048717A (en) * | 2009-08-28 | 2011-03-10 | Shin Etsu Polymer Co Ltd | Electronic equipment with variable resistance device, and computer program |
JP2011086035A (en) * | 2009-10-14 | 2011-04-28 | Nec Corp | Portable device, and image display control method, and device therefor |
JP2011145829A (en) * | 2010-01-13 | 2011-07-28 | Buffalo Inc | Operation input device |
KR101119835B1 (en) * | 2010-03-25 | 2012-02-28 | 이노디지털 주식회사 | Remote controller having user interface of touch pad |
JP5271950B2 (en) * | 2010-03-29 | 2013-08-21 | 株式会社エヌ・ティ・ティ・ドコモ | Mobile device |
DE102010019841A1 (en) * | 2010-05-07 | 2011-11-10 | Ident Technology Ag | Printed circuit board for display and display module with display and printed circuit board |
JP2012128668A (en) * | 2010-12-15 | 2012-07-05 | Nikon Corp | Electronic device |
JP2012145867A (en) * | 2011-01-14 | 2012-08-02 | Nikon Corp | Electronic equipment |
JP2012174247A (en) * | 2011-02-24 | 2012-09-10 | Kyocera Corp | Mobile electronic device, contact operation control method, and contact operation control program |
JP5665601B2 (en) * | 2011-02-24 | 2015-02-04 | 京セラ株式会社 | Electronic device, contact operation control program, and contact operation control method |
JP5714935B2 (en) * | 2011-02-24 | 2015-05-07 | 京セラ株式会社 | Portable electronic device, contact operation control method, and contact operation control program |
JP5806822B2 (en) * | 2011-02-24 | 2015-11-10 | 京セラ株式会社 | Portable electronic device, contact operation control method, and contact operation control program |
JP2012194810A (en) * | 2011-03-16 | 2012-10-11 | Kyocera Corp | Portable electronic apparatus, method for controlling contact operation, and contact operation control program |
JP2012243204A (en) * | 2011-05-23 | 2012-12-10 | Nikon Corp | Electronic device and image display method |
KR101356743B1 (en) | 2011-06-28 | 2014-02-03 | (주)메이벨솔루션 | Tochtoc terminal |
JP5718182B2 (en) * | 2011-07-15 | 2015-05-13 | レノボ・シンガポール・プライベート・リミテッド | Input device |
JP5766083B2 (en) * | 2011-09-28 | 2015-08-19 | 京セラ株式会社 | Portable electronic devices |
CN103947286B (en) * | 2011-09-30 | 2019-01-01 | 英特尔公司 | For refusing the mobile device and method of touch sensor contact unintentionally |
JP5776525B2 (en) * | 2011-12-05 | 2015-09-09 | 株式会社デンソー | Input device |
WO2013101220A1 (en) | 2011-12-30 | 2013-07-04 | Intel Corporation | Mobile device operation using grip intensity |
CN102629185A (en) * | 2012-02-29 | 2012-08-08 | 中兴通讯股份有限公司 | Processing method of touch operation and mobile terminal |
JP2013235359A (en) * | 2012-05-08 | 2013-11-21 | Tokai Rika Co Ltd | Information processor and input device |
EP2730983A1 (en) * | 2012-11-13 | 2014-05-14 | ETA SA Manufacture Horlogère Suisse | Activation mode of an electronic watch |
JP5874625B2 (en) * | 2012-12-20 | 2016-03-02 | カシオ計算機株式会社 | INPUT DEVICE, INPUT OPERATION METHOD, CONTROL PROGRAM, AND ELECTRONIC DEVICE |
US20150363039A1 (en) * | 2013-02-27 | 2015-12-17 | Nec Corporation | Terminal device, information display method, and recording medium |
JP2014191460A (en) * | 2013-03-26 | 2014-10-06 | Fujifilm Corp | Portable type image display terminal and actuation method of the same |
JP2015005182A (en) * | 2013-06-21 | 2015-01-08 | カシオ計算機株式会社 | Input device, input method, program and electronic apparatus |
JP6321590B2 (en) * | 2015-07-29 | 2018-05-09 | 東芝テック株式会社 | Order reception system |
JP6783003B1 (en) * | 2019-11-01 | 2020-11-11 | 将也 実広 | Electronics, programs and control methods |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11143604A (en) * | 1997-11-05 | 1999-05-28 | Nec Corp | Portable terminal equipment |
US7800592B2 (en) * | 2005-03-04 | 2010-09-21 | Apple Inc. | Hand held electronic device with multiple touch sensing devices |
JP4127982B2 (en) * | 2001-05-28 | 2008-07-30 | 富士フイルム株式会社 | Portable electronic devices |
JP2004206206A (en) * | 2002-12-24 | 2004-07-22 | Casio Comput Co Ltd | Input device and electronic device |
JP2004213451A (en) * | 2003-01-07 | 2004-07-29 | Matsushita Electric Ind Co Ltd | Information processor and frame |
JP2005322087A (en) * | 2004-05-10 | 2005-11-17 | Sharp Corp | Display |
JP4429124B2 (en) * | 2004-09-13 | 2010-03-10 | 富士通コンポーネント株式会社 | Display device with touch input function |
JP5319867B2 (en) * | 2005-09-28 | 2013-10-16 | Kddi株式会社 | Information terminal equipment |
JP4412348B2 (en) * | 2007-04-27 | 2010-02-10 | ソニー株式会社 | Information processing apparatus and information processing method |
JP2009099067A (en) * | 2007-10-18 | 2009-05-07 | Sharp Corp | Portable electronic equipment, and operation control method of portable electronic equipment |
-
2008
- 2008-07-16 JP JP2008184858A patent/JP5205157B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2010026638A (en) | 2010-02-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5205157B2 (en) | Portable image display device, control method thereof, program, and information storage medium | |
WO2010007813A1 (en) | Mobile type image display device, method for controlling the same and information memory medium | |
TWI571790B (en) | Method and electronic device for changing coordinate values of icons according to a sensing signal | |
US10031586B2 (en) | Motion-based gestures for a computing device | |
JP5529700B2 (en) | Information processing apparatus, control method thereof, and program | |
JP6046729B2 (en) | Omni-directional gesture input | |
JP5920869B2 (en) | INPUT CONTROL DEVICE, INPUT CONTROL METHOD, AND INPUT CONTROL PROGRAM | |
JP6021335B2 (en) | Information processing program, information processing apparatus, information processing system, and information processing method | |
JP5846857B2 (en) | Portable information terminal and electronic content display method | |
JP2009140368A (en) | Input device, display device, input method, display method, and program | |
JP2010026064A (en) | Portable image display, control method thereof, program, and information storage medium | |
TWI503700B (en) | Method and apparatus for providing a multi-dimensional data interface | |
JP5429627B2 (en) | Mobile terminal, mobile terminal operation method, and mobile terminal operation program | |
US9367169B2 (en) | Method, circuit, and system for hover and gesture detection with a touch screen | |
US9665232B2 (en) | Information-processing device, storage medium, information-processing method, and information-processing system for enlarging or reducing an image displayed on a display device | |
JP6188377B2 (en) | Display control apparatus, control method thereof, and control program | |
US20160328077A1 (en) | Touch sensor | |
JP5827695B2 (en) | Information processing apparatus, information processing method, program, and information storage medium | |
JP2019096182A (en) | Electronic device, display method, and program | |
JP5841023B2 (en) | Information processing apparatus, information processing method, program, and information storage medium | |
JP2013003748A (en) | Information processor | |
KR101231105B1 (en) | The ui for mobile devices based on motion sensors control system and a method | |
JP2016015078A (en) | Display control device, display control method, and program | |
JP6067838B2 (en) | Method and apparatus for providing 3D input | |
KR101165388B1 (en) | Method for controlling screen using different kind of input devices and terminal unit thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20101124 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20101203 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110714 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110714 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120918 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121025 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130212 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130218 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5205157 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160222 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |