JP5732792B2 - 情報処理装置及び情報処理プログラム - Google Patents
情報処理装置及び情報処理プログラム Download PDFInfo
- Publication number
- JP5732792B2 JP5732792B2 JP2010208771A JP2010208771A JP5732792B2 JP 5732792 B2 JP5732792 B2 JP 5732792B2 JP 2010208771 A JP2010208771 A JP 2010208771A JP 2010208771 A JP2010208771 A JP 2010208771A JP 5732792 B2 JP5732792 B2 JP 5732792B2
- Authority
- JP
- Japan
- Prior art keywords
- acceleration
- plane
- tilt
- projection
- state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
- G06F1/1694—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
- G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
- G06F2200/163—Indexing scheme relating to constructional details of the computer
- G06F2200/1637—Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer
Description
請求項1の発明は、携帯可能であって表示画面を有する情報処理装置の第1の状態における傾き又は加速度を受け付ける第1の受付手段と、前記情報処理装置の第2の状態における傾き又は加速度を受け付ける第2の受付手段と、前記第1の受付手段によって受け付けられた傾き又は加速度と前記第2の受付手段によって受け付けられた傾き又は加速度に基づいて、前記表示画面上の位置を指し示すための印の前記第2の状態における座標を決定する座標決定手段と、前記表示画面に対する操作者による操作の位置を受け付ける操作位置受付手段と、前記操作位置受付手段によって受け付けられた位置と前記座標決定手段によって決定された位置との距離を、予め定められた閾値と比較して、該操作位置受付手段によって受け付けられた位置又は該座標決定手段によって決定された位置を変更する位置変更手段を具備することを特徴とする情報処理装置である。
タッチパネルを用いた操作インタフェースにおいては、指、ペン等がタッチパネル上に接触していること、及びその接触位置を検出するという特性上、様々な制約が発生する。
例えば、パーソナルコンピュータ(PC)によるマウス操作インタフェースでは、画面上のカーソルの位置のみを移動させるような操作があるが、タッチパネル操作インタフェースでは、クリックを伴わないような操作は検出できない。
しかしながら、マウスボタンを押さずにマウスを動かして、画面上のカーソルを特定の位置に移動させる操作を、多くのタッチパネル操作インタフェースでは実現できていない。主にマウス操作を想定したホームページや、ソフトウェアにおいては、例えば特定のボタンを表す領域にマウスカーソルが移動されたことを検知した場合には、そのボタンの表示方法を変えてボタンをクリック可能であることを強調したり、そのボタンの説明を一時的に表示したりして、操作者の利便性を向上することが行われている。しかし、タッチパネル操作インタフェースでは、タッチパネルに接触せずにカーソルを移動させることができないため、そのような処理は行えないようになっている。
図1は、第1の実施の形態の構成例についての概念的なモジュール構成図を示している。
なお、モジュールとは、一般的に論理的に分離可能なソフトウェア(コンピュータ・プログラム)、ハードウェア等の部品を指す。したがって、本実施の形態におけるモジュールはコンピュータ・プログラムにおけるモジュールのことだけでなく、ハードウェア構成におけるモジュールも指す。それゆえ、本実施の形態は、それらのモジュールとして機能させるためのコンピュータ・プログラム(コンピュータにそれぞれの手順を実行させるためのプログラム、コンピュータをそれぞれの手段として機能させるためのプログラム、コンピュータにそれぞれの機能を実現させるためのプログラム)、システム及び方法の説明をも兼ねている。ただし、説明の都合上、「記憶する」、「記憶させる」、これらと同等の文言を用いるが、これらの文言は、実施の形態がコンピュータ・プログラムの場合は、記憶装置に記憶させる、又は記憶装置に記憶させるように制御するの意である。また、モジュールは機能に一対一に対応していてもよいが、実装においては、1モジュールを1プログラムで構成してもよいし、複数モジュールを1プログラムで構成してもよく、逆に1モジュールを複数プログラムで構成してもよい。また、複数モジュールは1コンピュータによって実行されてもよいし、分散又は並列環境におけるコンピュータによって1モジュールが複数コンピュータで実行されてもよい。なお、1つのモジュールに他のモジュールが含まれていてもよい。また、以下、「接続」とは物理的な接続の他、論理的な接続(データの授受、指示、データ間の参照関係等)の場合にも用いる。「予め定められた」とは、対象としている処理の前に定まっていることをいい、本実施の形態による処理が始まる前はもちろんのこと、本実施の形態による処理が始まった後であっても、対象としている処理の前であれば、そのときの状況・状態に応じて、又はそれまでの状況・状態に応じて定まることの意を含めて用いる。
また、システム又は装置とは、複数のコンピュータ、ハードウェア、装置等がネットワーク(一対一対応の通信接続を含む)等の通信手段で接続されて構成されるほか、1つのコンピュータ、ハードウェア、装置等によって実現される場合も含まれる。「装置」と「システム」とは、互いに同義の用語として用いる。もちろんのことながら、「システム」には、人為的な取り決めである社会的な「仕組み」(社会システム)にすぎないものは含まない。
また、各モジュールによる処理毎に又はモジュール内で複数の処理を行う場合はその処理毎に、対象となる情報を記憶装置から読み込み、その処理を行った後に、処理結果を記憶装置に書き出すものである。したがって、処理前の記憶装置からの読み込み、処理後の記憶装置への書き出しについては、説明を省略する場合がある。なお、ここでの記憶装置としては、ハードディスク、RAM(Random Access Memory)、外部記憶媒体、通信回線を介した記憶装置、CPU(Central Processing Unit)内のレジスタ等を含んでいてもよい。
また、カーソル位置決定モジュール120は、携帯情報処理装置300で動作するアプリケーションの一部として実現するように構成してもよい。
また、カーソル位置決定モジュール120を実現するソフトウェアを、サーバーから通信回線であるネットワークを経由して取得し、携帯情報処理装置300で実行させるように構成してもよい。図4は、本実施の形態を具現化した場合のシステム構成例を示す説明図である。携帯情報処理装置300A、携帯情報処理装置300B、携帯情報処理装置300C、Webサーバー410は、通信回線490を介して接続されている。このような構成において、カーソル位置決定モジュール120を実現するソフトウェアを例えばJavaScript(登録商標)として用意し、HTMLなどで表現されているWebページをWebサーバー410上のブラウザソフトウェアで閲覧するときに、そのJavaScriptを動作させることにより、カーソル位置決定モジュール120を実現し得る。
携帯端末100内のタッチセンサ104は、表示画面102に対する操作者による操作の位置を受け付ける。タッチセンサ104は、表示画面102と一体となっており、表示画面102上に表示されたもの(メニュー等)に、操作者が指、ペン等で接触することによって操作を行うための装置である。一般に、タッチセンサ104と一体となった表示画面102は、タッチパネル、タッチスクリーン等ともいわれている(以下、単にタッチパネルともいう)。タッチセンサ104は、指、ペン等の接触した位置を検出する。タッチセンサ104は、抵抗膜方式、静電容量方式、表面弾性波方式、赤外線方式等によって実現され得る。なお、前述の説明では表示画面102の接触された位置を検出するとしたが、例えば、赤外線方式であれば、赤外線が遮られた位置を検出することになる。ただし、赤外線検出の位置を表示画面102の表面上に密着させることによって、接触された位置を検出することと同じこととなるので、以下、表示画面102の接触された位置を検出するという。また、タッチセンサ104と一体となった表示画面102があることによって、マウス等の装置を接続することは不要であるが、必ずしもマウス等の装置の接続を妨げるものではない。
なお、携帯情報処理装置300がほぼ静止又は定速運動をしている場合には、携帯情報処理装置300にかかる加速度は重力加速度のみであり、傾き・加速度センサ106によって検出された加速度ベクトルの向きが重力の向きである。また、携帯情報処理装置300の傾きは、重力の向きから相対的に求められる。
ここで、第1の状態(以下、定常状態ともいう)とは、例えば、予め定められた時間内で検知された傾き又は加速度の変動量が予め定められた範囲内である状態、タッチセンサ104が表示画面102への最新の接触(タッチ操作)を検出したときの状態、操作者の操作によって定常状態であることが指定されたときの状態、又は携帯端末100の電源をオンにしたときの状態等をいう。
また、傾き・加速度受付モジュール128が受け付ける携帯端末100の傾き又は加速度は、携帯端末100におけるx軸、y軸、z軸のそれぞれにおける値であってもよい。
カーソルx座標決定モジュール132は、定常状態決定モジュール130によって決定された携帯端末100の定常状態における傾き又は加速度と傾き・加速度受付モジュール128によって受け付けられた携帯端末100のカーソル位置決定状態における傾き又は加速度に基づいて、カーソルのカーソル位置決定状態におけるx座標を決定する。
カーソルx座標決定モジュール132は、定常状態における傾き又は加速度のxy平面への射影とカーソル位置決定状態における傾き又は加速度のxy平面への射影との角度差及び定常状態における傾き又は加速度のxz平面への射影とカーソル位置決定状態における傾き又は加速度のxz平面への射影との角度差に基づいて、表示画面102上の左右方向における座標(x座標)を決定する。
例えば、カーソルy座標決定モジュール134は、定常状態における傾き又は加速度のyz平面への射影とカーソル位置決定状態における傾き又は加速度のyz平面への射影との角度差に基づいて、表示画面102上の上下方向における座標(y座標)を決定する。
カーソル表示切替モジュール124は、カーソルの位置、操作者の操作に基づいて、カーソル表示モジュール122によるカーソルの表示、非表示を切り替える。例えば、「カーソルの位置に基づいて」とは、予め定められた範囲内にカーソルが移動した場合は、カーソルを非表示の状態に切り替えるようにすることが該当する。「操作者の操作に基づいて」とは、操作者が表示画面102に接触した場合、携帯端末100を傾ける等の操作を行った場合に、カーソルを表示する状態に切り替えるようにすることが該当する。
位置補正モジュール126は、タッチセンサ104によって受け付けられた位置とカーソルx座標決定モジュール132とカーソルy座標決定モジュール134によって決定された位置との距離を、予め定められた閾値と比較して、タッチセンサ104によって受け付けられた位置又はカーソルx座標決定モジュール132とカーソルy座標決定モジュール134によって決定された位置を変更する。例えば、前述のように視覚差等によって、操作者が接触した位置(又は接触したと思っている位置)とカーソルの位置とが異なる場合に、その差を減ずるようにするものである。より具体的には、(1)タッチセンサ104によって受け付けられた位置をカーソルx座標決定モジュール132とカーソルy座標決定モジュール134によって決定された位置に変更すること、(2)カーソルx座標決定モジュール132とカーソルy座標決定モジュール134によって決定された位置をタッチセンサ104によって受け付けられた位置に変更すること、(3)タッチセンサ104によって受け付けられた位置、カーソルx座標決定モジュール132とカーソルy座標決定モジュール134によって決定された位置のいずれか一方又は両者を、両者の位置を用いて変更すること(例えば、両者を結ぶ直線の中間の位置(中間とは、必ずしも両者の1/2の位置でなくてもよく、例えば、タッチセンサ104によって受け付けられた位置に近い3/4の位置等であってもよい)に変更すること)等であってもよい。
ステップS202では、傾き・加速度受付モジュール128が、傾き・加速度センサ106が検出した定常状態における傾き又は加速度を受け付ける。
ステップS204では、定常状態決定モジュール130が、ステップS202で受け付けた傾き又は加速度に基づいて、定常状態における傾き又は加速度を決定する。例えば、定常状態における重力加速度ベクトルを(Sx,Sy,Sz)とする。
ステップS206では、傾き・加速度受付モジュール128が、傾き・加速度センサ106が検出したカーソル位置決定状態における傾き又は加速度を受け付ける。例えば、カーソル位置決定状態における重力加速度ベクトルを(Tx,Ty,Tz)とする。
より詳細に説明する。重力加速度ベクトル(Sx、Sy、Sz)のyz平面への射影と、z軸の正の向きとの角度をA1sとして求める。また、重力加速度ベクトル(Tx、Ty、Tz)のyz平面への射影と、z軸の正の向きとの角度をA1tとして求める。ここで角度の正負は、z軸正方向からy軸負方向への角度が正の90度となるように定義する。
表示画面上のカーソルの、y軸方向の位置Cyを、
Cy = M1 × (A1t − A1s) + P1 (1)式
として求める。このようにカーソルの位置を求めれば、係数M1が正の値であるときは、操作者から見て、携帯情報処理装置300の上部が操作者から離れるように傾ければ、カーソルは上に動き、逆の向きに傾ければカーソルは下に動くことになる。
係数P1は傾きの変化に関わらず予め定められたオフセットを与える効果を持ち、A1tがA1sに等しいときのカーソルのy軸位置を示す。P1の値の例としては、定常時のカーソルのy軸位置、最新のタッチ操作におけるタッチ位置のy座標値、表示画面のy軸方向の中央(図8での原点位置)に相当するy座標値が好ましい。
また、逆に傾ける場合、図7(c)に例示するような状態にした場合、つまり、携帯情報処理装置300の上部を操作者に近づけるように傾けた場合(携帯情報処理装置300を垂直状態に近づける場合)は、図8に例示するようにカーソル802からカーソル806の位置へ移動する。図7(c)は、カーソル位置決定状態における重力加速度ベクトル(Tx、Ty、Tz)のyz平面への射影706と、z軸の正の向きとの角度であるA1tを表している。A1t<A1sの関係にあるので、(1)式のかっこ内は負となり、M1が正であれば、Cyは負の方向へ動くことになる。
より詳細に説明する。重力加速度ベクトル(Sx、Sy、Sz)のxy平面への射影と、x軸の正の向きとの角度をA2s、重力加速度ベクトル(Sx、Sy、Sz)のxz平面への射影と、x軸の正の向きとの角度をA3sとして求める。また、重力加速度ベクトル(Tx、Ty、Tz)のxy平面への射影と、x軸の正の向きとの角度をA2t、重力加速度ベクトル(Tx、Ty、Tz)のxz平面への射影と、x軸の正の向きとの角度をA3tとして求める。ここで角度の正負は、x軸正方向からy軸正方向への角度、x軸正方向からz軸正方向への角度が正の90度となるように定義する。
表示画面上のカーソルの、x軸方向の位置Cxを、
Cx = M2 × (A2t − A2s) + M3 × (A3t − A3s) + P2 (2)式
として求める。
このようにカーソルの位置を求めれば、係数M2が正の値であるときは、操作者から見て、携帯情報処理装置300の上部を右に傾ければ、カーソルは右に動き、逆の向きに傾ければカーソルは左に動くことになる。
また、携帯情報処理装置300の右辺が奥に行くように回転すれば(携帯情報処理装置300の右辺が操作者から離れるように傾ければ)、カーソルは右に動き、逆の向きに回転すればカーソルは左に動くことになる。
係数M2、M3の値に関しては、y軸方向で係数M1について説明したのと同様である。係数P2の値に関しては、y軸方向で係数P1について説明したのと同様である。
また、逆に傾ける場合、図9(c)に例示するような状態にした場合、つまり、携帯情報処理装置300の上部を左側に傾けた場合は、図10に例示するようにカーソル1002からカーソル1006の位置へ移動する。図9(c)は、カーソル位置決定状態における重力加速度ベクトル(Tx、Ty、Tz)のxy平面への射影906と、x軸の正の向きとの角度であるA2tを表している。A2t<A2sの関係にあるので、(2)式の最初のかっこ内は負となり、M2が正であれば、Cxは負の方向へ動くことになる。
また、逆に傾ける場合、図11(c)に例示するような状態にした場合、つまり、携帯情報処理装置300の左辺を奥に回転した場合(携帯情報処理装置300の左辺を操作者から離れるように回転した場合)は、図10に例示するようにカーソル1002からカーソル1006の位置へ移動する。図11(c)は、カーソル位置決定状態における重力加速度ベクトル(Tx、Ty、Tz)のxz平面への射影1106と、x軸の正の向きとの角度であるA3tを表している。A3t<A3sの関係にあるので、(2)式の2番目のかっこ内は負となり、M3が正であれば、Cxは負の方向へ動くことになる。
Cx = M3 × (A3t − A3s) + P2 (3)式
として求めてもよい。これは(2)式の係数M2の値を0として計算することと同等である。こうすることにより、加速度ベクトルのxy平面への射影の大きさが小さい場合は、xy平面上での角度は誤差成分により大きく変わり得るので、操作者の意図と異なる動作を引き起こすことを防止するために採用する。
Cx = M2 × (A2t − A2s) + P2 (4)式
として求めてもよい。これは(2)式の係数M3の値を0として計算することと同等である。こうすることにより、加速度ベクトルのxz平面への射影の大きさが小さい場合は、xz平面上での角度は誤差成分により大きく変わり得るので、操作者の意図と異なる動作を引き起こすことを防止するために採用する。
ステップS214では、カーソル表示モジュール122が、表示画面102上にカーソルを表示する。
ステップS216では、カーソル位置に応じた処理を行う。例えば、カーソルが予め定められたボタン領域に移動されたことを検知した場合には、そのボタン領域の表示方法を変えてボタンをクリック可能であることを強調したり、そのボタンの説明を一時的に表示したりする。
ステップS218では、タッチ位置を検知してタッチ操作が開始されたか否かを判断し、タッチ操作が開始された場合はステップS220へ進み、それ以外の場合はステップS299(終了)へ進む。
ステップS220では、位置補正モジュール126が、ステップS208とステップS210で決定したカーソル位置及びステップS218で検知したタッチ位置を用いて、タッチ位置を補正する。
ステップS222では、タッチ位置に応じた処理を行う。例えば、短時間のタッチであればクリック操作と見なし、タッチ位置がボタンの領域内であれば、ボタンに割り当てられた処理を実行する。
第2の実施の形態である情報処理装置は、携帯可能であって表示画面を有する携帯情報処理装置を操作するものであって、図12の例に示すように、携帯端末1200とカーソル位置決定モジュール1220を有している。携帯端末1200とカーソル位置決定モジュール1220は接続されている。なお、第1の実施の形態と同種の部位には同一符号を付し重複した説明を省略する。携帯端末1200は第1の実施の形態の携帯端末100に、カーソル位置決定モジュール1220は第1の実施の形態のカーソル位置決定モジュール120に、それぞれ該当し、図3から図6の説明は、第2の実施の形態においてもあてはまる。
第2の実施の形態は、携帯情報処理装置の加速度をカーソル位置の決定に用いるものである。
加速度センサ1206は、携帯端末1200の加速度を検出する装置であり、第1の実施の形態の傾き・加速度センサ106の加速度を検出する部分に該当する。例えば、3軸の加速度センサを備えている場合は、加速度は3次元のベクトルとして検出する。
重力による加速度は、携帯情報処理装置300がほぼ静止又は定速運動をしている場合に、加速度センサ1206によって検出される値であり、例えば、定められた時間内で観測された加速度が予め定められた範囲内であったとき、検出されている加速度を重力加速度と見なし、その後のある時刻に観測された加速度と重力加速度との差は、携帯情報処理装置300の運動による加速度(操作者が携帯情報処理装置300を振る等の動かすことによる操作)と見なすことができる。このように求める加速度ベクトルを(Ax, Ay, Az)とする。
加速度受付モジュール1228は、携帯端末1200の上下方向及び左右方向における加速度を受け付ける。前述の加速度ベクトル(Ax, Ay, Az)を受け付ける。
カーソルx座標決定モジュール1232は、予め定められた期間における加速度受付モジュール1228によって受け付けられた上下方向における加速度の和に基づいて、表示画面102のカーソルのx座標を決定する。
表示画面102上のカーソルの時刻tでのx座標は、
Cx = Mx × ∫p(Ax, Fx)dt + Dx (5)式
として求める。
カーソルy座標決定モジュール1234は、予め定められた期間における加速度受付モジュール1228によって受け付けられた左右方向における加速度の和に基づいて、表示画面102のカーソルのy座標を決定する。
表示画面102上のカーソルの時刻tでのy座標は、
Cy = My × ∫p(Ay, Fy)dt + Dy (6)式
として求める。
また、関数p(a, b)は、
p(a, b) = a + b (a ≦ −b) (7)式
p(a, b) = 0 (a > −b かつ a < b) (8)式
p(a, b) = a − b (a ≧ b) (9)式
で定義される関数である。このような関数p(a, b)によって、カーソルの座標を決めることにより、携帯情報処理装置300の加速度の絶対値が小さいとき(Fx、Fyよりも小)には、カーソル座標は変わらず、微小な振動や測定誤差によって操作者の意図に反してカーソルが移動することを防止し得る。また、ある程度より速い動作で装置を振るとカーソルが動き、速く振るほどカーソルの移動量は大きくなる。定数Fx、Fyが大きいほど、振動等による誤動作が少なくなる反面、同じカーソル移動量を得るのに速い動作が必要となる。係数Mx、Myは加速度の大きさに応じてどれだけカーソルを動かすかを決定する。Fx、Fy、Mx、Myの値は、携帯情報処理装置300に予め定められた値としておいてもよいし、操作者の設定に応じて値を変更してもよいし、また操作中の操作内容などに応じて動的に変更してもよい。また、Dx、Dyは、直前のカーソルのx座標、y座標である。
ステップS1302では、加速度受付モジュール1228が、加速度センサ1206が検出した加速度を受け付ける。
ステップS1304では、加速度受付モジュール1228が、x軸方向、y軸方向のそれぞれの加速度を加算する。p(Ax, Fx)、p(Ax, Fx)による値を加算してもよい。
ステップS1306では、加速度受付モジュール1228が、予め定められた期間か否かを判断し、予め定められた期間である場合はステップS1308へ進み、それ以外の場合はステップS1302からの処理を行う。つまり、ステップS1304、ステップS1306によって、∫p(Ax, Fx)dt、∫p(Ay, Fy)dtの計算をする。
ステップS1310では、カーソルy座標決定モジュール1234が、カーソルのy座標を(6)式によって決定する。
ステップS1312では、カーソル表示モジュール122が、カーソルを表示するか否かを判断し、表示する場合はステップS1314へ進み、それ以外の場合はステップS1316へ進む。この判断は、カーソル表示切替モジュール124によって切り替えられた表示又は非表示にしたがう。
ステップS1314では、カーソル表示モジュール122が、表示画面102上にカーソルを表示する。
ステップS1316では、カーソル位置に応じた処理を行う。例えば、カーソルが予め定められたボタン領域に移動されたことを検知した場合には、そのボタン領域の表示方法を変えてボタンをクリック可能であることを強調したり、そのボタンの説明を一時的に表示したりする。
ステップS1318では、タッチ位置を検知してタッチ操作が開始されたか否かを判断し、タッチ操作が開始された場合はステップS1320へ進み、それ以外の場合はステップS1399(終了)へ進む。
ステップS1320では、位置補正モジュール126が、ステップS1308とステップS1310で決定したカーソル位置及びステップS1318で検知したタッチ位置を用いて、タッチ位置を補正する。
ステップS1322では、タッチ位置に応じた処理を行う。例えば、短時間のタッチであればクリック操作と見なし、タッチ位置がボタンの領域内であれば、ボタンに割り当てられた処理を実行する。
なお、図14に示すハードウェア構成は、1つの構成例を示すものであり、本実施の形態は、図14に示す構成に限らず、本実施の形態において説明したモジュールを実行可能な構成であればよい。例えば、一部のモジュールを専用のハードウェア(例えばASIC等)で構成してもよく、一部のモジュールは外部のシステム内にあり通信回線で接続しているような形態でもよく、さらに図14に示すシステムが複数互いに通信回線によって接続されていて互いに協調動作するようにしてもよい。
なお、前述の各種の実施の形態を組み合わせてもよく(例えば、ある実施の形態内のモジュールを他の実施の形態内に適用する、入れ替えする等も含む)、各モジュールの処理内容として背景技術で説明した技術を採用してもよい。
「プログラムを記録したコンピュータ読み取り可能な記録媒体」とは、プログラムのインストール、実行、プログラムの流通などのために用いられる、プログラムが記録されたコンピュータで読み取り可能な記録媒体をいう。
なお、記録媒体としては、例えば、デジタル・バーサタイル・ディスク(DVD)であって、DVDフォーラムで策定された規格である「DVD−R、DVD−RW、DVD−RAM等」、DVD+RWで策定された規格である「DVD+R、DVD+RW等」、コンパクトディスク(CD)であって、読出し専用メモリ(CD−ROM)、CDレコーダブル(CD−R)、CDリライタブル(CD−RW)等、ブルーレイ・ディスク(Blu−ray Disc(登録商標))、光磁気ディスク(MO)、フレキシブルディスク(FD)、磁気テープ、ハードディスク、読出し専用メモリ(ROM)、電気的消去及び書換可能な読出し専用メモリ(EEPROM(登録商標))、フラッシュ・メモリ、ランダム・アクセス・メモリ(RAM)等が含まれる。
そして、前記のプログラム又はその一部は、前記記録媒体に記録して保存や流通等させてもよい。また、通信によって、例えば、ローカル・エリア・ネットワーク(LAN)、メトロポリタン・エリア・ネットワーク(MAN)、ワイド・エリア・ネットワーク(WAN)、インターネット、イントラネット、エクストラネット等に用いられる有線ネットワーク、あるいは無線通信ネットワーク、さらにこれらの組み合わせ等の伝送媒体を用いて伝送させてもよく、また、搬送波に乗せて搬送させてもよい。
さらに、前記のプログラムは、他のプログラムの一部分であってもよく、あるいは別個のプログラムと共に記録媒体に記録されていてもよい。また、複数の記録媒体に分割して
記録されていてもよい。また、圧縮や暗号化など、復元可能であればどのような態様で記録されていてもよい。
102…表示画面
104…タッチセンサ
106…傾き・加速度センサ
120…カーソル位置決定モジュール
122…カーソル表示モジュール
124…カーソル表示切替モジュール
126…位置補正モジュール
128…傾き・加速度受付モジュール
130…定常状態決定モジュール
132…カーソルx座標決定モジュール
134…カーソルy座標決定モジュール
300…携帯情報処理装置
310…表示画面
410…Webサーバー
1200…携帯端末
1206…加速度センサ
1220…カーソル位置決定モジュール
1228…加速度受付モジュール
1232…カーソルx座標決定モジュール
1234…カーソルy座標決定モジュール
Claims (8)
- 携帯可能であって表示画面を有する情報処理装置の第1の状態における傾き又は加速度を受け付ける第1の受付手段と、
前記情報処理装置の第2の状態における傾き又は加速度を受け付ける第2の受付手段と、
前記第1の受付手段によって受け付けられた傾き又は加速度と前記第2の受付手段によって受け付けられた傾き又は加速度に基づいて、前記表示画面上の位置を指し示すための印の前記第2の状態における座標を決定する座標決定手段と、
前記表示画面に対する操作者による操作の位置を受け付ける操作位置受付手段と、
前記操作位置受付手段によって受け付けられた位置と前記座標決定手段によって決定された位置との距離を、予め定められた閾値と比較して、該操作位置受付手段によって受け付けられた位置又は該座標決定手段によって決定された位置を変更する位置変更手段
を具備することを特徴とする情報処理装置。 - 前記第1の受付手段と前記第2の受付手段が受け付ける傾き又は加速度は、前記情報処理装置におけるx軸、y軸、z軸のそれぞれにおける値であり、
前記座標決定手段は、前記第1の状態における傾き又は加速度のyz平面への射影と前記第2の状態における傾き又は加速度のyz平面への射影との角度差に基づいて、前記表示画面上の上下方向における座標を決定し、該第1の状態における傾き又は加速度のxy平面への射影と該第2の状態における傾き又は加速度のxy平面への射影との角度差及び該第1の状態における傾き又は加速度のxz平面への射影と該第2の状態における傾き又は加速度のxz平面への射影との角度差に基づいて、該表示画面上の左右方向における座標を決定し、
前記表示画面は、前記x軸と前記y軸が作る平面と平行であり、
前記「傾き又は加速度のyz平面への射影」とあるのは、「傾きのyz平面への射影」又は「加速度のyz平面への射影」の意であり、
前記「傾き又は加速度のxy平面への射影」とあるのは、「傾きのxy平面への射影」又は「加速度のxy平面への射影」の意であり、
前記「傾き又は加速度のxz平面への射影」とあるのは、「傾きのxz平面への射影」又は「加速度のxz平面への射影」の意であり、
前記傾きは前記情報処理装置の重力方向への向きである
ことを特徴とする請求項1に記載の情報処理装置。 - 前記座標決定手段は、
前記第1の状態における傾き若しくは加速度のxy平面への射影の大きさ又は前記第2の状態における傾き若しくは加速度のxy平面への射影の大きさを、予め定められた閾値と比較して、予め定められた関係を有している場合は、該第1の状態における傾き又は加速度のxz平面への射影と該第2の状態における傾き又は加速度のxz平面への射影との角度差に基づいて、前記表示画面上の左右方向における座標を決定する
ことを特徴とする請求項2に記載の情報処理装置。 - 前記座標決定手段は、
前記第1の状態における傾き若しくは加速度のxz平面への射影の大きさ又は前記第2の状態における傾き若しくは加速度のxz平面への射影の大きさを、予め定められた閾値と比較して、予め定められた関係を有している場合は、該第1の状態における傾き又は加速度のxy平面への射影と該第2の状態における傾き又は加速度のxy平面への射影との角度差に基づいて、該表示画面上の左右方向における座標を決定する
ことを特徴とする請求項2又は3に記載の情報処理装置。 - 前記座標決定手段によって決定された前記表示画面上の座標の位置に、前記印を表示する表示手段
をさらに具備することを特徴とする請求項1から4のいずれか一項に記載の情報処理装置。 - 前記表示手段による印の表示、非表示を切り替える表示切替手段
をさらに具備することを特徴とする請求項5に記載の情報処理装置。 - 前記操作位置受付手段は、操作者より前記表示画面に対する接触位置を受け付ける
ことを特徴とする請求項1に記載の情報処理装置。 - コンピュータを、
携帯可能であって表示画面を有する情報処理装置の第1の状態における傾き又は加速度を受け付ける第1の受付手段と、
前記情報処理装置の第2の状態における傾き又は加速度を受け付ける第2の受付手段と、
前記第1の受付手段によって受け付けられた傾き又は加速度と前記第2の受付手段によって受け付けられた傾き又は加速度に基づいて、前記表示画面上の位置を指し示すための印の前記第2の状態における座標を決定する座標決定手段と、
前記表示画面に対する操作者による操作の位置を受け付ける操作位置受付手段と、
前記操作位置受付手段によって受け付けられた位置と前記座標決定手段によって決定された位置との距離を、予め定められた閾値と比較して、該操作位置受付手段によって受け付けられた位置又は該座標決定手段によって決定された位置を変更する位置変更手段
として機能させることを特徴とする情報処理プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010208771A JP5732792B2 (ja) | 2010-09-17 | 2010-09-17 | 情報処理装置及び情報処理プログラム |
US13/005,590 US8669937B2 (en) | 2010-09-17 | 2011-01-13 | Information processing apparatus and computer-readable medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010208771A JP5732792B2 (ja) | 2010-09-17 | 2010-09-17 | 情報処理装置及び情報処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012064069A JP2012064069A (ja) | 2012-03-29 |
JP5732792B2 true JP5732792B2 (ja) | 2015-06-10 |
Family
ID=45817279
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010208771A Active JP5732792B2 (ja) | 2010-09-17 | 2010-09-17 | 情報処理装置及び情報処理プログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US8669937B2 (ja) |
JP (1) | JP5732792B2 (ja) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4966421B1 (ja) * | 2011-03-31 | 2012-07-04 | 株式会社東芝 | 情報処理装置及び情報処理方法 |
US9230223B2 (en) * | 2011-12-05 | 2016-01-05 | Houzz, Inc. | Consistent presentation of content and passive relevance determination of content relationship in an on-line commerce system |
JP5905783B2 (ja) * | 2012-06-28 | 2016-04-20 | シャープ株式会社 | 画像表示システム |
KR101404380B1 (ko) * | 2012-09-24 | 2014-06-09 | 주식회사 팬택 | 모바일 디바이스 및 모바일 디바이스의 화면 방향 전환 방법 |
JP5585697B2 (ja) * | 2012-10-01 | 2014-09-10 | キヤノンマーケティングジャパン株式会社 | 携帯端末、携帯端末の制御方法、プログラム、および記録媒体 |
TWI582671B (zh) * | 2012-11-15 | 2017-05-11 | 緯創資通股份有限公司 | 光學式觸控裝置和其觸控方法 |
JP6029453B2 (ja) * | 2012-12-21 | 2016-11-24 | 京セラ株式会社 | 携帯端末、カーソル表示制御プログラム、カーソル表示制御方法、カーソル発生制御プログラム、カーソル発生制御方法、アイコン表示プログラムおよびアイコン表示方法 |
EP2749996B1 (en) * | 2012-12-28 | 2018-05-30 | Sony Mobile Communications Inc. | Electronic device and method for improving accuracy of location determination of a user input on a touch panel |
US9165533B2 (en) | 2013-06-06 | 2015-10-20 | Microsoft Technology Licensing, Llc | Display rotation management |
JP6068428B2 (ja) * | 2014-12-25 | 2017-01-25 | シャープ株式会社 | 画像表示システムの制御方法及び制御装置 |
US20160342208A1 (en) * | 2015-05-20 | 2016-11-24 | Immersion Corporation | Haptic effects based on predicted contact |
JP2017068350A (ja) * | 2015-09-28 | 2017-04-06 | 株式会社東海理化電機製作所 | 操作入力装置 |
JP6569546B2 (ja) * | 2016-01-28 | 2019-09-04 | 富士通コネクテッドテクノロジーズ株式会社 | 表示装置、表示制御方法、および表示制御プログラム |
JP7075723B2 (ja) * | 2017-04-17 | 2022-05-26 | 富士通株式会社 | 情報取得装置及びその方法 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1049290A (ja) * | 1996-08-05 | 1998-02-20 | Sony Corp | 情報処理装置および方法 |
JP3063649B2 (ja) | 1996-12-03 | 2000-07-12 | 日本電気株式会社 | 情報表示装置 |
US6115025A (en) * | 1997-09-30 | 2000-09-05 | Silicon Graphics, Inc. | System for maintaining orientation of a user interface as a display changes orientation |
JP2001242845A (ja) | 2000-02-29 | 2001-09-07 | Hitachi Ltd | 携帯型情報端末 |
US6690358B2 (en) * | 2000-11-30 | 2004-02-10 | Alan Edward Kaplan | Display control for hand-held devices |
JP4587616B2 (ja) | 2001-08-21 | 2010-11-24 | シャープ株式会社 | 携帯端末 |
JP2006113859A (ja) * | 2004-10-15 | 2006-04-27 | Nec Corp | 携帯情報端末及びその表示制御方法 |
JP2008140064A (ja) | 2006-11-30 | 2008-06-19 | Toshiba Corp | 情報処理装置 |
JP2009251833A (ja) | 2008-04-03 | 2009-10-29 | Sony Ericsson Mobilecommunications Japan Inc | 入力装置、入力方法、入力制御プログラム、及び携帯端末装置 |
-
2010
- 2010-09-17 JP JP2010208771A patent/JP5732792B2/ja active Active
-
2011
- 2011-01-13 US US13/005,590 patent/US8669937B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US8669937B2 (en) | 2014-03-11 |
US20120068923A1 (en) | 2012-03-22 |
JP2012064069A (ja) | 2012-03-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5732792B2 (ja) | 情報処理装置及び情報処理プログラム | |
JP5703873B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
JP5557316B2 (ja) | 情報処理装置、情報生成方法及びプログラム | |
US20110285631A1 (en) | Information processing apparatus and method of displaying a virtual keyboard | |
US20120284671A1 (en) | Systems and methods for interface mangement | |
US20120001943A1 (en) | Electronic device, computer-readable medium storing control program, and control method | |
RU2598780C2 (ru) | Способ управления вращением экрана и поддерживающие его терминал и воспринимающая касания система | |
US20110221777A1 (en) | Electronic device with motion sensing function and method for executing functions based on movement of electronic device | |
JP5160579B2 (ja) | 表示装置及び画面表示方法 | |
US9141133B2 (en) | Information processing apparatus and display screen operating method for scrolling | |
US20120284668A1 (en) | Systems and methods for interface management | |
EP2902867B1 (en) | Portable apparatus and method for adjusting window size thereof | |
JP2015506520A (ja) | ポータブルデバイス及びその制御方法 | |
WO2009084809A1 (en) | Apparatus and method for controlling screen by using touch screen | |
CN107562335B (zh) | 一种显示区域调整方法及移动终端 | |
CN101676861A (zh) | 具备麦克风的平板电脑以及控制方法 | |
GB2528948A (en) | Activation target deformation using accelerometer or gyroscope information | |
US20130106745A1 (en) | Touch pad operable with multi-objects and method of operating same | |
KR20160026482A (ko) | 모바일 디바이스 및 모바일 디바이스에서 이미지를 투사하는 방법 | |
US20190064947A1 (en) | Display control device, pointer display method, and non-temporary recording medium | |
US9665249B1 (en) | Approaches for controlling a computing device based on head movement | |
JP5800361B2 (ja) | 表示制御装置及びそれを用いた表示装置 | |
JP2005284657A (ja) | 携帯情報端末 | |
JP2004271671A (ja) | 画像表示装置及びそれを備えた端末装置 | |
CN108885556B (zh) | 控制数字输入 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130819 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140529 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140701 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140821 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150317 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150330 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5732792 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |