JP6160724B2 - オブジェクト処理装置、オブジェクト処理方法及びプログラム - Google Patents
オブジェクト処理装置、オブジェクト処理方法及びプログラム Download PDFInfo
- Publication number
- JP6160724B2 JP6160724B2 JP2016030544A JP2016030544A JP6160724B2 JP 6160724 B2 JP6160724 B2 JP 6160724B2 JP 2016030544 A JP2016030544 A JP 2016030544A JP 2016030544 A JP2016030544 A JP 2016030544A JP 6160724 B2 JP6160724 B2 JP 6160724B2
- Authority
- JP
- Japan
- Prior art keywords
- rotation
- finger
- instruction operation
- display screen
- processing apparatus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Description
情報処理装置1は、例えばスマートフォンとして構成される。
入力部17は、表示部16の表示画面に積層されるタッチパネルで構成されており、ユーザの指示操作に応じて各種情報を入力する。入力部17は、後述の図3を参照して説明するように、静電容量式タッチパネル31と、抵抗膜式タッチパネル32と、を備えている。
記憶部18は、ハードディスク或いはDRAM(Dynamic Random Access Memory)等で構成され、各種画像のデータを記憶する。
通信部19は、インターネットを含むネットワークを介して他の装置(図示せず)との間で行う通信を制御する。
入力操作受付処理とは、ユーザにより図示せぬ電源ボタンが押下されたことを契機として開始される、次のような処理をいう。即ち、入力操作受付処理とは、入力部17のタッチパネルに対する操作を受け付け、当該操作に応じてオブジェクトに関する処理を実効するまでの一連の処理をいう。
図3は、入力部17の一部を示す断面図である。
静電容量式タッチパネル31と、抵抗膜式タッチパネル32とは、表示部16(図1参照)のディスプレイの表示画面全体にそれぞれ積層され、タッチ操作がなされた位置の座標を検出する。ここで、タッチ操作とは、タッチパネルに対する物体(ユーザの指やタッチペン等)の接触又は近接の操作をいう。
静電容量式タッチパネル31と、抵抗膜式タッチパネル32とは入力操作受付部51を介して、検出した位置の座標を制御部53へ供給する。
これに対し、抵抗膜式タッチパネル32は、指101が抵抗膜式タッチパネル32に対し非接触状態では、タッチ操作がなされたと検出されない。即ち、指101が抵抗膜式タッチパネル32に対し非接触状態の場合、当該指101の2次元平面上の位置の座標は検出されず、かつ、当該指101の高さ方向の位置の座標(距離)も検出されない。しかし、抵抗膜式タッチパネル32は、静電容量式タッチパネル31と比較して、タッチ操作がなされた2次元平面上の位置の座標を高精度かつ高分解能で検出することができる。
図4は、図2の機能的構成を有する図1の情報処理装置1が実行する入力操作受付処理の流れを説明するフローチャートである。
このようにして、ユーザは入力操作受付終了の指示を行うまでの間、タッチパネルに対するタッチ操作を繰り返すことで、所望のオブジェクトを制御することができる。その後、例えばユーザが情報処理装置1に対して所定の操作を行うことで、入力操作受付終了の指示をした場合、ステップS14においてYESであると判定されて、入力操作受付処理は終了となる。
図5は、図1の情報処理装置の入力部17に対しタッチ操作がなされた状態を示している。
この場合、図5(a−2)に示すように、指101が入力部17に対して、距離Aよりも短い距離Bだけ近づくと、表示部16のディスプレイに表示されるアイコンは、図5(b−2)に示すように、表示率aよりも拡大された表示率bの大きさで表示される。
なお、アイコンの拡大率は、距離に応じて可変すれば足りるが、本実施形態では、距離に比例して拡大率が縮小するものとする。即ち、図5の例では、表示率bは、表示率aの(A/B)倍になる。
なお、本実施形態においては、入力部17と指との間の距離nが小さくなると、表示部16のディスプレイに表示されるアイコンの表示率は大きくなるが、これに限られるものではない。例えば、入力部17と指との間の距離nが大きくなると、表示部16のディスプレイに表示されるアイコンの表示率を小さくしてもよい。
図6は、図1の情報処理装置の入力部17に対しフリック操作がなされた状態を示している。
これに対し、図6(b)に示すように、ユーザが、入力部17と指101との間の距離が離れている状態でフリック操作をした場合、即ち、指101が入力部17に対して非接触の状態を維持してフリック操作をした場合には、制御部53は、オブジェクトに関する処理として、第2の処理を実行する。
ここで、第1の処理と第2の処理とは、相互に異なる処理であれば任意の処理でよいが、本実施形態では、表示部16に表示されている本やノート(オブジェクトの一種)のページを送る処理が第1の処理として、表示部16に表示されるファイル(オブジェクトの別の一種)を変更する処理が第2の処理として、それぞれ採用されている。
図7は、図1の情報処理装置の入力部17上で手102を握ったり開いたりした操作がなされた状態を示している。
なお、ジェスチャの種類と個数は、図7の例に特に限定されず、任意の種類の任意の個数のジェスチャを採用することができる。例えば、図示はしないが、手102を開いた状態から握った状態に遷移させるジェスチャや、手102を握ったり開いたりすることを繰り返すジェスチャを採用することができる。即ち、N種類(Nは1以上の任意の整数値)のジェスチャを採用することが可能である。この場合、N種類のジェスチャの各々に対して、相異なる任意の処理をそれぞれ対応付けることができる。
図8は、図1の情報処理装置の入力部17に対し回転操作がなされた状態を示している。
これに対し、図8(b)に示すように、ユーザが、入力部17と指101との間の距離が離れている状態、即ち、指101が入力部17に対して非接触の状態を維持して回転操作をした場合には、制御部53は、オブジェクトに関する処理として、第2の処理を実行する。
ここで、第1の処理と第2の処理とは、相互に異なる処理であれば任意の処理でよいが、本実施形態では、表示部16に表示されているオブジェクト103を、回転操作する指101の軌跡に追随して回転させる処理が第1の処理として、当該オブジェクトを所定角度回転させる処理が第2の処理として、それぞれ採用されている。
なお、オブジェクト103の回転角度は、距離に応じて可変すれば足りるが、本実施形態では、距離が0の場合には指101の回転角度と略一致させ、これを基準角度として、距離に比例して基準角度よりも小さくなっていくものとする。即ち、距離をnとするならば、オブジェクト103の回転角度は、基準角度の(1/n)倍になる。
入力操作受付部51は、タッチパネルが積層された表示部16の表示面(2次元平面)に略平行な物体の移動を、タッチパネルに対するタッチ操作として受け付ける。
距離特定部52は、タッチ操作がなされた場合の物体についての、表示部16の表示面(2次元平面)からの距離を検出する。
制御部53は、入力操作受付部51により受け付けられたタッチ操作の種類(物体の移動の軌跡に応じて異なる種類)と、距離特定部52により検出された距離に基づいて、表示されたオブジェクトに関する処理の実行を可変制御する。
これにより、タッチパネルに対する操作が不慣れなユーザであっても直感的にジェスチャ操作(指や手と言った物体を移動させるという直感的なタッチ操作)を行うだけで、オブジェクトに関する処理の各種指示を行うことができる。これにより、タッチパネルに不慣れなユーザであっても容易にオブジェクトの処理を指示することができる。
この場合、静電容量式タッチパネル31の表面により、抵抗膜式タッチパネル32を保護することができる。さらに、静電容量式タッチパネル31により、非接触状態でもタッチ操作がなされた位置の座標及び、指101と静電容量式タッチパネル31との距離を検出することができるとともに、接触した場合には、抵抗膜式タッチパネル32により、より詳細にタッチ操作がなされた位置の座標を検出することができる。
してみると、上述した実施形態とは、入力操作受付部51及び距離特定部52が、表示部16の表示画面を基準平面として、基準平面に対する3次元方向の物体の移動の操作を受け付けていることと等価である。そこで、入力操作受付部51及び距離特定部52をまとめて、以下、「3次元操作受付部」と呼ぶ。
この場合、基準平面は、表示部16の表示画面である必要は特になく、任意の平面でよい。この場合、基準平面は、ユーザから肉眼視できる平面を採用する必要はなく、何らかの物体内の平面を採用してもよいし、仮想的な平面を基準平面として定義してもよい。
また、物体の3次元上の位置を測定する3次元位置検出部は、上述の実施形態では静電容量式タッチパネル31及び抵抗膜式タッチパネル32として構成されたが、特にこれに限定されず、任意の種類の任意の個数の位置検出部を組み合わせて構成することができる。ここで、上述の距離とは、基準面の法線方向の位置に他ならないので、距離を検出することは、基準面の法線方向の位置を検出することに他ならない。
即ち、本発明が適用される情報処理装置とは、
基準平面に対する物体の3次元方向の位置を検出する3次元位置検出機能と、
時間的に離間して複数回検出された物体の3次元方向の各位置に基づいて、当該物体の3次元方向の移動を認識し、その認識結果を、オブジェクトに対する指示操作として受け付ける3次元操作受け付け機能と、
受け付けられた指示操作に応じて、当該オブジェクトに関する処理を可変制御する制御機能と、
を有している。
例えば、本発明は、撮像機能を有する電子機器一般に適用することができる。具体的には、例えば、本発明は、ノート型のパーソナルコンピュータ、プリンタ、テレビジョン受像機、ビデオカメラ、デジタルカメラ、携帯型ナビゲーション装置、携帯電話機、ポータブルゲーム機等に適用可能である。
換言すると、図2の機能的構成は例示に過ぎず、特に限定されない。即ち、上述した一連の処理を全体として実行できる機能が情報処理装置1に備えられていれば足り、この機能を実現するためにどのような機能ブロックを用いるのかは特に図2の例に限定されない。
また、1つの機能ブロックは、ハードウェア単体で構成してもよいし、ソフトウェア単体で構成してもよいし、それらの組み合わせで構成してもよい。
コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパーソナルコンピュータであってもよい。
また、本明細書において、システムの用語は、複数の装置や複数の手段等より構成される全体的な装置を意味するものとする。
[付記1]
基準平面に対する物体の3次元方向の位置を検出する3次元位置検出手段と、
前記3次元位置検出手段により時間的に離間して複数回検出された前記物体の3次元方向の各位置に基づいて、当該物体の3次元方向の移動を認識し、その認識結果を、オブジェクトに対する指示操作として受け付ける3次元操作受け付け手段と、
前記3次元操作受け付け手段により受け付けられた前記指示操作に応じて、前記オブジェクトに関する処理を可変制御する制御手段と、
を備えることを特徴とする情報処理装置。
[付記2]
前記3次元位置検出手段は、表示画面を基準平面として、当該表示画面に積層されたタッチパネルを含み、
前記3次元操作受け付け手段は、
前記表示画面に略平行な2次元方向の物体の移動を、前記タッチパネルに対するタッチ操作として受け付ける入力操作受付手段と、
前記物体の前記表示画面からの距離を、前記表示画面の法線方向の前記物体の位置として特定する距離特定手段と、
を含むことを特徴とする付記1に記載の情報処理装置。
[付記3]
前記制御手段は、
前記タッチ操作に予め対応付けられた、オブジェクトに関する処理を制御することを特徴とする付記2に記載の情報処理装置。
[付記4]
前記制御手段は、
前記距離特定手段により特定された距離に対応付けられた、オブジェクトに関する処理を制御することを特徴とする付記2に記載の情報処理装置。
[付記5]
前記制御手段は、
前記距離特定手段により特定された距離に応じて、前記表示画面に表示されるオブジェクトの表示率を変更する制御を実行することを特徴とする付記4に記載の情報処理装置。
[付記6]
前記制御手段は、
前記距離特定手段により特定された距離に応じて、前記表示画面に表示されるオブジェクトのページ送り又はオブジェクトの変更の何れかの制御を実行することを特徴とする付記4に記載の情報処理装置。
[付記7]
前記制御手段は、
前記距離特定手段により特定された距離に応じて、前記表示画面に表示されるオブジェクトを前記3次元操作受け付け手段により受け付けられた回転操作に対応付けられた、オブジェクトに関する処理を制御することを特徴とする付記4に記載の情報処理装置。
[付記8]
前記タッチパネルは、
静電容量式タッチパネルと、抵抗膜式タッチパネルとにより構成されていることを特徴とする付記2乃至7のうち何れか1つに記載の情報処理装置。
[付記9]
オブジェクトに関する処理を制御する情報処理装置が実行する情報処理方法において、
基準平面に対する物体の3次元方向の位置を検出する3次元位置検出ステップと、
前記3次元位置検出ステップにより時間的に離間して複数回検出された前記物体の3次元方向の各位置に基づいて、当該物体の3次元方向の移動を認識し、その認識結果を、オブジェクトに対する指示操作として受け付ける3次元操作受け付けステップと、
前記3次元操作受け付けステップにより受け付けられた前記指示操作に応じて、前記オブジェクトに関する処理を可変制御する制御ステップと、
を含むことを特徴とする情報処理方法。
[付記10]
オブジェクトに関する処理を制御する情報処理装置を制御するコンピュータに、
基準平面に対する物体の3次元方向の位置を検出する3次元位置検出機能と、
前記3次元位置検出機能により時間的に離間して複数回検出された前記物体の3次元方向の各位置に基づいて、当該物体の3次元方向の移動を認識し、その認識結果を、オブジェクトに対する指示操作として受け付ける3次元操作受け付け機能と、
前記3次元操作受け付け機能により受け付けられた前記指示操作に応じて、前記オブジェクトに関する処理を可変制御する制御機能と、
を含む情報処理を実行させるプログラム。
Claims (6)
- 表示画面上に表示されるオブジェクトを回転表示させるオブジェクト処理装置であって、
基準となる所定検出面上におけるユーザの指により指示操作を、その指による接触指示操作あるいは非接触指示操作により検出する検出手段と、
前記表示画面上に表示される前記オブジェクトに対する前記指による回転操作を、前記検出手段で前記指による接触指示操作として検出した際は、その指示操作の回転軌跡に前記表示画面上のオブジェクトが追随するように回転表示させる第1制御手段と、
前記表示画面上に表示される前記オブジェクトに対する前記指による回転操作を、前記検出手段で前記指による非接触指示操作として検出した際は、その指示操作の回転軌跡には前記表示画面上のオブジェクトを追随させずに、その指示操作の回転軌跡の回転量とは異なる回転量で前記オブジェクトを回転表示させる第2制御手段と、
を具備したことを特徴とするオブジェクト処理装置。 - 前記検出手段で前記指による非接触の指示操作を検出した場合は、前記所定検出面と前記指との間の距離を特定する特定手段と、
を更に具備し、
前記第2制御手段は、前記特定手段で特定された距離に応じて前記非接触指示操作での回転軌跡の回転比率を変化させ、その変化させた回転比率に応じた回転量で前記オブジェクトを回転表示させる、
ことを特徴とする請求項1に記載のオブジェクト処理装置。 - 前記回転比率は、前記回転量が前記接触指示操作での回転軌跡による回転量よりも小さい回転量となる比率であり、この小さい回転量により前記オブジェクトを回転表示させる際の回転量を微調整しながら回転表示させることが可能な比率である、
ことを特徴とする請求項2に記載のオブジェクト処理装置。 - 前記指による回転指示操作の軌跡は、前記所定検出面に対して略平行に指を回転操作させる場合の回転指示操作の軌跡であり、
前記第1制御手段は、前記指による回転指示操作の軌跡による回転角度に追随させて前記オブジェクトを前記表示画面上で回転表示させ、
前記第2制御手段は、前記指による前記回転指示操作の軌跡による回転角度とは異なる比率の回転角度で前記オブジェクトを回転表示させる、
ことを特徴とする請求項1〜3の何れかに記載のオブジェクト処理装置。 - 表示画面上に表示されるオブジェクトを回転表示させるオブジェクト処理方法であって、
基準となる所定検出面上におけるユーザの指により指示操作を、その指による接触指示操作あるいは非接触指示操作により検出する検出ステップと、
前記表示画面上に表示される前記オブジェクトに対する前記指による回転操作を、前記検出ステップで前記指による接触指示操作として検出した際は、その指示操作の回転軌跡に前記表示画面上のオブジェクトが追随するように回転表示させる第1制御ステップと、
前記表示画面上に表示される前記オブジェクトに対する前記指による回転操作を、前記検出ステップで前記指による非接触指示操作として検出した際は、その指示操作の回転軌跡には前記表示画面上のオブジェクトを追随させずに、その指示操作の回転軌跡の回転量とは異なる回転量で前記オブジェクトを回転表示させる第2制御ステップと、
を備えるオブジェクト処理方法。 - 表示画面上に表示されるオブジェクトを回転表示させるオブジェクト処理装置のコンピュータを制御するためのプログラムであって、
前記コンピュータを、
基準となる所定検出面上におけるユーザの指により指示操作を、その指による接触指示操作あるいは非接触指示操作により検出する検出手段、
前記表示画面上に表示される前記オブジェクトに対する前記指による回転操作を、前記検出手段で前記指による接触指示操作として検出した際は、その指示操作の回転軌跡に前記表示画面上のオブジェクトが追随するように回転表示させる第1制御手段、
前記表示画面上に表示される前記オブジェクトに対する前記指による回転操作を、前記検出手段で前記指による非接触指示操作として検出した際は、その指示操作の回転軌跡には前記表示画面上のオブジェクトを追随させずに、その指示操作の回転軌跡の回転量とは異なる回転量で前記オブジェクトを回転表示させる第2制御手段、
として機能させるようにしたプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016030544A JP6160724B2 (ja) | 2016-02-22 | 2016-02-22 | オブジェクト処理装置、オブジェクト処理方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016030544A JP6160724B2 (ja) | 2016-02-22 | 2016-02-22 | オブジェクト処理装置、オブジェクト処理方法及びプログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011129013A Division JP2012256213A (ja) | 2011-06-09 | 2011-06-09 | 情報処理装置、情報処理方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016095885A JP2016095885A (ja) | 2016-05-26 |
JP6160724B2 true JP6160724B2 (ja) | 2017-07-12 |
Family
ID=56071347
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016030544A Active JP6160724B2 (ja) | 2016-02-22 | 2016-02-22 | オブジェクト処理装置、オブジェクト処理方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6160724B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6733731B2 (ja) * | 2016-06-28 | 2020-08-05 | 株式会社ニコン | 制御装置、プログラムおよび制御方法 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011053971A (ja) * | 2009-09-02 | 2011-03-17 | Sony Corp | 情報処理装置、情報処理方法およびプログラム |
KR101768540B1 (ko) * | 2009-10-30 | 2017-08-18 | 삼성전자주식회사 | 모바일 기기 및 이에 적용되는 ui 제공방법 |
-
2016
- 2016-02-22 JP JP2016030544A patent/JP6160724B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2016095885A (ja) | 2016-05-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8970503B2 (en) | Gestures for devices having one or more touch sensitive surfaces | |
JP6009454B2 (ja) | コンピューティング装置の動きを利用するコンピューティング装置と相互作用するときに発生する入力イベントの解釈の強化 | |
US8570283B2 (en) | Information processing apparatus, information processing method, and program | |
US8749497B2 (en) | Multi-touch shape drawing | |
US7877707B2 (en) | Detecting and interpreting real-world and security gestures on touch and hover sensitive devices | |
US20110060986A1 (en) | Method for Controlling the Display of a Touch Screen, User Interface of the Touch Screen, and an Electronic Device using The Same | |
US20120105367A1 (en) | Methods of using tactile force sensing for intuitive user interface | |
US20140043265A1 (en) | System and method for detecting and interpreting on and off-screen gestures | |
US20120262386A1 (en) | Touch based user interface device and method | |
US8830192B2 (en) | Computing device for performing functions of multi-touch finger gesture and method of the same | |
WO2013033317A1 (en) | System and method for navigation in an electronic document | |
US20130106707A1 (en) | Method and device for gesture determination | |
US10146341B2 (en) | Electronic apparatus and method for displaying graphical object thereof | |
WO2014095756A1 (en) | User interfaces and associated methods | |
CN102023788A (zh) | 触控屏幕显示画面控制方法 | |
JP6185439B2 (ja) | 表示装置、画像形成装置、及び表示制御方法 | |
JP2012256213A (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP5935081B2 (ja) | 入力制御方法、コンピュータ、および、プログラム | |
US20140359541A1 (en) | Terminal and method for controlling multi-touch operation in the same | |
KR101442438B1 (ko) | 듀얼 터치 경험 필드를 달성하기 위한 싱글 터치 프로세스 | |
JP6160724B2 (ja) | オブジェクト処理装置、オブジェクト処理方法及びプログラム | |
TWI405104B (zh) | 利用觸碰感測輸入裝置來翻轉三維圖形物件之方法 | |
KR20110006251A (ko) | 터치 패널 입력장치, 방법 및 이를 이용한 모바일 기기 | |
EP2977878B1 (en) | Method and apparatus for displaying screen in device having touch screen | |
TW201039203A (en) | Electronic device, display device and method for identifying gestures of touch input |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160308 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160308 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161025 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161213 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170207 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170407 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170516 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170529 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6160724 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |