JP5779923B2 - 情報処理装置、情報処理方法およびコンピュータプログラム - Google Patents

情報処理装置、情報処理方法およびコンピュータプログラム Download PDF

Info

Publication number
JP5779923B2
JP5779923B2 JP2011059387A JP2011059387A JP5779923B2 JP 5779923 B2 JP5779923 B2 JP 5779923B2 JP 2011059387 A JP2011059387 A JP 2011059387A JP 2011059387 A JP2011059387 A JP 2011059387A JP 5779923 B2 JP5779923 B2 JP 5779923B2
Authority
JP
Japan
Prior art keywords
back surface
operating body
indicator
contact position
contact
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011059387A
Other languages
English (en)
Other versions
JP2012194883A (ja
Inventor
文規 本間
文規 本間
辰志 梨子田
辰志 梨子田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2011059387A priority Critical patent/JP5779923B2/ja
Priority to US13/416,521 priority patent/US9146676B2/en
Priority to CN201210061899.9A priority patent/CN102736782B/zh
Priority to EP12158828.9A priority patent/EP2500813B1/en
Publication of JP2012194883A publication Critical patent/JP2012194883A/ja
Application granted granted Critical
Publication of JP5779923B2 publication Critical patent/JP5779923B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/169—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated pointing device, e.g. trackball in the palm rest area, mini-joystick integrated between keyboard keys, touch pads or touch stripes
    • G06F1/1692—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated pointing device, e.g. trackball in the palm rest area, mini-joystick integrated between keyboard keys, touch pads or touch stripes the I/O peripheral being a secondary touch screen used as control interface, e.g. virtual buttons or sliders
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Container, Conveyance, Adherence, Positioning, Of Wafer (AREA)
  • Cookers (AREA)

Description

本開示は、表示面と反対側の背面への接触検出可能な情報処理装置、情報処理方法およびコンピュータプログラムに関する。
近年、表示面と反対側の背面に、指等の操作体の接触を検知する検出部を備えた機器が提案されている。例えば、特許文献１には、表示面側のタッチパネルを背面から操作できるようにした携帯端末装置が開示されている。特許文献１に記載の携帯端末装置１０は、透明な平面表示パネル２０と、この平面表示パネル２０の背面側に貼着された透明なタッチセンサ３０とを備える。かかる携帯端末装置１０では、平面表示パネル２０とタッチセンサ３０とを透明とすることで、背面側での指のタッチ位置を目視することが可能となり、指のタッチ位置を確認しながらボタン３２を操作選択することができる。
特開２００７−３３４８２７号公報
しかし、実際には、表面側のタッチパネルと背面側のタッチセンサとの位置や大きさにずれがあることが多く、この場合、特許文献１に記載の技術の適用は困難である。このため、背面側での操作を可視化する手法としては、背面側で操作体がタッチした位置を常に表示画面の中心にオフセットして、そこからの相対座標移動に応じて表示画面の中心にあるオブジェクトを移動させる手法が主流となっている。
しかしながら、かかる手法では、背面側でタッチした位置と表示画面での操作対象となるオブジェクトの表示位置とがずれているため、ユーザが当該オブジェクトを移動させるためにドラッグを継続したとき、背面側で操作する指がタッチセンサ外に位置したことに気付き難い。これにより、ユーザが予期せずに、操作対象のオブジェクトを表すインジケータが突然消える等の終了処理に遷移してしまい、表示画面のオブジェクトを操作できなくなる。
そこで、背面側において操作体が表示画面の操作対象を操作可能な領域から外れたことを通知することが望ましい。
本開示によれば、情報を表示する表示面と反対側の背面に対する操作体の接触を検出する検出部と、検出部により検出された操作体の接触位置を判定する判定部と、判定部の判定結果に基づいて、検出部により操作体の接触位置を検出可能な検出可能領域外に操作体が位置しようとしている状況をユーザに通知する通知処理部と、を備える、情報処理装置が提供される。
本開示によれば、背面において操作体により表示面に表示された情報を操作する際に、操作体が検出部の検出可能領域外に位置しようとしている状況を、操作体の接触位置に基づき判定する。そして、操作体が検出可能領域外に位置しようとしているとき、ユーザに対して通知部よりその旨を通知する。
また、本開示によれば、情報を表示する表示面と反対側の背面に対する操作体の接触を検出することと、検出された操作体の接触位置を判定することと、操作体の接触位置の判定結果に基づいて、操作体の接触位置を検出可能な検出可能領域外に位置しようとしている状況をユーザに通知することと、を含む、情報処理方法が提供される。
さらに、本開示によれば、コンピュータを、情報を表示する表示面と反対側の背面に対する操作体の接触を検出部に検出させる検出制御部と、検出部により検出された操作体の接触位置を判定する判定部と、判定部の判定結果に基づいて、検出部により操作体の接触位置を検出可能な検出可能領域外に操作体が位置しようとしている状況をユーザに通知する通知処理部と、を備える、情報処理装置として機能させる、コンピュータプログラムが提供される。
以上説明したように本開示によれば、背面側において操作体が表示画面の操作対象を操作可能な領域から外れたことを通知することができる。
本開示の第１の実施形態に係る情報処理装置による端点通知処理の一例を示す説明図である。 同実施形態に係る情報処理装置により解決しようとする状況の一例を示す説明図である。 同実施形態に係る情報処理装置のハードウェア構成例を示すブロック図である。 同実施形態に係る情報処理装置の機能構成を示す機能ブロック図である。 同実施形態に係る情報処理装置により表示面にインジケートを表示させた一例を示す。 操作入力に応じて変化するインジケータの形状の一例を示す説明図である。 背面検出部に設定された中心エリアと縁エリアとを示す説明図である。 指の接触位置と背面検出部の各エリアとの関係を示す説明図である。 指が中心エリアに所属するときのインジケータの一表示例を示す説明図である。 指が縁エリアに所属するときのインジケータの一表示例を示す説明図である。 指が背面検出部の設置領域外に移動したときのインジケータの一表示例を示す説明図である。 同実施形態に係る情報処理装置による端点通知処理を示すフローチャートである。 本開示の第２の実施形態においてユーザが操作する対象を説明する説明図である。 同実施形態に係る端点通知表現の一例を示す説明図である。 同実施形態に係る端点通知表現の他の一例を示す説明図である。 同実施形態に係る端点通知表現のさらに他の一例を示す説明図である。 同実施形態に係る端点通知表現のさらに他の一例を示す説明図である。 同実施形態に係る端点通知表現のさらに他の一例を示す説明図である。 背面側にタッチセンサを備える従来の携帯端末装置を示す説明図である。
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
なお、説明は以下の順序で行うものとする。
１．第１の実施形態（表示内容のドラッグ操作）
１‐１．情報処理装置の処理概要
１‐２．情報処理装置のハードウェア構成例
１‐３．情報処理装置の機能構成
１‐４．画面構成例
１‐５．端点通知処理
２．第２の実施形態（既存オブジェクトのドラッグアンドドロップ操作）
＜１．第１の実施形態＞
［１‐１．情報処理装置の処理概要］
まず、図１および図２に基づいて、本開示の第１の実施形態に係る情報処理装置により行われる処理の概要について説明する。なお、図１は、本開示の第１の実施形態に係る情報処理装置による端点通知処理の一例を示す説明図である。図２は、本実施形態に係る情報処理装置により解決しようとする状況の一例を示す説明図である。
本実施形態に係る情報処理装置は、指等の操作体の接触を検出する検出部を表示面と反対側に備えた機器に設けられる。本実施形態に係る情報処理装置は、背面に操作体が接触したときに、その接触位置に相対して行われる操作をインジケートするインジケータを表示面に表示する。ユーザは、表示面に表示されたインジケータを目視することで、背面での操作の状況を認識することができる。なお、本実施形態では操作入力を行う操作体として指を用いる例を説明するが、本技術はかかる例に限定されないものとする。
例えば、図１に示すように、ユーザが背面２２０の任意の位置に接触（タッチ）すると、接触位置Ｐに関わらず、表示面２１０の中心Ｏにインジケータ２１２が表示される。そして、ユーザが最初の接触位置から接触させたまま任意の方向に指を移動させてドラッグすると、表示面２１０のインジケータ２１２が中心Ｏからドラッグ方向に延びる。このように、インジケータ２１２を視点と現在位置とを結んだ形状とすることで、ドラッグ中である旨をユーザに通知する。
ここで、本実施形態においては、背面２２０の絶対座標を取得することができないため、背面２２０に対する最初の接触位置に関わらず表示面２１０の中心Ｏにインジケータ２１２を表示する。このため、図２に示すように、背面２２０の縁近辺に最初に指が接触した場合にも、図１の場合と同様に、インジケータ２１２は表示面２１０の中心Ｏに初期表示される。その後、背面２２０にて指が移動され、背面２２０に対する指の接触を検出するセンサが設けられていない領域に指が位置した場合、図２のように、インジケータ２１２は表示面２１０内でまだ動きそうな表示状態から変化しなくなることが考えられる。そこで、本実施形態に係る情報処理装置においては、指がセンサ設置領域外に出そうな状況であることをユーザが認識できるように端点通知を行い、操作性の向上を図る。
［１‐２．情報処理装置のハードウェア構成例］
本実施形態に係る情報処理装置のハードウェア構成例を図３に示す。図３に示すように、本実施形態に係る情報処理装置１００は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１０１と、不揮発性メモリ１０２と、表示装置１０３と、ＣＰＵ１０４と、静電式タッチパネル１０５と、背面タッチセンサ１０６とを備える。
ＲＡＭ１０１は、ＣＰＵ１０４の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。これらはＣＰＵバスなどから構成されるホストバスにより相互に接続されている。不揮発性メモリ１０２は、ＣＰＵ１０４が使用するプログラムや演算パラメータ等を記憶する。不揮発性メモリ１０２は、例えばＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）やフラッシュメモリ等を用いることができる。
表示装置１０３は、情報を出力する出力装置の一例である。表示装置１０３として、例えば液晶ディスプレイ（ＬＣＤ）装置、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）装置などを用いることができる。ＣＰＵ１０４は、演算処理装置および制御装置として機能し、各種プログラムに従って情報処理装置１００内の動作全般を制御する。また、ＣＰＵ１０４は、マイクロプロセッサであってもよい。
静電式タッチパネル１０５は、表示装置の表示面と積層して設けられ、静電気による電気信号を感知することにより指等の操作体の接触を検知する。本実施形態に係る情報処理装置１００では静電式のタッチパネルを用いたが、静電式タッチパネル１０５の代わりに表示面への圧力の変化を感知して指の接触を検知する感圧式のタッチパネルを用いてもよい。背面タッチセンサ１０６は、ユーザが情報を入力する入力装置の一例であって、表示面と反対側の背面に設けられている。背面タッチセンサ１０６は、情報を入力ための入力手段と、ユーザによる入力に基づいて入力信号を生成し、ＣＰＵ１０４に出力する入力制御回路などから構成されている。
［１‐３．情報処理装置の機能構成］
次に、図４に基づいて、本実施形態に係る情報処理装置１００の機能構成について説明する。図４は、本実施形態に係る情報処理装置１００の機能構成を示す機能ブロック図である。
本実施形態に係る情報処理装置１００は、図４に示すように、背面検出部１１０と、接触判定部１２０と、エリア判定部１３０と、端点通知処理部１４０と、出力部１５０と、設定記憶部１６０とを備える。
背面検出部１１０は、表示面と反対側に設けられた検出部であって、図３の背面タッチセンサ１０６に対応する。背面検出部１１０は、表示面の表示内容を操作するための操作入力を検出する。本実施形態では、背面検出部１１０の検出結果に基づき指の背面２２０への接触状態が判定される。そして、その判定結果より、ユーザが行った操作入力がタッチ、タップ、ドラッグ等のどの操作入力であるかが特定され、操作入力に応じて表示面の表示内容が変化される。背面検出部１１０は、背面２２０に指が接触したときに所定の接触検知信号を接触判定部１２０へ出力する。
接触判定部１２０は、背面検出部１１０から入力された接触検知信号に基づいて、背面２２０に指が接触したか否かを判定する。接触判定部１２０は、背面検出部１１０からの接触検知信号の入力を検知したとき、背面２２０に指が接触していると判定し、それ以外の場合には指は背面２２０に接触していないと判定する。接触判定部１２０は、所定のタイミングで接触判定処理を行い、判定結果をエリア判定部１３０に出力する。
エリア判定部１３０は、接触判定部１２０の判定結果に基づいて、現在の指の接触位置が属する領域を判定する。背面検出部１１０は、後述するように、当該背面検出部１１０の中央部分である中心エリアと、中心エリアの周囲にあって背面検出部１１０の周縁部分である縁エリアとに区分されている。中心エリアは、指がある程度動いても当該指が背面検出部１１０の設置領域（すなわち、背面検出部１１０による検出可能領域）外に位置することがなく、指の接触を検出することが可能な領域である。一方、縁エリアは、指をさらに動かすと背面検出部１１０の設置領域外に位置する可能性が高い領域である。エリア判定部１３０は、接触判定部１２０の判定結果より指が中心エリアあるいは縁エリアのうちいずれに位置するか否かを判定し、判定結果を端点通知処置部１４０へ出力する。
端点通知処理部１４０は、エリア判定部１３０の判定結果に基づいて、指が背面検出部１１０の設置領域から外れる可能性がある場合に、ユーザに対してその旨を通知する処理（端点通知処理）を行う。例えば、ユーザへの通知が表示による場合、端点通知処理部１４０は、指が背面検出部１１０の設置領域から外れる可能性を通知する表示をするよう表示部（出力部１５０）へ指示する。また、例えば、ユーザへの通知が音による場合、端点通知処理部１４０は、指が背面検出部１１０の設置領域から外れる可能性を通知する音声を出力するよう音声出力部（出力部１５０）へ指示する。
出力部１５０は、指が背面検出部１１０の設置領域から外れる可能性を通知する通知情報を出力する。出力部１５０は、例えば情報を表示する表示部であってもよく、音声を出力するスピーカ等の音声出力部であってもよい。出力部１５０は、端点通知処理部１４０の通知指示に従って、通知情報を出力する。
設定記憶部１６０は、操作体が背面検出部１１０の設置領域から外れる可能性を通知する通知処理を実行するために必要な情報を記憶する。設定記憶部１６０に記憶されている情報としては、指が背面検出部１１０の中心エリアまたは縁エリアのうちいずれの領域にあるかを判定するための情報や、指が背面検出部１１０の設置領域から外れる可能性がある場合の通知方法等がある。設定記憶部１６０は、これらの情報を予め記憶しておいてもよく、ユーザにより入力された情報を記憶することもできる。接触判定部１２０、エリア判定部１３０、および端点通知処理部１４０は、必要に応じて設定記憶部１６０にアクセスし、所定の情報を取得することができる。
［１‐４．画面構成例］
上述した本実施形態に係る情報処理装置１００では、背面２２０での指による操作状況をユーザに認識させるために、指が背面に接触した接触位置に相対して行われる操作をインジケートするインジケータ２１２を表示面２１０に表示させる。図５に、本実施形態に係る情報処理装置１００により表示面２１０にインジケータ２１２を表示させた一例を示す。
表示面２１０には、例えば写真や動画、文章、Ｗｅｂコンテンツ等の表示内容２１１が表示されている。この表示内容２１１は、背面２２０に対して接触する指の動きに応じて動かすことができる。表示面２１０には、表示内容２１１に加えて、背面２２０での指の動きを表すインジケータ２１２が表示される。インジケータ２１２は、背面２２０に指が接触したときに、背面２２０における指の接触位置に関わらず、表示面２１０の中心Ｏに表示される。
インジケータ２１２は、指が背面２２０に接触している間は、その指の動きに合わせて形状が変化される。例えば、図５に示すように、指が背面２２０にてタッチした位置から紙面下方向に指を移動させてドラッグしたとき、インジケータ２１２の形状は円形から、中心Ｏと現在の指の位置とを結んだ形状に変化される。このようなインジケータ２１２の形状変化によって、指の動きをユーザが認識することができ、操作性を向上させることができる。
インジケータ２１２の形状は、ユーザが背面２２０での指の動きを認識し易いものとするのがよい。例えば、図６に示すように、指を背面２２０に接触させたとき（タッチ）には、円形のインジケータ２１２ａを表示させ、接触させた指を移動させてドラッグしているときには、始点（中心Ｏ）と現在の指の位置とを結んだ形状のインジケータ２１２ｂを表示させてもよい。なお、ドラッグ操作のときのインジケータ２１２ｂは、図６に示すように始点と終点とを直線で結ぶのではなく、指の動きの軌跡をなぞった形状としてもよい。
また、背面２２０に指を接触させてすぐに背面から指を離隔させるタップ操作を行った場合には、図６に示すように、円形のインジケータ２１２ｃであってその内部を所定の色で塗ったものを表示させてもよい。これにより、同一形状のインジケータ２１２ａが表示されたとしても、その色によって操作の違いをユーザが認識することができる。なお、インジケータ２１２によって表示面２１０の表示内容２１１の視認を妨げないように、インジケータ２１２の内部は色による塗りつぶしをしない、あるいは透明色により色を塗るようにしてもよい。
このように、情報処理装置１００はタッチ、ドラッグ、タップ等の各操作に応じて表示面２１０のインジケータ２１２の表示形状を変化させる。そして、ユーザは、インジケータ２１２を目視しながら、所望の処理を実行させる。情報処理装置１００は、例えばユーザが行ったドラッグ操作に対して表示面２１０に表示されているリストをスクロールしたり、フォーカスを移動したりする等の操作を行うことができる。また、情報処理装置１００は、例えばタップ操作に対して現在フォーカスされている項目に対して任意のアクションの実行等を行うことができる。
ここで、本実施形態に係る情報処理装置１００は、背面検出部１１０の設置領域から指が出ようとしていることをインジケータ２１２によってユーザに通知することができる。そこで、背面検出部１１０は、図７に示すように、背面検出部１１０の中央部分である中心エリア２２２と、中心エリア２２２の周縁部分である縁エリア２２４とに区分されており、指の位置する領域に応じてインジケータ２１２の表示形態が変化される。本実施形態では、中心エリア２２２および縁エリア２２４の区分は、ソフトウェア的に設定されているが、本技術はかかる例に限定されず、ハードウェア的に異なるタッチセンサを設けることにより中心エリア２２２および縁エリア２２４を設定してもよい。
図７に示すように背面検出部１１０の設置領域が区分されているとき、背面２２０に接触する指の位置に応じて、図８に示すように指の所属を定義することができる。例えば、指の接触位置が背面検出部１１０の中心エリア２２２にあるとき、指は中心エリア２２２に所属する。また、指の接触位置が背面検出部１１０の縁エリア２２４にあるとき、指は縁エリア２２４に所属する。ユーザが指を動かすことによって、指の所属エリアは中心エリア２２２から縁エリア２２４へ移動したり、縁エリア２２４から中心エリア２２２へ移動したりする。
縁エリア２２４は、背面検出部１１０の設置領域の周縁に設けられているため、縁エリア２２４に指が所属する場合には指が背面検出部１１０の設置領域外に動かされる可能性が高い。そこで、本実施形態に係る情報処理装置１００は、指が縁エリア２２４に所属しているとき、インジケータ２１２の表示形態を変化させて、ユーザに対して指が背面検出部１１０の設置領域外に移動する可能性があることを通知する。
以下、図９〜図１２に基づいて、本実施形態に係る情報処理装置１００による端点通知処理を説明する。なお、図９は、指が中心エリア２２２に所属するときのインジケータ２１２の一表示例を示す説明図である。図１０は、指が縁エリア２２４に所属するときのインジケータ２１２の一表示例を示す説明図である。図１１は、指が背面検出部１１０の設置領域外に移動したときのインジケータ２１２の一表示例を示す説明図である。図１２は、本実施形態に係る情報処理装置１００による端点通知処理を示すフローチャートである。
［１‐５．端点通知処理］
本実施形態に係る情報処理装置１００による端点通知処理は、図１２に示すように、まず、背面検出部１１０の接触検知信号に基づき、接触判定部１２０により指のタッチ検出があるか否かを判定する（Ｓ１００）。ステップＳ１００にて指が背面２２０に接触していないと判定された場合には、端点通知処理部１４０は端点通知表現を無効にする（Ｓ１３０）。一方、ステップＳ１００にて指が背面２２０に接触していると判定された場合には、エリア判定部１３０により、指の接触位置が中心エリア２２２に所属しているか否かが判定される（Ｓ１１０）。ステップＳ１１０にて指の接触位置が中心エリア２２２に所属していない、すなわち縁エリア２２４に所属していると判定された場合には、端点通知処理部１４０は端点通知表現を無効にする（Ｓ１３０）。
一方、ステップＳ１１０にて指の接触位置が中心エリア２２２に所属していると判定された場合には、端点通知処理部１４０は端点通知表現を有効にする（Ｓ１２０）。端点通知表現を有効化する場合の具体的動作を図９〜図１１に示す。ステップＳ１１０にて指の接触位置が中心エリア２２２に所属する場合、表示面２１０に表示されるインジケータ２１２は、図６に示したような通常通りの表示形態で表示される。例えば、図９に示すように、中心エリア２２２において指がドラッグされたときには、インジケータ２１２は、指の動きに沿って始点と終点とを結ぶような形状で表示される。
その後、図９に示す状態から指がさらに移動され、指の接触位置が中心エリア２２２から縁エリア２２４に突入したとする。このとき、情報処理装置の端点通知処理部１４０は、例えば図１０に示すように、インジケータ２１２が壁２１４にぶつかって潰れるような表現でインジケータ２１２を表示する。このように、インジケータ２１２の表示を通常の状態と異ならせることで、ユーザに背面側の指が背面検出部１１０の設置領域外に出そうになっていることを直感的に通知することができる。この壁２１４は、表示面２１０には表示されない（すなわち、ユーザには見えない）ようにしてもよい。
図１０に示す縁エリア２２４に位置する状態からそのまま指が背面検出部１１０の設置領域外に出た場合には、例えば図１１に示すように、インジケータ２１２がぶつかっていた壁２１４に吸い込まれるアニメーションを表示させるようにしてもよい。これにより、表示面２１０に表示されているインジケータ２１２は徐々に小さくなり、所定時間経過後にインジケータ２１２は表示面２１０に表示されなくなる。このようにして、直感的にユーザに指が背面検出部１１０の設置領域外に出たことを通知できる。
なお、インジケータ２１２が壁２１４に吸い込まれるアニメーションが実行されている間に、指が背面検出部１１０の設置領域外に位置している状態から再び背面２２０に接触した場合には、背面２２０からの操作入力を継続することができる。例えば、ドラッグ中に指が背面検出部１１０の設置領域外から外れた図１１の状態から指を背面検出部１１０に指を接触させると、指が背面検出部１１０の設置領域外から外れる前と同じドラッグ操作を継続して行うことができる。これにより、指が背面検出部１１０の設置領域外から外れることで実行中の処理が終了してしまい、ユーザが予期せずに次の処理に遷移するのを防止できる。
また、ユーザが最初に背面２２０に指を接触させたときの指の接触位置が縁エリア２２４にある場合、例えば図６に示した円形のインジケータ２１２をすぐに潰れた形状に変化させてもよい。これにより、指が背面検出部１１０の設置領域から外れやすい位置にあることをユーザに直感的に通知することができる。
図１２の説明に戻り、ステップＳ１２０で端点通知表現を有効にする、またはステップＳ１３０で端点通知表現を無効にした後、背面検出部１１０からの操作入力に基づく表示面２１０の表示内容２１１の操作処理を終了するか否かが判定される（Ｓ１４０）。例えば、実行中のアプリケーションが終了されたり、他の処理を優先して実行したりする場合には、ステップＳ１４０にて操作処理を終了すると判定される。一方、ステップＳ１４０にて操作処理を継続させると判定した場合には、ステップＳ１００からの処理を繰り返す。
以上、本実施形態に係る情報処理装置１００による背面２２０での操作状態の通知処理について説明した。本実施形態によれば、背面２２０での操作状態を通知する際に、背面検出部１１０の設置領域外に指が出ようとしているときに、インジケータ２１２の表示を変化させる。これにより、表示面２１０のみを目視しているユーザに対して背面２２０で操作入力を行っている指の状態を直感的に通知することができる。
＜２．第２の実施形態＞
次に、図１３〜図１８に基づいて、本開示の第２の実施形態に係る情報処理装置１００による端点通知表現について説明する。なお、本実施形態に係る情報処理装置１００は、本開示の第１の実施形態に係る情報処理装置１００と同一の構成および機能を有しており、第１の実施形態と比較して、提供される端点通知表現が相違する。以下、本実施形態に係る情報処理装置１００による端点通知表現について説明する。なお、図１３は、本開示の第２の実施形態においてユーザが操作する対象を説明する説明図である。図１４〜図１８は、本実施形態に係る端点通知表現の一例を示す説明図である。
本実施形態においては、図１３に示すように、ユーザが背面２２０で指を接触させて動かすことで、表示面２１０に表示されたアイコン３００を移動させる場合について説明する。ユーザは背面２２０に指を接触させて任意の方向に移動させることで表示面２１０に表示されたアイコン３００を任意の方向へ移動させることができるが、指が背面検出部１１０から外れてしまうと、アイコン３００の移動ができなくなる。また、このアイコン３００に対するフォーカスも解除されてしまうと、ユーザはアイコン３００を移動させるために再度操作入力を行わなければならなくなる。そこで、本実施形態においても、アイコン３００を移動させる背面２２０の指が背面検出部１１０の設置領域外に出ようとしているとき、アイコン３００の表示状態を変化させる（すなわち、端点通知表現をする）ことにより、その状況をユーザに直感的に通知する。
本実施形態における操作対象であるアイコン３００のような既存のオブジェクトの場合、第１の実施形態のインジケータ２１２のように指の接触位置に応じてその形状を変化させることはできない。そこで、既存のオブジェクトをドラッグアンドドロップする場合に、操作対象のアイコン３００が背面検出部１１０の中心エリア２２２から縁エリア２２４に突入したとき、例えば図１４に示すように操作対象のアイコン３００をがたがたと回転させる。これにより、指が縁エリア２２４に突入すると、これまで回転していなかったアイコン３００が回転し始めるため、ユーザはアイコン３００の動きの変化によって直感的に指が背面検出部１１０の設置領域外に出ようとしているのを認識することができるようになる。
また、他の端点通知表現として、例えば図１５に示すように、操作対象のアイコン３００を操作する指が背面検出部１１０の中心エリア２２２から縁エリア２２４に突入したとき、アイコン３００を移動方向に対して直交方向に震えるように表示してもよい。これにより、指が縁エリア２２４に突入すると、これまで震えてなかったアイコン３００が震え始めるため、ユーザはアイコン３００の動きの変化によって直感的に指が背面検出部１１０の設置領域外に出ようとしているのを認識することができるようになる。
さらに他の端点通知表現として、例えば図１６に示すように、操作対象のアイコン３００を操作する指が背面検出部１１０の中心エリア２２２から縁エリア２２４に突入したとき、操作対象のアイコン３００の背景に付加オブジェクトであるインジケータ３１０を表示してもよい。指が縁エリア２２４に突入するとインジケータ３１０が表示されることで、ユーザは直感的に指が背面検出部１１０の設置領域外に出ようとしているのを認識することができるようになる。
また、他の端点通知表現として、例えば図１７に示すように、操作対象のアイコン３００を操作する指が背面検出部１１０の中心エリア２２２から縁エリア２２４に突入したとき、操作対象のアイコン３００が拡大縮小を繰り返すように表示してもよい。これにより、指が縁エリア２２４に突入すると、アイコン３００の大きさが変化し始めるため、ユーザはアイコン３００の大きさの変化によって直感的に指が背面検出部１１０の設置領域外に出ようとしているのを認識することができるようになる。
さらに他の端点通知表現として、例えば図１８に示すように、操作対象のアイコン３００を操作する指が背面検出部１１０の中心エリア２２２から縁エリア２２４に突入したとき、アイコン３００の移動方向の表示面２１０の画面端部にシャドーを表示してもよい。例えば、図１８に示すように、画面端に向かうにつれて濃い色となるようなシャドーを表示させる。このようなシャドーを画面端部に表示することで、ユーザは直感的に指が背面検出部１１０の設置領域外に出ようとしているのを認識することができるようになる。
以上、本実施形態に係る情報処理装置１００による端点通知表現について説明した。本実施形態によれば、指が背面検出部１１０の中心エリア２２２から縁エリア２２４へ突入したとき、ユーザに対してアイコン３００の動きやサイズ、画面の表示内容を変化させる等によってその旨を通知する。このとき、指が背面検出部１１０の縁により近づくにつれて端点通知表現が強調されるようにしてもよい。例えば、アイコン３００の動きを大きくしたり、アイコン３００のサイズの変化を大きくしたりする。これにより、表示面２１０のみを目視しているユーザに対してよりわかりやすく直感的に、指が背面検出部１１０の設置領域外に出ようとしているのを認識させることができる。
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本技術はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
例えば、上記実施形態では、操作体が背面検出部１１０の設置領域外に出ようとしていること伝える端点通知を表示面２１０の表示によってユーザに通知したが、本技術はかかる例に限定されない。例えば、情報処理装置１００自体を振動させて通知してもよく、音声によって通知してもよい。
また、上記第１の実施形態では、タッチ操作やタップ操作を行ったときに表示されるインジケータ２１２の形状は円形であったが、本技術はかかる例に限定されない。例えば、インジケータ２１２の形状は、三角形や四角形等の多角形であってもよい。
なお、本技術は以下のような構成も取ることができる。
（１）情報を表示する表示面と反対側の背面に対する操作体の接触を検出する検出部と、
前記検出部により検出された操作体の接触位置を判定する判定部と、
前記判定部の判定結果に基づいて、前記検出部により操作体の接触位置を検出可能な検出可能領域外に前記操作体が位置しようとしている状況をユーザに通知する通知処理部と、
を備える、情報処理装置。
（２）前記判定部は、前記背面に対する操作体の接触が検出されたとき、前記操作体の接触位置が、前記検出可能領域の縁部分にあたる縁エリアに位置するか否かを判定し、
前記通知処理部は、前記判定部により前記操作体の接触位置が前記縁エリアに位置すると判定されたとき、前記操作体が前記検出可能領域外に位置しようとしている状況をユーザに通知する、前記（１）に記載の情報処理装置。
（３）通知処理部は、
前記背面に対する操作体の接触が検出されたとき、前記操作体の操作入力の状況を表すインジケータを前記表示面に表示し、
前記判定部により前記操作体の接触位置が前記縁エリアに位置すると判定されたとき、前記インジケータの形状を変化させる、前記（２）に記載の情報処理装置。
（４）前記通知処理部は、前記検出部により前記背面に対する操作体の接触が検出されたとき、前記表示面に円形の前記インジケータを表示させる、前記（３）に記載の情報処理装置。
（５）前記通知処理部は、前記検出部により前記背面における操作体の移動が検出されたとき、前記インジケータを最初の接触位置と現在の接触位置とを結ぶ形状に変化させる、前記（３）または（４）に記載の情報処理装置。
（６）前記通知処理部は、前記判定部により前記操作体の接触位置が前記縁エリアに位置すると判定されたとき、前記インジケータの形状が潰れるように表示させる、前記（３）から（５）のいずれかに記載の情報処理装置。
（７）前記通知処理部は、前記検出部により前記操作体が前記縁エリアから前記検出可能領域外に位置したことが検出されたとき、前記インジケータが所定時間で非表示となるアニメーションを実行する、前記（３）から（６）のいずれかに記載の情報処理装置。
（８）前記インジケータが前記検出可能領域外に位置した後、前記所定時間内に前記背面に操作体が接触したことが前記検出部により検出されたとき、前記背面からの操作入力を継続して実行可能にする、前記（７）に記載の情報処理装置。
（９）前記表示面に表示されたオブジェクトを前記操作体により移動させているときに、前記判定部により前記操作体の接触位置が前記縁エリアに位置すると判定されたとき、前記通知処理部は、前記オブジェクトの動きを変化させる、前記（２）に記載の情報処理装置。
（１０）前記表示面に表示されたオブジェクトを前記操作体により移動させているときに、前記判定部により前記操作体の接触位置が前記縁エリアに位置すると判定されたとき、前記通知処理部は、前記オブジェクトに対して付加オブジェクトを付加表示する、前記（２）または（９）に記載の情報処理装置。
（１１）前記表示面に表示されたオブジェクトを前記操作体により移動させているときに、前記判定部により前記操作体の接触位置が前記縁エリアに位置すると判定されたとき、前記通知処理部は、前記操作体の移動方向における前記表示面の表示内容を変化させる、前記（２）、（９）または（１０）のいずれかに記載の情報処理装置。
１００ 情報処理装置
１１０ 背面検出部
１２０ 接触判定部
１３０ エリア判定部
１４０ 端点通知処理部
１５０ 出力部
１６０ 設定記憶部
２１０ 表示面
２１１ 表示内容
２１２ インジケータ
２２０ 背面
２２２ 中心エリア
２２４ 縁エリア
３００ アイコン

Claims (9)

  1. 情報を表示する表示面と反対側の背面に対する操作体の接触を検出する検出部と、
    前記検出部により検出された操作体の接触位置を判定する判定部と、
    前記判定部の判定結果に基づいて、前記検出部により操作体の接触位置を検出可能な検出可能領域外に前記操作体が位置しようとしている状況をユーザに通知する通知処理部と、
    を備え、
    前記判定部は、前記背面に対する操作体の接触が検出されたとき、前記操作体の接触位置が、前記検出可能領域の縁部分にあたる縁エリアに位置するか否かを判定し、
    前記通知処理部は、前記背面に対する操作体の接触が検出されたとき、前記操作体の操作入力の状況を表すインジケータを前記表示面に表示し、前記判定部により前記操作体の接触位置が前記縁エリアに位置すると判定されたとき、前記インジケータの形状を変化させ、前記検出部により前記操作体が前記縁エリアから前記検出可能領域外に位置したことが検出されたとき、前記インジケータが所定時間で非表示となるアニメーションを実行し、
    前記インジケータが前記検出可能領域外に位置した後、前記所定時間内に前記背面に操作体が接触したことが前記検出部により検出されたとき、前記背面からの操作入力を継続して実行可能にする、
    情報処理装置。
  2. 前記通知処理部は、前記検出部により前記背面に対する操作体の接触が検出されたとき、前記表示面に円形の前記インジケータを表示させる、請求項１に記載の情報処理装置。
  3. 前記通知処理部は、前記検出部により前記背面における操作体の移動が検出されたとき、前記インジケータを最初の接触位置と現在の接触位置とを結ぶ形状に変化させる、請求項２に記載の情報処理装置。
  4. 前記通知処理部は、前記判定部により前記操作体の接触位置が前記縁エリアに位置すると判定されたとき、前記インジケータの形状が潰れるように表示させる、請求項３に記載の情報処理装置。
  5. 前記表示面に表示されたオブジェクトを前記操作体により移動させているときに、前記判定部により前記操作体の接触位置が前記縁エリアに位置すると判定されたとき、前記通知処理部は、前記オブジェクトの動きを変化させる、請求項１に記載の情報処理装置。
  6. 前記表示面に表示されたオブジェクトを前記操作体により移動させているときに、前記判定部により前記操作体の接触位置が前記縁エリアに位置すると判定されたとき、前記通知処理部は、前記オブジェクトに対して付加オブジェクトを付加表示する、請求項１に記載の情報処理装置。
  7. 前記表示面に表示されたオブジェクトを前記操作体により移動させているときに、前記判定部により前記操作体の接触位置が前記縁エリアに位置すると判定されたとき、前記通知処理部は、前記操作体の移動方向における前記表示面の表示内容を変化させる、請求項１に記載の情報処理装置。
  8. 情報を表示する表示面と反対側の背面に対する操作体の接触を検出することと、
    検出された操作体の接触位置を判定することと、
    前記操作体の接触位置の判定結果に基づいて、操作体の接触位置を検出可能な検出可能領域外に位置しようとしている状況をユーザに通知することと、
    前記背面に対する操作体の接触が検出されたとき、前記操作体の接触位置が、前記検出可能領域の縁部分にあたる縁エリアに位置するか否かを判定することと、
    前記背面に対する操作体の接触が検出されたとき、前記操作体の操作入力の状況を表すインジケータを前記表示面に表示することと、
    前記操作体の接触位置が前記縁エリアに位置すると判定されたとき、前記インジケータの形状を変化させることと、
    前記操作体が前記縁エリアから前記検出可能領域外に位置したことが検出されたとき、前記インジケータが所定時間で非表示となるアニメーションを実行することと、
    前記インジケータが前記検出可能領域外に位置した後、前記所定時間内に前記背面に操作体が接触したことが検出されたとき、前記背面からの操作入力を継続して実行可能にすることと、
    を含む、情報処理方法。
  9. コンピュータを、
    情報を表示する表示面と反対側の背面に対する操作体の接触を検出部に検出させる検出制御部と、
    前記検出部により検出された操作体の接触位置を判定する判定部と、
    前記判定部の判定結果に基づいて、前記検出部により操作体の接触位置を検出可能な検出可能領域外に前記操作体が位置しようとしている状況をユーザに通知する通知処理部と、
    を備え、
    前記判定部は、前記背面に対する操作体の接触が検出されたとき、前記操作体の接触位置が、前記検出可能領域の縁部分にあたる縁エリアに位置するか否かを判定し、
    前記通知処理部は、前記背面に対する操作体の接触が検出されたとき、前記操作体の操作入力の状況を表すインジケータを前記表示面に表示し、前記判定部により前記操作体の接触位置が前記縁エリアに位置すると判定されたとき、前記インジケータの形状を変化させ、前記検出部により前記操作体が前記縁エリアから前記検出可能領域外に位置したことが検出されたとき、前記インジケータが所定時間で非表示となるアニメーションを実行し、
    前記インジケータが前記検出可能領域外に位置した後、前記所定時間内に前記背面に操作体が接触したことが前記検出部により検出されたとき、前記背面からの操作入力を継続して実行可能にする、
    情報処理装置として機能させる、コンピュータプログラム。
JP2011059387A 2011-03-17 2011-03-17 情報処理装置、情報処理方法およびコンピュータプログラム Expired - Fee Related JP5779923B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2011059387A JP5779923B2 (ja) 2011-03-17 2011-03-17 情報処理装置、情報処理方法およびコンピュータプログラム
US13/416,521 US9146676B2 (en) 2011-03-17 2012-03-09 Method and apparatus for notifying a user about a manipulation region on the back surface of the apparatus
CN201210061899.9A CN102736782B (zh) 2011-03-17 2012-03-09 信息处理设备、信息处理方法和计算机可读存储介质
EP12158828.9A EP2500813B1 (en) 2011-03-17 2012-03-09 Information processing apparatus, information processing method, and computer-readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011059387A JP5779923B2 (ja) 2011-03-17 2011-03-17 情報処理装置、情報処理方法およびコンピュータプログラム

Publications (2)

Publication Number Publication Date
JP2012194883A JP2012194883A (ja) 2012-10-11
JP5779923B2 true JP5779923B2 (ja) 2015-09-16

Family

ID=45874657

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011059387A Expired - Fee Related JP5779923B2 (ja) 2011-03-17 2011-03-17 情報処理装置、情報処理方法およびコンピュータプログラム

Country Status (4)

Country Link
US (1) US9146676B2 (ja)
EP (1) EP2500813B1 (ja)
JP (1) JP5779923B2 (ja)
CN (1) CN102736782B (ja)

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9395852B2 (en) * 2012-05-07 2016-07-19 Cirque Corporation Method for distinguishing between edge swipe gestures that enter a touch sensor from an edge and other similar but non-edge swipe actions
KR20140055047A (ko) * 2012-10-30 2014-05-09 삼성전자주식회사 디스플레이장치 및 그 제어방법
CN103853445B (zh) * 2012-12-05 2017-05-24 华为技术有限公司 一种控制图标的方法及设备
JP2014126949A (ja) * 2012-12-25 2014-07-07 Kyocera Corp 携帯端末装置、画面制御方法およびプログラム
JP6144926B2 (ja) * 2013-02-20 2017-06-07 株式会社スクウェア・エニックス 選択枝画面表示ゲーム装置及び選択枝画面表示ゲームプログラム
JP6044426B2 (ja) * 2013-04-02 2016-12-14 富士通株式会社 情報操作表示システム、表示プログラム及び表示方法
JP6237000B2 (ja) * 2013-08-29 2017-11-29 セイコーエプソン株式会社 頭部装着型表示装置
US9437782B2 (en) 2014-06-18 2016-09-06 X-Celeprint Limited Micro assembled LED displays and lighting elements
US9991163B2 (en) 2014-09-25 2018-06-05 X-Celeprint Limited Small-aperture-ratio display with electrical component
US9799719B2 (en) 2014-09-25 2017-10-24 X-Celeprint Limited Active-matrix touchscreen
US20160139723A1 (en) * 2014-11-18 2016-05-19 Sharp Kabushiki Kaisha User interface with touch sensor
JP2016146076A (ja) * 2015-02-09 2016-08-12 株式会社東海理化電機製作所 入力装置
US9871345B2 (en) 2015-06-09 2018-01-16 X-Celeprint Limited Crystalline color-conversion device
US10133426B2 (en) 2015-06-18 2018-11-20 X-Celeprint Limited Display with micro-LED front light
US11061276B2 (en) 2015-06-18 2021-07-13 X Display Company Technology Limited Laser array display
US10380930B2 (en) 2015-08-24 2019-08-13 X-Celeprint Limited Heterogeneous light emitter display system
CN105208277A (zh) * 2015-09-29 2015-12-30 努比亚技术有限公司 一种移动终端及其相机调焦处理方法
US10230048B2 (en) 2015-09-29 2019-03-12 X-Celeprint Limited OLEDs for micro transfer printing
US10066819B2 (en) 2015-12-09 2018-09-04 X-Celeprint Limited Micro-light-emitting diode backlight system
US10193025B2 (en) 2016-02-29 2019-01-29 X-Celeprint Limited Inorganic LED pixel structure
US10153257B2 (en) 2016-03-03 2018-12-11 X-Celeprint Limited Micro-printed display
US10153256B2 (en) 2016-03-03 2018-12-11 X-Celeprint Limited Micro-transfer printable electronic component
US10008483B2 (en) 2016-04-05 2018-06-26 X-Celeprint Limited Micro-transfer printed LED and color filter structure
US10199546B2 (en) 2016-04-05 2019-02-05 X-Celeprint Limited Color-filter device
US9997501B2 (en) 2016-06-01 2018-06-12 X-Celeprint Limited Micro-transfer-printed light-emitting diode device
US11137641B2 (en) 2016-06-10 2021-10-05 X Display Company Technology Limited LED structure with polarized light emission
CN107728910B (zh) * 2016-08-10 2021-02-05 深圳富泰宏精密工业有限公司 电子装置、显示屏控制系统及方法
US9980341B2 (en) 2016-09-22 2018-05-22 X-Celeprint Limited Multi-LED components
US10782002B2 (en) 2016-10-28 2020-09-22 X Display Company Technology Limited LED optical components
US10347168B2 (en) 2016-11-10 2019-07-09 X-Celeprint Limited Spatially dithered high-resolution
CN108958514B (zh) * 2018-06-29 2023-01-06 联想(北京)有限公司 一种电子设备

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5327161A (en) * 1989-08-09 1994-07-05 Microtouch Systems, Inc. System and method for emulating a mouse input device with a touchpad input device
JP3819096B2 (ja) * 1997-01-22 2006-09-06 株式会社東芝 ユーザインタフェース装置及び操作範囲呈示方法
JP2002055756A (ja) * 2000-08-09 2002-02-20 Ricoh Co Ltd ポインタ表示制御方法
AUPR667801A0 (en) * 2001-07-27 2001-08-23 Honeywell Limited A control system for allowing an operator to proportionally control a work piece
JP3852368B2 (ja) * 2002-05-16 2006-11-29 ソニー株式会社 入力方法及びデータ処理装置
GB0317715D0 (en) * 2003-07-29 2003-09-03 Koninkl Philips Electronics Nv Display and input device
JP4148187B2 (ja) * 2004-06-03 2008-09-10 ソニー株式会社 携帯型電子機器、入力操作制御方法及びそのプログラム
JP4171455B2 (ja) * 2004-11-29 2008-10-22 三洋電機株式会社 携帯情報システムおよび携帯情報端末
ITRM20060059A1 (it) * 2006-02-06 2007-08-07 Mediavoice S R L Dispositivio di controllo di un puntatore grafico su un area di lavoro di uno schermo di in elaboratore
CN1838052A (zh) * 2006-04-12 2006-09-27 魏新成 在电脑屏幕边缘单击鼠标键执行相应的功能操作
JP2007334827A (ja) 2006-06-19 2007-12-27 Sony Corp 携帯端末装置
EP2153377A4 (en) * 2007-05-04 2017-05-31 Qualcomm Incorporated Camera-based user input for compact devices
TWI389014B (zh) * 2007-11-23 2013-03-11 Elan Microelectronics Corp Touchpad detection method
KR20100086931A (ko) * 2007-12-07 2010-08-02 소니 가부시끼가이샤 제어 장치, 입력 장치, 제어 시스템, 제어 방법 및 핸드헬드 장치
JP4762262B2 (ja) * 2008-03-13 2011-08-31 シャープ株式会社 情報表示装置及び情報表示方法
KR101569427B1 (ko) * 2008-10-02 2015-11-16 삼성전자주식회사 휴대 단말기의 터치 입력 장치 및 그의 운영 방법
JP2010108061A (ja) * 2008-10-28 2010-05-13 Sony Corp 情報処理装置、情報処理方法および情報処理プログラム
US9367216B2 (en) * 2009-05-21 2016-06-14 Sony Interactive Entertainment Inc. Hand-held device with two-finger touch triggered selection and transformation of active elements
JP5617208B2 (ja) 2009-09-10 2014-11-05 株式会社リコー 定着装置および画像形成装置

Also Published As

Publication number Publication date
EP2500813A3 (en) 2015-05-06
EP2500813B1 (en) 2019-02-13
EP2500813A2 (en) 2012-09-19
US9146676B2 (en) 2015-09-29
CN102736782B (zh) 2017-03-01
US20120236022A1 (en) 2012-09-20
CN102736782A (zh) 2012-10-17
JP2012194883A (ja) 2012-10-11

Similar Documents

Publication Publication Date Title
JP5779923B2 (ja) 情報処理装置、情報処理方法およびコンピュータプログラム
JP5158014B2 (ja) 表示制御装置、表示制御方法およびコンピュータプログラム
JP5790203B2 (ja) 情報処理装置、情報処理方法、プログラム、および遠隔操作システム
JP6073782B2 (ja) 表示装置、表示制御方法及び表示制御プログラム、並びに、入力装置、入力支援方法及びプログラム
JP4734435B2 (ja) タッチパネル式ディスプレイを持った携帯型ゲーム装置
JP2009151821A5 (ja)
US20160179288A1 (en) Information processing apparatus and information processing method
JP2011059781A (ja) 情報表示装置、情報表示方法及びプログラム
JP2011141753A (ja) 表示制御装置、表示制御方法及び表示制御プログラム
JP5780438B2 (ja) 電子機器、位置指定方法及びプログラム
JP2011014044A (ja) 操作制御装置、操作制御方法およびコンピュータプログラム
WO2019119799A1 (zh) 一种显示应用图标的方法及终端设备
JP5811780B2 (ja) 情報処理装置およびその入力制御プログラム
JP5477108B2 (ja) 情報処理装置及びその制御方法並びにプログラム
JP4856136B2 (ja) 移動制御プログラム
JP5769841B2 (ja) タッチパネル式ディスプレイを持った携帯型ゲーム装置
JP2018023792A (ja) ゲーム装置及びプログラム
JP6380331B2 (ja) 操作入力装置及び操作入力方法
JP6126639B2 (ja) タッチパネル式ディスプレイを持った携帯型ゲーム装置及びゲームプログラム。
KR20140070264A (ko) 터치 스크린 디스플레이 입력을 통한 객체 스크롤 방법 및 장치
JP5523381B2 (ja) タッチパネル式ディスプレイを持った携帯型ゲーム装置
JP6204414B2 (ja) ゲーム装置及びプログラム
JP5769765B2 (ja) タッチパネル式ディスプレイを持った携帯型ゲーム装置
JP6112147B2 (ja) 電子機器、及び位置指定方法
JP2010217748A (ja) 表示装置及び表示用プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140306

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20141119

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20141125

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150107

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150616

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150629

R151 Written notification of patent or utility model registration

Ref document number: 5779923

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees