JP2010140417A - 情報処理装置、情報処理方法およびプログラム - Google Patents

情報処理装置、情報処理方法およびプログラム Download PDF

Info

Publication number
JP2010140417A
JP2010140417A JP2008318574A JP2008318574A JP2010140417A JP 2010140417 A JP2010140417 A JP 2010140417A JP 2008318574 A JP2008318574 A JP 2008318574A JP 2008318574 A JP2008318574 A JP 2008318574A JP 2010140417 A JP2010140417 A JP 2010140417A
Authority
JP
Japan
Prior art keywords
unit
state quantity
storage unit
divided
processing apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008318574A
Other languages
English (en)
Other versions
JP4743268B2 (ja
Inventor
Fumitada Honma
文規 本間
Tatsushi Nashida
辰志 梨子田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2008318574A priority Critical patent/JP4743268B2/ja
Priority to US12/637,222 priority patent/US8547358B2/en
Priority to CN2009102614666A priority patent/CN101943987B/zh
Publication of JP2010140417A publication Critical patent/JP2010140417A/ja
Application granted granted Critical
Publication of JP4743268B2 publication Critical patent/JP4743268B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/169Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated pointing device, e.g. trackball in the palm rest area, mini-joystick integrated between keyboard keys, touch pads or touch stripes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/12Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/22Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

【課題】選択対象となるオブジェクトが表示されずに選択できない状態において、ユーザの接触操作によって直感的にオブジェクトの状態を変化させてオブジェクトを選択できるようにすることが可能な技術を提供する。
【解決手段】情報処理装置100は、検出部120が検出した接触量に応じてオブジェクトが存在する空間を規定する所定のパラメータを変化させることによって、オブジェクトの状態量を変化させた場合に、変化後のオブジェクトの状態量を、所定のパラメータと記憶部160が記憶するオブジェクトの物理量と記憶部160が記憶するオブジェクトの状態量とを使用して力学モデルに基づいて算出する算出部170と、記憶部160が記憶するオブジェクトの状態量に基づいてオブジェクトを表示部150に表示させる制御部130と、を備える。
【選択図】図4

Description

本発明は、情報処理装置、情報処理方法およびプログラムに関する。
近年、日常のさまざまな情報を可視化するという表現(ambient information)が広く普及している(例えば、非特許文献1参照)。非特許文献1には、携帯電話の受信・発信といった情報を可視化する技術が開示されている。
また、ニュース情報を可視化する技術が開示されている(例えば、非特許文献2参照)。こういった表現法によれば、意図的に探してないアイテムが見えたり、ユーザが知らなかったことを発見できたりして、学習に役立つというメリットがある。
さらに、画面上でユーザが指定した座標に基づいてオブジェクトの回転軸と回転方向とを判定し、判定した結果に基づいてオブジェクトを回転させる技術が開示されている(特許文献1参照)。
特開2004−259065号公報 "TODAY",[online],[平成20年12月1日検索],インターネット<http://today.cada1.net/main.php> "TODAY",[online],[平成20年12月1日検索],インターネット<http://www.bbc.co.uk/white/spectrum.shtml>
しかしながら、非特許文献1や非特許文献2に開示されている表現法によれば、例えば、一度に多数のオブジェクトを画面上に表示する必要が生じる場合がある。そのために、画面面積の制限されたモバイル機器等では、オブジェクトサイズを小さくしたり、オブジェクトを奥行き方向に重ねて表示したりする必要が生じることとなる。このとき、タッチパネルからLCD(Liquid Crystal Display)上に表示された任意のオブジェクトを選択するという操作において、選択対象となるオブジェクトの表示面積を指で選択できる程度に十分に確保する必要がある。
オブジェクトサイズを小さくするという表現法においては、例えば、ズーム率を切り替えて対応するといった方法が考えられる。これには、オブジェクトの選択と全体の俯瞰を同時に行うことができないという問題がある。一方で、指で選択できる程度に十分に確保したサイズでオブジェクトを奥行き方向に重ねて表示するというアプローチでは、オブジェクトの裏に隠れたオブジェクトを選択する際に、手前にあるオブジェクトを移動させる操作が必要になり、1ステップで操作を完了できないという問題がある。
特許文献1に開示されている技術によれば、画面上でユーザが指定した座標に基づいてオブジェクトの回転軸と回転方向とを判定し、判定した結果に基づいてオブジェクトを回転させることができる。しかし、画面上でユーザが指定した座標によってオブジェクトの回転のさせ方が決まるので、選択対象となるオブジェクトが表示されずに選択できない状態を解消するための指定方法が分かりにくいという問題がある。
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、選択対象となるオブジェクトが表示されずに選択できない状態において、ユーザの接触操作によって直感的にオブジェクトの状態を変化させてオブジェクトを選択できるようにすることが可能な、新規かつ改良された技術を提供することにある。
上記課題を解決するために、本発明のある観点によれば、オブジェクトを表示することが可能である表示部と、オブジェクトに固有の物理量とオブジェクトの状態を示す状態量とを記憶する記憶する記憶部と、所定の処理を実行することが可能である処理部と、操作体から受ける圧力の大きさまたは操作体の接近度合いを接触量として検出する検出部と、検出部が検出した接触量に応じてオブジェクトが存在する空間を規定する所定のパラメータを変化させることによって、オブジェクトの状態量を変化させた場合に、変化後のオブジェクトの状態量を、所定のパラメータと記憶部が記憶するオブジェクトの物理量と記憶部が記憶するオブジェクトの状態量とを使用して力学モデルに基づいて算出し、算出した変化後のオブジェクトの状態量によって記憶部が記憶するオブジェクトの状態量を更新する算出部と、記憶部が記憶するオブジェクトの状態量に基づいてオブジェクトを表示部に表示させるとともに、記憶部が記憶するオブジェクトの状態量に応じた所定の処理を処理部に実行させる制御部と、を備える、情報処理装置が提供される。
オブジェクトは、複数の分割オブジェクトに分割されて構成され、記憶部は、物理量および状態量の組み合わせを各分割オブジェクトについて記憶し、算出部は、検出部が検出した接触量に応じて複数の分割オブジェクトが存在する空間を規定する所定のパラメータを変化させることによって、各分割オブジェクトの状態量を変化させた場合に、変化後の各分割オブジェクトの状態量を、所定のパラメータと記憶部が記憶する分割オブジェクトの物理量と記憶部が記憶する分割オブジェクトの状態量とを使用して力学モデルに基づいて算出し、算出した変化後の各分割オブジェクトの状態量によって記憶部が記憶する各分割オブジェクトの状態量を更新し、制御部は、記憶部が記憶する各分割オブジェクトの状態量を判断することによって複数の分割オブジェクトのうちで表示部に表示させている分割オブジェクトを特定し、特定した分割オブジェクトに応じた所定の処理を処理部に実行させることとしてもよい。
情報処理装置は、入力部をさらに備え、制御部は、特定した分割オブジェクトが複数存在する場合には、入力部を介して特定した複数の分割オブジェクトのいずれかを選択するための選択情報の入力を受け付け、選択情報によって選択される分割オブジェクトに応じた所定の処理を処理部に実行させることとしてもよい。
検出部は、表示部の背面に配置されており、算出部は、表示部と検出部との間に平面または曲面によって構成される面を有する土台が配置され、土台の面上に複数の分割オブジェクトが載せられているものとした場合に、検出部が検出した接触量に応じて表示部の方向に土台の厚さを増加させることによって所定のパラメータを変化させることとしてもよい。
算出部は、検出部が接触量を操作体によって接触された場所を示す場所情報をさらに検出した場合には、場所情報が示す場所ごとに接触量に応じて表示部の方向に土台の厚さを増加させることによって所定のパラメータを変化させることとしてもよい。
記憶部が記憶する各分割オブジェクトの物理量は、各分割オブジェクトの質量を含み、記憶部が記憶する各分割オブジェクトの状態量は、各分割オブジェクトの土台の面を基準とした高さを含む位置情報を含むこととしてもよい。
算出部は、土台の厚さを増加させることによって所定のパラメータを変化させた場合に、各分割オブジェクトの位置情報が示す高さが、記憶部が記憶する閾値未満のままであるか否かを判断し、閾値未満のままであると判断した分割オブジェクトについては、変化前の位置情報に含まれる高さに土台の厚みの増加分だけ加算することで変化後のオブジェクトの状態量を算出することとしてもよい。
オブジェクトは、複数の面に囲まれて構成され、制御部は、記憶部が記憶するオブジェクトの状態量を判断することによって複数の面のうちで表示部に表示させている面を特定し、特定した面に応じた所定の処理を処理部に実行させることとしてもよい。
情報処理装置は、入力部をさらに備え、制御部は、特定した面が複数存在する場合には、入力部を介して特定した複数の面のいずれかを選択するための選択情報の入力を受け付け、選択情報によって選択される面に応じた所定の処理を処理部に実行させることとしてもよい。
検出部は、表示部の背面に配置されており、算出部は、表示部と検出部との間に平面または曲面によって構成される面を有する土台が配置され、土台の面上にオブジェクトが載せられているものとした場合に、検出部が検出した接触量に応じて表示部の方向に土台の厚さを増加させることによって所定のパラメータを変化させることとしてもよい。
算出部は、検出部が接触量を操作体によって接触された場所を示す場所情報をさらに検出した場合には、場所情報が示す場所ごとに接触量に応じて表示部の方向に土台の厚さを増加させることによって所定のパラメータを変化させることとしてもよい。
記憶部が記憶するオブジェクトの物理量は、オブジェクトの質量を含み、記憶部が記憶するオブジェクトの状態量は、オブジェクトの土台の面を基準とした高さを含む位置情報を含むこととしてもよい。
以上説明したように本発明によれば、選択対象となるオブジェクトが表示されずに選択できない状態において、ユーザの接触操作によって直感的にオブジェクトの状態を変化させてオブジェクトを選択できるようにすることが可能な技術を提供することができる。
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。なお、説明は以下の順序で行う。
1. 第1実施形態
1−1.情報処理装置の使用例
1−2.情報処理装置のハードウェア構成
1−3.情報処理装置の機能
1−4.情報処理装置の動作
2. 第1実施形態の変形例
2−1.情報処理装置の機能
3. まとめ
<1.第1実施形態>
まず、本発明の第1実施形態について説明する。
[1−1.情報処理装置の使用例]
まず、本発明の第1実施形態にかかる情報処理装置の使用例について説明する。図1は、本発明の第1実施形態にかかる情報処理装置の使用例を示す図である。以下、図1を用いて本発明の第1実施形態にかかる情報処理装置の使用例について説明する。
本発明の実施形態では、表面にタッチパネル103、裏面にタッチパッド104を備えた情報処理装置100(モバイル機器等)について説明する。ユーザは、タッチパネル103に表示されているオブジェクトを選択する。ユーザは、例えば、表面におけるタップ操作では、第1接触部210(操作体)を使用し、裏面におけるタップ操作では、第2接触部220(操作体)を使用する。
以下では、第1接触部210としてユーザの右手の親指、第2接触部220としてユーザの右手の人差し指を使用することとして説明するが、これらの指に限定されず、ユーザ自身が使いやすい指を使用することとすればよい。例えば、左手の指を使用することとしてもよく、他の指(中指、薬指、小指等)を使用することとすればよい。また、第1接触部210と第2接触部220は、同一の指であってもよいし、異なる指であってもよい。
以上、本発明の第1実施形態にかかる情報処理装置100の使用例について説明した。次に、本発明の第1実施形態にかかる情報処理装置100のハードウェア構成について説明する。
[1−2.情報処理装置のハードウェア構成]
次に、本発明の第1実施形態にかかる情報処理装置のハードウェア構成について説明する。図2は、本発明の第1実施形態にかかる情報処理装置のハードウェア構成を示す分解斜視図である。以下、図2を用いて(適宜図1参照)、本発明の第1実施形態にかかる情報処理装置のハードウェア構成について説明する。
図2に示すように、情報処理装置100の上面には、情報入力装置102が配設されている。情報入力装置102は、ユーザの第1接触部210と接触することが可能な第1接触面102aを有しており、第1接触面102aにおける第1接触部210との接触位置を示す第1位置情報を取得することが可能である。情報入力装置102は、取得した第1位置情報をCPU108に情報信号として出力する。情報処理装置100のユーザは、情報入力装置102を操作することにより、情報処理装置100に対して各種のデータを入力したり処理動作を指示したりすることができる。情報入力装置102は、タッチパネル103の一部を構成するものである。
情報入力装置102の下面には、表示装置101が配設されている。表示装置101は、情報を表示することが可能にされたものである。表示装置101は、タッチパネル103の一部を構成するものである。表示装置101は、例えば、LCD(Liquid Crystal Display)、有機EL(Electroluminescence)ディスプレイ装置等、情報をユーザに対して視覚的に通知することが可能な装置で構成される。表示装置101は、例えば、情報処理装置100が行った各種処理により得られた結果を出力する。具体的には、表示装置101は、情報処理装置100が行った各種処理により得られた結果を、テキストまたはイメージで表示する。
表示装置101の下面には、基盤109が配設されている。基盤109には、情報処理装置100で使用される様々な部品、装置等が取り付けられている。具体的には、図3を用いて後述する、不揮発性メモリ106、RAM(Random Access Memory)107、CPU(Central Processing Unit)108等の装置が取り付けられている。
情報処理装置100の下面には、タッチパッド104が配置されている。タッチパッド104は、ユーザの第2接触部220と接触することが可能な第2接触面104aを有しており、第2接触面104aにおける第2接触部220との接触位置を示す第2位置情報を取得することが可能である。タッチパッド104は、取得した第2位置情報をCPU108に情報信号として出力する。タッチパッド104は、透明電極を構成する金属薄膜を利用した抵抗膜方式、指先と導電膜との間での静電容量の変化を捉えて位置を検出する静電容量方式や、赤外線遮光方式、電磁誘導方式など、第2接触部220の位置情報を検出できるもので構成される。
タッチパッド104の上面には、圧力センサ105が配置されている。圧力センサ105は、図2に示したように、タッチパッド104の上面の全面に配置されていることとしてもよいし、所定の箇所(4隅等)に設置されることとしてもよいが、圧力センサ105が配置される位置は特に限定されるものではない。圧力センサ105は、ユーザが第2接触部220によってタッチパッド104を押下した際に、第2接触部220から第2接触面104aが受けた圧力を検出することが可能な位置に配置されていればよい。
図3は、本発明の第1実施形態にかかる情報処理装置のハードウェア構成を示すブロック図である。以下、図3を用いて(適宜図1および図2参照)、本発明の第1実施形態にかかる情報処理装置のハードウェア構成について説明する。
図3に示すように、本発明の実施形態にかかる情報処理装置100は、タッチパネル103(表示装置101および情報入力装置102)と、タッチパッド104と、圧力センサ105と、不揮発性メモリ106と、RAM107と、CPU108と、を含んで構成される。
圧力センサ105は、上述したように、第2接触部220から第2接触面104aが受けた圧力を検出することが可能なものであり、その種類は特に限定されるものではない。
不揮発性メモリ(記憶部)106は、情報処理装置100の記憶部の一例として構成されたデータ格納用の装置であり、例えば、HDD(Hard Disk Drive)等の磁気記憶部デバイス、半導体記憶デバイス、光記憶デバイス、または光磁気記憶デバイス等により構成される。不揮発性メモリ106は、CPU108が実行するプログラムや各種データを格納する。本実施形態では、不揮発性メモリ106は、列仮名文字群と先頭行仮名文字とを対応付けて記憶している。
RAM107は、CPU108において使用するプログラムや、その実行において適宜変化するパラメータ等を一次記憶するものである。
CPU108は、演算処理装置および制御装置として機能し、不揮発性メモリ106、RAM107に記録された各種プログラムにしたがって、情報処理装置100内の動作全般またはその一部を制御するものである。
以上、本発明の各実施形態に係る情報処理装置100の機能を実現可能なハードウェア構成の一例を示した。上記の各構成要素は、汎用的な部材を用いて構成されていてもよいし、各構成要素の機能に特化したハードウェアにより構成されていてもよい。したがって、本実施形態を実施する時々の技術レベルに応じて、適宜、利用するハードウェア構成を変更することが可能である。
以上、本発明の実施形態にかかる情報処理装置100のハードウェア構成について説明した。次に、本発明の実施形態にかかる情報処理装置100の制御部の機能について説明する。
[1−3.情報処理装置の機能]
図4は、本発明の第1実施形態にかかる情報処理装置の機能ブロック図である。以下、図4を用いて(適宜図1ないし図3参照)、本発明の第1実施形態にかかる情報処理装置の機能について説明する。
図4に示すように、第1実施形態にかかる情報処理装置100は、タッチパネル103と、入力部110と、検出部120と、制御部130と、処理部140と、表示部150と、記憶部160と、算出部170とを備えるものである。これらの各ブロックについての説明は図6ないし図9を参照して後述する。
図5は、静電式タッチパッドを用いた位置情報の取得について説明するための説明図である。以下、図5を用いて(適宜図1ないし図4参照)、静電式タッチパッドを用いた位置情報の取得について説明する。
本実施形態では特に、タッチパッド104として静電式タッチパッドを用いて第2接触面104aに対する第2接触部220の接近度合いを接触量として検出する方法について説明する。図5(a)に示したように、静電式タッチパッドは、格子状(例えば10×7)に配置された静電センサを有しており、静電容量の変化によって静電センサの値を変化させる。
静電式タッチパッドの静電センサに第2接触部220が近づいたり触れたりした場合に、静電センサの静電容量が増加する。その増加量の変化をもとにタップ等のインタラクションが行われるのが一般的である。また、個々の静電センサの静電容量を同時に取得することも可能である。この場合、静電式タッチパッドのすべての静電センサの静電容量の変化を同時に検出し、補間することによって近接または接触している指の形を検出することが可能である。
図5(a)を参照して、静電式タッチパッドにおいて、近接または接触している指の形を検出している様子を説明する。図5(a)では、静電センサの静電容量が増加している領域を領域202で示し、静電センサの静電容量が変化していない領域を領域203で示している。第2接触部220が近接または接触している場合には、静電センサの容量が変化する。したがって、図5(a)に示したように、第2接触部220の形状に沿って、領域202の形が変化して、第2接触部220の形状を検出することができる。
このように、静電式タッチパッドを用いて、静電容量の変化を通して第2接触部220の形状や向きを検出することが可能となる。図5(b)に示したように、ユーザが静電式タッチパネルを第2接触部220で近接または接触させた場合は、領域214の静電容量が変化して、第2接触部220の形状を検出できる。
図6は、本発明の第1実施形態にかかる情報処理装置の機能を説明するための説明図(その1)である。図7は、本発明の第1実施形態にかかる情報処理装置の機能を説明する説明図(その2)である。図8は、本発明の第1実施形態にかかる情報処理装置の機能を説明する説明図(その3)である。図9は、本発明の第1実施形態にかかる情報処理装置の機能を説明する説明図(その4)である。以下、図6ないし図9を用いて(適宜図1ないし図5参照)、本発明の第1実施形態にかかる情報処理装置の機能について説明する。
図6(a)は、表示部150に表示されるオブジェクトを示すものである。図6(a)に示した例では、オブジェクトの例として、複数の分割オブジェクト101a、101b、101c、101dが示されている。このように、表示部150は、オブジェクト(例えば、分割オブジェクト101a、101b、101c、101d)を表示することが可能である。
ユーザはタッチパネル103上で第1接触部210によって分割オブジェクト101a、101b、101c、101dのいずれかを選択することが可能になっている。しかし、図6(a)に示したように、分割オブジェクト101a、101b、101c、101d同士が重なってしまい、選択しづらい場合がある。
図6(b)は、表示部150に表示されるオブジェクトが存在すると仮定した3次元仮想空間310を横から見た図である。土台101eは、タッチパッド104が検出する静電容量変化分布や圧力センサ105が検出した圧力によって一意にその厚さ(高さ)が決定する地面である。
図7に示すように、圧力センサ105が第2接触部220からの圧力を検出すると、検出した圧力の大きさに比例する分だけ、土台101eの厚さ(高さ)が増加する。タッチパッド104が第2接触部220との接触面積の増加を検出すると、円柱群320の数が増加する。また、タッチパッド104の静電容量の変化量によって、変化量が大きいほど個々の円柱の厚さ(高さ)が相対的に高くなる。なお、この円柱の数は静電タッチパッド(タッチパッド104)の静電センサの数に比例し、センサの数が増えると円柱が細分化され、より指の形に近い表現になる。
図8(a)は、分割オブジェクト101aが他の分割オブジェクトの上に重なっている様子を示しており、図8(a)の左図では、その様子が表示部150に表示された場合の表示例を示しており、図8(b)の右図では、その様子を横から見た図を示している。
入力部110は、情報の入力を受け付けるものである。入力部110は、例えば、タッチパネル103の情報入力装置102によって構成される。
記憶部160は、オブジェクト(例えば、分割オブジェクト101a、101b、101c、101d)に固有の物理量とオブジェクトの状態を示す状態量とを記憶する。オブジェクトに固有の物理量としては、例えば、オブジェクトの質量や、形状、静止摩擦係数、動摩擦係数、反発係数等が想定される。また、オブジェクトの状態を示す状態量としては、例えば、オブジェクトの位置等が想定される。
処理部140は、所定の処理を実行することが可能である。所定の処理はどのような処理であってもよく特に限定されるものではないが、例えば、インターネット上の情報をダウンロードする処理や音楽コンテンツデータを再生する処理等が想定される。
検出部120は、第2接触部220から受ける圧力の大きさまたは第2接触部220の接近度合いを接触量として検出するものである。検出部120は、例えば、上述した圧力センサ105によって第2接触部220から受ける圧力の大きさを接触量として検出することができる。また、検出部120は、例えば、タッチパッド104によって第2接触部220の接近度合いを接触量として検出することができる。
算出部170は、検出部120が検出した接触量に応じてオブジェクト(例えば、分割オブジェクト101a、101b、101c、101d)が存在する空間(3次元仮想空間310)を規定する所定のパラメータを変化させる。その後、算出部170は、オブジェクトの状態量を変化させた場合に、変化後のオブジェクトの状態量を、所定のパラメータと記憶部160が記憶するオブジェクトの物理量と記憶部160が記憶するオブジェクトの状態量とを使用して力学モデルに基づいて算出する。所定のパラメータとは、上述した例では、土台101eの厚さ(高さ)に相当する。力学モデルに基づいた算出では、上述したオブジェクトの物理量、状態量、所定のパラメータ等に基づいて、オブジェクトの3次元仮想空間における位置や向きを一意に決定する。算出部170は、算出した変化後のオブジェクトの状態量によって記憶部160が記憶するオブジェクトの状態量を更新する。
制御部130は、記憶部160が記憶するオブジェクトの状態量に基づいてオブジェクトを表示部150に表示させるとともに、記憶部160が記憶するオブジェクトの状態量に応じた所定の処理を処理部140に実行させるものである。
図8(a)に示したように、オブジェクトは、複数の分割オブジェクト(例えば、分割オブジェクト101a、101b、101c、101d)に分割されて構成されているとしてもよい。その場合には、記憶部160は、物理量および状態量の組み合わせを各分割オブジェクトについて記憶する。算出部170は、検出部120が検出した接触量に応じて複数の分割オブジェクトが存在する空間(3次元仮想空間310)を規定する所定のパラメータを変化させる。その後、算出部170は、各分割オブジェクトの状態量を変化させた場合に、変化後の各分割オブジェクトの状態量を、所定のパラメータと記憶部160が記憶する分割オブジェクトの物理量と記憶部160が記憶する分割オブジェクトの状態量とを使用して力学モデルに基づいて算出する。算出部170は、算出した変化後の各分割オブジェクトの状態量によって記憶部160が記憶する各分割オブジェクトの状態量を更新する。
オブジェクトは、複数の分割オブジェクトに分割されて構成されている場合には、制御部130は、記憶部160が記憶する各分割オブジェクトの状態量を判断する。これによって、制御部130は、複数の分割オブジェクトのうちで表示部150に表示させている分割オブジェクトを特定し、特定した分割オブジェクトに応じた所定の処理を処理部140に実行させる。例えば、他の分割オブジェクトによって一部または全部が隠れてしまっている分割オブジェクトが存在する場合には、制御部130は、隠れてしまっている分割オブジェクトを表示部150に表示されていないと判断する。
制御部130は、特定した分割オブジェクトが複数存在する場合には、入力部110を介して特定した複数の分割オブジェクトのいずれかを選択するための選択情報の入力を受け付けることとしてもよい。その場合には、選択情報によって選択される分割オブジェクトに応じた所定の処理を処理部140に実行させることとしてもよい。
検出部120は、表示部150の背面に配置されていることとしてもよい。その場合に、算出部170は、表示部150と検出部120との間に平面または曲面によって構成される面を有する土台101eが配置されていると仮定してもよい。また、その場合には算出部170は、土台101eの面上に複数の分割オブジェクト(例えば、分割オブジェクト101a、101b、101c、101d)が載せられているものと仮定してもよい。その場合に、算出部170は、検出部120が検出した接触量に応じて表示部150の方向に土台101eの厚さを増加させることによって所定のパラメータを変化させることとしてもよい。
算出部170は、検出部120が接触量を第2接触部220によって接触された場所を示す場所情報をさらに検出した場合には、場所情報が示す場所ごとに接触量に応じて表示部150の方向に土台101eの厚さを増加させることとしてもよい。算出部170は、このようにして所定のパラメータを変化させることとしてもよい。
記憶部160が記憶する各分割オブジェクトの物理量は、各分割オブジェクトの質量を含み、記憶部160が記憶する各分割オブジェクトの状態量は、各分割オブジェクトの土台101eの面を基準とした高さを含む位置情報を含むこととしてもよい。
算出部170は、土台101eの厚さを増加させることによって所定のパラメータを変化させた場合に、各分割オブジェクトの位置情報が示す高さが、記憶部160が記憶する閾値未満のままであるか否かを判断することとしてもよい。その場合に、算出部170は、閾値未満のままであると判断した分割オブジェクトについては、変化前の位置情報に含まれる高さに土台101eの厚みの増加分だけ加算することで変化後のオブジェクトの状態量を算出することとしてもよい。算出部170は、このように所定のパラメータを変化させて、例えば、分割オブジェクト101aの位置情報が示す高さだけが閾値以上となり、他の分割オブジェクト101b、101c、101dの位置情報が示す高さが閾値未満のままであると判断したとする。その場合には、図8(b)に示すような分割オブジェクトが表示部150に表示される。具体的には、算出部170は、分割オブジェクト101aに対してのみ力学モデルに基づいた算出を行い、分割オブジェクト101a’の位置を示す位置情報等に基づいて算出し、算出結果として分割オブジェクト101aの位置を示す位置情報を取得する。
図9(a)に示した例では、さらに第2接触部220がタッチパッド104を押し上げた場合について示している。算出部170は、例えば、分割オブジェクト101bの位置情報が示す高さだけが閾値以上となり、他の分割オブジェクト101a、101c、101dの位置情報が示す高さが閾値未満のままであると判断したとする。この場合には、算出部170は、分割オブジェクト101bに対してのみ力学モデルに基づいた算出を行い、分割オブジェクト101b’の位置を示す位置情報等に基づいて算出し、算出結果として分割オブジェクト101bの位置を示す位置情報を取得する。
同様に、図9(b)に示した例では、さらに第2接触部220がタッチパッド104を押し上げた場合について示している。算出部170は、例えば、分割オブジェクト101cの位置情報が示す高さだけが閾値以上となり、他の分割オブジェクト101a、101b、101dの位置情報が示す高さが閾値未満のままであると判断したとする。この場合には、算出部170は、分割オブジェクト101cに対してのみ力学モデルに基づいた算出を行い、分割オブジェクト101c’の位置を示す位置情報等に基づいて算出し、算出結果として分割オブジェクト101cの位置を示す位置情報を取得する。
[1−4.情報処理装置の動作]
図10は、本発明の第1実施形態にかかる情報処理装置の動作を示すフローチャートである。以下、図10を用いて(適宜図1ないし図9参照)本発明の第1実施形態にかかる情報処理装置の動作について説明する。
まず、情報処理装置100は、アプリケーション起動時に、タッチパッド104(静電タッチパッド)の静電容量の変化を監視し続けるスレッドを生成する。その中で、情報処理装置100は、静電タッチパッドの個々のセンサにおける静電容量を取得する。そして、情報処理装置100は、取得した静電容量とアプリケーション起動時の静電容量との差分値を算出し、任意の分解能に補間する(ステップS101)。次に、情報処理装置100は、算出した静電容量の変化を任意の間隔で離散化し、画面上に敷き詰められた円柱の高さに変換する(ステップS102)。静電容量の変化がないものについては、例えば、高さ0と設定する。次に、情報処理装置100は、圧力センサ105が取得した裏面を押しこむ第2接触部220の圧力情報を、任意の範囲で離散化し、全体の円柱の高さに加算する(ステップS103)。以上で全体の円柱の高さが一意に算出される。
次に、情報処理装置100は、3次元仮想空間310上の一番奥の壁面(z=0)に配置された円柱群320の高さを、算出した円柱群320の高さで書き換える。このとき、情報処理装置100は、高さが任意の数値以上(たとえばz>0)の円柱の上に配置されていたオブジェクトを、円柱の上に固定し、円柱の高さに応じて、固定を解除して、物理計算に基づき、任意の位置に移動させる(ステップS104)。
指が裏面タッチパッド104に触れていない近接状態にある場合における画面表示例を示した(図8(a)参照)。静電タッチパッドは、静電容量の変化を検出するため、接触がなくてもある程度の距離であれば検出が可能であり、この場合、円柱群の高さ(図7参照、簡略化のため指の形で図示する)はほぼ0に近く、土台101eの上に置かれるオブジェクトは静止状態とする。
指が裏面タッチパッド104に接触している状態における画面表示例を示した(図8(b)参照)。この場合、土台101eの一番上に位置する分割オブジェクト101aのみ、静止状態を解除し、物理運動による移動を行う。この際、高さのある土台101eから、高さのないエリアに向けて移動する。
指が裏面タッチパッド104に接触し、ある程度の圧力を加えた状態における画面表示例を示した(図9(a)参照)。この場合、土台101eの一番上に位置する分割オブジェクト101bのみ分割オブジェクト101aと同様に静止状態を解除され、高さのないエリアに向けて移動する。
図9(a)に示した場合よりも強く裏面タッチパッド104に対して圧力を加えた状態における画面表示例を示した(図9(b)参照)。ここでは、分割オブジェクト101cが静止状態を解除され、高さのないエリアに移動する。静止状態を保持しているのは、分割オブジェクト101dのみとなる。
任意のタイミングで表面からタップ検出があれば(ステップS105で「Yes」)、タップされたオブジェクトを選択状態にする(ステップS106)。図8および図9に示すように、指の押し込み具合およびその形状によって3次元仮想空間310上に物理的外力を与え、オブジェクトの静止状態(物理運動の無効化)を上に配置されたものから順に解除する。これによって、奥行き方向に重なったオブジェクトを直感的に最前部に移動させ、表面のタッチパネル103で選択しやすくする。
<2.第1実施形態の変形例>
まず、本発明の第1実施形態の変形例について説明する。
[2−1.情報処理装置の機能]
図11は、本発明の第1実施形態の変形例にかかる情報処理装置の機能を説明する説明図である。以下、図11を用いて(適宜図1ないし図10参照)、本発明の第1実施形態の変形例にかかる情報処理装置の機能について説明する。
オブジェクトは、複数の面101p、101q等に囲まれて構成されることとしてもよい。図11(a)の左図は、面101pが上面に存在する様子が表示部150に表示された場合の表示例を示している。図11(b)の右図は、その様子を横から見た図を示している。制御部130は、記憶部160が記憶するオブジェクトの状態量を判断することによって複数の面101p、101q等のうちで表示部150に表示させている面を特定し、特定した面に応じた所定の処理を処理部140に実行させる。図11(a)に示した例では、制御部130は、面101pに応じた処理(ブログタイトル「スポーツニュース」であるブログの情報をダウンロードする処理)を処理部140に実行させる。
制御部130は、特定した面が複数存在する場合には、入力部110を介して特定した複数の面のいずれかを選択するための選択情報の入力を受け付け、選択情報によって選択される面に応じた所定の処理を処理部140に実行させることとしてもよい。
また、第1実施形態で説明したように、検出部120は、表示部150の背面に配置されており、表示部150と検出部120との間に平面または曲面によって構成される面を有する土台101eが配置されていることとしてもよい。土台101eの面上にオブジェクトが載せられているものとした場合に、算出部170は、検出部120が検出した接触量に応じて表示部150の方向に土台101eの厚さを増加させることによって所定のパラメータを変化させることとしてもよい。
算出部170は、検出部120が接触量を第2接触部220によって接触された場所を示す場所情報をさらに検出した場合には、場所情報が示す場所ごとに接触量に応じて表示部150の方向に土台の厚さを増加させることによって所定のパラメータを変化させることとしてもよい。
図11(b)の左図は、第2接触部220が接触量を増加させた結果、土台101eの厚みが増加することによって、面101pから面101qに切り替わる途中の様子が表示部150に表示された場合の表示例を示している。図11(b)の右図は、その様子を横から見た図を示している。
図11(c)の左図は、第2接触部220が接触量をさらに増加させた結果、土台101eの厚みがさらに増加することによって、面101qが上面に存在することとなった様子が表示部150に表示された場合の表示例を示している。図11(c)の右図は、その様子を横から見た図を示している。図11(c)に示した例では、制御部130は、面101qに応じた処理(ブログタイトル「K夫妻のブログ」であるブログの情報をダウンロードする処理)を処理部140に実行させる。
<3.まとめ>
本発明の実施形態によれば、裏面タッチパッドに接触する指の形状および圧力に応じて、3次元仮想空間上に突起した地面を出現させることができる。これによって、奥行き方向に重なって表示されるオブジェクトに対して、手前のオブジェクトから順に移動させることで、奥行き方向の選択状態を直感的に変更させることができる。
また、本発明の本実施形態によれば、3次元仮想空間上に配置された奥行き方向に重なるオブジェクトを、裏面タッチパッドが検出した接触面積、圧力センサが検出した圧力によって移動させることで、水面に浮かぶ物体を手のひらですくう感覚に近い直感的なオブジェクト選択が可能になる。
web上のニュース記事、写真共有サイトの写真コンテンツ、webページの検索結果、RSSの更新情報、動画共有サイトの動画コンテンツ、音楽配信サイトの新着視聴コンテンツなど、雑多なコンテンツの選択操作を、ザッピングを直感的で飽きのこない感覚で実行できるようになる。
以上、添付図面を参照しながら本発明の好適な実施形態について説明したが、本発明は係る例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
本発明の第1実施形態にかかる情報処理装置の使用例を示す図である。 本発明の第1実施形態にかかる情報処理装置のハードウェア構成を示す分解斜視図である。 本発明の第1実施形態にかかる情報処理装置のハードウェア構成を示すブロック図である。 本発明の第1実施形態にかかる情報処理装置の機能ブロック図である。 静電式タッチパッドを用いた位置情報の取得について説明するための説明図である。 本発明の第1実施形態にかかる情報処理装置の機能を説明するための説明図(その1)である。 本発明の第1実施形態にかかる情報処理装置の機能を説明する説明図(その2)である。 本発明の第1実施形態にかかる情報処理装置の機能を説明する説明図(その3)である。 本発明の第1実施形態にかかる情報処理装置の機能を説明する説明図(その4)である。 本発明の第1実施形態にかかる情報処理装置の動作を示すフローチャートである。 本発明の第1実施形態の変形例にかかる情報処理装置の機能を説明する説明図である。
符号の説明
100 情報処理装置
101 表示装置
101a〜101d 分割オブジェクト
101e 土台
101p、101q 面
102 情報入力装置
102a 第1接触面
103 タッチパネル
104 タッチパッド
104a 第2接触面
105 圧力センサ
106 不揮発性メモリ
107 RAM
108 CPU
109 基盤
110 入力部
120 検出部
130 制御部
140 処理部
150 表示部
160 記憶部
170 算出部
210 第1接触部(操作体)
220 第2接触部(操作体)
310 3次元仮想空間
320 円柱群

Claims (14)

  1. オブジェクトを表示することが可能である表示部と、
    前記オブジェクトに固有の物理量と前記オブジェクトの状態を示す状態量とを記憶する記憶する記憶部と、
    所定の処理を実行することが可能である処理部と、
    操作体から受ける圧力の大きさまたは前記操作体の接近度合いを接触量として検出する検出部と、
    前記検出部が検出した前記接触量に応じて前記オブジェクトが存在する空間を規定する所定のパラメータを変化させることによって、前記オブジェクトの前記状態量を変化させた場合に、当該変化後のオブジェクトの状態量を、前記所定のパラメータと前記記憶部が記憶する前記オブジェクトの前記物理量と前記記憶部が記憶する前記オブジェクトの状態量とを使用して力学モデルに基づいて算出し、算出した前記変化後のオブジェクトの状態量によって前記記憶部が記憶する前記オブジェクトの前記状態量を更新する算出部と、
    前記記憶部が記憶する前記オブジェクトの前記状態量に基づいて前記オブジェクトを前記表示部に表示させるとともに、前記記憶部が記憶する前記オブジェクトの前記状態量に応じた所定の処理を前記処理部に実行させる制御部と、
    を備える、情報処理装置。
  2. 前記オブジェクトは、
    複数の分割オブジェクトに分割されて構成され、
    前記記憶部は、
    前記物理量および前記状態量の組み合わせを各分割オブジェクトについて記憶し、
    前記算出部は、
    前記検出部が検出した前記接触量に応じて前記複数の分割オブジェクトが存在する空間を規定する所定のパラメータを変化させることによって、前記各分割オブジェクトの前記状態量を変化させた場合に、当該変化後の各分割オブジェクトの状態量を、前記所定のパラメータと前記記憶部が記憶する前記分割オブジェクトの前記物理量と前記記憶部が記憶する前記分割オブジェクトの状態量とを使用して力学モデルに基づいて算出し、算出した前記変化後の各分割オブジェクトの状態量によって前記記憶部が記憶する前記各分割オブジェクトの前記状態量を更新し、
    前記制御部は、
    前記記憶部が記憶する前記各分割オブジェクトの状態量を判断することによって前記複数の分割オブジェクトのうちで前記表示部に表示させている分割オブジェクトを特定し、当該特定した分割オブジェクトに応じた所定の処理を前記処理部に実行させる、
    請求項1に記載の情報処理装置。
  3. 入力部をさらに備え、
    前記制御部は、
    前記特定した分割オブジェクトが複数存在する場合には、前記入力部を介して前記特定した複数の分割オブジェクトのいずれかを選択するための選択情報の入力を受け付け、前記選択情報によって選択される分割オブジェクトに応じた所定の処理を前記処理部に実行させる、
    請求項2に記載の情報処理装置。
  4. 前記検出部は、
    前記表示部の背面に配置されており、
    前記算出部は、
    前記表示部と前記検出部との間に平面または曲面によって構成される面を有する土台が配置され、当該土台の面上に前記複数の分割オブジェクトが載せられているものとした場合に、前記検出部が検出した前記接触量に応じて前記表示部の方向に前記土台の厚さを増加させることによって前記所定のパラメータを変化させる、
    請求項2に記載の情報処理装置。
  5. 前記算出部は、
    前記検出部が前記接触量を前記操作体によって接触された場所を示す場所情報をさらに検出した場合には、前記場所情報が示す場所ごとに前記接触量に応じて前記表示部の方向に前記土台の厚さを増加させることによって前記所定のパラメータを変化させる、
    請求項4に記載の情報処理装置。
  6. 前記記憶部が記憶する前記各分割オブジェクトの前記物理量は、
    前記各分割オブジェクトの質量を含み、
    前記記憶部が記憶する前記各分割オブジェクトの前記状態量は、
    前記各分割オブジェクトの前記土台の面を基準とした高さを含む位置情報を含む、
    請求項4に記載の情報処理装置。
  7. 前記算出部は、
    前記土台の厚さを増加させることによって前記所定のパラメータを変化させた場合に、前記各分割オブジェクトの位置情報が示す高さが、前記記憶部が記憶する閾値未満のままであるか否かを判断し、前記閾値未満のままであると判断した分割オブジェクトについては、変化前の位置情報に含まれる高さに前記土台の厚みの増加分だけ加算することで前記変化後のオブジェクトの状態量を算出する、
    請求項6に記載の情報処理装置。
  8. 前記オブジェクトは、
    複数の面に囲まれて構成され、
    前記制御部は、
    前記記憶部が記憶する前記オブジェクトの状態量を判断することによって前記複数の面のうちで前記表示部に表示させている面を特定し、当該特定した面に応じた所定の処理を前記処理部に実行させる、
    請求項1に記載の情報処理装置。
  9. 入力部をさらに備え、
    前記制御部は、
    前記特定した面が複数存在する場合には、前記入力部を介して前記特定した複数の面のいずれかを選択するための選択情報の入力を受け付け、前記選択情報によって選択される面に応じた所定の処理を前記処理部に実行させる、
    請求項8に記載の情報処理装置。
  10. 前記検出部は、
    前記表示部の背面に配置されており、
    前記算出部は、
    前記表示部と前記検出部との間に平面または曲面によって構成される面を有する土台が配置され、当該土台の面上に前記オブジェクトが載せられているものとした場合に、前記検出部が検出した前記接触量に応じて前記表示部の方向に前記土台の厚さを増加させることによって前記所定のパラメータを変化させる、
    請求項8に記載の情報処理装置。
  11. 前記算出部は、
    前記検出部が前記接触量を前記操作体によって接触された場所を示す場所情報をさらに検出した場合には、前記場所情報が示す場所ごとに前記接触量に応じて前記表示部の方向に前記土台の厚さを増加させることによって前記所定のパラメータを変化させる、
    請求項10に記載の情報処理装置。
  12. 前記記憶部が記憶する前記オブジェクトの前記物理量は、
    前記オブジェクトの質量を含み、
    前記記憶部が記憶する前記オブジェクトの前記状態量は、
    前記オブジェクトの前記土台の面を基準とした高さを含む位置情報を含む、
    請求項10に記載の情報処理装置。
  13. オブジェクトを表示することが可能である表示部と、前記オブジェクトに固有の物理量と前記オブジェクトの状態を示す状態量とを記憶する記憶する記憶部と、所定の処理を実行することが可能である処理部と、検出部と、算出部と、制御部とを備える情報処理装置の前記検出部によって、操作体から受ける圧力の大きさまたは前記操作体の接近度合いを接触量として検出するステップと、
    前記算出部によって、前記検出部が検出した前記接触量に応じて前記オブジェクトが存在する空間を規定する所定のパラメータを変化させることによって、前記オブジェクトの前記状態量を変化させた場合に、当該変化後のオブジェクトの状態量を、前記所定のパラメータと前記記憶部が記憶する前記オブジェクトの前記物理量と前記記憶部が記憶する前記オブジェクトの状態量とを使用して力学モデルに基づいて算出し、算出した前記変化後のオブジェクトの状態量によって前記記憶部が記憶する前記オブジェクトの前記状態量を更新するステップと、
    前記制御部によって、前記記憶部が記憶する前記オブジェクトの前記状態量に基づいて前記オブジェクトを前記表示部に表示させるとともに、前記記憶部が記憶する前記オブジェクトの前記状態量に応じた所定の処理を前記処理部に実行させるステップと、
    を含む、情報処理方法。
  14. コンピュータを、オブジェクトを表示することが可能である表示部と、
    前記オブジェクトに固有の物理量と前記オブジェクトの状態を示す状態量とを記憶する記憶する記憶部と、
    所定の処理を実行することが可能である処理部と、
    操作体から受ける圧力の大きさまたは前記操作体の接近度合いを接触量として検出する検出部と、
    前記検出部が検出した前記接触量に応じて前記オブジェクトが存在する空間を規定する所定のパラメータを変化させることによって、前記オブジェクトの前記状態量を変化させた場合に、当該変化後のオブジェクトの状態量を、前記所定のパラメータと前記記憶部が記憶する前記オブジェクトの前記物理量と前記記憶部が記憶する前記オブジェクトの状態量とを使用して力学モデルに基づいて算出し、算出した前記変化後のオブジェクトの状態量によって前記記憶部が記憶する前記オブジェクトの前記状態量を更新する算出部と、
    前記記憶部が記憶する前記オブジェクトの前記状態量に基づいて前記オブジェクトを前記表示部に表示させるとともに、前記記憶部が記憶する前記オブジェクトの前記状態量に応じた所定の処理を前記処理部に実行させる制御部と、
    を備える、情報処理装置として機能させるためのプログラム。
JP2008318574A 2008-12-15 2008-12-15 情報処理装置、情報処理方法およびプログラム Expired - Fee Related JP4743268B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2008318574A JP4743268B2 (ja) 2008-12-15 2008-12-15 情報処理装置、情報処理方法およびプログラム
US12/637,222 US8547358B2 (en) 2008-12-15 2009-12-14 Information processing apparatus, information processing method and program
CN2009102614666A CN101943987B (zh) 2008-12-15 2009-12-15 信息处理装置、信息处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008318574A JP4743268B2 (ja) 2008-12-15 2008-12-15 情報処理装置、情報処理方法およびプログラム

Publications (2)

Publication Number Publication Date
JP2010140417A true JP2010140417A (ja) 2010-06-24
JP4743268B2 JP4743268B2 (ja) 2011-08-10

Family

ID=42239913

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008318574A Expired - Fee Related JP4743268B2 (ja) 2008-12-15 2008-12-15 情報処理装置、情報処理方法およびプログラム

Country Status (3)

Country Link
US (1) US8547358B2 (ja)
JP (1) JP4743268B2 (ja)
CN (1) CN101943987B (ja)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012070539A1 (ja) * 2010-11-22 2012-05-31 シャープ株式会社 電子機器、表示制御方法、およびプログラム
WO2013065214A1 (ja) * 2011-10-31 2013-05-10 株式会社ソニー・コンピュータエンタテインメント 入力制御装置、入力制御方法、及び入力制御プログラム
JP2015049850A (ja) * 2013-09-04 2015-03-16 レノボ・シンガポール・プライベート・リミテッド 携帯型情報処理装置、そのデータ処理方法、およびコンピュータが実行可能なプログラム
JPWO2014003012A1 (ja) * 2012-06-29 2016-06-02 日本電気株式会社 端末装置、表示制御方法およびプログラム
US9904382B2 (en) 2012-04-27 2018-02-27 Murata Manufacturing Co., Ltd. Rear piezoelectric operation input device and front information display device
JP2018067323A (ja) * 2014-08-01 2018-04-26 株式会社 ハイディープHiDeep Inc. タッチ入力装置
US11023065B2 (en) 2013-07-29 2021-06-01 Hideep Inc. Touch sensor
US11182000B2 (en) 2014-09-19 2021-11-23 Hideep Inc. Smartphone

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140152628A1 (en) * 2009-10-06 2014-06-05 Cherif Atia Algreatly Computer input device for hand-held devices
US8378985B2 (en) * 2010-05-26 2013-02-19 Sony Mobile Communications Ab Touch interface for three-dimensional display control
US8952987B2 (en) * 2011-05-19 2015-02-10 Qualcomm Incorporated User interface elements augmented with force detection
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
US8743069B2 (en) 2011-09-01 2014-06-03 Google Inc. Receiving input at a computing device
JP5450569B2 (ja) * 2011-11-16 2014-03-26 株式会社バンダイナムコゲームス プログラム、電子機器およびコンピュータシステム
JP6021335B2 (ja) * 2011-12-28 2016-11-09 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法
KR102179056B1 (ko) * 2013-07-19 2020-11-16 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
JP2017185141A (ja) * 2016-04-08 2017-10-12 ルネサスエレクトロニクス株式会社 センサシステム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09134269A (ja) * 1995-11-10 1997-05-20 Matsushita Electric Ind Co Ltd 表示制御装置
JP2001170358A (ja) * 1999-10-04 2001-06-26 Nintendo Co Ltd ゲームシステム及びそれに用いられるゲーム情報記憶媒体
JP2008123376A (ja) * 2006-11-14 2008-05-29 Trust Technology:Kk メニュー表示装置、情報処理装置及びメニュー表示方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USRE40891E1 (en) * 1991-11-26 2009-09-01 Sandio Technology Corp. Methods and apparatus for providing touch-sensitive input in multiple degrees of freedom
US5880411A (en) * 1992-06-08 1999-03-09 Synaptics, Incorporated Object position detector with edge motion feature and gesture recognition
EP0604930B1 (en) * 1992-12-25 1997-10-29 Canon Kabushiki Kaisha Liquid crystal display apparatus
JP4100195B2 (ja) 2003-02-26 2008-06-11 ソニー株式会社 3次元オブジェクトの表示処理装置、表示処理方法、およびコンピュータプログラム
US7619616B2 (en) * 2004-12-21 2009-11-17 Microsoft Corporation Pressure sensitive controls
US8717301B2 (en) * 2005-08-01 2014-05-06 Sony Corporation Information processing apparatus and method, and program
US9501803B2 (en) * 2007-04-12 2016-11-22 Siemens Industry, Inc. Devices, systems, and methods for monitoring energy systems
US7995314B2 (en) * 2007-12-03 2011-08-09 Siemens Industry, Inc. Devices, systems, and methods for managing a circuit breaker

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09134269A (ja) * 1995-11-10 1997-05-20 Matsushita Electric Ind Co Ltd 表示制御装置
JP2001170358A (ja) * 1999-10-04 2001-06-26 Nintendo Co Ltd ゲームシステム及びそれに用いられるゲーム情報記憶媒体
JP2008123376A (ja) * 2006-11-14 2008-05-29 Trust Technology:Kk メニュー表示装置、情報処理装置及びメニュー表示方法

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012070539A1 (ja) * 2010-11-22 2012-05-31 シャープ株式会社 電子機器、表示制御方法、およびプログラム
WO2013065214A1 (ja) * 2011-10-31 2013-05-10 株式会社ソニー・コンピュータエンタテインメント 入力制御装置、入力制御方法、及び入力制御プログラム
JP2013097563A (ja) * 2011-10-31 2013-05-20 Sony Computer Entertainment Inc 入力制御装置、入力制御方法、及び入力制御プログラム
US9433857B2 (en) 2011-10-31 2016-09-06 Sony Corporation Input control device, input control method, and input control program
US9904382B2 (en) 2012-04-27 2018-02-27 Murata Manufacturing Co., Ltd. Rear piezoelectric operation input device and front information display device
US10394366B2 (en) 2012-06-29 2019-08-27 Nec Corporation Terminal device, display control method, and program
JPWO2014003012A1 (ja) * 2012-06-29 2016-06-02 日本電気株式会社 端末装置、表示制御方法およびプログラム
US11023065B2 (en) 2013-07-29 2021-06-01 Hideep Inc. Touch sensor
JP2015049850A (ja) * 2013-09-04 2015-03-16 レノボ・シンガポール・プライベート・リミテッド 携帯型情報処理装置、そのデータ処理方法、およびコンピュータが実行可能なプログラム
US10474271B2 (en) 2014-08-01 2019-11-12 Hideep Inc. Touch input device
US10983648B2 (en) 2014-08-01 2021-04-20 Hideep Inc. Touch input device
JP2018067323A (ja) * 2014-08-01 2018-04-26 株式会社 ハイディープHiDeep Inc. タッチ入力装置
US11301103B2 (en) 2014-08-01 2022-04-12 Hideep Inc. Touch input device
US11709573B2 (en) 2014-08-01 2023-07-25 Hideep Inc. Touch input device
US11182000B2 (en) 2014-09-19 2021-11-23 Hideep Inc. Smartphone

Also Published As

Publication number Publication date
CN101943987B (zh) 2013-06-05
JP4743268B2 (ja) 2011-08-10
US8547358B2 (en) 2013-10-01
US20100149129A1 (en) 2010-06-17
CN101943987A (zh) 2011-01-12

Similar Documents

Publication Publication Date Title
JP4743268B2 (ja) 情報処理装置、情報処理方法およびプログラム
US10852913B2 (en) Remote hover touch system and method
US8466934B2 (en) Touchscreen interface
US8570283B2 (en) Information processing apparatus, information processing method, and program
KR101542625B1 (ko) 제스처를 수행함으로써 사용자 인터페이스 내 오브젝트를 선택하기 위한 방법 및 장치
CN105683878B (zh) 用户界面中的用户界面对象操作
JP4093823B2 (ja) 視野移動操作方法
KR101541928B1 (ko) 시각적 피드백 디스플레이
Ni et al. Design and evaluation of freehand menu selection interfaces using tilt and pinch gestures
US8749497B2 (en) Multi-touch shape drawing
JP5873942B2 (ja) 携帯端末装置
US9423932B2 (en) Zoom view mode for digital content including multiple regions of interest
US20130167062A1 (en) Touchscreen gestures for selecting a graphical object
JP2011023043A (ja) ソリッドステートオブジェクト位置検出機
KR20070006477A (ko) 가변적 메뉴 배열 방법 및 이를 이용한 디스플레이 장치
Heller et al. Transporters: Vision & Touch Transitive Widgets for Capacitive Screens
JP6711616B2 (ja) グラフィック要素の選択
EP2779116B1 (en) Smooth manipulation of three-dimensional objects
WO2013044938A1 (en) Method and system for providing a three-dimensional graphical user interface for display on a handheld device
Hayes et al. Control-display ratio enhancements for mobile interaction
CN103914214A (zh) 一种显示方法及电子设备
US20190354279A1 (en) Method of selection and manipulation of graphical objects
WO2009019652A2 (en) Method of providing a graphical user interface
Fitchett Improved Mobile Scrolling Interfaces

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100927

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101005

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101129

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110412

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110425

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140520

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140520

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees