CN102981644B - 信息处理装置及信息处理方法 - Google Patents

信息处理装置及信息处理方法 Download PDF

Info

Publication number
CN102981644B
CN102981644B CN201210264466.3A CN201210264466A CN102981644B CN 102981644 B CN102981644 B CN 102981644B CN 201210264466 A CN201210264466 A CN 201210264466A CN 102981644 B CN102981644 B CN 102981644B
Authority
CN
China
Prior art keywords
distance
touch panel
display
control portion
information processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210264466.3A
Other languages
English (en)
Other versions
CN102981644A (zh
Inventor
大隅刚志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2011129013A external-priority patent/JP2012256213A/ja
Priority claimed from JP2012040193A external-priority patent/JP5845969B2/ja
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Publication of CN102981644A publication Critical patent/CN102981644A/zh
Application granted granted Critical
Publication of CN102981644B publication Critical patent/CN102981644B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • G06F3/0418Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • G06F3/04186Touch location disambiguation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/045Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using resistive elements, e.g. a single continuous surface or two parallel surfaces put in contact
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/041012.5D-digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface and also measures the distance of the input means within a short range in the Z direction, possibly with a separate measurement setup
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04106Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

本发明提供的信息处理装置具备输入操作受理部、距离确定部以及控制部。输入操作受理部受理与层叠有触摸面板的显示部的显示面(二维平面)大致平行的物体的移动,作为对触摸面板的触摸操作。距离确定部检测与执行触摸操作情况下的物体有关的、距显示部的显示面(二维平面)的距离。控制部根据由输入操作受理部受理的触摸操作的种类(对应于物体的移动轨迹而不同的种类)与由距离确定部检测的距离,对与显示的对象有关的处理的执行进行可变控制。

Description

信息处理装置及信息处理方法
本申请基于并主张分别于2011年6月9日和2012年2月27日提交的日本专利申请2011-129013和2012-040193的优先权,这里引入参考其内容。
技术领域
本发明涉及信息处理装置及信息处理方法。
背景技术
近来,具备层叠于液晶显示器等显示部上的触摸面板(タツチパネル)的信息处理装置的需要日益提高。信息处理装置根据基于用户手指或触摸笔等物体对触摸面板的接触或接近的操作(下面称为‘触摸操作’),执行与在显示部中显示的对象有关的处理(参照日本特开平07-334308号公报、日本实用新型注册第3150179号公报、日本特开2009-26155号公报、日本特开2006-236143号公报及日本特开2000-163031号公报)。
但是,即便在应用日本特开平07-334308号公报、日本实用新型注册第3150179号公报、日本特开2009-26155号公报、日本特开2006-236143号公报及日本特开2000-163031号公报中记载的技术的情况下,也产生以下问题:若不执行复杂的触摸操作,则有时无法恰当地执行与对象有关的处理。
这种问题不仅仅在触摸面板中产生,也在接触输入设备的操作、例如按下键盘的按键的操作或点击鼠标的操作等使手指等物体接触或接近输入设备等的现有操作整体中产生。
发明内容
本发明鉴于这种状况而做出,其目的在于实现:即便是不习惯现有操作的用户,也能够容易地指示对象的处理。
根据本发明的第1方式,提供一种信息处理装置,具备:
三维位置检测单元,检测物体相对于基准平面的三维方向的位置;
三维操作受理单元,根据所述三维位置检测单元在时间上间隔地多次检测到的所述物体的三维方向的各位置,识别该物体的三维方向的移动,受理该识别结果作为对于对象的指示操作;以及
控制单元,根据由所述三维操作受理单元受理的所述指示操作、及所述物体距所述基准平面的法线方向距离,可变控制与所述对象有关的处理。
根据本发明的第2方式,提供一种信息处理装置,具备:
三维位置检测单元,检测物体相对于基准平面的三维方向的位置;
三维操作受理单元,根据所述三维位置检测部件在时间上间隔地多次检测到的所述物体的三维方向的各位置,识别该物体的三维方向的移动,受理该识别结果作为对于对象的指示操作;以及
控制单元,根据由所述三维操作受理部件受理的所述指示操作,可变控制与所述对象有关的处理。
附图说明
图1是表示本发明第1实施方式所涉及的信息处理装置的硬件结构的框图。
图2是表示图1的信息处理装置的功能结构中的、用于执行输入操作受理处理的功能结构的功能框图。
图3是表示图1的信息处理装置的输入部的一部分的剖视图。
图4是说明具有图2的功能结构的图1的信息处理装置执行的第1实施方式的输入操作受理处理的流程的流程图。
图5A及图5B是表示对图1的信息处理装置的输入部执行轻击(flick)操作的状态的图。
图6是说明具有图2的功能结构的图1的信息处理装置执行的第2实施方式的输入操作受理处理的流程的流程图。
图7A及图7B是表示对图1的信息处理装置的输入部执行如描绘圆的轻击操作的状态的图。
图8是说明具有图2的功能结构的图1的信息处理装置的显示部显示的显示例的图。
图9是说明具有图2的功能结构的图1的信息处理装置执行的第3实施方式的输入操作受理处理的流程的流程图。
图10是说明具有图2的功能结构的图1的信息处理装置执行的第4实施方式的输入操作受理处理的流程的流程图。
图11A及图11B是表示对图1的信息处理装置执行向下触摸(タツチグウン)与向上触摸(タツチアツプ)的状态图。
图12是说明具有图2的功能结构的图1的信息处理装置执行的第5实施方式的输入操作受理处理的流程的流程图。
图13A及图13B是表示对图1的信息处理装置的输入部执行轻击操作的状态的图。
图14是说明具有图2的功能结构的图1的信息处理装置执行的第6实施方式的输入操作受理处理的流程的流程图。
图15A及图15B是表示边将手指接近或远离图1的信息处理装置的输入部17边执行轻击操作的状态的图。
图16是说明具有图2的功能结构的图1的信息处理装置执行的第7实施方式的输入操作受理处理的流程的流程图。
图17是表示与根据从向下触摸至向上触摸之间移动的手指的各个位置坐标制作的轨迹数据相对应的字符笔划(ストロ-ク,stroke)的显示例的图。
图18是说明具有图2的功能结构的图1的信息处理装置执行的第8实施方式的输入操作受理处理的流程的流程图。
图19是表示对图1的信息处理装置的输入部17执行触摸操作的状态的图。
图20是说明具有图2的功能结构的图1的信息处理装置执行的第9实施方式的输入操作受理处理的流程的流程图。
图21是表示对图1的信息处理装置的输入部执行触摸操作的状态的图。
图22是表示本发明实施方式所涉及的信息处理装置的硬件结构的框图。
图23是表示图22的信息处理装置的功能结构中的、用于执行输入操作受理处理的功能结构的功能框图。
图24是表示图22的信息处理装置的输入部的一部分的剖视图。
图25是说明具有图23的功能结构的图22的信息处理装置执行的输入操作受理处理的流程的流程图。
图26A、图26B、图26C及图26D表示对图22的信息处理装置的输入部执行触摸操作的状态。
图27A及图27B表示对图22的信息处理装置的输入部执行轻击操作的状态。
图28A及图28B表示在图22的信息处理装置的输入部上执行握手或张手的操作的状态。
图29A及图29B表示对图22的信息处理装置的输入部执行旋转操作的状态。
具体实施方式
下面,使用附图来说明本发明的实施方式。
[第1实施方式]
图1是表示本发明第1实施方式所涉及的信息处理装置的硬件结构的框图。
信息处理装置1例如构成为智能手机(smart phone)。
信息处理装置1具备CPU(Central Processing Unit:中央处理单元)11、ROM(Read Only Memory:只读存储器)12、RAM(RandomAccess Memory:随机存取存储器)13、总线14、输入输出接口15、显示部16、输入部17、拍摄部18、存储部19、通信部20以及驱动器21。
CPU11根据ROM12中记录的程序或从存储部19加载到RAM13的程序,执行各种处理。
在RAM13中还适当存储CPU11执行各种处理所需要的数据等。
CPU11、ROM12和RAM13经总线14相互连接。该总线14上还连接有输入输出接口15。输入输出接口15上连接有显示部16、输入部17、拍摄部18、存储部19、通信部20及驱动器21。
显示部16由显示器构成,显示图像。
输入部17由层叠于显示部16的显示画面上的触摸面板31构成,根据用户的指示操作,输入各种信息。输入部17如参照后述的图3所说明的那样,具备静电电容式触摸面板31a和阻抗膜式触摸面板31b。
拍摄部18拍摄被摄体,将包含该被摄体的像的图像(下面称为“拍摄图像”)的数据供给CPU11。
存储部19由硬盘或DRAM(Dynamic Random Access Memory:动态随机存储器)等构成,除了存储各种图像的数据、拍摄图像的数据外,还存储用于字符识别的应用程序等各种程序等。
通信部20控制经包含因特网的网络与其他装置(未图示)之间进行的通信。
驱动器21中适当安装由磁盘、光盘、磁光盘或半导体存储器等构成的可移动介质41。由驱动器21从可移动介质41读出的程序(例如上述字符识别所用的应用程序等)根据需要安装在存储部19中。另外,可移动介质41也能够与存储部19同样地存储在存储部19中存储的图像数据等各种数据。
图2是表示这种信息处理装置1的功能结构中的、用于执行输入操作受理处理的功能结构的功能框图。
所谓输入操作受理处理,是指以由用户按下未图示的电源按钮为契机开始的如下处理。即,所谓输入操作受理处理,是指受理对输入部17即触摸面板31的触摸操作并根据该触摸操作执行与对象有关的处理为止的一系列处理。
CPU11中,在对输入操作受理处理的执行进行控制的情况下,输入操作受理部51、距离确定部52与控制部53起作用。
在本实施方式中,如图3所示,输入部17的一部分构成为静电电容式触摸面板31a和阻抗膜式触摸面板31b。下面,在不必单独区别静电电容式触摸面板31a与阻抗膜式触摸面板31b的情况下,将它们统称为“触摸面板31”。
图3是表示输入部17的一部分的剖视图。
静电电容式触摸面板31a与阻抗膜式触摸面板31b分别层叠于显示部16(参照图1)的显示器的显示画面整体上,检测执行触摸操作的位置的坐标。这里,所谓触摸操作,是指如上所述那样物体(用户的手指或触摸笔等)对触摸面板31的接触或接近的操作。
静电电容式触摸面板31a与阻抗膜式触摸面板31b通过输入操作受理部51向控制部53供给检测到的位置坐标。
静电电容式触摸面板31a在显示部16的显示器的显示画面上由导电膜形成。即,因为仅指尖靠近静电电容式触摸面板31a的表面就引起静电耦合,所以即便在指尖不接触静电电容式触摸面板31a的情况下,仅仅接近,静电电容式触摸面板31a就捕捉指尖与导电膜之间的静电电容的变化,检测位置。若用户执行使如手指或触摸笔的突起物接触或接近显示画面的操作(触摸操作),则CPU11根据这种指尖与导电膜之间的静电电容的变化,检测该手指的接触位置的坐标。
阻抗膜式触摸面板31b在显示部16的显示器的显示画面上并行重叠如PET(Polyethylene terephthalate:聚对苯二甲酸乙二醇酯)的柔软的表面膜和位于表面膜以里的液晶玻璃膜来形成。双方的膜分别粘贴有透明的导电膜,通过透明的隔板分别电绝缘。表面膜与玻璃膜分别通过导体,若用户执行触摸操作,则表面膜因突起物产生的应力而弯曲,表面膜与玻璃膜局部变为导通状态。此时,电阻抗值或电位根据突起物的接触位置而变化。CPU11根据这种电阻抗值或电位的变化而检测该突起物的接触位置的坐标。
如上所述,静电电容式触摸面板31a捕捉指尖与导电膜之间的静电电容的变化,检测二维平面上(画面上)的位置。
这里,在该二维平面(画面)上构筑X轴和与X轴正交的Y轴,构筑与X轴及Y轴正交的Z轴,即与画面的法线平行的Z轴。此时,二维平面(画面)可以称为“XY平面”。
具体地,静电电容式触摸面板31a即便在手指101与静电电容式触摸面板31a非接触状态下,即即便在接近状态下,也能够检测执行了触摸操作的二维平面上的位置的坐标(即XY平面上的X坐标及Y坐标)。并且,此时,虽然谈不上高精度,但是静电电容式触摸面板31a也能够检测手指101与静电电容式触摸面板31a的距离,换言之,能够检测手指101的在高度方向的位置坐标(即Z轴上的Z坐标)。
与之相对,阻抗膜式触摸面板31b在手指101与阻抗膜式触摸面板31b非接触状态下,未检测为执行了触摸操作。即,在手指101与阻抗膜式触摸面板31b非接触状态的情况下,无法检测该手指101在二维平面上的位置的坐标(即XY平面上的X坐标及Y坐标),并且,也无法检测该手指101在高度方向的位置坐标(距离)(即Z轴上的Z坐标)。但是,阻抗膜式触摸面板31b与静电电容式触摸面板31a相比,能够高精度且高分辨率地检测执行了触摸操作的二维平面上的位置的坐标。
在本实施方式中,因为静电电容式触摸面板31a与阻抗膜式触摸面板31b按此顺序层叠在显示部16的显示器的显示画面整体上,所以能够由静电电容式触摸面板31a的表面来保护阻抗膜式触摸面板31b。并且,能够利用静电电容式触摸面板31a来检测即便非接触状态下也执行了触摸操作的二维平面上的位置的坐标及手指101与静电电容式触摸面板31a的距离(高度方向的位置坐标),即三维空间上的位置坐标。另一方面,在手指101接触的情况下,能够利用阻抗膜式触摸面板31b来高精度且高分辨率地检测执行了触摸操作的位置的坐标。
返回图2,输入操作受理部51受理对输入部17即触摸面板31(静电电容式触摸面板31a与阻抗膜式触摸面板31b)的触摸操作,作为对输入部17的输入操作(指示操作)之一。输入操作受理部51将所受理的二维上的位置坐标通知给控制部53。另外,若在触摸操作仍继续时在画面(XY平面)上移动手指101(下面,将这种伴随手指101在画面上移动的触摸操作称为‘轻击操作’),则输入操作受理部51将时间上间隔地多次检测到的手指101的各位置在XY平面上的位置坐标依次通知给控制部53。
距离确定部52检测距对输入部17即触摸面板31中的静电电容式触摸面板31a执行触摸操作的物体(手指101等)的距离。具体地,距离确定部52捕捉静电电容式触摸面板31a的静电电容的变化,确定手指101距静电电容式触摸面板31a(显示部16)的法线方向的距离,即输入部17与物体(手或手指101等)之间的距离(高度方向的位置坐标),将该距离通知给控制部53。
控制部53根据由输入操作受理部51受理的、与静电电容式触摸面板31a(显示部16)大致平行的二维方向的移动操作、即静电电容式触摸面板31a(显示部16)的二维平面上的位置坐标、及由距离确定部52确定的距离(高度方向的位置坐标),执行与在显示部16中显示的对象有关的处理等。具体地,控制部53根据由输入操作受理部51受理的移动操作及由距离确定部52确定的距离,识别多种触摸操作中的、已被执行的触摸操作,执行使表示与该触摸操作相对应的规定对象的图像以包含于显示部16的显示画面中的方式显示的控制等。与对象有关的操作的具体例参照后述的图4至21来说明。
另外,控制部53能够检测物体(用户手指或触摸笔等)开始对输入部17的接触或接近的行为(下面称为‘向下触摸’)、及从向下触摸的状态中解除物体(用户手指或触摸笔等)的接触或接近的行为(下面称为‘向上触摸,)。即,通过向下触摸开始一触摸操作,通过向上触摸终止该一触摸操作。
下面,参照图4,说明这种图2的功能结构的信息处理装置1执行的第1实施方式的输入操作受理处理。在第1实施方式中,用户根据是否对静电电容式触摸面板31a执行了触摸操作,执行其他文件的读入或页面发送中的任一处理,来作为对于对象的控制。
图4是说明具有图2的功能结构的图1的信息处理装置1执行的第1实施方式的输入操作受理处理的流程的流程图。
若利用信息处理装置1来执行输入操作受理处理,则CPU11中图2的各功能块起作用,执行如下处理。即,下面各步骤的处理的动作主体在硬件上由CPU11担当。但是,为了使本发明容易理解,设CPU11中起作用的各功能块为动作主体,说明以下各步骤的处理。
输入操作受理处理以用户按下信息处理装置1的电源按钮(未图示)为契机而开始,重复执行如下处理。
在步骤S11中,输入操作受理部51判断是否受理了用户对触摸面板31的触摸操作。在用户未执行对触摸面板31的触摸操作的情况下,在步骤S11中判定为否,处理再次返回步骤S11。即,在直到执行触摸操作为止期间,重复执行步骤S11的判定处理,输入操作受理处理为待机状态。之后,在执行了触摸操作的情况下,步骤S11判定为是,处理前进到步骤S12。
在步骤S12中,距离确定部52判定静电电容式触摸面板31a是否受理了触摸操作。具体地,距离确定部52通过确定输入部17即触摸面板31和与该触摸面板31相对的手或手指等物体之间的距离(高度方向的位置坐标),从而对静电电容式触摸面板31a判定是否受理了对于对象的指示操作。在静电电容式触摸面板31a受理了触摸操作的情况下,步骤S12中判定为是,处理前进到步骤S13。
在步骤S13中,控制部53判断为对静电电容式触摸面板31a执行了触摸操作,算出触摸操作相对于静电电容式触摸面板31a的移动量。具体地,控制部53根据通过输入操作受理部51受理的触摸操作受理开始时的二维上的位置坐标与当前触摸操作受理时的二维上的位置坐标的差分,算出当前触摸操作的移动量。
在步骤S14中,控制部53判定在步骤S13中算出的移动量是否超过了事先设定的设定量。在移动量未超过设定量的情况下,步骤S14中判定为否,处理返回到步骤S13。即,在直到移动量超过设定量为止期间,输入操作受理处理为待机状态。在移动量超过设定量的情况下,步骤S14中判定为是,处理前进到步骤S15。
在步骤S15中,控制部53执行其他文件的读入。参照后述的图5A及图5B来说明其他文件的读入的具体例。若该处理终止,则处理前进到步骤S19。步骤S19之后的处理如后所述。
在静电电容式触摸面板31a未受理触摸操作的情况下,步骤S12中判定为否,处理前进到步骤S16。
在步骤S16中,控制部53判断为对阻抗膜式触摸面板31b执行了触摸操作,算出触摸操作相对于阻抗膜式触摸面板31b的移动量。具体地,控制部53根据通过输入操作受理部51受理的触摸操作受理开始时的二维上的位置坐标与当前触摸操作受理时的二维上的位置坐标的差分,算出当前触摸操作的移动量。
在步骤S17中,控制部53判定步骤S16中算出的移动量是否超过事先设定的设定量。在移动量未超过设定量的情况下,步骤S17中判定为否,处理返回到步骤S16。即,在直到移动量超过设定量为止期间,输入操作受理处理为待机状态。在移动量超过设定量的情况下,步骤S17中判定为是,处理前进到步骤S18。
在步骤S18中,控制部53执行页面发送。参照后述的图5A及图5B来说明页面发送的具体例。若该处理终止,则处理前进到步骤S19。
在步骤S19中,控制部53判定是否有输入操作受理终止的指示。在无输入操作受理终止的指示的情况下,在步骤S19中判定为否,处理返回到步骤S11。即,在直到有输入操作受理终止的指示为止期间,重复执行步骤S11至S19的处理。
这样,通过在直到用户发出输入操作受理终止的指示为止期间,重复对触摸面板31的触摸操作,由此能够控制其他文件的读入或页面发送中的所期望的对象。之后,例如通过用户对信息处理装置1执行规定操作,在发出了输入操作受理终止的指示的情况下,在步骤S19中判定为是,输入操作受理处理终止。
下面,说明与对输入部17的操作相对应的、与对象有关的处理的具体例。这里,说明即便在执行了轻击操作的情况下,也根据手指101与输入部17的距离差异来变更与对象有关的处理的例子。
图5A及图5B是表示对图1的信息处理装置的输入部17执行轻击操作的状态的图。
如图5A所示,用户在输入部17与手指101之间的距离为0时执行了轻击操作的情况下,即在维持手指101接触输入部17的状态而执行轻击操作的情况下,控制部53判定为阻抗膜式触摸面板31b受理了触摸操作,作为与对象有关的处理,执行第1处理。
与之相对,如图5B所示,用户在输入部17与手指101之间的距离隔开的状态下执行了轻击操作的情况下,即在维持手指101与输入部17非接触的状态而执行轻击操作的情况下,控制部53判定为静电电容式触摸面板31a受理了触摸操作,作为与对象有关的处理,执行第2处理。
这里,第1处理与第2处理只要是相互不同的处理即可,可以是任意处理,但在本实施方式中,采用从存储部19中读入在显示部16中显示的文件(对象的一种)并将所读入的新文件显示在显示部16中的处理作为第1处理。另外,采用发送在显示部16中显示的书或本(对象的另一种)的页面的处理作为第2处理。
即,用户在输入部17与手指101之间的距离为0时执行了轻击操作的情况下(图5A的情况下),控制部53发送在显示部16中显示的书或本(对象的一种)的页面,将下一页面显示在显示部16中。与之相对,用户在输入部17与手指101之间的距离隔开的状态下执行了轻击操作的情况下(图5B的情况下),控制部53从存储部19中读入在显示部16中显示的文件,将读入的新文件显示在显示部16中。
以上对本发明第1实施方式所涉及的信息处理装置1进行了说明。
下面对本发明第2实施方式所涉及的信息处理装置1进行说明。
[第2实施方式]
下面,参照图6来说明图2的功能结构的信息处理装置1执行的第2实施方式的输入操作受理处理。在第2实施方式中,用户根据是否在静电电容式触摸面板31a中执行了触摸操作,执行如下处理来作为对于对象的控制:将在显示部16中显示的图像的角度旋转到沿触摸操作的接触点的任意角度、或旋转到规定大小的角度(例如90度)中任一处理。
若由信息处理装置1执行第2实施方式的输入操作受理处理,则CPU11中图2的各功能块起作用,执行如下处理。即,以下各步骤的处理的动作主体在硬件上由CPU11担当。但是,为了使本发明容易理解,设CPU11中起作用的各功能块为动作主体,说明以下各步骤的处理。
图6是说明具有图2的功能结构的图1的信息处理装置1执行的第2实施方式的输入操作受理处理的流程的流程图。
输入操作受理处理以用户按下信息处理装置1的电源按钮(未图示)为契机而开始,重复执行如下处理。
在步骤S31中,输入操作受理部51判定是否受理了用户对触摸面板31的触摸操作。在用户未执行对触摸面板31的触摸操作的情况下,在步骤S31中判定为否,处理再次返回步骤S31。即,在直到执行触摸操作为止期间,重复执行步骤S31的判定处理,输入操作受理处理为待机状态。之后,在执行了触摸操作的情况下,步骤S31中判定为是,处理前进到步骤S32。
在步骤S32中,距离确定部52判定静电电容式触摸面板31a是否受理了触摸操作。具体地,距离确定部52通过确定输入部17即触摸面板31和与该触摸面板31相对的手或手指等物体之间的距离(即Z轴上的Z坐标),对静电电容式触摸面板31a判定是否受理了对于对象的指示操作。在静电电容式触摸面板31a受理了触摸操作的情况下,步骤S32中判定为是,处理前进到步骤S33。
在步骤S33中,控制部53判断为对静电电容式触摸面板31a执行了触摸操作,算出触摸操作相对于静电电容式触摸面板31a的旋转角度。具体地,控制部53根据通过输入操作受理部51受理的触摸操作受理开始时的二维上的位置坐标角度与当前触摸操作受理时的二维上的位置坐标角度的角度差分,算出当前触摸操作的旋转角度。
在步骤S34中,控制部53执行将在显示部16中显示的图像旋转n度(n为0-360度中的任意角度)后显示的控制。参照后述的图7A及图7B来说明对图像旋转的具体例。若该处理终止,则处理前进到步骤S38。步骤S38以后的处理如后所述。
在静电电容式触摸面板31a未受理触摸操作的情况下,步骤S32中判定为否,处理前进到步骤S35。
在步骤S35中,控制部53判断为对阻抗膜式触摸面板31b执行了触摸操作,算出触摸操作相对于阻抗膜式触摸面板31b的旋转角度。具体地,控制部53根据通过输入操作受理部51受理的触摸操作受理开始时的二维上的位置坐标角度与当前触摸操作受理时的二维上的位置坐标角度的角度差分,算出当前触摸操作的旋转角度。
在步骤S36中,控制部53判定步骤S35中算出的旋转角度是否超过90度。在旋转角度未超过90度的情况下,步骤S36中判定为否,处理返回到步骤S35。即,在直到旋转角度超过90度为止期间,输入操作受理处理为待机状态。在旋转角度超过90度的情况下,步骤S36判定为是,处理前进到步骤S37。另外,控制部53判定算出的旋转角度是否超过90度,但判定的旋转角度不限于90度,可以采用用户事先设定的任意角度(0至360度)。
在步骤S37中,控制部53执行将在显示部16中显示的图像旋转90度后显示的控制。参照后述的图7A及图7B来说明将图像旋转90度的具体例。若该处理终止,则处理前进到步骤S38。
在步骤S38中,控制部53判定是否有输入操作受理终止的指示。在无输入操作受理终止的指示的情况下,在步骤S38中判定为否,处理返回到步骤S31。即,在直到有输入操作受理终止的指示为止期间,重复执行步骤S31至S38的处理。
这样,在直到用户发出输入操作受理终止的指示为止期间,通过重复对触摸面板31的触摸操作,能够控制将在显示部16中显示的图像(对象)旋转任意角度(n度)后显示或将图像(对象)旋转到事先设定的角度(在本实施方式中为90度)后显示。之后,例如通过用户对信息处理装置1执行规定操作,由此在发出了输入操作受理终止的指示的情况下,在步骤S38中判定为是,输入操作受理处理终止。
下面,说明与对输入部17的操作相对应的、与对象有关的处理的具体例。
说明即便在对显示部16的显示画面(二维平面)执行了如描绘圆的轻击操作的情况下,根据手指101与输入部17的距离差异来变更与对象有关的处理的例子。
图7A及图7B是表示对图1的信息处理装置的输入部17执行描绘圆等轻击操作的状态的图。
如图7A所示,用户在输入部17与手指101之间的距离为0时执行了描绘圆等轻击操作的情况下,即在维持手指101接触输入部17的状态而执行了轻击操作的情况下,控制部53判定为阻抗膜式触摸面板31b受理了触摸操作,作为涉及对象的处理,执行第3处理。
与之相对,如图7B所示,用户在输入部17与手指101之间的距离隔开的状态下执行了描绘圆等轻击操作的情况下,即在维持手指101与输入部17非接触的状态而执行轻击操作的情况下,控制部53判定为静电电容式触摸面板31a受理了触摸操作,作为与对象有关的处理,执行第4处理。
在本实施方式中,采用将在显示部16中显示的图像(对象的一种)旋转到任意角度(n度)后显示的处理作为第3处理。另外,采用将在显示部16中显示的图像(对象的另一种)旋转到90度(由用户事先设定的任意角度)后显示的处理作为第4处理。
即,用户在输入部17与手指101之间的距离为0时执行描绘圆等轻击操作的情况下(图7A的情况下),控制部53将在显示部16中显示的图像旋转到90度(由用户事先设定大小的角度)后显示在显示部16中。与之相对,用户在输入部17与手指101之间的距离隔开的状态下执行描绘圆等轻击操作的情况下(图7B的情况下),控制部53将在显示部16中显示的图像沿触摸操作的接触位置细微地旋转到任意角度(n度)后显示在显示部16中。
以上对本发明第2实施方式所涉及的信息处理装置1进行了说明。
下面对本发明第3实施方式所涉及的信息处理装置1进行说明。
[第3实施方式]
下面,参照图8及图9来说明图2的功能结构的信息处理装置1执行的第3实施方式的输入操作受理处理。
在第3实施方式中,作为在显示部16中显示的对象,采用软件按钮(下面简称为“按钮”)。具体地,若多个按钮散布于在显示部16的画面上构筑的三维空间内显示的多个层中,则规定的3D图像显示于显示部16中,以便映入用户的眼中。即,在多个按钮中,既存在在画面上的层中配置的按钮,也存在浮于画面上方的空中而配置在层中的按钮。用户能够执行按下在这些空间内散布的多个层的按钮中的、期望的按钮的触摸操作。
此时,信息处理装置1检测该按钮的按下,作为对静电电容式触摸面板31a的触摸操作,并执行用于发挥分配给该按钮的功能的处理(下面称为“按下处理”)。
若由信息处理装置1执行第3实施方式的输入操作受理处理,则CPU11中图2的各功能块起作用,执行如下处理。即,以下各步骤的处理的动作主体在硬件上由CPU11担当。但是,为了使本发明容易理解,设CPU11中起作用的各功能块为动作主体,说明以下各步骤的处理。
图8是说明具有图2的功能结构的图1的信息处理装置1的显示部16所显示的显示例的图。
第3实施方式的显示部16构成为能够显示3D(three-dimensional:三维)图像(未图示)。
在显示部16中显示的3D图像构成为多个层在Z轴方向(高度方向)上重叠后映入用户的眼中。这里,设3D图像的最下位层是与阻抗膜式触摸面板31b同位置的层,从该最下位层以外的上位层起以浮在空间中的方式映入用户的眼中,设越是配置位置高的层(越是沿Z轴方向接近用户的眼),则越上位。
但是,这里为了简略说明,如图8所示,设3D图像仅由最上位层16-1与最下位层16-2构成。即,设3D图像从具有手指101的用户看,仅由跟前(手前)的层16-1与其里头的层(その奥の層)16-2构成。另外,以在最上位层16-1中配置按钮111-1,在最下位层16-2中配置按钮111-2的方式,使3D图像映入观看的用户的眼中。即,设按钮111-1与按钮111-2分别配置在大致同一坐标(x,y),仅坐标z不同。这里,坐标x是X轴的坐标,坐标y是Y轴的坐标,坐标z是Z轴的坐标。
对最上位层16-1的触摸操作能够根据静电电容式触摸面板31a上的静电电容的电位变化来检测。另外,对最下位层16-2的触摸操作能够根据有无对阻抗膜式触摸面板31b的接触来检测。
另外,在本实施方式中,说明了最上位层16-1与最下位层16-2的关系,但不限于此。例如,因为静电电容式触摸面板31a能够检测坐标z,所以在存在多个最下位层以外的层的情况下,能够根据检测到的坐标z来检测执行了触摸操作的层。
下面,参照图9来说明图2的功能结构的信息处理装置1执行的第3实施方式的输入操作受理处理。
图9是说明具有图2的功能结构的图1的信息处理装置1执行的第3实施方式的输入操作受理处理的流程的流程图。
输入操作受理处理以用户按下信息处理装置1的电源按钮(未图示)为契机而开始,重复执行如下处理。
在步骤S51中,输入操作受理部51判定是否受理了用户对触摸面板31的触摸操作。在用户未执行对触摸面板31的触摸操作的情况下,在步骤S51中判定为否,处理再次返回步骤S51。即,在直到执行触摸操作为止期间,重复执行步骤S51的判定处理,输入操作受理处理为待机状态。之后,在执行了触摸操作的情况下,步骤S51判定为是,处理前进到步骤S52。
在步骤S52中,距离确定部52判定静电电容式触摸面板31a是否受理了触摸操作。具体地,距离确定部52通过确定输入部17即触摸面板31和与该触摸面板31相对的手或手指等物体之间的距离(高度方向的位置坐标),对静电电容式触摸面板31a判定是否受理了对于对象的指示操作。在静电电容式触摸面板31a受理了触摸操作的情况下,步骤S52中判定为是,处理前进到步骤S53。
在步骤S53中,控制部53判断为对静电电容式触摸面板31a执行了触摸操作,记录手指101与静电电容式触摸面板31a之间的静电电容的变化。具体地,控制部53开始记录在静电电容式触摸面板31a中设置的电容器(未图示)的静电电容(下面简称为‘静电电容’)的电位变化。
在步骤S54中,控制部53判定步骤S53中记录开始后的静电电容的迁移是否按“小→大→小”的顺序变化。
这里,若手指101接近静电电容式触摸面板31a,则静电电容稍增加。此时,静电电容仍为“小”的状态。之后,手指101进一步接近静电电容式触摸面板31a,当手指101大致接触到静电电容式触摸面板31a时,静电电容最大。此时,静电电容为“大”的状态。之后,解除手指101对静电电容式触摸面板31a的大致接触,随着手指101以远离上方向(Z轴方向)的方式移动,静电电容缓慢减少。此时,静电电容缓慢变为“小”的状态。
下面,将这样用户使其手指101开始接近静电电容式触摸面板31a、大致接触静电电容式触摸面板31a、并且之后远离为止的一系列动作称为‘拍打(タツプ)操作’。即,拍打操作是指,从通过手指101开始接近静电电容式触摸面板31a来开始一触摸操作起、至通过之后使手指101远离来终止该一触摸操作为止的一系列动作。
控制部53能够根据静电电容的迁移是否按“小→大→小”的顺序变化来检测是否执行了拍打操作。
在步骤S55中,控制部53检测步骤S54的处理中记录的静电电容的迁移的中心坐标。这里,图8中,图示出对1个层配置1个按钮的例子,但实际上对1个层配置多个按钮。控制部53检测执行了拍打操作时的、二维上位置的各个坐标的平均值,作为静电电容的迁移的中心坐标。另外,控制部53从一层中配置的多个按钮中确定检测到的中心坐标的范围内包含的按钮。
在步骤S56中,控制部53执行对最上位层16-1(参照图8)中配置的多个按钮中的、步骤S55的处理检测到的中心坐标的范围内所包含的按钮111-1的按下处理。若该处理终止,则处理前进到步骤S59。步骤S59之后的处理如后所述。
在静电电容式触摸面板31a未受理触摸操作的情况下,步骤S52中判定为否,即,判断为对阻抗膜式触摸面板31b执行了触摸操作,处理前进到步骤S57。
在步骤S57中,控制部53检测对阻抗膜式触摸面板31b执行触摸操作的坐标。之后,控制部53从在一层中配置的多个按钮中确定检测到的坐标范围内所包含的按钮。
在步骤S58中,控制部53执行对在最下位层16-2(参照图8)中配置的多个按钮中的、步骤S57的处理中检测到的坐标范围内包含的按钮111-2的按下处理。
在步骤S59中,控制部53判定是否有输入操作受理终止的指示。在无输入操作受理终止的指示的情况下,在步骤S59中判定为否,处理返回到步骤S51。即,在直到有输入操作受理终止的指示为止期间,重复执行步骤S51至S59的处理。
这样,在直到用户发出输入操作受理终止的指示为止期间,用户重复执行触摸操作,由此执行对与最上位层16-1或最下位层16-2中任一层相对应的按钮的按下处理的控制。之后,例如通过用户对信息处理装置1执行规定操作,由此在发出了输入操作受理终止的指示的情况下,在步骤S59中判定为是,输入操作受理处理终止。
以上对本发明第3实施方式所涉及的信息处理装置1进行了说明。
下面对本发明第4实施方式所涉及的信息处理装置1进行说明。
[第4实施方式]
下面,参照图10、图11A及图11B来说明这种图2的功能结构的信息处理装置1执行的第4实施方式的输入操作受理处理。在第4实施方式中,用户可以根据是否对静电电容式触摸面板31a执行触摸操作,控制PC(Personal computer:电脑)的UI(User Interface:用户界面)中的文件操作。作为文件(对象的一种)操作控制的具体例,执行将触摸操作的移动范围内的文件全部选择、或移动执行了触摸操作时的文件中的任一处理。在第4实施方式中,用户根据是否对静电电容式触摸面板31a执行触摸操作,作为对于对象的控制,执行将移动范围内的文件全部选择、或移动执行触摸操作时的文件中的任一处理。所谓文件移动,是指将向下触摸时坐标位置处存在的文件移动到向上触摸时的坐标位置的、所谓拖放(ドラツグアンドドロツプ)处理。
若由信息处理装置1执行第4实施方式的输入操作受理处理,则CPU11中图2的各功能块起作用,执行如下处理。即,以下各步骤的处理的动作主体在硬件上由CPU11担当。但是,为了使本发明容易理解,设CPU11中起作用的各功能块为动作主体,说明以下各步骤的处理。
图10是说明具有图2的功能结构的图1的信息处理装置1执行的第4实施方式的输入操作受理处理的流程的流程图。
输入操作受理处理以用户按下信息处理装置1的电源按钮(未图示)为契机而开始,重复执行如下处理。
在步骤S71中,输入操作受理部51判定是否受理了用户对触摸面板31的触摸操作。在用户未执行对触摸面板31的触摸操作的情况下,在步骤S71中判定为否,处理再次返回步骤S71。即,在直到执行触摸操作为止期间,重复执行步骤S71的判定处理,输入操作受理处理为待机状态。之后,在执行了触摸操作的情况下,步骤S71判定为是,处理前进到步骤S72。
在步骤S72中,距离确定部52判定静电电容式触摸面板31a是否受理了触摸操作。具体地,距离确定部52通过确定输入部17的触摸面板31和与该触摸面板31相对的手或手指等物体之间的距离(高度方向的位置坐标),对静电电容式触摸面板31a判定是否受理了对于对象的指示操作。在静电电容式触摸面板31a受理了触摸操作的情况下,步骤S72中判定为是,处理前进到步骤S73。
在步骤S73中,控制部53判断为对静电电容式触摸面板31a执行了触摸操作,检测从执行了向下触摸的坐标位置起至执行了向上触摸的坐标位置为止的、手指的移动范围。具体地,控制部53检测用户对静电电容式触摸面板31a执行了触摸操作,并识别该触摸操作的坐标位置。控制部53检测从对静电电容式触摸面板31a执行了在向下触摸时的坐标位置至执行了向上触摸的坐标位置之间所包含的范围,作为移动范围。
在步骤S74中,控制部53将步骤S73中检测到的移动范围内的文件全部选择。参照后述的图11A及图11B来说明移动范围内的文件选择。若该处理终止,则处理前进到步骤S78。步骤S78以后的处理如后所述。
在静电电容式触摸面板31a未受理触摸操作的情况下,步骤S72中判定为否,处理前进到步骤S76。
在步骤S76中,控制部53判断为对阻抗膜式触摸面板31b执行了触摸操作,选择执行了向下触摸的坐标位置的文件。参照后述的图11A及图11B来说明文件的选择。
在步骤S77中,控制部53将步骤S76中选择到的文件移动到向上触摸的坐标位置。参照后述的图11A及图11B来说明文件的移动。
在步骤S78中,控制部53判定是否有输入操作受理终止的指示。在无输入操作受理终止的指示的情况下,在步骤S78中判定为否,处理返回到步骤S71。即,在直到有输入操作受理终止的指示为止期间,重复执行步骤S71至S78的处理。
这样,在直到用户发出输入操作受理终止的指示为止期间,重复对触摸面板31的触摸操作,由此能够控制将移动范围内的文件(对象)全部选择或将向下触摸的坐标位置的文件移动至向上触摸的坐标位置(所谓拖放)。之后,例如通过用户对信息处理装置1执行规定操作,由此在发出了输入操作受理终止的指示的情况下,在步骤S78中判定为是,输入操作受理处理终止。
下面,说明与对输入部17的操作相对应的、与对象有关的处理的具体例。
说明即便在对显示部16的显示画面(二维平面)执行向下触摸与向上触摸的情况下,根据手指101与输入部17的距离差异来变更与对象有关的处理的例子。
图11A及图11B是表示对图1的信息处理装置的输入部17执行向下触摸与向上触摸的状态的图。
如图11A所示,用户在输入部17与手指101之间的距离为0时执行向下触摸及向上触摸的情况下,即在维持手指101接触输入部17的状态执行轻击操作的情况下,控制部53判定为阻抗膜式触摸面板31b受理了触摸操作,作为与对象有关的处理,执行第5处理。
与之相对,如图11B所示,用户在输入部17与手指101之间的距离隔开的状态下执行向下触摸与向上触摸的情况下,即在维持手指101与输入部17非接触的状态执行轻击操作的情况下,控制部53判定为静电电容式触摸面板31a受理了触摸操作,作为与对象有关的处理,执行第6处理。
在本实施方式中,采用在将位于向下触摸的坐标位置的文件选择之后将文件移动到向上触摸的坐标位置的处理作为第5处理。另外,采用将从向下触摸的坐标位置至向上触摸的坐标位置中所包含的移动范围内的文件全部选择的处理作为第6处理。
即,用户在输入部17与手指101之间的距离为0时执行向下触摸与向上触摸的情况下(图11A的情况下),控制部53将在显示部16中显示的文件中的、向下触摸的坐标位置的文件(对象的一种)移动到向上触摸的坐标位置。与之相对,用户在输入部17与手指101之间的距离隔开的状态下执行向上触摸与向下触摸的情况下(图11B的情况下),控制部53将在显示部16中显示的文件(对象的一种)中的、位于移动范围内的文件全部选择。
以上对本发明第4实施方式所涉及的信息处理装置1进行了说明。
下面对本发明第5实施方式所涉及的信息处理装置1进行说明。
[第5实施方式]
下面,参照图12、图13A及图13B来说明这种图2的功能结构的信息处理装置1执行的第5实施方式的输入操作受理处理。
第5实施方式所涉及的信息处理装置1可以采取与第1实施方式所涉及的信息处理装置1基本一样的硬件结构及功能结构。
因此,图1也是表示第5实施方式所涉及的信息处理装置1的硬件结构的框图。另外,图2也是表示第5实施方式所涉及的信息处理装置1的功能结构的功能框图。
另外,第5实施方式所涉及的信息处理装置1执行的输入操作受理处理为与第1实施方式所涉及的输入操作受理处理基本一样的流程。
但是,第5实施方式与第1实施方式的不同之处在于,用户根据是否对静电电容式触摸面板31a执行了触摸操作,作为对于对象的控制,执行显示同分类的其他文件与显示其他分类的其他文件中的任一处理。
因此,在第5实施方式中,步骤S15及步骤S18的处理采用图12的流程图,而非第1实施方式中采用的图4的流程图。具体地,在第5实施方式中,执行步骤S95的处理,代替图4的输入操作受理处理中步骤S15,执行步骤S98的处理,代替步骤S18。
因此,下面仅说明作为这种差异点的步骤S95及步骤S98,适当省略一致点的说明。
若由信息处理装置1执行第5实施方式的输入操作受理处理,则CPU11中图2的各功能块起作用,执行如下处理。即,以下各步骤的处理的动作主体在硬件上由CPU11担当。但是,为了使本发明容易理解,设CPU11中起作用的各功能块为动作主体,说明以下各步骤的处理。
图12是说明具有图2的功能结构的图1的信息处理装置1执行的第5实施方式的输入操作受理处理的流程的流程图。
在步骤S95中,控制部53执行显示同分类的其他文件的控制。参照后述的图13A及图13B来说明显示同分类的其他文件的具体例。若该处理终止,则处理前进到步骤S99。
在步骤S98中,控制部53执行显示其他分类的文件的控制。参照后述的图13A及图13B来说明显示其他分类的文件的具体例。若该处理终止,则处理前进到步骤S99。
下面,说明与对输入部17的操作相对应的、与对象有关的处理的具体例。在本实施方式中,说明即便在执行了轻击操作的情况下,也根据手指101与输入部17的距离差异来变更涉及对象的处理的例子。
图13A及图13B是表示对图1的信息处理装置的输入部17执行轻击操作的状态的图。
如图13A所示,在显示部16的中央显示配置穿着衬衣的模特的文件131-1。另外,在显示部16的左侧显示配置穿着长T恤的模特的文件131-2。另外,在显示部16的右侧显示配置穿着带缎带连衣裙的模特的文件131-3。文件131-1、文件131-2与文件131-3由互不相同的其他分类的其他文件构成,分别存储在存储部19中。
另外,如图13B所示,在显示部16的中央显示配置穿着红色衬衣的模特的文件141-1。另外,在显示部16的左侧显示配置穿着蓝色衬衣的模特的文件141-2。另外,在显示部16的右侧显示配置穿着黄色衬衣的模特的文件141-3。文件141-1中配置的模特、文件141-2中配置的模特与文件141-3中配置的模特分别采用相同模特。因此,文件141-1、文件141-2与文件141-3由彼此相同的分类(衬衣)的其他文件构成,分别存储在存储部19中。
如图13A所示,用户在输入部17与手指101之间的距离为0时执行轻击操作的情况下,即在维持手指101接触输入部17的状态执行轻击操作的情况下,控制部53判定为阻抗膜式触摸面板31b受理了触摸操作,作为与对象有关的处理,执行第7处理。
与之相对,如图13B所示,用户在输入部17与手指101之间的距离隔开的状态下执行轻击操作的情况下,即在维持手指101与输入部17非接触的状态执行轻击操作的情况下,控制部53判定为静电电容式触摸面板31a受理了触摸操作,作为与对象有关的处理,执行第8处理。
这里,第7处理与第8处理只要是相互不同的处理即可,可以是任意处理,但在本实施方式中,采用从存储部19中读入与当前显示部16中显示的文件不同分类的其他文件,将显示部16中显示的文件(对象的一种)变为读入的新文件后显示在显示部16的中央的处理作为第7处理。另外,采用从存储部19中读入与当前显示部16中显示的文件相同分类的其他文件,将显示部16中显示的文件(对象的一种)变为读入的新文件后显示在显示部16的中央的处理作为第8处理。
即,用户在输入部17与手指101之间的距离为0时在右侧执行了轻击操作的情况下(图13A的情况下),控制部53将在显示部16的中央显示的文件131-1变为其他分类的其他文件131-2后显示在显示部16的中央。同样地,用户在输入部17与手指101之间的距离为0时在左侧执行了轻击操作的情况下(图13A的情况下),控制部53将在显示部16的中央显示的文件131-1变为其他分类的其他文件131-3后显示在显示部16的中央。
与之相对,用户在输入部17与手指101之间的距离隔开的状态下在右侧执行轻击操作的情况下(图13B的情况下),控制部53将在显示部16的中央显示的文件141-1变为同分类的其他文件141-2后显示在显示部16的中央。同样地,用户在输入部17与手指101之间的距离隔开的状态下在左侧执行轻击操作的情况下(图13B的情况下),控制部53将在显示部16的中央显示的文件141-1变为同分类的其他文件141-3后显示在显示部16的中央。
以上对本发明第5实施方式所涉及的信息处理装置1进行了说明。
下面对本发明第6实施方式所涉及的信息处理装置1进行说明。
[第6实施方式]
下面,参照图14、图15A及图15B来说明这种图2的功能结构的信息处理装置1执行的第6实施方式的输入操作受理处理。在第6实施方式中,用户根据是否对静电电容式触摸面板31a执行了触摸操作,作为对于对象的控制,执行缩小或放大在显示部16中显示的地球仪(对象的一种)的图像等处理。
若由信息处理装置1执行第6实施方式的输入操作受理处理,则CPU11中图2的各功能块起作用,执行如下处理。即,以下各步骤的处理的动作主体在硬件上由CPU11担当。但是,为了使本发明容易理解,设CPU11中起作用的各功能块为动作主体,说明以下各步骤的处理。
图14是说明具有图2的功能结构的图1的信息处理装置1执行的第6实施方式的输入操作受理处理的流程的流程图。
输入操作受理处理以用户按下信息处理装置1的电源按钮(未图示)为契机而开始,重复执行如下处理。
在步骤S111中,输入操作受理部51判定是否受理了用户对触摸面板31的触摸操作。在用户未执行对触摸面板31的触摸操作的情况下,在步骤S111中判定为否,处理再次返回步骤S111。即,在直到执行触摸操作为止期间,重复执行步骤S111的判定处理,输入操作受理处理为待机状态。之后,在执行了触摸操作的情况下,步骤S111判定为是,处理前进到步骤S112。
在步骤S112中,距离确定部52判定静电电容式触摸面板31a是否检测到静电电容的变化。具体地,距离确定部52通过检测静电电容的变化,判定是否受理了对于对象(后述的图15A及图15B的地球仪)的指示操作。在静电电容式触摸面板31a检测到静电电容的变化的情况下,步骤S112中判定为是,处理前进到步骤S113。
在步骤S113中,控制部53判定步骤S112中检测到的静电电容是否增加。在静电电容减少的情况下,步骤S113中判定为否,处理前进到步骤S114。
在步骤S114中,控制部53判断为手指等远离静电电容式触摸面板31a,缩小显示在显示部16中显示的地球仪(对象的一种)。参照后述的图15A及图15B来说明缩小地球仪后显示在显示部16中的具体例。若该处理终止,则处理前进到步骤S119。步骤S119以后的处理如后所述。
在步骤S112中检测到的静电电容增加的情况下,步骤S113中判定为是,处理前进到步骤S115。
在步骤S115中,控制部53判断为手指等接近静电电容式触摸面板31a,放大显示在显示部16中显示的地球仪(对象的一种)。参照后述的图15A及图15B来说明放大地球仪后显示在显示部16中的具体例。若该处理终止,则处理前进到步骤S119。步骤S119以后的处理如后所述。
在静电电容式触摸面板31a未检测到静电电容的变化的情况下,步骤S112中判定为否,处理前进到步骤S116。
在步骤S116中,控制部53判定静电电容式触摸面板31a是否检测到坐标位置的移动。在检测到坐标位置的移动的情况下,步骤S116中判定为是,处理前进到步骤S117。
在步骤S117中,控制部53判断为在手指等与静电电容式触摸面板31a的距离为恒定的状态下对静电电容式触摸面板31a执行了轻击操作,旋转显示在显示部16中显示的地球仪(对象的一种)。参照后述的图15A及图15B来说明旋转地球仪后显示在显示部16中的具体例。若该处理终止,则处理前进到步骤S119。步骤S119以后的处理如后所述。
在静电电容式触摸面板31a无法检测到坐标位置的移动的情况下,步骤S116中判定为否,处理前进到步骤S118。
在步骤S118中,控制部53判断为对阻抗膜式触摸面板31b执行了触摸操作,选择在显示部16中显示的地球仪(对象的一种)中的执行了触摸操作的位置坐标。参照后述的图15A及图15B来说明选择进行了触摸操作的位置坐标的具体例。若该处理终止,则处理前进到步骤S119。
在步骤S119中,控制部53判定是否有输入操作受理终止的指示。在无输入操作受理终止的指示的情况下,在步骤S119中判定为否,处理返回到步骤S111。即,在直到有输入操作受理终止的指示为止期间,重复执行步骤S111至S119的处理。
这样,在直到用户发出输入操作受理终止的指示为止期间,重复对触摸面板31的触摸操作,由此能够执行缩小或放大显示在显示部16中显示的图像(对象)的控制。另外,能够执行旋转在显示部16中显示的图像(对象)或选择进行了触摸操作的位置坐标的控制。之后,例如通过用户对信息处理装置1执行规定操作,由此在发出了输入操作受理终止的指示的情况下,在步骤S119中判定为是,输入操作受理处理终止。
下面,说明与对输入部17的操作相对亦的、与对象有关的处理的具体例。
说明根据手指101与输入部17的距离差异来变更与在显示部16的显示画面(二维平面)中显示的地球仪(对象的一种)有关的处理的例子。
图15A及图15B是表示边使手指接近或远离图1的信息处理装置的输入部17边执行轻击操作的状态的图。
如图15A所示,用户在沿使手指101远离输入部17的方向运动的情况下,控制部53执行第9处理,作为与对象有关的处理。
与之相对,如图15A所示,用户在沿使手指101接近输入部17的方向运动的情况下,控制部53执行第10处理,作为与对象有关的处理。
另外,如图15B所示,在用户在输入部17与手指101之间的距离恒定的状态下执行轻击操作的情况下,控制部53执行第11处理,作为与对象有关的处理。
与之相对,如图15B所示,在用户使手指101接触阻抗膜式触摸面板31b而执行触摸操作的情况下,控制部53执行第12处理,作为与对象有关的处理。
即,在用户以输入部17与手指101之间的距离分开来的方式运动手指101的情况下(图15A的情况下),控制部53执行缩小显示在显示部16中显示的地球仪151的控制。与之相对,在用户以输入部17与手指101之间的距离接近的方式运动指101的情况下(图15A的情况下),控制部53执行放大显示在显示部16中显示的地球仪151的控制。
另外,在用户在使输入部17与手指101之间的距离恒定的状态下执行了轻击操作的情况下(图15B的情况下),控制部53执行旋转显示在显示部16中显示的地球仪151的控制。与之相对,用户使手指101接触阻抗膜式触摸面板31b而执行触摸操作的情况下(图15B的情况下),控制部53执行选择在显示部16中显示的地球仪151中执行了触摸操作的位置坐标的控制。
另外,在本实施方式中,根据静电电容式触摸面板31a中的静电电容是否增减来执行放大或缩小显示在显示部16中显示的地球仪151的控制,但不限于此。例如,可以根据静电电容式触摸面板31a中的静电电容的增减,执行改变旋转地球仪151的速度来显示的控制。具体地,在静电电容式触摸面板31a中的静电电容的变化量减少的情况下,即用户在使手指101远离静电电容式触摸面板31a的状态下进行了轻击操作的情况下,控制部53执行高速旋转在显示部16中显示的地球仪151来显示的控制。与之相对,在静电电容式触摸面板31a中的静电电容的变化量增加的情况下,即用户在使手指101接近静电电容式触摸面板31a的状态下进行了轻击操作的情况下,控制部53执行低速旋转在显示部16中显示的地球仪151来显示的控制。
以上对本发明第6实施方式所涉及的信息处理装置1进行了说明。
下面对本发明第7实施方式所涉及的信息处理装置1进行说明。
[第7实施方式]
下面,参照图16来说明这种图2的功能结构的信息处理装置1执行的第7实施方式的输入操作受理处理。在第7实施方式中,用户根据是否对静电电容式触摸面板31a执行了触摸操作,作为对于对象的控制,执行选择小字符或选择大字符等选择不同字符种类作为由字符识别算法取得的变换候补字符的处理。
图16是说明具有图2的功能结构的图1的信息处理装置1执行的第7实施方式的输入操作受理处理的流程的流程图。
输入操作受理处理以用户按下信息处理装置1的电源按钮(未图示)为契机而开始,重复执行如下处理。
在步骤S131中,输入操作受理部51判定是否受理了用户对触摸面板31的触摸操作。在用户未执行对触摸面板31的触摸操作的情况下,在步骤S131中判定为否,处理再次返回步骤S131。即,在直到执行触摸操作为止期间,重复执行步骤S131的判定处理,输入操作受理处理为待机状态。之后,在执行了触摸操作的情况下,步骤S131判定为是,处理前进到步骤S132。
在步骤S132中,距离确定部52判定静电电容式触摸面板31a是否受理了触摸操作。具体地,距离确定部52通过确定输入部17的触摸面板31和与该触摸面板31相对的手或手指等物体之间的距离(高度方向的位置坐标),对静电电容式触摸面板31a判定是否受理了对于对象的指示操作。在静电电容式触摸面板31a受理了触摸操作的情况下,步骤S132中判定为是,处理前进到步骤S133。
在步骤S133中,输入操作受理部51取得从向下触摸至向上触摸之间移动的手指的各个位置坐标。之后,控制部53根据输入操作受理部51取得的各个位置坐标的轨迹,制作轨迹数据。另外,控制部53执行将与制作出的轨迹数据相对应的字符笔划显示在显示部16中的控制。
在步骤S134中,控制部53根据步骤S133中制作出的轨迹数据,通过图案匹配等,根据公知的字符识别算法,取得多个变换候补字符。
在步骤S135中,控制部53从在步骤S134中取得的多个变换候补字符中选择小字符。之后,控制部53执行将选择到的小字符显示在显示部16中的控制。参照后述的图17来说明从变换候补字符中选择小字符的具体例。若该处理终止,则处理前进到步骤S139。步骤S139之后的处理如后所述。
在静电电容式触摸面板31a未受理触摸操作的情况下,步骤S132中判定为否,处理前进到步骤S136。
在步骤S136中,输入操作受理部51取得从向下触摸至向上触摸之间移动的手指的各个位置坐标。之后,控制部53根据输入操作受理部51取得的各个位置坐标的轨迹,制作轨迹数据。另外,控制部53执行将与制作出的轨迹数据相对应的字符笔划显示在显示部16中的控制。
在步骤S137中,控制部53根据步骤S136中制作出的轨迹数据,通过图案匹配等,根据公知的字符识别算法,取得多个变换候补字符。
在步骤S138中,控制部53从在步骤S137中取得的多个变换候补字符中选择大字符。之后,控制部53执行将选择到的大字符显示在显示部16中的控制。参照后述的图17来说明从变换候补字符中选择大字符的具体例。若该处理终止,则处理前进到步骤S139。
在步骤S139中,控制部53判定是否有输入操作受理终止的指示。在无输入操作受理终止的指示的情况下,在步骤S139中判定为否,处理返回到步骤S131。即,在直到有输入操作受理终止的指示为止期间,重复执行步骤S131至S139的处理。
这样,在直到用户发出输入操作受理终止的指示为止期间,通过重复对触摸面板31的触摸操作,能够执行选择小字符或大字符作为由字符识别算法取得的变换候补字符来显示的控制。之后,例如通过用户对信息处理装置1执行规定操作,在发出来输入操作受理终止的指示的情况下,在步骤S139中判定为是,输入操作受理处理终止。
下面,说明与对输入部17的操作相对应的、与对象有关的处理的具体例。
参照图17来说明根据手指101与输入部17的距离差异来从变换候补字符中选择小字符或大字符中任一字符(对象的一种)的例子。
图17是表示与根据从向下触摸至向上触摸间移动的手指的各个位置坐标制作出的轨迹数据相对应的字符笔划161的显示例的图。
控制部53根据由输入操作受理部51取得的各个位置坐标的轨迹,制作轨迹数据,根据公知的字符识别算法,对制作出的轨迹数据执行图案匹配等,取得多个变换候补字符。
用户在输入部17与手指101之间的距离隔开的状态下在向上触摸至向下触摸之间移动手指的情况下,即对静电电容式触摸面板31a执行了触摸操作的情况下,控制部53执行第13处理,作为与对象有关的处理。与之相对,用户在输入部17与手指101之间的距离大致为0(接触)的状态下在向上触摸至向下触摸之间移动手指的情况下,即对阻抗膜式触摸面板31b执行了触摸操作的情况下,控制部53执行第14处理,作为与对象有关的处理。
即,用户在输入部17与手指101之间的距离隔开的状态下执行了触摸操作的情况下,控制部53选择小字符,作为根据字符识别算法选择的字符。与之相对,用户在输入部17与手指101之间的距离大致为0的状态下执行了触摸操作的情况下,控制部53选择大字符,作为根据字符识别算法选择的字符。
另外,在本实施方式中,根据静电电容式触摸面板31a是否受理了触摸操作,从变换候补字符中选择小字符或选择大字符,但不限于此。例如,可以根据静电电容式触摸面板31a是否受理了触摸操作,选择浊音(半浊音)与无浊音的通常字符中的任一字符,或选择通常的‘つ,与小写的‘っ’中的任一字符。具体地,在静电电容式触摸面板31a受理了触摸操作的情况下,即,用户在手指101远离触摸面板31的状态下执行了触摸操作的情况下,控制部53从变换候补中选择浊音(半浊音)的字符或小写的‘っ’。与之相对,在静电电容式触摸面板31a未受理触摸操作的情况下,即,用户在使手指101接触阻抗膜式触摸面板31b的状态下执行触摸操作的情况下,控制部53从变换候补中选择非浊音或小写的通常字符。
以上对本发明第7实施方式所涉及的信息处理装置1进行了说明。
下面对本发明第8实施方式所涉及的信息处理装置1进行说明。
[第8实施方式]
下面,参照图18及图19来说明这种图2的功能结构的信息处理装置1执行的第8实施方式的输入操作受理处理。在第8实施方式中,用户根据是否对静电电容式触摸面板31a执行了触摸操作,作为对于对象的控制,执行根据对静电电容式触摸面板31a的触摸操作来执行拍摄或根据对阻抗膜式触摸面板31b的触摸操作来执行拍摄等的处理。
若由信息处理装置1执行第8实施方式的输入操作受理处理,则CPU11中图2的各功能块起作用,执行如下处理。即,以下各步骤的处理的动作主体在硬件上由CPU11担当。但是,为了使本发明容易理解,设CPU11中起作用的各功能块为动作主体,说明以下各步骤的处理。
图18是说明具有图2的功能结构的图1的信息处理装置1执行的第8实施方式的输入操作受理处理的流程的流程图。
输入操作受理处理以用户按下信息处理装置1的电源按钮(未图示)为契机而开始,重复执行如下处理。
在步骤S151中,输入操作受理部51判定是否受理了用户对触摸面板31的触摸操作。在未执行用户对触摸面板31的触摸操作的情况下,在步骤S151中判定为否,处理再次返回步骤S151。即,在直到执行触摸操作为止期间,重复执行步骤S151的判定处理,输入操作受理处理为待机状态。之后,在执行了触摸操作的情况下,步骤S151判定为是,处理前进到步骤S152。
在步骤S152中,距离确定部52判定静电电容式触摸面板31a是否受理了触摸操作。具体地,距离确定部52通过确定输入部17的触摸面板31和与该触摸面板31相对的手或手指等物体之间的距离(高度方向的位置坐标),对静电电容式触摸面板31a判定是否受理了对于对象的指示操作。在静电电容式触摸面板31a受理了触摸操作的情况下,步骤S152中判定为是,处理前进到步骤S153。
在步骤S153中,控制部53执行根据对静电电容式触摸面板31a的触摸操作来执行拍摄处理的控制。参照后述的图19来说明根据对静电电容式触摸面板31a的触摸操作来执行拍摄处理的具体例。若该处理终止,则处理前进到步骤S155。步骤S155以后的处理如后所述。
在静电电容式触摸面板31a未受理触摸操作的情况下,步骤S152中判定为否,处理前进到步骤S154。
在步骤S154中,控制部53执行根据对阻抗膜式触摸面板31b的触摸操作来执行拍摄处理的控制。参照后述的图19来说明根据对阻抗膜式触摸面板31b的触摸操作来执行拍摄处理的具体例。若该处理终止,则处理前进到步骤S155。
在步骤S155中,控制部53判定是否有输入操作受理终止的指示。在无输入操作受理终止的指示的情况下,在步骤S155中判定为否,处理返回到步骤S151。即,在直到有输入操作受理终止的指示为止期间,重复执行步骤S151至S155的处理。
这样,在直到用户发出输入操作受理终止的指示为止期间,重复对触摸面板31的触摸操作,由此能够执行根据对阻抗膜式触摸面板31b或静电电容式触摸面板31a中任一面板的触摸操作来开始拍摄处理的控制。之后,例如通过用户对信息处理装置1执行规定操作,由此在发出了输入操作受理终止的指示的情况下,在步骤S155中判定为是,输入操作受理处理终止。
下面,说明与对输入部17的操作相对应的、与对象有关的处理的具体例。
参照图19来说明根据手指101与输入部17的距离差异,执行根据静电电容式触摸面板31a(对象的一种)或阻抗膜式触摸面板31b(对象的另一种)来执行拍摄处理的控制的例子。
图19是表示对图1的信息处理装置的输入部17执行触摸操作的状态的图。
在本实施方式中,输入部17中的、静电电容式触摸面板31a配置在显示部16的大致整体中,与之相对,阻抗膜式触摸面板31b仅配置在显示部16的右侧配置的规定区域171中。
用户在输入部17与手指101之间的距离为0时执行了触摸操作的情况下,即在维持手指101接触输入部17的状态执行触摸操作的情况下,控制部53判定为阻抗膜式触摸面板31b受理了触摸操作,作为与对象有关的处理,执行第15处理。
与之相对,用户在输入部17与手指101之间的距离隔开的状态下执行触摸操作的情况下,即在维持手指101与输入部17非接触的状态执行触摸操作的情况下,控制部53判定为静电电容式触摸面板31a受理了触摸操作,作为与对象有关的处理,执行第16处理。
这里,第15处理与第16处理只要是相互不同的处理即可,可以是任何处理,但在本实施方式中,采用根据对静电电容式触摸面板31a(对象的一种)的触摸操作执行拍摄的拍摄处理作为第15处理。另外,采用根据对阻抗膜式触摸面板31b(对象的另一种)的触摸操作执行拍摄(对象的一种)的拍摄处理作为第16处理。
即,用户在输入部17与手指101之间的距离为0时执行了触摸操作的情况下,控制部53执行根据对阻抗膜式触摸面板31b的触摸操作执行拍摄的控制。与之相对,用户在输入部17与手指101之间的距离隔开的状态下执行了触摸操作的情况下,控制部53执行根据对静电电容式触摸面板31a的触摸操作执行拍摄的控制。
静电电容式触摸面板31a能够以轻快的操作感来操作,另一方面,在水中或附有水滴的状态下灵敏度会下降,无法操作。在本实施方式中,在地面上能够以静电电容式触摸面板31a带来的轻快的操作感来指示拍摄,并且,在水中或附有水滴的环境下,能够以阻抗膜式触摸面板31b带来的可靠的操作感来指示拍摄。
以上对本发明第8实施方式所涉及的信息处理装置1进行了说明。
下面对本发明第9实施方式所涉及的信息处理装置1进行说明。
[第9实施方式]
下面,参照图20及图21来说明这种图2的功能结构的信息处理装置1执行的第9实施方式的输入操作受理处理。在第9实施方式中,用户根据是否对静电电容式触摸面板31a执行了触摸操作,作为对于对象的控制,执行开始连续拍摄或停止连续拍摄等处理。所谓连续拍摄,是指将由拍摄部18连续拍摄到的拍摄图像的数据一次存储在缓冲器(未图示)中的处理。另外,所谓停止连续拍摄,是指将通过连续拍摄暂时存储在缓冲器中的拍摄图像的数据记录在存储部19或可移动介质41中并停止连续的拍摄的处理。
若由信息处理装置1执行第9实施方式的输入操作受理处理,则CPU11中图2的各功能块起作用,执行如下处理。即,以下各步骤的处理的动作主体在硬件上由CPU11担当。但是,为了使本发明容易理解,设CPU11中起作用的各功能块为动作主体,说明以下各步骤的处理。
图20是说明具有图2的功能结构的图1的信息处理装置1执行的第9实施方式的输入操作受理处理的流程的流程图。
输入操作受理处理以用户按下信息处理装置1的电源按钮(未图示)为契机而开始,重复执行如下处理。
在步骤S171中,输入操作受理部51判定是否受理了用户对触摸面板31的触摸操作。在用户未执行对触摸面板31的触摸操作的情况下,在步骤S171中判定为否,处理再次返回步骤S171。即,在直到执行触摸操作为止期间,重复执行步骤S171的判定处理,输入操作受理处理为待机状态。之后,在执行了触摸操作的情况下,步骤S171判定为是,处理前进到步骤S172。
在步骤S172中,距离确定部52判定静电电容式触摸面板31a是否受理了触摸操作。具体地,距离确定部52通过确定输入部17的触摸面板31和与该触摸面板31相对的手或手指等物体之间的距离(高度方向的位置坐标),对静电电容式触摸面板31a判定是否受理了对于对象的指示操作。在静电电容式触摸面板31a受理了触摸操作的情况下,步骤S172中判定为是,处理前进到步骤S173。
在步骤S173中,控制部53判断为对静电电容式触摸面板31a执行了触摸操作,执行开始连续拍摄的控制。参照后述的图21来说明开始连续拍摄的具体例。若该处理终止,则处理前进到步骤S174。
在步骤S174中,控制部53判定是否有输入操作受理终止的指示。在无输入操作受理终止的指示的情况下,在步骤S174中判定为否,处理返回到步骤S171。即,在直到有输入操作受理终止的指示为止期间,重复执行步骤S171至S172的处理。
这样,在直到用户发出输入操作受理终止的指示为止期间,通过继续对静电电容式触摸面板31a的触摸操作,能够继续执行连续拍摄。之后,例如通过用户对信息处理装置1执行规定操作,由此在发出了输入操作受理终止的指示的情况下,在步骤S174中判定为是,输入操作受理处理终止。
在静电电容式触摸面板31a未受理触摸操作的情况下,步骤S172中判定为否,处理前进到步骤S175。
在步骤S175中,控制部53判断为对阻抗膜式触摸面板31b执行了触摸操作,执行停止连续拍摄的控制。参照后述的图21来说明停止连续拍摄的具体例。若该处理终止,则输入操作受理处理终止。
下面,说明与对输入部17的操作相对应的、与对象有关的处理的具体例。
图21是表示对图1的信息处理装置1的输入部17执行触摸操作的状态的图。在本实施方式中,输入部17配置在显示部16的右侧端部附近。
用户在输入部17与手指101之间的距离隔开的状态下执行了触摸操作的情况下,即在维持手指101与输入部17非接触的状态执行触摸操作的情况下,控制部53判定为静电电容式触摸面板31a(对象的一种)受理了触摸操作,作为与对象有关的处理,执行第17处理。
与之相对,用户在输入部17与手指101之间的距离为0时执行了触摸操作的情况下,即在维持手指101接触输入部17的状态执行触摸操作的情况下,控制部53判定为阻抗膜式触摸面板31b(对象的另一种)受理了触摸操作,作为与对象有关的处理,执行第18处理。
这里,第17处理与第18处理只要是相互不同的处理即可,可以是任何处理,但在本实施方式中,采用根据对静电电容式触摸面板31a的触摸操作开始连续拍摄的处理作为第17处理。另外,采用在对阻抗膜式触摸面板31b的触摸操作中停止连续拍摄的处理作为第18处理。
即,用户在输入部17与手指101之间的距离隔开的状态下执行了触摸操作的情况下,控制部53开始连续拍摄,根据对静电电容式触摸面板31a的触摸操作,将拍摄图像的数据暂时连续存储在缓冲器(未图示)中。另外,用户在输入部17与手指101之间的距离为0时执行了触摸操作的情况下,控制部53根据对阻抗膜式触摸面板31b的触摸操作,将存储在缓冲器中的拍摄图像的数据存储在可移动介质41中。控制部53通过将拍摄图像的数据存储在可移动介质41中,停止连续拍摄。由此,从用户意识到拍摄的时刻起至拍摄为止进行连续拍摄,消除用户拍摄的时刻与实际拍摄的时刻的不吻合,由此能够不遗漏快门时机(シャツタ一チャンス)地在用户期望的拍摄时刻拍摄。
如上所述,本实施方式的信息处理装置1具备输入操作受理部51、距离确定部52以及控制部53。
输入操作受理部51受理与层叠有触摸面板31的显示部16的显示面(二维平面)大致平行的物体的移动,作为对触摸面板31的触摸操作。
距离确定部52检测与执行了触摸操作的情况下的物体有关的、距显示部16的显示面(二维平面)的距离。
控制部53根据由输入操作受理部51受理的触摸操作的种类(根据物体的移动轨迹而不同的种类)与由距离确定部52检测到的物体距显示部16的显示面的法线方向的距离,对与显示的对象有关的处理的执行进行可变控制。
由此,即便是不习惯对触摸面板31的操作的用户,也能够仅仅通过直观地执行手势操作(移动手指或手等物体等直观的触摸操作),执行与对象有关的处理的各种指示。由此,即便是不习惯触摸面板31的用户,也能容易地指示对象的处理。
并且,本实施方式的信息处理装置1的控制部53根据由输入操作受理部51受理的触摸操作(移动操作)的种类、及由距离确定部52确定的距离,识别多种触摸操作中的、执行的触摸操作,控制与该触摸操作对应关联的、与对象有关的处理。由此,即便是不习惯对触摸面板31的操作的用户,也能够通过仅变更直观地执行手势操作(ジェスチャ操作)时的距离,执行与对象有关的处理的各种指示。由此,即便是不习惯触摸面板31的用户,也能够容易地指示对象的处理。
并且,本实施方式的信息处理装置1的控制部53根据由距离确定部52确定的距离,执行在显示部16的显示面中显示的对象的页面发送或其他对象的读入中的任一控制。
由此,即便是不习惯对触摸面板31的操作的用户,也能够通过仅变更直观地执行手势操作时的距离,执行在显示部16中显示的漫画内容的页面发送,或代替当前显示的漫画内容而变为下一卷的内容。由此,即便是不习惯触摸面板31的用户,也能够容易地变更指示显示部16中显示的内容的控制。
并且,本实施方式的信息处理装置1的控制部53根据由距离确定部52确定的距离,执行在显示部16的显示面中显示的对象向任意角度的旋转或向规定角度的旋转中的任一控制。由此,即便是不习惯对触摸面板31的操作的用户,也能够通过仅变更直观地执行手势操作时的距离,将在显示部16中显示的画面的角度极细微地旋转到任意角度,或大致旋转到事先设定的规定角度。由此,即便是不习惯触摸面板31的用户,也能够容易地指示显示部16中显示的对象的旋转角度。
并且,本实施方式的信息处理装置1的控制部53根据由距离确定部52确定的距离,执行对在显示3D画面所用的多个层中配置的按钮中的、在任一层中配置的按钮的按下处理的控制。由此,即便是不习惯对触摸面板31的操作的用户,也能够通过仅变更直观地执行手势操作时的距离,执行对在显示3D内容所用的上位层中配置的按钮的按下处理,或对在下位层中配置的按钮的按下处理。由此,即便是不习惯触摸面板31的用户,也能容易地指示对在显示部16中显示的多个层中配置的按钮的按下处理。
并且,本实施方式的信息处理装置1的控制部53根据由距离确定部52确定的距离,执行选择在显示部16的显示面中显示的多个文件或仅选择部分文件中的任一控制。由此,即便是不习惯对触摸面板31的操作的用户,也能够通过仅变更直观地执行手势操作时的距离,利用文件管理软件等,选择位于在显示部16中显示的确定范围内的多个文件,或仅选择部分文件。由此,即便是不习惯触摸面板31的用户,也能够容易地指示在显示部16中显示的页面或文件的控制变更。
并且,本实施方式的信息处理装置1的控制部53根据由距离确定部52确定的距离,执行将在显示部16的显示面中显示的文件变为同分类的其他文件或变为其他分类的其他文件中的任一控制。由此,即便是不习惯对触摸面板31的操作的用户,也能够通过仅变更直观地执行手势操作时的距离,将电子目录(電子ヵタログ)中的在显示部16中显示的同分类的商品变更为其他颜色的商品的文件来显示,或变更为其他商品的文件来显示。由此,即便是不习惯触摸面板31的用户,也能够容易地指示变更商品等对象并显示的控制。
并且,本实施方式的信息处理装置1的控制部53根据由距离确定部52确定的距离,执行放大或缩小显示在显示部16的显示面中显示的对象的控制。由此,即便是不习惯对触摸面板31的操作的用户,也能够通过仅变更直观地执行手势操作时的距离,自由放大显示或缩小显示在显示部16中显示的3D内容(例如地球仪)。由此,即便是不习惯触摸面板31的用户,也能够容易地指示变更在显示部16中显示的内容大小来显示的控制。
并且,本实施方式的信息处理装置1的控制部53根据三维方向的移动,执行对对象进行旋转或选择的任一控制。由此,即便是不习惯对触摸面板31的操作的用户,也能够通过仅变更直观地执行手势操作时的距离,自由地旋转显示或选择显示在显示部16中显示的自由旋转的3D内容(例如地球仪)。由此,即便是不习惯触摸面板31的用户,也能够容易地指示在显示部16中显示的3D内容等的控制的变更。
并且,本实施方式的信息处理装置1的控制部53根据由距离确定部52确定的距离,执行选择不同字符种类作为根据字符识别结果取得的变换候补字符的控制。由此,即便是不习惯对触摸面板31的操作的用户,也能够通过仅变更直观地执行手势操作时的距离,即便在以大字符与小字符手写输入大致相同的笔迹的字符(例如“C”与“c”、“O”与“o”等)的情况下,也就够选择大字符的字符种类或选择小字符的字符种类作为根据字符识别结果取得的变换候补。由此,即便是不习惯触摸面板31的用户,也能够容易地指定变换候补的字符种类。
并且,本实施方式的信息处理装置1具备拍摄被摄体的拍摄部18。另外,控制部53根据由距离确定部52确定的距离,通过基于构成层叠的触摸面板31的多个面板中的任一触摸面板31的指示,控制拍摄部18进行拍摄。由此,即便是不习惯对触摸面板31的操作的用户,也能够通过仅变更直观地执行手势操作时的距离,选择与触摸面板的特性(例如防水的触摸面板或感应性良好的触摸面板等)相对应的触摸面板来拍摄。由此,即便是不习惯触摸面板31的用户,也能够容易地发出选择最佳的触摸面板来执行拍摄的指示。
并且,本实施方式的信息处理装置1的控制部53根据由距离确定部52确定的距离,执行由拍摄部18开始连续拍摄或停止所述连续拍摄中的任一控制。由此,即便是不习惯对触摸面板31的操作的用户,也能够通过仅变更直观地执行手势操作时的距离,为了窥视(伺う)快门时机而开始连续拍摄,或为了在连续拍摄中的一瞬间即快门时机进行拍摄,而停止连续拍摄。由此,即便是不习惯触摸面板31的用户,也能够容易地指示最佳快门定时下的拍摄。
并且,本实施方式的信息处理装置1的触摸面板31由静电电容式触摸面板31a与阻抗膜式触摸面板31b构成。
此时,可以由静电电容式触摸面板31a的表面来保护阻抗膜式触摸面板31b。并且,可以利用静电电容式触摸面板31a来检测即便非接触状态下也执行了触摸操作的位置坐标及手指101与静电电容式触摸面板31a的距离,同时,在接触的情况下,利用阻抗膜式触摸面板31b来进一步详细地检测执行触摸操作的位置坐标。
另外,本发明不限于上述实施方式,能实现本发明目的的范围下的变形、改良等包含在本发明中。
在上述实施方式中,静电电容式触摸面板31a与阻抗膜式触摸面板31b按此顺序层叠在显示部16的显示器的显示画面整体上,但不限于此。例如,也可以是阻抗膜式触摸面板31b与静电电容式触摸面板31a按此顺序层叠在显示部16的显示器的显示画面整体上。
另外,在上述实施方式中,距离确定部52根据构成输入部17的静电电容式触摸面板31a的静电电容的变化来确定多个输入部17与手或手指等的距离,但不限于此。例如,距离确定部52也可以确定由未图示的超声波传感器、红外线传感器、拍摄装置等检测到的距离。
换言之,在上述实施方式中,输入操作受理部51受理与显示部16的显示画面(二维平面)大致平行的方向的、物体(手或手指等)在二维上的位置移动操作,作为触摸操作。另外,距离确定部52检测物体距显示画面的距离,即物体在与显示画面的垂线大致平行的方向上的位置。
这么一来,上述实施方式与输入操作受理部51及距离确定部52以显示部16的显示画面为基准平面、受理相对于基准平面的三维方向的物体的移动操作等效。因此,下面,将输入操作受理部51及距离确定部52统称为‘三维操作受理部’。
此时,基准平面未必是显示部16的显示画面,也可以是任意平面。此时,基准平面不必采用用户能够肉眼观看到的平面,也可以采用任何物体内的平面,也可以将虚拟平面定义为基准平面。
另外,测定物体三维上的位置的三维位置检测部在上述实施方式中构成为静电电容式触摸面板31a及阻抗膜式触摸面板31b,但不特别限于此,可以使任意种类的任意个数位置检测部组合来构成。这里,所谓上述距离,不限于物体在基准面的法线方向上的位置,所以检测距离不限于检测基准面的法线方向的位置。
综上所述,所谓适用本发明的信息处理装置,只要具有如下功能即可,其实施方式不特别限于上述实施方式。
即,所谓适用本发明的信息处理装置,具有:三维位置检测功能,检测物体相对于基准平面的三维方向的位置;三维操作受理功能,根据时间上间隔地多次检测到的物体的三维方向的各位置,识别该物体的三维方向的移动,受理该识别结果作为对于对象的指示操作;以及控制功能,根据所受理的指示操作,对与该对象有关的处理进行可变控制。
另外,在上述实施方式中,根据输入部17与手指101的距离来变更在显示部16的显示器中显示的图标的显示率,但不限于此。例如,也可以根据输入部17与手指101的距离,定中心(センタ一リング)于接近手指101的地方来显示。
另外,在上述实施方式中,适用本发明的信息处理装置1举例说明为智能手机,但不特别限于此。
例如,本发明能够广泛适用于具有拍摄功能的电子设备。具体地,本发明例如能够适用于笔记本型电脑、打印机、电视接收机、视频摄像机、数码相机、便携型导航装置、便携电话机、便携式游戏机等。
上述一系列处理既可由硬件执行,也可由软件执行。
换言之,图2的功能结构仅是示例,不特别限定。即,只要信息处理装置1中具备能够将上述一系列处理作为整体执行的功能即可,为了实现该功能而使用什么功能块不特别限于图2的例子。
另外,一个功能块既可由硬件单体构成,也可由软件单体构成,也可由它们的组合来构成。
在由软件执行一系列处理的情况下,构成该软件的程序从网络或记录介质安装到计算机等中。
计算机也可以是插入专用硬件的计算机。另外,计算机也可以是通过安装各种程序来实现各种功能的计算机,例如通用的电脑。
包含这种程序的记录介质不仅仅由为了向用户提供程序而在装置本体之外配布的图1的可移动介质41构成,也可以由以事先插入装置本体中的状态提供给用户的记录介质等构成。可移动介质41例如由磁盘(包含软盘)、光盘或磁光盘等构成。光盘例如由CD-ROM(Compact Disk-Read Only Memory)、DVD(Digital VersatileDisk)等构成。磁光盘由MD(Mini-Disk)等构成。另外,以事先插入装置本体中的状态提供给用户的记录介质例如由记录有程序的图1的ROM12或在图1的存储部19中包含的硬盘等构成。
另外,在本说明书中,当然包括记述在记录介质中记录的程序的步骤沿其顺序时序地执行的处理,也包括即使未必时序地处理而是并列地或单独地执行的处理。
另外,本说明书中,系统的术语指由多个装置或多个部件等构成的整体装置。
下面,用图来说明本发明的第10实施方式。
图22是表示本发明第10实施方式所涉及的信息处理装置的硬件结构的框图。
信息处理装置1001例如构成为智能手机。
信息处理装置1001具备CPU(Central Processing Unit)1011、ROM(Read Only Memory)1012、RAM(Random Access Memory)1013、总线1014、输入输出接口(インタ一フェ一ス)1015、显示部1016、输入部1017、存储部1018、通信部1019以及驱动器1020。
CPU1011根据ROM1012中记录的程序或从存储部1018加载到RAM1013的程序,执行各种处理。
在RAM1013中还适当存储CPU1011执行各种处理中必要的数据等。
CPU1011、ROM1012和RAM1013经总线1014相互连接。该总线1014上还连接有输入输出接口1015。输入输出接口1015上连接有显示部1016、输入部1017、存储部1018、通信部1019及驱动器1020。
显示部1016由显示器构成,显示图像。
输入部1017由在显示部1016的显示画面上层叠的触摸面板构成,根据用户的指示操作,输入各种信息。输入部1017如参照后述的图24所说明的那样,具备静电电容式触摸面板1031与阻抗膜式触摸面板1032。
存储部1018由硬盘或DRAM(Dynamic Random Access Memory)等构成,存储各种图像的数据。
通信部1019控制经包含因特网的网络与其他装置(未图示)之间进行的通信。
驱动器1020中适当安装由磁盘、光盘、磁光盘或半导体存储器等构成的可移动介质1041。根据需要将由驱动器1020从可移动介质1041读出的程序安装在存储部1018中。另外,可移动介质1041也能够与存储部1018一样存储存储部1018中存储的图像数据等各种数据。
图23是表示这种信息处理装置1001的功能结构中的、用于执行输入操作受理处理的功能结构的功能框图。
所谓输入操作受理处理,是指以由用户按下未图示的电源按钮为契机而开始的如下处理。即,所谓输入操作受理处理,是指受理对输入部17即触摸面板的操作,根据该操作执行与对象有关的处理为止的一系列处理。
CPU1011中,在控制输入操作受理处理的执行的情况下,输入操作受理部1051、距离确定部1052与控制部1053起作用。
在本实施方式中,输入部1017的一部分如图24所示,构成为静电电容式触摸面板1031与阻抗膜式触摸面板1032。
图24是表示输入部1017的一部分的剖视图。
静电电容式触摸面板1031与阻抗膜式触摸面板1032分别层叠在显示部1016(参照图22)的显示器的显示画面整体上,检测执行了触摸操作的位置的坐标。这里,所谓触摸操作,是指物体(用户的手指或触摸笔等)对触摸面板的接触或接近的操作。
静电电容式触摸面板1031与阻抗膜式触摸面板1032经输入操作受理部1051向控制部1053供给检测到的位置的坐标。
静电电容式触摸面板1031在显示部1016的显示器的显示画面上由导电膜形成。即,因为指尖仅靠近静电电容式触摸面板1031的表面就引起静电耦合,所以即便在指尖不接触静电电容式触摸面板1031的情况下,仅仅接近,静电电容式触摸面板1031就捕捉指尖与导电膜之间的静电电容的变化,检测位置。若用户执行使手指或记录笔等突起物接触或接近显示画面的操作(下面称为‘画面触摸操作’),则CPU1011根据这种指尖与导电膜之间的静电电容的变化,检测该手指的接触位置的坐标。
阻抗膜式触摸面板1032在显示部1016的显示器的显示画面上并行重叠PET(Polyethylene terephthalate)等柔软的表面膜和位于其里侧的液晶玻璃膜来形成。双方的膜分别粘贴透明的导电膜,经透明的隔板分别电绝缘。表面膜与玻璃膜分别通过导体,若用户执行画面触摸操作,则表面膜因突起物产生的应力而弯曲,表面膜与玻璃膜局部变为导通状态。此时,电阻抗值或电位根据突起物的接触位置而变化。CPU1011根据这种电阻抗值或电位的变化,检测该突起物的接触位置的坐标。
综上所述,静电电容式触摸面板1031捕捉指尖与导电膜之间的静电电容的变化,检测二维平面上(画面上)的位置。因此,静电电容式触摸面板1031即便在手指1101与静电电容式触摸面板1031非接触状态下,即即便接近状态下,也能够检测执行了触摸操作的二维平面上的位置的坐标。并且,此时,即使谈不上高精度也能够检测手指1101与静电电容式触摸面板1031的距离,换言之,手指1101的高度方向的位置坐标。
与之相对,阻抗膜式触摸面板1032在手指1101与阻抗膜式触摸面板1032非接触状态下,无法检测为执行了触摸操作。即,在手指1101与阻抗膜式触摸面板1032非接触状态的情况下,无法检测该手指1101的二维平面上的位置坐标,并且,也无法检测该手指1101的高度方向的位置坐标(距离)。但是,阻抗膜式触摸面板1032与静电电容式触摸面板1031相比,能高精度且高分辨率地检测执行了触摸操作的二维平面上的位置坐标。
在本实施方式中,因为静电电容式触摸面板1031与阻抗膜式触摸面板1032在显示部1016的显示器的显示画面整体中按此顺序层叠,所以能够由静电电容式触摸面板1031的表面来保护阻抗膜式触摸面板1032。并且,能利用静电电容式触摸面板1031来检测即便非接触状态下也执行了触摸操作的二维平面上的位置的坐标及手指1101与静电电容式触摸面板1031的距离(高度方向的位置坐标),即三维空间上的位置坐标。另一方面,在手指1101接触的情况下,能够利用阻抗膜式触摸面板1032来高精度且高分辨率地检测执行了触摸操作的位置的坐标。
返回图23,输入操作受理部1051受理对输入部1017的触摸面板(静电电容式触摸面板1031与阻抗膜式触摸面板1032)的触摸操作作为对输入部1017的输入操作之一,将受理的二维上的位置坐标通知给控制部53。
距离确定部1052检测距对输入部1017即触摸面板中静电电容式触摸面板1031执行触摸操作的物体(手指1101等)的距离。具体地,距离确定部1052捕捉静电电容式触摸面板1031的静电电容的变化,确定输入部1017与物体(手或手指1101等)之间的距离(高度方向的位置坐标),将该距离通知给控制部1053。
控制部1053根据由输入操作受理部1051受理的二维平面上的位置坐标、及由距离确定部1052确定的距离(高度方向的位置坐标),执行与在显示部1016中显示的对象有关的处理。具体地,控制部1053执行以使表示规定对象的图像包含于显示部1016的显示画面中的方式进行显示的控制等。与对象有关的操作的具体例参照后述的图26A至29B来说明。
下面,参照图25,说明这种图23的功能结构的信息处理装置1001执行的输入操作受理处理。
图25是说明具有图23的功能结构的图22的信息处理装置1001执行的输入操作受理处理的流程的流程图。
输入操作受理处理以用户按下信息处理装置1001的电源按钮(未图示)为契机而开始,重复执行如下处理。
在步骤S1011中,输入操作受理部1051判定是否受理了用户对触摸面板的触摸操作。在用户未执行对触摸面板的触摸操作的情况下,在步骤S1011中判断为否,处理再次返回步骤S1011。即,在直到执行触摸操作为止期间,重复执行步骤S1011的判定处理,输入操作受理处理为待机状态。之后,在执行触摸操作的情况下,步骤S1011判定为是,处理前进到步骤S1012。
在步骤S1012中,距离确定部1052确定输入部1017的触摸面板和与该触摸面板相对的手或手指等物体之间的距离(高度方向的位置坐标)。
在步骤S1013中,控制部1053根据由输入操作受理部1051受理的位置坐标,即执行了触摸操作的二维平面上的位置坐标及由距离确定部1052检测到的距离(高度方向的位置坐标),执行与显示部1016中显示的对象有关的处理。参照后述的图26A至29B来说明与对象有关的处理的具体例。
在步骤S1014中,CPU1011判定是否有输入操作受理终止的指示。在无输入操作受理终止的指示的情况下,在步骤S1014中判定为否,处理返回到步骤S1011。即,在直到有输入操作受理终止的指示为止期间,重复执行步骤S1011至S1014的处理。
这样,在直到用户发出输入操作受理终止的指示为止期间,重复对触摸面板的触摸操作,由此能够控制期望的对象。之后,例如通过用户对信息处理装置1001执行规定操作,由此在发出了输入操作受理终止的指示的情况下,在步骤S1014中判定为是,输入操作受理处理终止。
下面,说明与对输入部1017的操作相对应的、与对象有关的处理的具体例。
图26A、图26B、图26C及图26D表示对图22的信息处理装置的输入部1017执行触摸操作的状态。
如图26A所示,设在手指1101距输入部1017距离A的情况下,在显示部1016的显示器中显示的图标(对象的一种)以图26C所示的显示率a的大小显示。
此时,如图26B所示,若手指1101以比距离A短的距离B接近输入部1017,则显示部1016的显示器中显示的图标如图26D所示,以比显示率a放大的显示率b的大小显示。
图标的放大率只要根据距离可变即可,但在本实施方式中,设放大率与距离成正比缩小。即,在图26A、图26B、图26C及图26D的例子中,显示率b为显示率a的(A/B)倍。
另外,在本实施方式中,若输入部1017与手指之间的距离n变小,则显示部1016的显示器中显示的图标的显示率变大,但不限于此。例如,也可若输入部1017与手指之间的距离n变大,则减小显示部1016的显示器中显示的图标的显示率。
下面,说明即便在执行使手指1101与显示部1016的显示画面(二维平面)大致平行地移动的操作(下面称为‘轻击操作’)的情况下,根据手指1101与输入部1017的距离差异来变更与对象有关的处理的例子。
图27A及图27B表示对图22的信息处理装置的输入部1017执行轻击操作的状态。
如图27A所示,用户在输入部1017与手指1101之间的距离为0时执行轻击操作的情况下,即在维持手指1101接触输入部1017的状态执行轻击操作的情况下,控制部1053作为与对象有关的处理,执行第1处理。
与之相对,如图27B所示,用户在输入部1017与手指1101之间的距离隔开的状态下执行轻击操作的情况下,即在维持手指1101与输入部1017非接触的状态执行轻击操作的情况下,控制部1053作为与对象有关的处理,执行第2处理。
这里,第1处理与第2处理只要是相互不同的处理即可,可以是任意处理,但在本实施方式中,分别采用发送在显示部1016中显示的书或笔记本(对象的一种)的页面的处理作为第1处理,采用变更在显示部1016中显示的文件(对象的另一种)的处理作为第2处理。
下面,说明根据在输入部1017上握或打开手1102的一系列操作,执行与对象有关的处理的例子。
图28A及图28B表示执行在图22的信息处理装置的输入部1017上握或打开手1012的操作的状态。
在输入部1017与手1102之间的距离分开的情况下,即手1102与输入部1017非接触状态的情况下,执行使手1102的状态从图28A迁移到图28B所示的状态的一系列动作(手势)、即从打开手1102的状态迁移到握手1102的状态的手势的情况下,控制部1053识别该手势,执行事先与该手势对应关联的处理。此时,与该手势对应关联的处理不特别限定,但在本实施方式中,采用删除在显示部1016中显示的文件的处理。
另外,手势的种类与个数不特别限定于图28A及图28B的例子,可采用任意种类的任意个数的手势。例如,虽然未图示,但可以采用使手1012从打开的状态迁移到握的状态的手势、或重复时而握手时而开手1012的手势。即,能采用N种(N为1以上的任意整数值)手势。此时,对于N种手势中的每个手势,能够分别对应关联彼此不同的任意处理。
下面,说明即便在执行使手指1101与显示部1016的显示画面(二维平面)大致平行地旋转的操作(下面称为“旋转操作”)的情况下,根据手指1101与输入部1017的距离差异来变更与对象有关的处理的例子。
图29A及图29B表示对图22的信息处理装置的输入部1017执行旋转操作的状态。
如图29A所示,用户在维持输入部1017与手指1101之间的距离为0的状态、即手指1101接触输入部1017的状态执行旋转操作的情况下,控制部1053作为与对象有关的处理,执行第1处理。
与之相对,如图29B所示,用户在维持输入部1017与手指1101之间的距离隔开的状态、即手指1101与输入部1017非接触的状态执行旋转操作的情况下,控制部1053作为与对象有关的处理,执行第2处理。
这里,第1处理与第2处理只要是相互不同的处理即可,以是任意处理,但在本实施方式中,分别采用使显示部16中显示的对象1103追随旋转操作的手指1101的轨迹来旋转的处理作为第1处理,采用使该对象旋转规定角度的处理作为第2处理。
对象1103的旋转角度只要根据距离可变即可,但在本实施方式中,设在距离为0的情况下,使之与手指1101的旋转角度大致一致,将其作为基准角度,与距离成正比,变得比基准角度小。即,若设距离为n,则对象1103的旋转角度为基准角度的(1/n)倍。
如上所述,本实施方式的信息处理装置1001具备输入操作受理部1051、距离确定部1052以及控制部1053。
输入操作受理部1051受理与层叠有触摸面板的显示部1016的显示面(二维平面)大致平行的物体移动,作为对触摸面板的触摸操作。
距离确定部1052检测与执行触摸操作时的物体有关的、距显示部1016的显示面(二维平面)的距离。
控制部1053根据由输入操作受理部1051受理的触摸操作的种类(对应于物体的移动轨迹而不同的种类)、和由距离确定部1052检测的距离,对与显示的对象有关的处理的执行进行可变控制。
由此,即便是不习惯对触摸面板的操作的用户,也能够仅通过直观地执行手势操作(移动手指或手等物体等直观的触摸操作),执行与对象有关的处理的各种指示。由此,即便是不习惯触摸面板的用户,也能够容易地指示对象的处理。
并且,本实施方式的信息处理装置1001的控制部1053控制与手势操作(触摸操作)对应关联的、与对象有关的处理。由此,即便是不习惯对触摸面板的操作的用户,也能够仅通过直观地执行手势操作(时而打开时而关闭手或手指的直观的触摸操作),执行与对象有关的处理的各种指示。由此,即便是不习惯触摸面板的用户,也能够容易地指示对象的处理。
并且,本实施方式的信息处理装置1001的控制部1053控制与由距离确定部1052确定的距离对应关联的、与对象有关的处理。由此,即便是不习惯对触摸面板的操作的用户,也能够仅通过变更直观地执行手势操作时的距离,执行与对象有关的处理的各种指示。由此,即便是不习惯触摸面板的用户,也能够容易地指示对象的处理。
并且,本实施方式的信息处理装置1001的控制部1053根据由距离确定部1052确定的距离,变更在显示部1016的显示面中显示的对象的显示率。由此,即便是不习惯对触摸面板的操作的用户,也能够仅通过变更直观地执行手势操作时的距离,变更对象的显示率。由此,即便是不习惯触摸面板的用户,也能够容易地指示对象的倍率变更。
并且,本实施方式的信息处理装置1001的控制部1053根据由距离确定部1052确定的距离,执行在显示部1016的显示面中显示的对象的页面发送或对象的变更中的任一控制。由此,即便是不习惯对触摸面板的操作的用户,也能够仅通过变更直观地执行手势操作时的距离,变更对象的控制。由此,即便是不习惯触摸面板的用户,也能够容易地指示对象的控制变更。
并且,本实施方式的信息处理装置1001的控制部1053根据由距离确定部1052检测到的距离,控制将在显示部1016的显示面中显示的对象与由输入操作受理部1051受理的旋转操作对应关联的、与对象有关的处理。由此,即便是不习惯对触摸面板的操作的用户,也能够仅通过变更直观地执行手势操作时的距离,根据旋转操作来变更对象的控制。由此,即便是不习惯触摸面板的用户,也能够仅通过执行旋转操作,容易地指示对象的控制变更。
并且,本实施方式的信息处理装置1001的触摸面板由静电电容式触摸面板与阻抗膜式触摸面板构成。
此时,可以由静电电容式触摸面板1031的表面来保护阻抗膜式触摸面板1032。并且,可以利用静电电容式触摸面板1031来检测即便非接触状态下也执行触摸操作的位置坐标及手指1101与静电电容式触摸面板1031的距离,同时,在接触的情况下,利用阻抗膜式触摸面板1032来进一步详细地检测执行触摸操作的位置坐标。
另外,本发明不限于上述实施方式,能实现本发明目的的范围下的变形、改良等包含在本发明中。
在上述实施方式中,静电电容式触摸面板1031与阻抗膜式触摸面板1032按此顺序层叠在显示部1016的显示器的显示画面整体上,但不限于此。例如,也可以是阻抗膜式触摸面板1032与静电电容式触摸面板1031按此顺序层叠在显示部1016的显示器的显示画面整体上。
另外,在上述实施方式中,距离确定部1052根据构成输入部1017的静电电容式触摸面板1031的静电电容的变化来确定多个输入部1017与手或手指等的距离,但不限于此。例如,距离确定部1052也可以确定由未图示的超声波传感器、红外线传感器、拍摄装置等检测到的距离。
换言之,在上述实施方式中,输入操作受理部1051受理与显示部1016的显示画面(二维平面)大致平行的方向的物体(手或手指等)的二维上位置的移动操作,作为触摸操作。另外,距离确定部1052检测物体距显示画面的距离,即与显示画面的垂线大致平行的方向的物体位置。
这么一来,上述实施方式与输入操作受理部1051及距离确定部1052以显示部1016的显示画面为基准平面、受理相对基准平面的三维方向的物体的移动操作等效。因此,下面,将输入操作受理部1051及距离确定部1052统称为‘三维操作受理部’。
此时,基准平面未必是显示部1016的显示画面,也可以是任意平面。此时,基准平面不必采用用户肉眼能够观看到的平面,也可以采用任何物体内的平面,也可将虚拟平面定义为基准平面。
另外,测定物体三维上的位置的三维位置检测部在上述实施方式中构成为静电电容式触摸面板1031及阻抗膜式触摸面板1032,但不特别限于此,可以使任意种类的任意个数位置检测部组合来构成。这里,所谓上述距离,不限于基准面的法线方向的位置,所以检测距离不限于检测基准面的法线方向的位置。
综上所述,所谓适用本发明的信息处理装置只要具有如下功能即可,其实施方式不特别限于上述实施方式。
即,所谓适用本发明的信息处理装置具有三维位置检测功能,检测物体相对基准平面的三维方向的位置;三维操作受理功能,根据时间上间隔地多次检测的物体的三维方向的各位置,识别该物体的三维方向的移动,受理该识别结果作为对于对象的指示操作;以及控制功能,根据受理的指示操作,对与该对象有关的处理进行可变控制。
另外,在上述实施方式中,根据输入部1017与手指1101的距离来变更显示部1016的显示器中显示的图标的显示率,但不限于此。例如,也可根据输入部1017与手指1101的距离,定中心于接近手指1101的地方来显示。
另外,在上述实施方式中,适用本发明的信息处理装置1001举例说明智能手机,但不特别限于此。
例如,本发明能够广泛适用于具有拍摄功能的电子设备。具体地,例如本发明能适用于笔记本型电脑、打印机、电视接收机、视频摄像机、数码相机、便携型导航装置、便携电话机、便携式游戏机等。
上述一系列处理既可由硬件执行,也可由软件执行。
换言之,图23的功能构成仅是示例,不特别限定。即,只要信息处理装置1001中具备能将上述一系列处理作为整体执行的功能即可,为了实现该功能而使用何功能块不特别限于图23的例子。
另外,一个功能块既可由硬件单体构成,也可由软件单体构成,也可由它们的组合来构成。
在由软件执行一系列处理的情况下,构成该软件的程序从网络或记录介质安装到计算机等中。
计算机也可以是插入专用硬件的计算机。另外,计算机也可以是通过安装各种程序来执行各种功能的计算机,例如通用电脑。
包含这种程序的记录介质不仅仅由为了向用户提供程序而在装置本体之外配布的图22的可移动介质1041构成,也可以由以事先插入装置本体中的状态提供给用户的记录介质等构成。可移动介质1041例如由磁盘(包含软盘)、光盘或磁光盘等构成。光盘例如由CD-ROM(Compact Disk-Read Only Memory)、DVD(Digital VersatileDisk)等构成。磁光盘由MD(Mini-Disk)等构成。另外,以事先插入装置本体中的状态提供给用户的记录介质例如由记录程序的图22的ROM1012或图22的存储部1018中包含的硬盘等构成。
另外,在本说明书中,当然包括记述在记录介质中记录的程序的步骤沿其顺序时序地执行的处理,但也包括未必时序地处理而是并列地或单独地执行的处理。
另外,本说明书中,系统的术语指由多个装置或多个部件等构成的整体装置。
以上对本发明的几个实施方式进行说明,但这些实施方式仅是示例,不限定本发明的技术范围。本发明能够采取其他各种实施方式,并且,在不脱离本发明要旨的范围下,能够进行省略或置换等各种变更。这些实施方式或其变形在包含于本说明书等记载的发明范围或要旨中的同时,包含在权利要求记载的发明与其均等的范围中。

Claims (14)

1.一种信息处理装置,其特征在于,具备:
三维位置检测部,检测物体相对于基准平面的三维方向的位置;
三维操作受理部,根据由所述三维位置检测部在时间上间隔地多次检测到的所述物体的三维方向的各位置,识别该物体的三维方向的移动,受理该识别结果作为对于对象的指示操作;以及
控制部,根据由所述三维操作受理部受理的所述指示操作、及所述物体距所述基准平面的法线方向距离,对与所述对象有关的处理进行可变控制,
即使所述指示操作相同,但在所述法线方向的距离为与所述基准平面接近的第1距离的情况下,所述控制部控制与所述对象有关的第1处理,而在所述法线方向的距离为比所述第1距离远离所述基准平面的第2距离的情况下,所述控制部控制不同于所述第1处理的与所述对象有关的第2处理。
2.根据权利要求1所述的信息处理装置,其特征在于:
所述三维位置检测部包含将显示画面作为基准平面、在该显示画面上层叠的触摸面板,
作为与所述对象有关的处理,根据所述显示画面的法线方向的距离,分别分配分别对应关联了不同处理的多种触摸操作,
所述三维操作受理部包含:
输入操作受理部,受理与所述显示画面大致平行的二维方向的物体的移动操作;和
距离确定部,确定所述物体距所述显示画面的法线方向距离,
所述控制部根据由所述输入操作受理部受理的移动操作及由所述距离确定部确定的距离,识别所述多种触摸操作中的、已被执行的触摸操作,控制与该触摸操作相对应的、与所述对象有关的处理。
3.根据权利要求2所述的信息处理装置,其特征在于:
所述控制部根据由所述距离确定部确定的距离,执行所述显示画面中显示的对象的页面发送或其他对象中的读入的任一控制。
4.根据权利要求2所述的信息处理装置,其特征在于:
所述控制部根据由所述距离确定部确定的距离,执行所述显示画面中显示的对象向任意角度的旋转或向规定角度的旋转中的任一控制。
5.根据权利要求2所述的信息处理装置,其特征在于:
所述控制部根据由所述距离确定部确定的距离,执行对所述显示画面中显示的在多个层中配置的对象中的、在任一层中配置的所述对象的按下处理控制。
6.根据权利要求2所述的信息处理装置,其特征在于:
所述控制部根据由所述距离确定部确定的距离,执行选择所述显示画面中显示的多个对象或仅移动所述多个对象中部分对象中的任一控制。
7.根据权利要求2所述的信息处理装置,其特征在于:
所述控制部根据由所述距离确定部确定的距离,执行将所述显示画面中显示的对象作为同分类的其他文件显示或作为其他分类的其他文件显示中的任一控制。
8.根据权利要求2所述的信息处理装置,其特征在于:
所述控制部根据由所述距离确定部确定的距离,执行将在所述显示画面中显示的对象放大显示或缩小显示的控制。
9.根据权利要求2所述的信息处理装置,其特征在于:
所述控制部根据由所述三维操作受理部识别出的所述物体的三维方向的移动,执行对所述对象进行旋转或选择中的任一控制。
10.根据权利要求2所述的信息处理装置,其特征在于:
所述控制部根据由所述距离确定部确定的距离,执行选择不同字符类型作为根据字符识别的结果取得的变换候补字符的控制。
11.根据权利要求2所述的信息处理装置,其特征在于:
还具备拍摄被摄体的拍摄部,
所述控制部根据由所述距离确定部确定的距离,执行利用基于构成所述层叠的触摸面板的多个面板中的任一触摸面板的指示控制所述拍摄部而进行拍摄的控制。
12.根据权利要求2所述的信息处理装置,其特征在于:
还具备拍摄被摄体的拍摄部,
所述控制部根据由所述距离确定部确定的距离,执行由所述拍摄部开始连续拍摄或停止所述连续拍摄中的任一控制。
13.根据权利要求2所述的信息处理装置,其特征在于:
所述触摸面板由静电电容式触摸面板与阻抗膜式触摸面板构成。
14.一种信息处理方法,是控制与对象有关的处理的信息处理装置所执行的信息处理方法,其特征在于,包括:
三维位置检测步骤,检测物体相对于基准平面的三维方向的位置;
三维操作受理步骤,根据由所述三维位置检测步骤在时间上间隔地多次检测到的所述物体的三维方向的各位置,识别该物体的三维方向的移动,受理该识别结果作为对于对象的指示操作;以及
控制步骤,根据由所述三维操作受理步骤受理的所述指示操作、及所述物体距所述基准平面的法线方向距离,对与所述对象有关的处理进行可变控制,
即使所述指示操作相同,但在所述法线方向的距离为与所述基准平面接近的第1距离的情况下,所述控制步骤中控制与所述对象有关的第1处理,而在所述法线方向的距离为比所述第1距离远离所述基准平面的第2距离的情况下,所述控制步骤中控制不同于所述第1处理的与所述对象有关的第2处理。
CN201210264466.3A 2011-06-09 2012-06-07 信息处理装置及信息处理方法 Active CN102981644B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2011129013A JP2012256213A (ja) 2011-06-09 2011-06-09 情報処理装置、情報処理方法及びプログラム
JP129013/2011 2011-06-09
JP2012040193A JP5845969B2 (ja) 2012-02-27 2012-02-27 情報処理装置、情報処理方法及びプログラム
JP040193/2012 2012-02-27

Publications (2)

Publication Number Publication Date
CN102981644A CN102981644A (zh) 2013-03-20
CN102981644B true CN102981644B (zh) 2016-08-24

Family

ID=47294229

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210264466.3A Active CN102981644B (zh) 2011-06-09 2012-06-07 信息处理装置及信息处理方法

Country Status (2)

Country Link
US (1) US20120317516A1 (zh)
CN (1) CN102981644B (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5921121B2 (ja) * 2011-09-09 2016-05-24 キヤノン株式会社 撮像装置、その制御方法及びプログラム並びに記録媒体
US20130272041A1 (en) * 2012-04-13 2013-10-17 Aeon Labs Electrical device with low voltage output and low voltage touch panel
US20160171297A1 (en) * 2013-06-25 2016-06-16 Thomson Licensing Method and device for character input
CN104375722B (zh) * 2013-08-16 2018-04-27 联想(北京)有限公司 一种输入方法及电子设备
JP6176718B2 (ja) * 2013-09-06 2017-08-09 株式会社コナミデジタルエンタテインメント ゲームプログラム、ゲームシステム
WO2016035231A1 (ja) 2014-09-03 2016-03-10 パナソニックIpマネジメント株式会社 ユーザインターフェース装置およびプロジェクタ装置
JP2016095795A (ja) 2014-11-17 2016-05-26 株式会社東芝 認識装置、方法、及びプログラム
JP6463963B2 (ja) * 2014-12-15 2019-02-06 クラリオン株式会社 情報処理装置及び情報処理装置の制御方法
CN104702857A (zh) * 2015-03-27 2015-06-10 合肥联宝信息技术有限公司 对成像后的图像进行角度处理的方法和装置
JP6483556B2 (ja) 2015-07-15 2019-03-13 株式会社東芝 操作認識装置、操作認識方法及びプログラム
JP7335487B2 (ja) * 2019-04-02 2023-08-30 船井電機株式会社 入力装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2290510A1 (en) * 2009-08-27 2011-03-02 Research In Motion Limited Touch-sensitive display with capacitive and resistive touch sensors and method of control

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8381135B2 (en) * 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
US20070130547A1 (en) * 2005-12-01 2007-06-07 Navisense, Llc Method and system for touchless user interface control
US8793621B2 (en) * 2006-11-09 2014-07-29 Navisense Method and device to control touchless recognition
US7877707B2 (en) * 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
US20080231605A1 (en) * 2007-03-21 2008-09-25 Kai-Ti Yang Compound touch panel
KR20100041006A (ko) * 2008-10-13 2010-04-22 엘지전자 주식회사 3차원 멀티 터치를 이용한 사용자 인터페이스 제어방법
KR101611302B1 (ko) * 2009-08-10 2016-04-11 엘지전자 주식회사 제스쳐 입력이 가능한 휴대 단말기 및 그 제어방법
JP5429814B2 (ja) * 2010-03-29 2014-02-26 株式会社ワコム 指示体検出装置および検出センサ
US9043732B2 (en) * 2010-10-21 2015-05-26 Nokia Corporation Apparatus and method for user input for controlling displayed information

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2290510A1 (en) * 2009-08-27 2011-03-02 Research In Motion Limited Touch-sensitive display with capacitive and resistive touch sensors and method of control

Also Published As

Publication number Publication date
CN102981644A (zh) 2013-03-20
US20120317516A1 (en) 2012-12-13

Similar Documents

Publication Publication Date Title
CN102981644B (zh) 信息处理装置及信息处理方法
US12073008B2 (en) Three-dimensional object tracking to augment display area
JP6603332B2 (ja) スタイラスでユーザインタフェースを操作するためのデバイス及び方法
CN104049734B (zh) 基于用户接触显示图形用户界面的方法和设备
JP6074170B2 (ja) 近距離動作のトラッキングのシステムおよび方法
US8169414B2 (en) Control of electronic games via finger angle using a high dimensional touchpad (HDTP) touch user interface
US9696882B2 (en) Operation processing method, operation processing device, and control method
CN107491258A (zh) 用于在分屏模式下操纵窗口的设备、方法和图形用户界面
US8376854B2 (en) Around device interaction for controlling an electronic device, for controlling a computer game and for user verification
CN104081307B (zh) 图像处理装置、图像处理方法和程序
CN107850976A (zh) 用于基于触摸输入的强度来处理触摸输入的设备和方法
CN110347214A (zh) 可折叠电子设备及其界面交互方法
CN101611373A (zh) 利用触摸敏感设备控制、操纵和编辑媒体文件的姿态
CN108052264A (zh) 用于移动和放置用户界面对象的设备、方法和图形用户界面
KR20130099186A (ko) 표시 장치, 유저 인터페이스 방법, 및 프로그램
CN105094635A (zh) 用于通过体图像进行导航的设备和方法
CN110308832A (zh) 显示控制设备及其控制方法和存储介质
JP5845969B2 (ja) 情報処理装置、情報処理方法及びプログラム
CN106096043A (zh) 一种拍照方法和移动终端
CN107608612A (zh) 书写笔迹的对齐显示方法、电子装置及可读存储介质
CN107656794A (zh) 界面显示方法和装置
TW201205421A (en) A operation method and a system of the multi-touch
CN106502553A (zh) 手势互动操作方法
CN106168951A (zh) 电子装置及其控制方法
CN104798025B (zh) 基于亲和力的页导航

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant