CN104007926A - 对手势操作进行检测的数据处理装置 - Google Patents

对手势操作进行检测的数据处理装置 Download PDF

Info

Publication number
CN104007926A
CN104007926A CN201410068760.6A CN201410068760A CN104007926A CN 104007926 A CN104007926 A CN 104007926A CN 201410068760 A CN201410068760 A CN 201410068760A CN 104007926 A CN104007926 A CN 104007926A
Authority
CN
China
Prior art keywords
gesture operation
mentioned
user
unit
data processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410068760.6A
Other languages
English (en)
Other versions
CN104007926B (zh
Inventor
木村哲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Publication of CN104007926A publication Critical patent/CN104007926A/zh
Application granted granted Critical
Publication of CN104007926B publication Critical patent/CN104007926B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供一种数据处理装置,在对手势操作进行检测而进行与该操作相对应的数据处理的情况下,能够适当地判断该手势操作。对手势操作进行检测(步骤A10),根据其检测结果来进行手势操作种类的圈定(步骤A11),参照包括进行了手势操作的操作者的用户属性的用户信息表(步骤A13),圈定为一个手势操作种类(步骤A14)。

Description

对手势操作进行检测的数据处理装置
技术领域
本发明涉及一种数据处理装置,对手势操作进行检测而进行与该手势操作种类相对应的数据处理。
背景技术
以往,在便携终端装置等数据处理装置中已知一种技术,根据触摸面板上的手势操作的动作本身,来判断进行了哪种操作。例如,存在如下技术:根据触摸面板上的接触开始点与接触结束点的关系来判断是进行了轻拂操作还是进行了敲击操作的技术(参照日本特开2011-118629公报);根据触摸位置的分散状态的阈值来判断是进行了拖动操作还是进行了轻拂操作的技术(参照日本特开2011-134212公报);以及通过操作的动作和速度的阈值判断来判断是否进行了轻拂操作的技术(参照日本特开2006-85703公报)。
然而,在上述各专利文献的技术中,仅是根据手势操作本身的动作(根据物理的操作状态)来判断是否是轻拂操作,存在误判断的危险性。
即,即使是相同种类的手势操作,根据进行操作的用户的不同而其动作会微妙地变化,因此有时会进行与用户的意图相反的手势判断。例如,存在本来打算进行轻拂操作但被判断为敲击操作、或者本来打算进行敲击操作但被判断为轻拂操作等误判断的危险性。
发明内容
本发明的课题在于,在对手势操作进行检测而进行与该操作对应的数据处理的情况下,能够适当地判断其手势操作。
本发明的数据处理装置,对手势操作进行检测,其特征在于,具备:
属性存储单元,存储用户的属性;
检测单元,对手势操作的操作内容进行检测;
判断单元,在进行了上述手势操作时,根据由上述检测单元检测的操作内容的检测结果和上述属性存储单元所存储的用户属性,从多个手势操作种类中判断上述操作的手势操作种类;以及
数据处理单元,执行与上述判断单元判断的手势操作种类相对应的种类的处理。
发明的效果
根据本发明,在对手势操作进行检测而进行与该操作对应的数据处理的情况下,能够适当地判断其手势操作,操作性提高。
附图说明
图1是表示作为数据处理装置使用的平板终端装置的基本构成要素的框图。
图2是表示将各种图像缩小而使触摸显示部6一览显示的情况下的缩略图画面的图。
图3A是用于说明优先判断表3d的图。
图3B是用于说明用户信息表3e的图。
图4是在指定了图像显示处理时开始执行的流程图。
图5是接着图4的动作的流程图。
图6是表示每当进行手势操作时开始执行的用户的操作习惯的学习处理的流程图。
具体实施方式
以下,参照图1~图6对本发明的实施方式进行说明。
本实施方式例示出作为数据处理装置而应用于平板终端装置的情况,图1是表示该平板终端装置的基本构成要素的框图。
平板终端装置是框体整体例如为A5尺寸的便携式信息终端装置,具备触摸输入功能、无线通信功能等。CPU1是通过来自电源部(二次电池)2的电力供给而动作、根据存储部3内的各种程序来对该平板终端装置的整体动作进行控制的中央计算处理装置。
存储部3例如构成为具有ROM、闪存等,具有:程序存储器3a,存储用于根据图4~图6所示的动作顺序来实现本实施方式的程序;数据存储器3b,存储该平板终端装置所需要的各种数据(图像数据、文章数据等);以及,标志等暂时存储用的工作存储器3c,除此以外还具有后述的优先判断表3d、用户信息表3e。
此外,存储部3例如也可以构成为包括SD卡、IC卡等装卸自如的可移动型存储器(记录媒体),虽然未图示,但在经由通信功能与网络连接的状态下也可以包括规定的服务器装置侧的存储区域。
操作部4为,虽然图示省略,但作为按压按钮式的键而具备使电源开/关的电源键等。无线LAN(Local Area Network,局域网)通信部5是能够进行高速大容量的通信的无线通信模块,能够经由最近的无线LAN路由器(图示省略)与互联网等连接。触摸显示部6构成为在显示面板6a上层叠配设触摸面板6b,对作为软件键(软键)的功能名进行显示、或者对各种图标等进行显示。
该触摸显示部6的触摸面板6b构成对用手指等(包括笔等操作件)进行触摸操作的位置进行检测而输入其坐标数据的触摸屏幕,例如能够采用静电电容方式或者电阻膜方式,但也可以是光传感器方式等其他方式。
当在触摸显示部6上进行触摸操作(以下有时将各种触摸操作称为手势操作)时,CPU1根据与其接触位置对应的信号的时间变化来检测手指等的移动方向、移动速度、移动量,或者检测手指等的接触离开的情况。然后,CPU1对触摸面板6b上的手势操作种类进行判断,并进行与其种类相对应的数据处理。
即,CPU1作为该手势操作的内容(种类),而判断是进行了对触摸显示部6的画面内的位置进行指示的手势操作、还是进行了对画面内的显示内容的变更进行指示的手势操作这种手势操作种类。
在此,在本实施方式中,作为在触摸面板6b上进行的手势操作种类,而判断进行了对触摸面板6b上的任意位置进行接触后立即离开的手势操作(敲击操作)、在触摸面板6b上接触移动而后立即离开的手势操作(指示显示滚动的轻拂操作)的哪个,但不限于该敲击操作、轻拂操作,也可以从多个手势操作中判断其他种类的手势操作。
此外,手势操作意味着,不限于向触摸面板6b上的接触操作(触摸操作),作为与该接触操作近似的操作,例如包括根据由手指、笔的接近、接近移动而导致的静电电容变化、明亮度变化等,来检测手指、笔的位置的非接触操作。
即,不限于检测接触操作的接触型触摸面板,也可以是检测非接触操作的非接触型触摸面板、操作检测器件,但在本实施方式中为,作为手势操作而例示了接触型触摸面板上的接触操作的情况。
图2是表示将各种图像缩小而在触摸显示部6一览显示的情况下的缩略图画面的图。
当通过用户操作指定了图像的显示时,CPU1例如使通过SD卡等从外部供给的图像在缩略图画面中一览显示。图2的例子表示多个图像以3行×2列的矩阵状配置显示的情况下的缩略图画面。
在该缩略图画面内的空余区域配置有各种按钮,例如在右下区域配置有指示将刚才的操作取消而返回原来的状态的返回按钮。此外,作为在缩略图画面中配置的按钮,除了返回按钮以外还有页切换按钮(图示省略)等。
在该缩略图画面上,当进行某个手势操作时,CPU1判断该手势操作的种类(手势操作种类),如果该手势操作种类为敲击操作,则执行图像的选择处理,但如果是轻拂操作,则执行页切换处理。
此外,在图2的例子中,例示了在第3行第1列的图像上进行了敲击操作的情况,并且例示了在第1行和第2行的空余区域上进行了向箭头方向(右方向)的轻拂操作、和向箭头方向(左方向)的轻拂操作的情况。
图3A是说明优先判断表3d的图,图3B是用于说明用户信息表3e的图。
图3A的优先判断表3d例如是在制品出厂时预先准备的表,构成为具有“用户属性”、“敲击基本判断值”、以及“轻拂基本判断值”各项目。
“用户属性”具有表示操作者(用户)的属性的“年龄段”、“性别”的项目,作为按男女分的年龄段而区分为“10~20岁”、“30~50岁”、……、“60岁”。
“敲击基本判断值”、“轻拂基本判断值”是在判断手势操作种类时参照的判断值,是预先根据用户属性而固定地(基本地)决定的值。
例如,一般,“10~20岁”以及“30~50岁”的男性具有的特征为,具有有劲头地进行轻拂操作的倾向,移动速度、移动量的值变大,但由于还有有劲头地进行敲击操作的倾向,因此有时不能够将手势操作种类圈定(narrow down)为一个。
在这种情况下为了使敲击操作优先,而在图3A图示的例子中,对“敲击基本判断值”设定“1”,对“轻拂基本判断值”设定“0”。与此相对,“60岁以上”的男性具有认真、缓慢地进行轻拂操作的倾向,移动速度、移动量变小,并具有认真地进行敲击操作的倾向。在这种情况下为了优先地判断轻拂操作,在图示的例子中,对“敲击基本判断值”设定“0”,对“轻拂基本判断值”设定“1”。
此外,“10~20岁”的女性为,对“敲击基本判断值”设定“1”、对“轻拂基本判断值”设定“0”,“30~50岁”、“60岁以上”的女性为,对“敲击基本判断值”设定“0”、对“轻拂基本判断值”设定“1”。
此外,在上述例子中,作为“敲击基本判断值”、“轻拂基本判断值”,通过设定“0”或者“1”来设定优先“1”/非优先“0”,但并不限于此,例如也可以是“10”以下的数值。
图3B表示用户信息表3e。
该用户信息表3e为,按照每个用户,作为与该用户相关的信息而按照用户来存储“No.”、“用户ID”、“用户属性”、“敲击判断值”、“轻拂判断值”的各项目。因此,在多人共享使用的环境下,各用户能够将自己的识别信息设定为“用户ID”。并且,当从优先判断表3d中选择指定(与自己的年龄段以及性别对应的)用户属性时,该选择指定的用户属性中包含的“年龄段”、“性别”被设定到用户信息表3e的“用户属性”中。
然后,从优先判断表3d读出与该选择指定的“用户属性”对应的“敲击基本判断值”、“轻拂基本判断值”,在用户信息表3e的对应的“敲击判断值”、“轻拂判断值”中设定为其初始值。
该“敲击判断值”以及“轻拂判断值”的值,根据用户的操作习惯而从初始值开始增加。即,CPU1关于敲击操作、轻拂操作而对用户的操作习惯进行学习,并根据其学习结果而增加“敲击判断值”、“轻拂判断值”的值。
在此,在紧接着轻拂操作之后(例如1秒以内)进行了向相反方向的返回操作(反向轻拂操作)的情况或者操作了返回按钮(参照图2)的情况下,在进一步在其之后接着进行了敲击操作时,判断为是将敲击操作误判断为轻拂操作的情况,而使“敲击判断值”增加(例如+0.1)。此外,在敲击操作之后(例如1秒以内)操作了返回按钮(参照图2)的情况下,在进一步在其之后接着进行了轻拂操作时,判断为是将轻拂操作误判断为敲击操作的情况,而使“敲击判断值”增加(例如+0.1)。
如此,在本实施方式中,数据处理装置(平板终端装置)具备:存储用户的属性(性别、年龄段、操作习惯)的属性存储单元(用户信息表3e、CPU1);检测手势操作的检测单元(CPU1、触摸显示部6);判断单元(CPU1),在进行了手势操作时,根据该检测单元的检测结果和属性存储单元所存储的用户属性,从多个手势操作种类中判断所操作的手势操作种类;以及数据处理单元(CPU1),执行与该判断单元判断的手势操作种类相对应的种类的处理。
接下来,参照图4~图6所示的流程图,对本实施方式的数据处理装置(平板终端装置)的动作概念进行说明。
在此,这些流程图所记载的各功能,以能够读取的程序代码的形态储存,按照该程序代码的动作被依次执行。此外,还能够依次执行按照经由网络等传送介质传送来的上述程序代码的动作。即,除了记录介质以外,还能够利用经由传送介质从外部供给的程序/数据来执行本实施方式特有的动作。此外,图4~图6是表示平板终端装置的整体动作中、本实施方式的特征部分的动作概要的流程图,在从该图4~图6的流程退出时,返回整体动作的主流程(图示省略)。
图4以及图5是在指定了图像显示处理时开始执行的流程图,在该图像显示处理之前,根据在电源接通时输入的用户信息或者生物体信息来确定操作者(用户)。
首先,CPU1例如将通过SD卡等从外部供给的各种图像选择为显示对象(图4的步骤A1),读入这些图像(步骤A2),在进行了缩小处理之后,在触摸显示部6进行缩略图显示(步骤A3)。
在该缩略图画面上,例如图2所示那样,多个图像以3行×2列的矩阵状配置显示,并且配置有返回按钮等。在该缩略图画面上,在进行了某种操作时(步骤A4中“是”),调查该操作是否为返回按钮等的按钮操作(步骤A5),如果是按钮操作(步骤A4中“是”),则调查是否为返回按钮(步骤A6),或者调查是否是指示图像显示处理结束的结束按钮(步骤A8)。
现在,在操作了返回按钮时(步骤A6中“是”),在进行了将刚才的操作取消而成为原来的状态的返回处理(步骤A7)之后,转移到上述步骤A4,但在操作了返回按钮以及结束按钮以外的其他按钮时(步骤A8中“否”),进行对应于操作的处理(例如页切换处理等)(步骤A9),然后转移到上述步骤A4。
此外,如果是结束按钮(步骤A8中“是”),则从图4以及图5的流程退出。此外,如果缩略图画面上的操作不是按钮操作、即如果是手势操作(步骤A5中“否”),则转移到图5的流程。
首先,CPU1为,当在缩略图画面上进行手势操作时,检测向触摸面板6b的接触位置,并且根据与该接触位置对应的信号的时间变化来检测手指等的移动方向、移动速度、移动量,或者检测手指等的接触离开了的情况,而进行手势操作的检测(图5的步骤A10)。
然后,在接下来的步骤A11中,根据该手势操作的检测结果来进行手势操作的圈定(进行是敲击操作还是轻拂操作的圈定),并调查是否能圈定为一个手势操作种类(步骤A12)。
在该情况下,例如,对手势操作的检测结果(操作模式)与多个手势操作种类各自的操作模式是否在特征上类似进行判别,在如果未与多个手势操作种类的操作模式中的2个以上的操作模式类似、即如果仅与某一个手势操作种类的操作模式类似时,则判断为能够圈定为一个手势操作种类。
现在,在根据手势操作的检测结果(移动方向、移动速度、移动量等)明确地检测到有劲头的轻拂操作等那样的手势操作种类(操作模式)的特征,并能够圈定为一个手势操作种类时(步骤A12中“是”),转移到接下来的步骤A15。
在该情况下,如果该圈定的手势操作种类为轻拂操作(步骤A15中“是”),则执行根据轻拂操作来向其操作方向切换页的翻页处理(步骤A16),如果为敲击操作(步骤A15中“否”),则执行对所敲击操作的位置的图像进行选择的图像选择处理(步骤A17)。
此外,在根据手势操作的检测结果不能够圈定为一个手势操作种类的情况下,即,在手势操作的检测结果(操作模式)与多个手势操作种类的操作模式在特征上类似,而仅通过手势操作的检测结果圈定为一个手势操作种类那样的存在误判断的可能性的情况下(步骤A12中“否”),进行参照了“用户属性”的判断(步骤A13~A15)。
即,对包含如上述那样确定的操作者的“用户属性”的用户信息表3e(步骤A13),将与该(操作者的)“用户属性”对应的“敲击判断值”、“轻拂判断值”进行比较(步骤A14),并圈定为该判别值较大一方的手势操作种类(步骤A15)。
此外,不限于根据“敲击判断值”、“轻拂判断值”的大小比较来进行手势操作种类的圈定的情况,也可以对“敲击判断值”、“轻拂判断值”进行加权而进行大小比较等,其比较方法是任意的。如果圈定的手势操作种类为轻拂操作(步骤A15中“是”),则执行用于根据轻拂操作而向其操作方向切换页的翻页处理(步骤A16),如果是敲击操作(步骤A15中“否”),则执行对所敲击操作的位置的图像进行选择的图像选择处理(步骤A17)。
图6是表示用户的操作习惯学习处理的流程图,每当进行手势操作时就与图4以及图5的流程图并行地开始执行。
首先,CPU1取得手势操作种类的判断结果(步骤B1),如果其是轻拂操作(步骤B2中“是”),则调查在该轻拂操作后一定时间内(例如1秒以内)是否进行了其他操作(步骤B3)。
在此,如果未进行其他操作(步骤B3中“否”),则从图6的流程退出,但在进行了其他操作时(步骤B3中“是”),在调查是否进行了向相反方向的返回操作(反向轻拂操作)(步骤B4)、或者调查是否操作了返回按钮(参照图2)(步骤B5)。
现在,如果未进行反向轻拂操作、返回按钮操作的任一个(步骤B5中“否”),则从图6的流程退出,但在进行了其任一个操作时(步骤B4中“是”或者步骤B5中“是”),进一步接着调查在一定时间内(例如1秒以内)是否进行了其他操作(步骤B6)。
在此,在一定时间内进行了敲击操作时(步骤B7中“是”),判断为是将敲击操作误判断为轻拂操作的情况,参照包含操作者的“用户属性”的用户信息表3e,进行使对应的“敲击判断值”增加(例如+0.1)的处理(步骤B8)。
此外,在接着反向轻拂操作或者返回按钮操作而在一定时间内未进行其他操作的情况(步骤B6中“否”)或者该操作不是敲击操作的情况下(步骤B7中“否”),从图6的流程退出。如此,在规定时间内包括返回操作(反向轻拂操作或返回按钮操作)而连续进行了多种操作的情况下,在该一系列操作中将最初的操作识别为误判断的操作,将最后的操作作为判断为正常的操作进行学习。
此外,如果所判断的手势操作种类为敲击操作(步骤B2中“否”),则调查在该敲击操作后,在一定时间内(例如1秒以内)是否进行了其他操作(步骤B9)。
在此,如果未进行其他操作(步骤B9中“否”),则从图6的流程退出,但在进行了其他操作时(步骤B9中“是”),调查该操作是否为返回按钮操作(参照图2)(步骤B10),如果不是返回按钮操作(步骤B10中“否”),则从图6的流程退出。
在此,在操作了返回按钮时(步骤B10中“是”),调查接着该返回按钮操作、在一定时间内是否进一步进行了其他操作(步骤B11),如果未进行其他操作(步骤B11中“否”),则从图6的流程退出,但在进行了其他操作时(步骤B11中“是”),调查该操作是否是轻拂操作(步骤B12)。
现在,在接着返回按钮而进行了轻拂操作时(步骤B12中“是”),判断为是将轻拂操作误判断为敲击操作的情况,参照包含操作者的“用户属性”的用户信息表3e,进行使对应的“轻拂判断值”增加(例如+0.1)的处理(步骤B13)。
以下,每当进行手势操作时就重复进行操作习惯学习处理,结果,用户信息表3e的内容被从“敲击判断值”以及“轻拂判断值”的初始值更新。例如,如图3B所示那样,10~20岁男性的“敲击判断值”的初始值“1”被更新为“1.6”,“轻拂判断值”的初始值“0”被更新为“0.2”,60岁以上女性的“敲击判断值”的初始值“0”被更新为“0.1”,“轻拂判断值”的初始值“1”被更新为“1.8”,操作习惯被反映于判断值。
如以上那样,本实施方式的数据处理装置(平板终端装置),在进行了手势操作时,根据该手势操作的检测结果和用户信息表3e存储的用户属性,从多个手势操作种类中判断所操作的手势操作种类,并执行与该判断的手势操作种类相对应的种类的处理,因此在检测到手势操作时,能够适当地判断该手势操作,能够对应于该操作来适当地进行数据处理。由此,有助于操作性的提高,对于用户来说能够进行按照意图的操作。
在根据手势操作的检测结果而未能圈定为一个手势操作种类的情况下,根据用户属性来判断是哪一个手势操作种类,因此能够进行整体上适当的判断。即,在手势操作的检测结果(操作模式)与多个手势操作种类的操作模式在特征上类似,而仅通过手势操作的检测结果圈定为一个手势操作种类那样的存在误判断可能性的情况下,由于参照用户属性进行判断,因此能够进行整体上适当的判断。
用户信息表3e与用户属性对应地按照每个手势操作种类来存储表示是否优先判断的判断值,CPU1通过将每个手势操作种类的判断值进行比较来判断是哪个手势操作种类,因此例如能够通过判断值的大小比较等,各种方法来进行手势操作种类的圈定。
CPU1作为用户属性而存储其性别、年龄段多个项目,因此能够极其细致地设定用户的属性,能够根据用户属性来适当地判断手势操作种类。
CPU1对操作者的手势操作的操作习惯进行学习,并将该操作习惯作为用户属性进行存储,因此在判断手势操作种类时能够考虑用户的操作习惯,能够进行更适当的判断。
CPU1在规定时间内包含返回操作而连续进行了多种操作的情况下,在该一系列的操作中将最初的操作识别为误判断的操作,将最后的操作作为判断正常的操作进行学习,因此能够适当地学习操作习惯。
CPU1对进行了手势操作的用户进行确定,并根据其用户属性来判断手势操作种类,因此即使在多个用户共享使用的环境下也能够进行对应。
CPU1根据对触摸显示部6上的操作进行检测的检测结果来判断手势操作种类,因此能够对在触摸显示部6上进行的手势操作进行判断。
CPU1作为触摸显示部6上的手势操作种类而判断是敲击操作、轻拂操作中的哪个,因此能够适当地判断相类似的敲击操作、轻拂操作。
此外,在上述实施方式中,用户信息表3e对于用户属性(性别以及年龄段)而存储“敲击判断值”、“轻拂判断值”,但也可以对应于性别而存储“敲击判断值”、“轻拂判断值”,并且对应于年龄段而存储“敲击判断值”、“轻拂判断值”。
在该情况下,也可以根据是重视性别还是重视年龄段,在对它们的判断值进行了加权之后,求出进行了加权的性别的“敲击判断值”和年龄段的“敲击判断值”的合计值,并且求出性别的“轻拂判断值”和年龄段的“轻拂判断值”的合计值,并将这些合计值进行比较,由此判断手势操作种类。
在上述实施方式中,作为手势操作种类而判断是敲击操作、轻拂操作的哪个,但除了敲击操作、轻拂操作以外,例如也可以将进行接触移动的操作(滑动操作:拖动操作)、将接触位置固定而继续的操作(保持操作)、通过多根手指同时接触多个显示位置的操作(双击(double tap)操作)、指示显示数据的放大的操作(放大操作)、以及指示显示数据的缩小的操作(缩小操作)等,判断为手势操作种类。
在上述实施方式中,作为用户属性而存储其性别、年龄段的多个项目,但也可以在用户属性中包含用户的健康状态(身体的残疾等)的项目。
在上述实施方式中,在规定时间内包含返回操作而连续进行了多种操作的情况下,在该一系列操作中将最初的操作识别为误判断的操作,将最后的操作作为判断正常的操作进行学习,但也可以与此相反,在规定时间内包含返回操作而连续进行了多种操作的情况下,在该一系列操作中将最后的操作识别为判断正常的操作,将最初的操作作为误判断的操作进行学习。
在上述实施方式中,对触摸显示部6上的手势操作进行检测,但也可以使用对用户的手动作、身体动作进行拍摄的摄像器件。即,对手势操作进行检测的单元也可以是摄像单元。由此能够对较多的手势操作进行检测。
此外,在上述实施方式中,例示了作为数据处理装置而应用于平板终端装置的情况,但数据处理装置不限于此,也可以是个人计算机、PDA(个人便携式信息通信机器)、移动电话机、数字摄像机、音乐播放器等。
此外,在上述实施方式中表示的“装置”、“部”,也可以按照功能分离为多个框体、而不限于单一的框体。此外,上述流程图记载的各步骤不限于时间序列的处理,也可以使多个步骤并列地处理、或者个别独立地处理。
以上,对本发明的实施方式进行了说明,但本发明不限定于此,包含专利请求范围记载的发明和其均等的范围。

Claims (10)

1.一种数据处理装置,对手势操作进行检测,其特征在于,具备:
属性存储单元,存储用户的属性;
检测单元,对手势操作的操作内容进行检测;
判断单元,在进行了上述手势操作时,根据由上述检测单元检测的操作内容的检测结果和上述属性存储单元所存储的用户属性,从多个手势操作种类中判断上述操作的手势操作种类;以及
数据处理单元,执行与上述判断单元判断的手势操作种类相对应的种类的处理。
2.如权利要求1记载的数据处理装置,其特征在于,
在根据上述检测单元的检测结果而未能圈定为一个手势操作种类的情况下,上述判断单元根据上述用户属性来判断某一个手势操作种类。
3.如权利要求1或2记载的数据处理装置,其特征在于,
上述属性存储单元与用户属性对应地按照每个手势操作种类来存储是否优先进行判断的判断值,
上述判断单元通过将每个上述手势操作种类的判断值进行比较,来判断某一个手势操作种类。
4.如权利要求1~3任一项记载的数据处理装置,其特征在于,
作为用户属性,上述属性存储单元至少存储用户的性别、年龄段、健康状态中的多个项目。
5.如权利要求1~4任一项记载的数据处理装置,其特征在于,
还具备对手势操作的操作习惯进行学习的操作习惯学习单元,
上述属性存储单元将通过上述操作习惯学习单元得到的操作习惯存储为用户的属性。
6.如权利要求5记载的数据处理装置,其特征在于,
在规定时间内包括返回操作在内连续进行了多种操作的情况下,上述操作习惯学习单元将这一系列操作中的最初的操作作为误判断的操作进行学习或者将最后的操作作为判断正常的操作进行学习。
7.如权利要求1~6任一项记载的数据处理装置,其特征在于,
还具备对进行了上述检测单元检测到的手势操作的用户进行确定的确定单元,
上述判断单元根据上述确定单元确定的用户的属性来判断手势操作种类。
8.如权利要求1~7任一项记载的数据处理装置,其特征在于,
上述检测单元检测在显示画面上进行的手势操作、或者检测根据由摄像部拍摄的用户的拍摄图像而得到的手势操作的操作内容。
9.如权利要求8记载的数据处理装置,其特征在于,
作为在上述显示画面上进行的手势操作种类,上述判断单元判断是敲击操作、轻拂操作的哪一个。
10.一种对手势操作进行检测的数据处理装置中的方法,其特征在于,具备:
管理步骤,将用户的属性在存储单元中进行存储管理;
检测步骤,对手势操作的操作内容进行检测;
判断步骤,在进行了上述手势操作时,根据通过上述检测步骤检测的操作内容的检测结果和上述存储单元所存储的用户属性,来从多个手势操作种类中判断上述操作的手势操作种类;以及
执行步骤,执行与上述判断的手势操作种类相对应的种类的处理。
CN201410068760.6A 2013-02-27 2014-02-27 对手势操作进行检测的数据处理装置 Active CN104007926B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013037594A JP5783385B2 (ja) 2013-02-27 2013-02-27 データ処理装置及びプログラム
JP2013-037594 2013-02-27

Publications (2)

Publication Number Publication Date
CN104007926A true CN104007926A (zh) 2014-08-27
CN104007926B CN104007926B (zh) 2018-02-09

Family

ID=51368598

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410068760.6A Active CN104007926B (zh) 2013-02-27 2014-02-27 对手势操作进行检测的数据处理装置

Country Status (4)

Country Link
US (1) US20140245236A1 (zh)
JP (1) JP5783385B2 (zh)
KR (1) KR101591586B1 (zh)
CN (1) CN104007926B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5928245B2 (ja) * 2012-08-23 2016-06-01 カシオ計算機株式会社 データ処理装置及びプログラム
JP6249919B2 (ja) * 2014-10-06 2017-12-20 三菱電機株式会社 操作入力装置
JP2016099453A (ja) * 2014-11-20 2016-05-30 三菱電機株式会社 画像表示装置
JP6332224B2 (ja) * 2015-10-14 2018-05-30 京セラドキュメントソリューションズ株式会社 表示入力装置およびそれを備えた画像形成装置
CN109376065A (zh) * 2018-10-29 2019-02-22 北京旷视科技有限公司 一种用户行为热区分析方法、装置和电子设备
JP7466319B2 (ja) * 2019-03-29 2024-04-12 株式会社キーエンス プログラマブル表示器及びこれを備えるプログラマブルロジックコントローラシステム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102456135A (zh) * 2010-11-04 2012-05-16 索尼公司 图像处理设备、方法和程序
US20120151340A1 (en) * 2010-12-14 2012-06-14 Sap Ag Global settings for the enablement of culture-based gestures
US20120167017A1 (en) * 2010-12-27 2012-06-28 Sling Media Inc. Systems and methods for adaptive gesture recognition
US20130024071A1 (en) * 2011-07-22 2013-01-24 Clas Sivertsen Steering Wheel Input Device Having Gesture Recognition and Angle Compensation Capabilities

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5862256A (en) * 1996-06-14 1999-01-19 International Business Machines Corporation Distinguishing gestures from handwriting in a pen based computer by size discrimination
JP4153818B2 (ja) * 2003-03-31 2008-09-24 本田技研工業株式会社 ジェスチャ認識装置、ジェスチャ認識方法及びジェスチャ認識プログラム
JP2004355426A (ja) * 2003-05-30 2004-12-16 Hitachi Ltd タッチパネル操作性向上ソフトウェア及び端末
US8250001B2 (en) * 2008-12-18 2012-08-21 Motorola Mobility Llc Increasing user input accuracy on a multifunctional electronic device
KR20110076458A (ko) * 2009-12-29 2011-07-06 엘지전자 주식회사 디스플레이 장치 및 그 제어방법
US9405404B2 (en) * 2010-03-26 2016-08-02 Autodesk, Inc. Multi-touch marking menus and directional chording gestures
JP5636888B2 (ja) * 2010-11-09 2014-12-10 ソニー株式会社 情報処理装置、プログラムおよびコマンド生成方法
CN103098079A (zh) * 2011-04-11 2013-05-08 英特尔公司 个性化节目选择系统和方法
JP2012256099A (ja) * 2011-06-07 2012-12-27 Sony Corp 情報処理端末および方法、プログラム、並びに記録媒体
US9046958B2 (en) * 2012-03-15 2015-06-02 Nokia Technologies Oy Method, apparatus and computer program product for user input interpretation and input error mitigation
KR20150012265A (ko) * 2012-05-11 2015-02-03 엠파이어 테크놀로지 디벨롭먼트 엘엘씨 입력 오류 교정
US20140009378A1 (en) * 2012-07-03 2014-01-09 Yen Hsiang Chew User Profile Based Gesture Recognition

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102456135A (zh) * 2010-11-04 2012-05-16 索尼公司 图像处理设备、方法和程序
US20120151340A1 (en) * 2010-12-14 2012-06-14 Sap Ag Global settings for the enablement of culture-based gestures
US20120167017A1 (en) * 2010-12-27 2012-06-28 Sling Media Inc. Systems and methods for adaptive gesture recognition
US20130024071A1 (en) * 2011-07-22 2013-01-24 Clas Sivertsen Steering Wheel Input Device Having Gesture Recognition and Angle Compensation Capabilities

Also Published As

Publication number Publication date
CN104007926B (zh) 2018-02-09
KR101591586B1 (ko) 2016-02-03
US20140245236A1 (en) 2014-08-28
JP5783385B2 (ja) 2015-09-24
KR20140107135A (ko) 2014-09-04
JP2014164695A (ja) 2014-09-08

Similar Documents

Publication Publication Date Title
AU2013360585B2 (en) Information search method and device and computer readable recording medium thereof
KR101059835B1 (ko) 휴대용 단말기에서 스케줄 관리 방법 및 장치
US10031586B2 (en) Motion-based gestures for a computing device
CN104007926A (zh) 对手势操作进行检测的数据处理装置
EP2631752A1 (en) Menu display device, menu display control method, program and information storage medium
CN103577140B (zh) 能够连接外部显示装置的显示终端装置及方法
RU2613739C2 (ru) Способ, устройство и терминальное устройство для управления перемещением интерфейса приложения
CN108182032A (zh) 用于对值进行就地编辑的用户界面
US20150277750A1 (en) Display input apparatus and computer-readable non-transitory recording medium with display input control program recorded thereon
JP5397707B2 (ja) タッチ表示装置及びプログラム
EP2631753A1 (en) Image display device, image display control method, program and information storage medium
CN103902174B (zh) 一种显示方法和设备
CN104007919A (zh) 电子装置及其控制方法
CN105210023A (zh) 装置及相关方法
US20110187739A1 (en) Display control apparatus, display control method, and non-transitory computer readable storage medium
CN103703435B (zh) 信息处理装置和信息处理方法
CN103631490A (zh) 进行对应于姿势操作的数据处理的数据处理装置以及方法
EP3550419A2 (en) Mobile terminal device and method for controlling display of mobile terminal device
US9619134B2 (en) Information processing device, control method for information processing device, program, and information storage medium
CN111145891A (zh) 信息处理方法、装置及电子设备
CN109085983A (zh) 操作控制方法、装置、存储介质及电子设备
US9235338B1 (en) Pan and zoom gesture detection in a multiple touch display
JP6094638B2 (ja) 処理装置及びプログラム
CN112765500A (zh) 信息搜索方法及装置
CN110968243A (zh) 一种对象整理方法及电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant