CN104238743B - 信息处理装置以及信息处理方法 - Google Patents

信息处理装置以及信息处理方法 Download PDF

Info

Publication number
CN104238743B
CN104238743B CN201410280529.3A CN201410280529A CN104238743B CN 104238743 B CN104238743 B CN 104238743B CN 201410280529 A CN201410280529 A CN 201410280529A CN 104238743 B CN104238743 B CN 104238743B
Authority
CN
China
Prior art keywords
threshold value
equipment
timing
unit
normal condition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410280529.3A
Other languages
English (en)
Other versions
CN104238743A (zh
Inventor
春日贵
春日一贵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Publication of CN104238743A publication Critical patent/CN104238743A/zh
Application granted granted Critical
Publication of CN104238743B publication Critical patent/CN104238743B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明提供信息处理装置以及信息处理方法。信息处理装置具备:判断单元(71),其在用户佩戴的设备的显示部相对于规定的方向所成的角度处于阈值的范围内的情况下,判断为该设备是基准状态;识别单元(71),其在由所述判断单元判断为是所述基准状态的情况下,对所述设备的从该基准状态起的活动进行识别;输入单元(72),其对与由所述识别单元识别出的所述设备的从基准状态起的活动对应的输入操作进行输入;计时单元(74),其对时间进行计时;检测单元(60),其对所述设备的活动状态进行检测;和设定单元(73),其根据由所述计时单元计时的时间、和由所述检测单元检测出的所述设备的活动状态,来对所述阈值进行可变设定。

Description

信息处理装置以及信息处理方法
技术领域
本发明涉及信息处理装置以及信息处理方法。
背景技术
以往,存在如下技术:在佩戴于用户的手臂的手表型的设备中,基于搭载于该设备的加速度传感器等的检测结果,来对由用户作为操作而进行的手臂等的动作进行识别,通过将其识别结果作为操作输入来接收,从而将该设备作为输入装置来利用(日本:特开2011-175315号公报、2002-358149号公报、2008-136697号公报)。
但是,在包括专利文献1至3在内的现有的动作识别技术中,将用户在日常生活中进行的手臂等的活动误识别为用户作为操作而进行的手臂等的动作的可能性较高。
发明内容
本发明鉴于这样的情况而作出,其目的在于,提高用户作为操作而进行的手臂等的动作的识别精度。
本发明的信息处理装置,具备:判断单元(71),其在用户佩戴的设备的显示部相对于规定的方向所成的角度处于阈值的范围内的情况下,判断为该设备是基准状态;识别单元(71),其在由所述判断单元判断为是所述基准状态的情况下,对所述设备的从该基准状态起的活动进行识别;输入单元(72),其对与由所述识别单元识别出的所述设备的从基准状态起的活动对应的输入操作进行输入;计时单元(74),其对时间进行计时;检测单元(60),其对所述设备的活动状态进行检测;和设定单元(73),其根据由所述计时单元计时的时间、和由所述检测单元检测出的所述设备的活动状态,来对所述阈值进行可变设定。
本发明的信息处理方法作为信息处理装置所执行的步骤而包括:判断步骤,在用户佩戴的设备的显示部相对于规定的方向所成的角度处于阈值的范围内的情况下,判断为该设备是基准状态;识别步骤,在由该判断步骤判断为是基准状态的情况下,对从该基准状态起的所述设备的活动进行识别;输入步骤,对与由该识别步骤识别出的从所述基准状态起的活动对应的输入操作进行输入;计时步骤,对时间进行计时;检测步骤,对所述设备的活动状态进行检测;和设定步骤,根据由所述计时步骤的处理计时的时间、和由所述检测步骤的处理检测出的所述设备的活动状态,来对所述阈值进行可变设定。
附图说明
图1是表示与本发明的信息处理装置的一个实施方式有关的腕部终端的外观结构的概要的示意图。
图2是表示图1的腕部终端的硬件结构的框图。
图3是表示图2的腕部终端的功能性结构中用于执行动作识别处理的功能性结构的功能框图。
图4是对用户的手腕以及手臂的动作的第1模式进行说明的示意图。
图5是对用户的手腕以及手臂的动作的第2模式进行说明的示意图。
图6是对用户的手腕以及手臂的动作的第3模式进行说明的示意图。
图7是对用户的手腕以及手臂的动作的第1模式进行说明的示意图。
图8是表示在动作的识别中使用的阈值的差别的图。
图9是表示由图3的腕部终端进行可变设定的阈值的时间推移的时序图。
图10是表示具有图3的功能结构的图2的腕部终端11所执行的动作识别处理的流程的一个例子的流程图。
具体实施方式
下面,使用附图来对本发明的实施方式进行说明。
图1是表示与本发明的信息处理装置的一个实施方式有关的腕部终端的外观结构的概要的示意图。
如图1所示,腕部终端11是戴在用户的手臂的腕型便携式终端,至少具有识别自身的姿势的功能。在本实施方式中,腕部终端11具有加速度传感器(参见后述的图2),能够基于该加速度传感器的检测结果,以水平状态为基准,来对自身的姿势是否从该水平状态移动进行检测。
在本实施方式中,在与大地垂直站立的用户如图1所示那样将手臂维持水平的情况下,将水平方向中的从肘部朝向手的方向设为“x方向”,将相对于手臂为直角的方向(从用户来看是从近前的拇指朝向进深侧的小指的方向)设为“y方向”,将铅直向上方向设为“z方向”。
图2是表示图1的腕部终端11的硬件结构的框图。
腕部终端11具备:CPU(Central Processing Unit)51、ROM(Read Only Memory)52、RAM(Random Access Memory)53、总线54、输入输出接口55、输入部56、显示部57、存储部58、通信部59、加速度传感器部60、和驱动器61。
CPU51根据ROM52中记录的程序或者从存储部58载入到RAM53的程序,来执行各种处理。
在RAM53也适当地存储CPU51执行各种处理所需要的数据等。
CPU51、ROM52以及RAM53通过总线54来相互连接。该总线54还与输入输出接口55连接。输入输出接口55与输入部56、显示部57、存储部58、通信部59、加速度传感器部60以及驱动器61连接。
输入部56由例如在显示部57的显示画面进行层叠的静电电容式或者电阻膜式的位置输入传感器构成,并对进行触摸操作的位置的坐标进行检测。这里,所谓触摸操作,是指物体(用户的手指、触摸笔等)对于输入部56的接触或者接近的操作。
显示部57由显示器构成并显示图像。
也就是说,在本实施方式中,通过输入部56与显示部57来构成触摸面板。
存储部58由DRAM(Dynamic Random Access Memory)等构成并对各种图像数据进行存储。
通信部59对通过Bluetooth(注册商标)与未图示的便携式终端等进行无线通信,或者利用Wi-Fi,通过包含互联网在内的网络来与未图示的其它端末进行通信的控制进行执行。
加速度传感器部60通过压电电阻型或静电容型的检测机构来检测3轴加速度分量,并对表示其检测结果的3轴分量各自的加速度数据进行输出。
另外,虽然由加速度传感器部60检测到的3轴分量如何安装都可以,但在本实施方式中采用图1所示的3轴分量(x,y,z)。
根据需要,在驱动器61上适当地安装可移动介质(removable medium)62。通过驱动器61来从可移动介质62中读取的程序,根据需要而被安装在存储部58。此外,可移动介质62能够与存储部58同样地,对存储部58中存储的图像数据等各种数据进行存储。
图3是表示这样的腕部终端11的功能性结构中用于执行动作识别处理的功能性结构的功能框图。
所谓动作识别处理,是指到基于加速度传感器部60的检测结果,来对用户能够进行的动作中的手腕以及手臂的动作(在本实施方式中为后述的图4至图8所示的各个模式的动作)进行识别为止的一系列的处理。
后述的图4至图8所示的各个模式的动作分别与规定的输入操作对应,若通过动作识别处理而识别出规定动作,则判断为进行了与识别出的该规定动作的模式对应的输入操作,并在后面阶段执行与该输入操作相应的处理。这里,所谓后面阶段的处理,既有在腕部终端11内执行的情况,也有在能够与腕部终端11进行通信的另外的装置(未图示)中执行的情况。也就是说,在本实施方式中,腕部终端11作为利用了用户的动作的对于腕部终端11本身或者另外的装置的输入装置而起作用。
在执行动作识别处理的情况下,在腕部终端11的CPU51中,如图3所示,动作识别部71、处理执行部72、阈值设定部73、和计数部74起作用。
动作识别部71基于加速度传感器部60的检测结果,来分别对图4至图8所示的各个模式的用户的手腕以及手臂的动作进行识别。
图4至图7是对用户的手腕以及手臂的动作的各个模式分别进行说明的示意图。
首先,将腕部终端11戴在手腕的用户取使该腕部终端11的显示部57水平朝上并静止的状态。下面将该状态称为“水平静止状态”。水平静止状态在图4至图8的任意一种模式中都被采用为基准状态。
在图4所示的模式中,用户从水平静止状态起开始动作,通过使手腕向从自身来看的外侧转动,从而进行将腕部终端11的显示部57倾斜这一动作。
在图5所示的模式中,用户从水平静止状态起开始动作,通过使手腕向从自身来看的内侧转动(与图4的模式相反地转动),从而进行将腕部终端11的显示部57倾斜这一动作。
在图6所示的模式中,用户从水平静止状态起开始动作,通过将肘部以上朝上活动,从而进行将腕部终端11的显示部57倾斜这一动作。
在图7所示的模式中,用户从水平静止状态起开始动作,通过将肘部以上朝下(与图6的模式相反的方向)活动,从而进行将腕部终端11的显示部57倾斜这一动作。
动作识别部71基于加速度传感器部60的检测结果,首先将水平静止状态作为基准状态来检测,在基准状态的检测后经过了规定时间的时刻,对图4至图8所示的各个模式中的规定模式的动作进行识别。
处理执行部72基于与由动作识别部71识别出的动作的模式对应的输入操作的内容,来执行规定的处理。
这里,由于若规定时间短,则动作识别部71进行的动作的识别手法对于用户的操作(活动手臂这样的单纯的动作)迅速响应,因此操作性良好。但是,活动手臂这样的单纯的动作在日常生活中存在大量类似的活动。因此,若动作识别部71不用什么方法来判别是用户为了操作腕部终端11而进行动作,还是在日常生活中的活动,就会导致动作的误检测。
因此,动作识别部71在检测到水平静止状态的情况下,识别为用户为了操作腕部终端11而采取了开始动作的姿态,并在经过了规定时间的时刻,对图4至图8所示的各个模式中的规定模式的动作进行识别。
在本实施方式中,作为水平静止状态的检测方法,采用如下手法:在基于加速度传感器部60的检测结果而判断的腕部终端11的姿势(与水平方向所成的角度)为规定的阈值的范围内的情况下,检测为水平。
图8是表示在动作的识别中使用的阈值的差别的图。
图8(A)所示的阈值Th1与图8(B)所示的阈值Th2相比较,图8(A)所示的阈值较小,也就是说,视作为水平的容许角度较小。
也就是说,在如图8(A)的阈值Th1那样阈值较小的情况下,只要腕部终端11的显示部57稍微倾斜,动作识别部71就不视作为水平,也就是未检测到水平静止状态。
其结果,即使用户打算进行作为操作的动作,在不能良好地使腕部终端11静止而导致使腕部终端11的显示部57稍微倾斜的情况下,动作识别部71不能识别该动作。
另一方面,即使在用户在日常生活中轻挥手臂,或者在其它动作中小幅度活动手臂的情况下,动作识别部71由于未检测到水平静止状态,因此能够防止动作的误识别。
与此相对地,在如图8(B)的阈值Th2那样阈值较大的情况下,由于即使腕部终端11的显示部57有一些倾斜,动作识别部71也视作为水平,因此检测到水平静止状态。
其结果,在用户要开始作为操作的动作时,即使在未良好地使腕部终端11静止而使腕部终端11的显示部57有一些倾斜的情况下,动作识别部71也能够检测到水平静止状态。其结果,若在接下来的次序中用户使腕部终端11的显示部57较大倾斜,则能够可靠地进行动作的识别。
另一方面,即使在用户在日常生活中轻挥手臂,或者在其它动作中小幅度活动手臂的情况下,动作识别部71也会检测为水平静止状态。其结果,之后,在用户虽然不打算进行操作但较大倾斜了腕部终端11的显示部57的情况下,动作识别部71会误识别动作。
如此,阈值不管是大还是小,都根据状况不同而各有利弊,固定来使用是不合适的。也就是说,根据时间以及腕部终端11的运动状态来使阈值动态地变化是合适的。
为此,在本实施方式中,如图3所示,在执行动作识别处理的情况下,在CPU51中,阈值设定部73和计数部74起作用。
阈值设定部73根据时间以及腕部终端11的运动状态,来可变地设定阈值。
计数部74进行计数动作,并将该动作结果(计数值)作为阈值的可变设定中所需要的时间的信息,来提供给阈值设定部73。
图9是表示由阈值设定部73进行可变设定的阈值的时间推移的时序图。
纵轴表示用于水平判定的阈值,横轴表示时间轴。另外,关于时间,是通过计数部74的计数值而被计时的。
阈值设定部73在腕部终端11静止并经过了一定时间时(时刻t1),判断为用户为了操作而进行动作的可能性低,并使阈值减少。
阈值设定部73在腕部终端11开始运动时(时刻t2),判断为用户在这之后进行用于操作的动作的可能性高,并使阈值增加。
阈值设定部73在刚刚识别出动作之后(时刻t3),考虑到腕部终端11正在运动这一情况、和存在用户保持着未使腕部终端11充分水平的状态进行接下来的动作的可能性这一情况,使阈值进一步增加。
阈值设定部73在识别出动作之后经过了一定时间时(时刻t4),判断为由于用户停止操作因此之后存在除了操作以外活动手臂的可能性,并使阈值减少。
另外,阈值的增减既可以一次性变化,也可以根据经过时间而多阶段地变化。
接下来,对具有相关的功能性结构的腕部终端11所执行的摄像控制处理进行说明。
图10是表示具有图3的功能结构的图2的腕部终端11所执行的动作识别处理的流程的一个例子的流程图。
用于使阈值变化的判定是根据加速度传感器部60的检测结果(3轴的加速度值)来进行的。
在图10的例子中,使用在任意的时刻设定的用于水平判定的阈值ath、任意的时刻的3轴的加速度值ax、ay、az、以及3轴的加速度的微分值Δax、Δay、Δaz。此外,作为能够作为加速度值的阈值来设定的3个种类,预先定义阈值ath0<阈值ath1<阈值ath2
此外,作为计数部74所使用的计数值(时间),使用仅在腕部终端11为静止状态时变化的计数值t0、以及不管腕部终端11是否为水平状态都变化的计数值t1
此外,作为阈值设定部73改变阈值ath的计数值(时间)的定时(阈值),预先定义由于检测到静止状态而导致阈值ath发生变化的定时tth0>在动作的检测后阈值ath发生变化的定时tth1
此外,由于还使用用于运动状态判定的阈值,因此下面为了区别于用于水平判定的阈值,而将该用于运动状态判定的阈值称为“运动状态判定阈值”。同样地,下面,为了区别于运动状态判定阈值,而将用于水平判定的阈值成为“水平判定阈值”。
定义加速度的微分值Δath,作为运动状态判定阈值。
若进行了这样的定义等的腕部终端11的电源接通并满足规定的条件,则开始动作识别处理,并执行接下来的步骤S1以后的处理。
在步骤S1,计数部74对计数值t1是否超过定时tth1进行判定。
在计数值t1未超过定时tth1的情况下,也就是在从上一次的动作被识别出的时刻(参见后述的步骤S16)起未经过规定时间tth1的情况下(在图9的例子中为在时刻t3以后识别出动作,因此是指在时刻t3之后时刻t4之前的情况),在步骤S1判定为“否”,不使水平判定阈值ath变化,处理进入到步骤S3。
在步骤S3,计数部74使计数值t1递增1(t1++)。之后,处理进入到步骤S5,在后面对步骤S5以后的处理进行叙述。
与此相对地,在计数值t1超过定时tth1的情况下,也就是在从上一次的动作被识别出的时刻(参见后述的步骤S16)起经过了规定时间tth1的情况下(在图9的例子中是时刻t4的情况),在步骤S1判定为“是”,处理进入到步骤S2。
在步骤S2,阈值设定部73对当前设定的水平判定阈值ath是否超过阈值ath1进行判定。
在当前设定的水平判定阈值ath为阈值ath1以下的情况下,步骤S2判定为“否”,不使水平判定阈值ath变化,处理进入到步骤S5。另外,在后面对步骤S5以后的处理进行叙述。
与此相对地,在当前设定的水平判定阈值ath超过阈值ath1的情况下,也就是为阈值ath2的情况下,在步骤S2判定为“是”,处理进入到步骤S4。
在步骤S4,阈值设定部73使水平判定阈值ath的设定变化,以使得降低到阈值ath1(ath=ath1:图9的例子中参见时刻t4的变化)。由此,处理进入到步骤S5。
在步骤S5,阈值设定部7对3轴的加速度的微分值Δax、Δay、Δaz各自是否超过运动状态判定阈值Δath(Δax<Δath、Δay<Δath、且Δaz<Δath)进行判定。也就是说,在步骤S5,对腕部终端11是否为静止状态进行判定。
在3轴的加速度的微分值Δax、Δay、Δaz全都未超过运动状态判定阈值Δath的情况下(例如在图9的例子中是时刻t5以后或者时刻t2以前的情况),设为是静止状态,在步骤S5判定为“是”,处理进入到步骤S6。
在步骤S3,计数部74使计数值t0递增1(t0++)。
在步骤S9,计数部74对计数值t0是否超过定时tth0进行判定。
在计数值t0未超过定时tth0的情况下,也就是在静止状态的持续时间未超过规定时间tth0的情况下(在图9的例子中是时刻t5~t6之间、或者时刻t1之前的情况),在步骤S9判定为“否”,不使水平判定阈值ath变化,处理进入到步骤813。另外,在后面对步骤S13以后的处理进行叙述。
与此相对地,在计数值t0未超过定时tth0的情况下,也就是在静止状态持续了规定时间tth0间的情况下(在图9的例子中为时刻t6或时刻t1的情况),在步骤S9判定为“是”,处理进入到步骤S10。
在步骤S10,阈值设定部73对当前设定的水平判定阈值ath是否超过阈值ath0进行判定。
在当前设定的水平判定阈值ath为最低的阈值ath0的情况下,在步骤S10判定为“否”,不使水平判定阈值ath变化,处理进入到步骤S13。另外,在后面对步骤S13以后的处理进行叙述。
与此相对地,在当前设定的水平判定阈值ath超过阈值ath0的情况下,也就是在为阈值ath1或阈值ath2的情况下,在步骤S10判定为“是”,处理进入到步骤S12。
在步骤812,阈值设定部73使水平判定阈值ath的设定变化,以使得降低到阈值ath0(ath=ath0:在图9的例中参见时刻t6或时刻t1的变化)。由此,处理进入到步骤813。另外,在后面对步骤813以后的处理进行叙述。
以上,对腕部终端11为静止状态的情况下、也就是步骤S5判定为“是”的情况下的一系列的处理进行了说明。
接下来,对腕部终端11为运动状态的情况下、也就是3轴的加速度的微分值Δax、Δay、Δaz中的至少1个超过运动状态判定阈值Δath的情况下(例如在图9的例子中,时刻t2~时刻t5之间的情况)的一系列的处理进行说明。在这种情况下,在步骤S5判定为“否”,处理进入到步骤S7,执行接下来的一系列的处理。
在步骤S7,阈值设定部73对当前设定的水平判定阈值ath是否不足阈值ath1进行判定。
在当前设定的水平判定阈值ath为阈值ath1(或阈值ath2)的情况下,在步骤S7判定为“否”,不使水平判定阈值ath,处理进入到步骤S11。另外,在后面对步骤S11以后的处理进行叙述。
与此相对地,在当前设定的水平判定阈值ath为阈值ath0的情况下,在步骤S7判定为“是”,处理进入到步骤S8。
在步骤S8,阈值设定部73使水平判定阈值ath的设定变化,以使得上升到阈值ath1(ath=ath1:在图9的例子中参见时刻t2的变化)。由此,处理进入到步骤S11。
在步骤S11,计数部74将计数值t0复位到0(t0=0)。
这样,只要腕部终端11处于运动状态,复位到0的计数值t0就不会递增,因此,作为水平判定阈值ath,不会变为阈值ath0
在步骤S13,动作识别部71根据动作识别算法,尝试动作的识别。
在这种情况下,动作识别部71在相对于腕部终端11的水平方向而成的角度落入在步骤S1到S12的处理中适当变化的水平判定阈值ath以内的情况下,判断为腕部终端11处于水平静止状态。具体来讲,由于相对于腕部终端11的水平方向的角度能够通过加速度传感器部60的检测结果中的x轴的加速度值ax以及y轴的加速度值ay来确定,因此动作识别部71在x轴的加速度值ax以及y轴的加速度值ay落入水平判定阈值ath的范围内的情况下,判断为腕部终端11处于水平静止状态。
然后,动作识别部71在判定为处于水平静止状态后,基于腕部终端11的移动轨迹等,对进行的是上述图3至图7的各个模式中的哪个模式的动作进行识别。由于如上所述,以水平静止状态为前提来识别动作,因此在x轴的加速度值ax以及y轴的加速度值ay未落入水平判定阈值ath的范围内的情况下,不检测为水平静止状态,其结果,不进入到动作的识别。
在步骤S14,阈值设定部73对是否识别出动作进行判定。
在未识别出动作的情况下,在步骤S14判定为“否”,不使水平判定阈值ath变化,处理返回到步骤S1,反复执行其以后的处理。
与此相对地,在识别出动作的情况下,在步骤S14判定为“是”,处理进入到步骤S15。
在步骤S15,阈值设定部73使水平判定阈值ath的设定变化,以使得上升到阈值ath2(ath=ath2:在图9的例子参见时刻t3的变化)。
在步骤S16,计数部74将计数值t1复位到0(t1=0)。
之后,处理返回步骤S1,反复其以后的处理。
如以上所说明的那样,与本发明的信息处理装置的一个实施方式有关的腕部终端11具备:动作识别部71、计数部74、加速度传感器部60、和阈值设定部73。
动作识别部71在相对于佩戴在用户的手臂的腕部终端11的水平方向所成的角度处于阈值(水平判定阈值ath)的范围内的情况下,检测为该腕部终端11是取水平姿势的基准状态,并对从该基准状态起的腕部终端11的设备的活动(即动作)进行识别。
计数部74通过进行计数动作,来对时间进行计时。
加速度传感器部60将3轴的加速度值作为腕部终端11的运动状态来进行检测。
阈值设定部73根据由计数部74计时的时间以及由加速度传感器部60检测出的腕部终端11的运动状态,来可变地设定阈值(水平判定阈值ath)。
由此,能够提高用户作为操作而进行的手臂等的动作的识别精度。
也就是说,由于阈值动态地变化,因此能够将用户进行操作的可能性高时的动作的识别精度维持在一定以上,并且能够防止用户进行操作的可能性低时的动作的误识别。
若由加速度传感器部60检测到腕部终端11为静止,则计数部74开始计时,阈值设定部73在由计数部74计时了一定时间时(图9的时刻t1等),能够进行使阈值减少的设定。
这样,通过在用户为了操作而进行动作的可能性低时使阈值减少,从而能够防止用户进行操作的可能性低时的动作的误识别。
阈值设定部73在由加速度传感器部60检测到腕部终端11开始运动时(图9的时刻t2等),能够进行使阈值增加的设定。
这样,由于在腕部终端11开始运动之后用户进行动作的可能性提高,因此通过使阈值增加,能够将用户进行操作的可能性高时的动作的识别精度维持在一定以上。
阈值设定部73在由动作识别部71识别出动作(腕部终端11的活动)时,能够进行使阈值增加的设定。
这样,在刚刚识别出动作之后时(图9的时刻t3等),由于存在腕部终端11正在运动的可能性、以及用户保持着未使腕部终端11充分水平的状态进行接下来的动作的可能性,因此通过使阈值增加,能够将用户进行操作的可能性高时的动作的识别精度维持在一定以上。
若通过动作识别部71识别到动作(腕部终端11的活动),则计数部74开始计时,阈值设定部73在由计数部74计时了一定时间时,能够进行使阈值减少的设定。
这样,在从识别出动作起经过了一定时间时(图9的时刻t4等),由于用户停止操作,导致之后存在除了操作以外的活动手臂的可能性,因此通过使阈值减少,能够防止用户进行操作的可能性低时的动作的误识别。
如以上所说明的那样,在本实施方式中,对腕部终端11的运动状态进行检测的检测单元是加速度传感器,阈值由加速度值来表示。
这样,将腕部终端11识别为水平的加速度值的阈值因时间以及加速的状态而动态地变化。由此,能够维持用户进行操作的可能性高时的动作的识别精度,并且能够在用户进行操作的可能性低时能防止动作的误识别。
如以上所说明的那样,本发明的信息处理装置的一个实施方式是腕部终端11。也就是说,在腕部终端11本身设置动作识别部71、计数部74、加速度传感器部60、和阈值设定部73。
由此,用户不用另外准备特别的设备,能够仅通过将腕部终端11戴在手臂,就以单纯的活动来对该腕部终端11进行操作。这时,即使存在因日常生活的活动而导致手臂也活动的情况,也能减少误识别为作为操作的动作的情况。
另外,本发明并不限定于上述的实施方式,在能够达成本发明的目的的范围内的变形、改良等也包含在本发明中。
在上述的实施方式中,作为动作识别处理,采用根据图10的流程图的处理,但图10只是例子,其中作为水平判定阈值使用3种,成为改变阈值的定时的指标的计数器使用2种,作为运动状态判定阈值使用1种。也就是说,在动作识别处理中,作为水平判定阈值,只要采用任意的2种以上就可以,计数器也是只要采用任意的2种以上就可以。
在上述的实施方式中采用了加速度传感器部60,但并不特别限定于此,只要具有检测腕部终端11的运动状态的功能,就可以采用任意的传感器设备。
此外,在上述的实施方式中,在腕部终端11搭载了对阈值进行可变设定的功能,但并不特别限定于此,对阈值进行可变设定的功能也可以被搭载在未图示的另外的装置中。同样地,对于识别动作的功能等其它功能,也不必非要搭载在腕部终端11,也可以搭载在未图示的另外的装置(这种情况下并不需要是1台,也可以是多台)。
换言之,在上述的实施方式中,运用本发明的信息处理装置以腕部终端为例进行了说明,但并不特别限定于此。
例如,本发明一般能够运用在佩戴在用户的手臂等的设备本身、或者具有与该设备进行通信的功能的电子设备中。具体来讲,例如,本发明能够适用于笔记本电脑、打印机、电视机、摄像机、便携型导航装置、便携电话机、掌上游戏机等。
上述的一系列处理能够通过硬件来执行,也能够通过软件来执行。
换言之,图2的功能性结构仅仅为示例,并不特别限定。也就是说,只要○○终端11中具备能够将上述的一系列处理作为整体来执行的功能就可以,而为了实现该功能而使用什么样的功能模块并不特别限定于图2的例子。
此外,一个功能模块可以由硬件单体构成,也可以由软件单体构成,也可以由其组合构成。
在通过软件来执行一系列的处理的情况下,构成其软件的程序从网络、记录介质被安装到计算机中等。
计算机可以是安装了专用的硬件的计算机。此外,计算机也可以是通过安装各种程序,从而能够执行各种功能的计算机,例如通用的个人计算机。
包含这种程序的记录介质,不仅由为了向用户提供程序而与装置主体另外配置的图1的可移动介质31构成,也能由在预先被安装在装置主体的状态下被提供给用户的记录介质等构成。可移动介质31由例如磁盘(包含闪存盘在内)、光盘或者光磁盘等构成。光盘由例如CD-ROM(Compact Disk-Read Only Memory)、DVD(Digital Versatile Disk)等构成。光磁盘由MD(Mini-Disk)等构成。此外,以预先安装在装置主体中的状态而向用户提供的记录介质,由例如记录程序的图1的ROM12、包含在图1的存储部19中的硬盘等构成。
此外,在本说明书中,对记录介质中记录的程序进行表述的步骤,当然包含沿着其顺序来按时序进行的处理,还包括不一定按时序进行的处理,以及并列地或者单独执行的处理。
此外,在本说明书中,系统的术语意味着由多个装置、多个单元等构成的整体装置。
虽然以上,对本发明的几个实施方式进行了说明,但这些实施方式仅仅为示例,并不限定本发明的技术范围。本发明也可以采取其它的各种实施方式,进一步地,也可以在不脱离本发明的主旨的范围内,进行省略、置换等各种变更。这些实施方式、其变形包含在本说明书等所记载的发明的范围、主旨内,并包含在权利要求书所记载的发明及其等同的范围内。

Claims (7)

1.一种信息处理装置,具备:
判断单元,其在用户佩戴的设备的显示部相对于规定的方向所成的角度处于作为范围的阈值的范围内的情况下,判断为该设备是基准状态;
识别单元,其在由所述判断单元判断为是所述基准状态的情况下,对所述设备的从该基准状态起的活动进行识别;
输入单元,其对与由所述识别单元识别出的所述设备的从基准状态起的活动对应的输入操作进行输入;
计时单元,其对时间进行计时;
检测单元,其对所述设备的活动状态进行检测;和
设定单元,其根据由所述计时单元计时的时间、和由所述检测单元检测出的所述设备的活动状态,来对所述阈值进行可变设定,
所述计时单元在由所述检测单元检测出所述设备静止时,开始计时;
所述设定单元在由所述计时单元计时了一定时间时,进行使所述阈值减少的设定。
2.根据权利要求1所述的信息处理装置,其中,
所述设定单元在由所述检测单元检测出所述设备活动时,进行使所述阈值增加的设定。
3.根据权利要求1所述的信息处理装置,其中,
所述设定单元在由所述识别单元识别出所述设备的活动时,进行使所述阈值增加的设定。
4.根据权利要求1所述的信息处理装置,其中,
所述计时单元在由所述识别单元识别出所述设备的活动时,开始计时,
所述设定单元在由所述计时单元计时了一定时间时,进行使所述阈值减少的设定。
5.根据权利要求1所述的信息处理装置,其中,
所述检测单元是加速度传感器,
所述阈值由加速度值来表示。
6.根据权利要求1所述的信息处理装置,其特征在于,
所述信息处理装置是所述设备。
7.一种信息处理方法,作为信息处理装置所执行的步骤而包括:
判断步骤,在用户佩戴的设备的显示部相对于规定的方向所成的角度处于作为范围的阈值的范围内的情况下,判断为该设备是基准状态;
识别步骤,在由该判断步骤判断为是基准状态的情况下,对从该基准状态起的所述设备的活动进行识别;
输入步骤,对与由该识别步骤识别出的从所述基准状态起的活动对应的输入操作进行输入;
计时步骤,对时间进行计时;
检测步骤,对所述设备的活动状态进行检测;和
设定步骤,根据由所述计时步骤的处理计时的时间、和由所述检测步骤的处理检测出的所述设备的活动状态,来对所述阈值进行可变设定,
在通过所述检测步骤检测出所述设备静止时,开始计时;
在通过所述计时步骤计时了一定时间时,进行使所述阈值减少的设定。
CN201410280529.3A 2013-06-21 2014-06-20 信息处理装置以及信息处理方法 Active CN104238743B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013-130850 2013-06-21
JP2013130850A JP6171615B2 (ja) 2013-06-21 2013-06-21 情報処理装置及びプログラム

Publications (2)

Publication Number Publication Date
CN104238743A CN104238743A (zh) 2014-12-24
CN104238743B true CN104238743B (zh) 2017-06-13

Family

ID=50980168

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410280529.3A Active CN104238743B (zh) 2013-06-21 2014-06-20 信息处理装置以及信息处理方法

Country Status (4)

Country Link
US (1) US20140375552A1 (zh)
EP (1) EP2816450B1 (zh)
JP (1) JP6171615B2 (zh)
CN (1) CN104238743B (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3267287A4 (en) * 2015-03-05 2018-02-21 Fujitsu Limited Input detection method, input detection program, and device
WO2016145443A1 (en) 2015-03-12 2016-09-15 Daniel Kerzner Virtual enhancement of security monitoring
US20160282949A1 (en) * 2015-03-27 2016-09-29 Sony Corporation Method and system for detecting linear swipe gesture using accelerometer
US10055563B2 (en) * 2015-04-15 2018-08-21 Mediatek Inc. Air writing and gesture system with interactive wearable device
CN104820499A (zh) * 2015-05-22 2015-08-05 广东欧珀移动通信有限公司 提醒用户的方法、装置及智能穿戴设备
JP2017021461A (ja) * 2015-07-08 2017-01-26 株式会社ソニー・インタラクティブエンタテインメント 操作入力装置および操作入力方法
JP2017049720A (ja) * 2015-08-31 2017-03-09 シャープ株式会社 情報処理装置、情報処理装置を備える電子機器、情報処理装置の制御方法、および、プログラム
JP6334601B2 (ja) * 2016-05-17 2018-05-30 レノボ・シンガポール・プライベート・リミテッド 携帯情報端末、装着腕判定方法、装着向き判定方法、及びプログラム
WO2018074047A1 (ja) * 2016-10-18 2018-04-26 シャープ株式会社 情報処理装置、電子機器、情報処理装置の制御方法および制御プログラム
US11209908B2 (en) * 2017-01-12 2021-12-28 Sony Corporation Information processing apparatus and information processing method
CN109635617A (zh) * 2017-10-09 2019-04-16 富士通株式会社 动作状态的识别方法、装置和电子设备
CN110716420B (zh) * 2019-09-23 2020-11-10 维沃移动通信有限公司 可穿戴设备及显示方法
CN111913007B (zh) * 2020-07-13 2022-09-09 杭州士兰微电子股份有限公司 加速度计的校准方法与校准装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102759985A (zh) * 2011-04-28 2012-10-31 富泰华工业(深圳)有限公司 操作控制系统

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002358149A (ja) 2001-06-01 2002-12-13 Sony Corp ユーザ入力装置
US20050212753A1 (en) * 2004-03-23 2005-09-29 Marvit David L Motion controlled remote controller
US7176886B2 (en) * 2004-03-23 2007-02-13 Fujitsu Limited Spatial signatures
JP2007531113A (ja) * 2004-03-23 2007-11-01 富士通株式会社 携帯装置の傾斜及び並進運動成分の識別
JP2007206108A (ja) * 2006-01-31 2007-08-16 Sharp Corp 携帯型電子機器
JP5216206B2 (ja) 2006-12-01 2013-06-19 株式会社バンダイナムコゲームス プログラム及びゲーム装置
US20090278793A1 (en) * 2008-05-09 2009-11-12 Fujitsu Limited Information processing device, information processing method, and medium recording information processing program
WO2010064423A1 (ja) * 2008-12-04 2010-06-10 三菱電機株式会社 表示入力装置
JP2011175315A (ja) 2010-02-23 2011-09-08 Ikutoku Gakuen 加速度センサを利用した文字入力システムおよび方法
JP2011188345A (ja) * 2010-03-10 2011-09-22 Olympus Corp 携帯電子機器
JP5589549B2 (ja) * 2010-05-14 2014-09-17 ソニー株式会社 情報処理装置及び情報処理装置の操作方法
JP5527055B2 (ja) * 2010-07-02 2014-06-18 富士通株式会社 電子機器、制御プログラムおよび制御方法
JP2012027875A (ja) * 2010-07-28 2012-02-09 Sony Corp 電子機器、処理方法及びプログラム
US20120176413A1 (en) * 2011-01-11 2012-07-12 Qualcomm Incorporated Methods and apparatuses for mobile device display mode selection based on motion direction
JP5757741B2 (ja) * 2011-01-25 2015-07-29 任天堂株式会社 ゲームシステム、ゲーム装置、ゲームプログラム、およびゲーム処理方法
US9436231B2 (en) * 2011-04-07 2016-09-06 Qualcomm Incorporated Rest detection using accelerometer
JP2013054411A (ja) * 2011-08-31 2013-03-21 Sony Corp 情報処理装置、情報処理方法及びプログラム
EP3617843A1 (en) * 2012-12-10 2020-03-04 Samsung Electronics Co., Ltd. Mobile device, control method thereof, and ui display method

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102759985A (zh) * 2011-04-28 2012-10-31 富泰华工业(深圳)有限公司 操作控制系统

Also Published As

Publication number Publication date
JP6171615B2 (ja) 2017-08-02
JP2015005197A (ja) 2015-01-08
US20140375552A1 (en) 2014-12-25
EP2816450B1 (en) 2019-07-24
CN104238743A (zh) 2014-12-24
EP2816450A1 (en) 2014-12-24

Similar Documents

Publication Publication Date Title
CN104238743B (zh) 信息处理装置以及信息处理方法
US10398358B2 (en) Dynamic sampling
US10506990B2 (en) Devices and methods for fall detection based on phase segmentation
US8228292B1 (en) Flipping for motion-based input
US9235278B1 (en) Machine-learning based tap detection
EP2868273A1 (en) Activity detection and analytics
JP5656566B2 (ja) 運動検出装置、電子機器、運動検出方法及びプログラム
ES2813611T3 (es) Aprovechamiento de un apretón de manos físico en pantallas montadas en la cabeza
EP2697665A1 (en) Device position estimates from motion and ambient light classifiers
WO2011092549A1 (en) Method and apparatus for assigning a feature class value
CN106227355B (zh) 一种可实现抬手亮屏的智能手环
US20160320850A1 (en) User interface control using impact gestures
KR20210084444A (ko) 제스처 인식 방법 및 장치, 전자 디바이스 및 기록 매체
JP6409918B2 (ja) 端末装置、モーション認識方法及びプログラム
KR20210015638A (ko) 센서를 이용한 저전력 낙상 감지 방법 및 장치
CN111803902B (zh) 泳姿识别方法、装置、可穿戴设备及存储介质
WO2018014432A1 (zh) 语音应用触发控制方法、装置及终端
Hsu et al. Posture recognition with G-sensors on smart phones
CN115291786A (zh) 一种基于机器学习的误触判断方法、装置和存储介质
KR101987308B1 (ko) 노이즈를 고려한 동작 인식 방법 및 장치
CN115253304A (zh) 防作弊方法与电子装置
KR101958334B1 (ko) 노이즈를 고려한 동작 인식 방법 및 장치
EP4140406A1 (en) Enhanced human activity recognition
US20240041354A1 (en) Tracking caloric expenditure using a camera
CN112074799B (zh) 书写工具侧装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant