CN109891364A - 信息处理装置、方法和程序 - Google Patents
信息处理装置、方法和程序 Download PDFInfo
- Publication number
- CN109891364A CN109891364A CN201780064524.9A CN201780064524A CN109891364A CN 109891364 A CN109891364 A CN 109891364A CN 201780064524 A CN201780064524 A CN 201780064524A CN 109891364 A CN109891364 A CN 109891364A
- Authority
- CN
- China
- Prior art keywords
- sensor
- processing unit
- information processing
- information
- trigger action
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/163—Wearable computers, e.g. on a belt
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/28—Supervision thereof, e.g. detecting power-supply failure by out of limits supervision
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3234—Power saving characterised by the action undertaken
- G06F1/3293—Power saving characterised by the action undertaken by switching to a less power-consuming processor, e.g. sub-CPU
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/044—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1041—Mechanical or electronic switches, or control elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
- G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
- G06F2200/163—Indexing scheme relating to constructional details of the computer
- G06F2200/1636—Sensing arrangement for detection of a tap gesture on the housing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
- G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1008—Earpieces of the supra-aural or circum-aural type
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Hardware Design (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
- Telephone Function (AREA)
- Position Input By Displaying (AREA)
Abstract
本信息处理装置的信息处理单元在输入第一传感器信息时根据第一传感器信息的类型来检测触发操作,基于第二传感器信息识别由用户执行的作为操作输入的姿势操作,并且基于检测到的触发操作与姿势操作的组合来确定操作输入。该信息处理装置能够在不给用户带来负担的情况下使操作输入多样化。
Description
技术领域
本技术涉及人机接口的可操作性的改进。
背景技术
作为过去的操作输入的人机接口,按钮和触摸面板是主流。
在专利文献1中,描述了对没有按钮的电子装置的控制,并且专利文献1公开了,直到接近传感器做出反应,具有静电开关的触摸设备的感测才开始。
引用列表
专利文献
专利文献1:日本专利申请特许公开第2016-018432号
发明内容
技术问题
然而,有时难以执行按钮或触摸设备的复杂操作,特别是在小型装置中,而且需要更简单的人机接口。
鉴于上述状况,本技术的目的是提供一种能够在不给用户带来负担的情况下使操作输入多样化的信息处理装置。
针对问题的解决方案
实现该目的的本技术的一个侧面是一种包括控制器单元的信息处理装置。
控制器单元根据第一传感器信息的类型来检测触发操作。
此外,控制器单元基于第二传感器信息识别由用户执行的作为操作输入的姿势操作。
另外,控制器单元基于检测到的触发操作与识别出的姿势操作的组合来确定操作输入。
根据信息处理装置,与一个姿势操作相对应的操作输入的数量不限于一个,并且可以执行多个操作。因此,可以在不给用户带来负担的情况下使操作输入多样化。
控制器单元可以在检测到触发操作之后、基于在预定时间内输入的第二传感器信息来识别姿势操作。
根据该信息处理装置,提供了在无意地点燃触发器的情况下不执行错误的操作输入的效果。
控制器单元可以执行以下操作:当输入第一传感器信息时,在连续输入第一传感器信息的时间长度短于预定阈值的情况下检测单次触发操作,可以在连续输入第一传感器信息的时间长度长于预定阈值的情况下检测连续触发操作,并且可以基于检测到的单次触发操作或检测到的连续触发操作与识别出的姿势操作的组合来确定操作输入。
根据信息处理装置,可以将单次触发操作和连续触发操作这两种类型的触发操作设置为一次触发操作,并且可以扩展操作输入的变化。
在控制器单元检测到连续触发操作的情况下,控制器单元可以使通过操作输入而输入的信息包括根据与检测到的连续触发操作的时间长度相对应的值。
在这种情况下,控制器单元可以将连续触发操作的时间长度的结束点设置为第一传感器信息的输入结束的时间点。
在这种情况下,控制器单元可以将连续触发操作的时间长度的起始点设置为第一传感器信息的输入开始的时间点。
替选地,控制器单元可以将连续触发操作的时间长度的起始点设置为检测到连续触发操作的时间点。
替选地,控制器单元可以将连续触发操作的时间长度的起始点设置为识别出姿势操作的时间点。
在信息处理装置中,输出第一传感器信息的传感器可以被布置在被构造成能够由用户身体穿戴的壳体上。
在这种情况下,传感器可以被布置在传感器能够检测到用户的手的操作的位置上。
在这种情况下,布置传感器的位置可以是在穿戴有壳体的用户的视野之外的位置。
根据信息处理装置,可以提供诸如头戴式显示器或可穿戴计算机的可穿戴设备的操作输入接口。
信息处理装置可以具有作为信息处理装置的电力消耗模式的第一电力模式和第二电力模式,并且第一电力模式的电力消耗量可以低于第二电力模式的电力消耗量。
在这种情况下,当信息处理装置处于第一电力模式并且控制器单元检测到触发操作时,控制器单元可以将信息处理装置的电力消耗模式切换到第二电力模式。
根据信息处理装置,触发操作可以用作用于切换具有较大功耗的操作模式的触发器,并且可以抑制装置的电力消耗。
此外,本技术的另一侧面是一种信息处理方法,包括下述步骤:
根据第一传感器信息的类型来检测触发操作的步骤;
基于第二传感器信息识别由用户执行的作为操作输入的姿势操作的步骤;以及
基于检测到的触发操作与识别出的姿势操作的组合来确定操作输入的步骤。
此外,本技术的另一侧面是一种程序,其使计算机执行下述步骤:
根据第一传感器信息的类型来检测触发操作的步骤;
基于第二传感器信息识别由用户执行的作为操作输入的姿势操作的步骤;以及
基于检测到的触发操作与识别出的姿势操作的组合来确定操作输入的步骤。
本发明的有益效果
如上所述,根据本技术,可以提供一种能够在不给用户带来负担的情况下使操作输入多样化的信息处理装置。
注意,上述效果不是限制性的,并且利用或代替上述效果,可以产生本公开内容中描述的任何效果或者能够通过本说明书掌握的其他效果。
附图说明
图1是用于说明本发明的实施方式的概述的图。
图2是示出根据实施方式的信息处理装置的外观结构示例的图。
图3是示出根据实施方式的信息处理装置的内部结构示例的框图。
图4是示出根据实施方式的信息处理装置的内部结构的另一示例的图。
图5是示出根据实施方式的信息处理装置的内部结构的另一示例的图。
图6示出根据实施方式的信息处理装置的处理流程的流程图(1)。
图7示出根据实施方式的信息处理装置的处理流程的流程图(2)。
图8是用于说明根据实施方式的信息处理装置的处理的时序图(1)。
图9是用于说明根据实施方式的信息处理装置的处理的时序图(2)。
图10是示出实施方式的变型例中的外观结构示例的图。
具体实施方式
在下文中,将参照附图详细描述本技术的优选实施方式。注意,在本说明书和附图中,具有基本上相同的功能结构的结构部件将由相同的附图标记来表示,并且将省略对这些结构部件的描述。
此外,将按下述顺序给出描述。
1.根据本技术的实施方式的信息处理装置的概述
2.结构
2-1.外观结构
2-2.内部结构
3.操作
4.概要
5.变型例
6.补充说明
<1.根据本技术的实施方式的信息处理装置的概述>
根据本实施方式的信息处理装置1包括可穿戴设备。本实施方式的可穿戴设备不受特别限制,只要可穿戴设备具有在其中可以安装下面描述的传感器组的空间即可。可穿戴设备的示例包括耳机和头戴式显示器。此外,本实施方式的可穿戴设备还可以适用于腕带式可穿戴设备、诸如夹克的服装式可穿戴设备等。在下文中,耳机被用作本实施方式的可穿戴设备。此外,可以采用耳机型可穿戴设备来代替耳机。
根据本实施方式的信息处理装置1包括接收用户的操作输入的用户接口。使用用户的操作输入的目的绝对不受限制,并且可以是新闻阅读应用。在下文中,将描述用户的操作输入被用于操作再现音乐内容的音乐播放器的示例。
图1是用于说明本实施方式的概述的图。根据本实施方式的信息处理装置1具有识别用户的运动的姿势识别功能。注意,在用户执行触发操作并且信息处理装置1检测到该触发操作的情况下,执行姿势识别。在本实施方式中,存在多个触发操作,并且实现多个触发操作的检测的一种方法是准备与触发操作一对一地相对应的传感器。信息处理装置1根据触发操作的类型和姿势识别的类型来解释姿势识别。
注意,在本实施方式中,“解释”意味着将一系列触发操作和姿势操作的操作输入确定为用对信息处理装置1的处理命令来替换。
在图1中,示出了三种类型的姿势操作的示例,即“点头”、“向右转并将颈部返回至初始位置”、以及“向左转并将颈部返回至初始位置”。在本实施方式中,根据在执行三种类型的姿势操作之前执行的触发操作,区分每个姿势操作的解释。例如,图1(a)示出了执行第一触发操作的情况,以及图1(b)示出了执行第二触发操作的情况。
尽管执行了“点头”的相同姿势操作,但是在预先执行了第一触发操作的情况下,信息处理装置1将该姿势操作解释为音乐播放器的“再现/停止”(图1(a))。另一方面,在预先执行了第二触发操作的情况下,信息处理装置1将相同姿势操作解释为“选择音乐专辑”。对于向右转的姿势操作和向左转的姿势操作,执行类似的信息处理。
触发操作的具体示例不受限制。例如,在接近传感器检测到触发操作的情况下,接近传感器被分别布置在耳机的右侧和左侧。在用户将手举在左耳机附近的情况下,检测到第一触发操作(图1(a)),并且在用户将手举在右耳机附近的情况下,检测到第二触发操作(图1(b))。
在用户使右侧接近传感器和左侧接近传感器二者都作出反应的情况下,检测到第三触发操作。对于第三触发操作,设置与姿势操作相对应的操作输入的每个集合(图1(c))。
点头、向右转等姿势是每个人都能够记住的简单姿势。另一方面,如果所有日常运动都被解释为对信息处理装置1的操作输入,则操作输入将是用户不想要的输入。然而,在本实施方式中,直到在姿势识别之前检测到触发操作,才执行姿势识别,并且可以防止用户不想要的输入。此外,如图1所示,根据触发操作的类型而使可以通过相同姿势输入到信息处理装置1的操作输入的变化多样化。因此,根据本实施方式,可以在不给用户带来负担的情况下使操作输入多样化。
以上描述了本实施方式的概述。在下文中,将示出外部结构和内部结构,并且将公开在信息处理装置1中执行的信息处理的流程的细节。
<2-1.外观结构>
图2是示出根据本实施方式的信息处理装置1的外观结构示例的图,以及图3是示出该信息处理装置1的内部结构示例的框图。
如图2所示,根据本实施方式的信息处理装置1在硬件配置方面可以例如包括耳机2和便携式终端3。耳机2包括传感器组10。代替图2中的硬件配置示例,如果设备包括用户能够穿戴且在其上布置有传感器组10的壳体20,则可以使用任何形式,诸如耳机型设备、腕带式设备以及夹克式设备。此外,这样的设备被称为可穿戴设备。注意,尽管“壳体”有时意味着盒形,但“壳体”仅仅指的是包括外体,并且其形状在此不受限制。
耳机2和便携式终端3分别包括无线通信单元19和无线通信单元39,并且可以彼此通信。然而,耳机2和便携式终端3的具体通信形式不受限制,并且可以是有线通信。在本实施方式中,每个无线通信单元包括天线和无线通信电路,按照诸如Bluetooth(注册商标)的无线通信标准进行通信,并且传感器组10的检测信息被提供给便携式终端3。例如,智能电话可以用作便携式终端3。
图2中的传感器组10包括右侧接近传感器11R、左侧接近传感器11L、运动传感器12和作为噪声消除器的麦克风13。此外,被连接以使麦克风短路的开关(未示出)可以用作传感器组10中包括的传感器之一。
右侧接近传感器11R和左侧接近传感器11L可以是红外线系统或其他系统。右侧接近传感器11R和左侧接近传感器11L在感测的同时连续输出检测信号。接近传感器11R和左侧接近传感器11L用于检测用户的触发操作。
运动传感器12是用于检测三轴加速度和三轴角速度的运动传感器。运动传感器12用于识别用户的姿势操作。替选地,运动传感器12可以用于识别触发操作。
作为噪声消除器的麦克风13收集耳机2周围的声音,并且是通过输出具有相反相位的声音并减少噪声的噪声消除技术来收集周围声音的麦克风。在用户通过手指轻敲作为噪声消除器的麦克风13的情况下,可以将该操作检测为触发操作。
在本实施方式中,检测触发操作所需的传感器信息被称为第一传感器信息,并且识别姿势操作所需的传感器信息被称为第二传感器信息。传感器信息是在执行感测时由传感器组10中包括的传感器中的至少一个或更多个传送的一束传感器信号。第一传感器信息和第二传感器信息可以部分地彼此重复。
在下文中,至少来自右侧接近传感器11R或左侧接近传感器11L的传感器信息是第一传感器信息。此外,来自运动传感器12的传感器信息是第二传感器信息。注意,这是用于描述的示例,例如,来自运动传感器12的传感器信息可以是第一传感器信息的一部分或全部。
<2-1.内部结构>
如图3所示,根据本实施方式的信息处理装置1具有便携式终端3除了图2中的结构之外还包括信息处理单元31的结构。信息处理单元31可以是便携式终端3中的至少一个算术处理装置,并且可以包括例如中央处理单元(CPU:中央处理单元)、DSP(数字信号处理器)以及SoC(片上系统)。信息处理单元31可以被设计成包括一个或更多个算术处理设备的组合。
信息处理单元31被配置成执行由诸如RAM 21(22)的存储器读取的软件程序,并且包括触发检测单元32、姿势识别单元33、操作输入信号生成单元34。在下文中,将描述每个部分的操作。
当第一传感器信息被输入到触发检测单元32时,触发检测单元32根据输入的第一传感器信息的类型来检测触发操作。例如,在第一传感器信息是指示右侧接近传感器11R的感测的信号的情况下,检测到“用户抬起右手并将右手举在耳机2的右侧”的触发操作。替选地,在第一传感器信息是指示左侧接近传感器11L的感测的信号的情况下,检测到“用户抬起左手并将左手举在耳机2的左侧”的触发操作。
尽管不受限制,但作为示例,在第一传感器信息在二进制数系统中被表示为五位数字数据的情况下,右侧接近传感器11R的感测的第一传感器信息可以被表示为(00001),左侧接近传感器11L的感测的第一传感器信息可以被表示为(00010),并且如果两个接近传感器都作出反应,则第一传感器信息可以表示为(00011)。触发检测单元32根据每个数字数据来检测触发操作。
姿势识别单元33基于第二传感器信息来识别由用户进行的作为操作输入的姿势操作。根据可穿戴设备的特性和可用传感器的类型来预先确定姿势操作。在本实施方式中,耳机用作可穿戴设备,并且运动传感器12用于姿势识别。因此,预先确定的姿势操作例如是“点头”、颈部“向右摇”和“向左摇”。
姿势识别单元33在触发检测单元32检测到触发操作之后、基于在预定时间内输入的第二传感器信息来执行姿势识别。姿势识别单元33可以被构造成使得直到触发检测单元32检测到触发操作,第二传感器信息才被传送至信息处理单元31。替选地,姿势识别单元33还可以被构造成使得直到触发检测单元32检测到触发操作,运动传感器12才进行操作或者在省电模式下进行操作。姿势识别单元33连续地识别姿势操作,直到超时。
操作输入信号生成单元34基于触发检测单元32检测到的触发操作与姿势识别单元33识别出的姿势操作的组合来解释用户想要通过姿势操作来输入的操作输入。这意味着,如以上参照图1所述,操作输入信号生成单元34基于触发操作与姿势操作的组合来解释由用户进行的操作输入的意图。操作输入信号生成单元34参照未示出的查找表来解释操作输入。
基于解释结果,操作输入信号生成单元34生成获得的命令的信号。所生成的信号作为操作输入信号被输出到后一单元。
以上描述了本实施方式的结构示例。注意,信息处理装置1的内部结构不限于图3中的示例,并且在图3的结构中,便携式终端3中包括的部分或全部结构部件可以被包括在可穿戴设备中。图4和图5示出了在这种情况下的内部结构。
图4是本实施方式的变型例,在该变型例中,在可穿戴设备中执行触发操作和姿势识别。在本变型例中,便携式终端3包括CPU 38和RAM 22,CPU 38执行RAM 22读取的软件程序,并且产生了操作输入信号生成单元34。不需要将传感器组10输出的传感器的输出值(传感器信息)无线地传送到便携式终端3。因此,可以节省电池。
图5也是本实施方式的变型例,在该变型例中,在可穿戴设备中执行触发操作、姿势识别、以及操作输入信号的生成中的全部操作。在信息处理装置1中,便携式终端3不必作为结构部件。如图5所示,信息处理装置1可以被构造成使得在可穿戴设备中涵盖了与本技术有关的所有信息处理。
<3.操作>
图6和图7是示出根据本实施方式的信息处理装置1中的信息处理流程的流程图。图8和图9是示出根据本实施方式的信息处理装置1中的处理流程的时序图。在下文中,将参照附图进行描述。
信息处理装置1等待直到触发检测单元32检测到第一传感器信息(ST100)。在这种状态下,姿势识别单元33和运动传感器12的功能可以受到诸如电力消耗量很小的省电模式的第一电力消耗模式的限制。
当输入第一传感器信息时,触发检测单元32检测触发操作(ST100,是)。根据输入的第一传感器信息的类型,触发检测单元32识别触发操作的类型,并且将该类型存储在信息处理单元31中包括的寄存器等中(ST101)。在ST105中参考触发操作的类型。
第一传感器信息的示例包括多种类型的信息,诸如右侧接近传感器11R的感测信息、左侧接近传感器11L的感测信息、以及当轻敲麦克风13时麦克风13发送的信息。在触发检测单元32中检测与每种类型相对应的触发操作的类型。例如,在右侧接近传感器11R的感测信息的情况下,检测到举起右手的触发操作,在左侧接近传感器11L的感测信息的情况下,检测到举起左手的触发操作,在两个接近传感器的感测信息的情况下,检测到举起双手的触发操作,并且在轻敲麦克风13时麦克风13发送信息的情况下,检测到轻敲的触发操作。
接下来,确定是否连续检测到第一传感器信息(ST102)。该确定由操作输入信号生成单元34执行。例如,在ST100中右侧接近传感器11R传送感测信息的情况下,确定是否连续输入了感测信息。操作输入信号生成单元34确定是否连续输入了感测信息而超过预定阈值,并且确定触发操作是否具有连续性。
在第一传感器信息的输入在预定时间内上升和下降的情况下,确定触发操作不具有连续性的(ST102,否)。接下来,信息处理单元31启动用于检测姿势操作的传感器(ST103)。在本实施方式中,启动运动传感器12。在启动用于检测姿势操作的传感器之后的信息处理装置1的操作模式被称为正常操作模式(第二电力消耗模式),并且可以执行从省电模式到正常操作模式的切换。信息处理单元31可以执行该切换。
接下来,姿势识别单元33在超时之前的预定时间内等待可以输入的第二传感器信息(ST104)。在预定时间内可能未根据运动传感器12的感测信息(第二传感器信息的一个示例)识别出用户的姿势操作的情况下(ST104,否),处理结束。
在预定时间内可以根据运动传感器12的感测信息(第二传感器信息的一个示例)识别出用户的姿势操作的情况下(ST104,是),基于自ST101以后记录的触发操作的类型与在ST104中识别出的姿势操作的组合,操作输入信号生成单元34解释用户想要通过在ST104中识别出的姿势操作来进行的操作输入(ST105)。
如上参照图1所述,通过ST105中的处理,相同的姿势操作变为“放大”的命令(操作输入的一个示例)、“降低音量”的命令(操作输入的一个示例)、或“返回至前一页”的命令(操作输入的一个示例)。
接下来,信息处理单元31或便携式终端3执行在ST105中解释的操作输入(ST106)。根据操作输入的内容,耳机2或信息处理装置1都可以执行操作输入。
参照图8,将描述ST104中的超时。在图8的时序图中,各传感器信息的上部表示输入了传感器信息,并且各传感器信息的下部表示没有输入传感器信息。横轴表示时间。
如图8(a)所示,如果存在第一传感器信息的输入并且检测到触发操作,则姿势识别单元33将设置在超时之前的预定时间。在图8中,预定时间的起始点被设置为第一传感器信息的检测结束的时间点。替选地,可以将预定时间的起始点设置为第一传感器信息的检测开始的时间点。
如图8(b)所示,如果在预定时间内不存在第二传感器信息的输入,则姿势识别单元33将确定不存在由用户进行的姿势操作和操作输入。因此,即使触发操作不是用户不想要的触发操作,也可以抑制信息处理装置1的错误输入。
此外,如图8中的虚线所示,仅在从检测到触发操作的时间起的预定时间内确定是否输入了第二传感器信息。因此,当用户执行操作输入时,用户需要在明确地执行触发操作之后执行姿势操作。类似地,在该结构中,可以抑制信息处理装置1的错误输入。
此外,在存在第二传感器信息的输入的情况下(图8(a)),姿势识别单元33识别这是否是姿势操作。
将参照图7描述在ST102中确定触发操作具有连续性的处理的细节。在这种情况下的与图6中的处理类似的处理将由相同的附图标记表示,并且将省略对该处理的描述。
如图7所示,连续地进行ST106中的操作输入的执行,直到触发操作结束(ST107,是)。例如,在触发操作是在右侧接近传感器11R作出反应时举起右手的操作的情况下,在举起右手的同时连续执行通过触发操作的类型与姿势操作的组合解释的操作输入。
将参照图9来描述触发操作的连续性。图9的时序图类似于图8的时序图,并且各传感器信息的上部表示输入了传感器信息,以及各传感器信息的下部表示没有输入传感器信息。横轴表示时间。
通过使用图9中的预定阈值来执行图6的ST102中的触发操作的连续性的确定。在该第一传感器信息的输入上升的时间点是起始点的情况下,操作输入信号生成单元34基于是否连续输入了第一传感器信息而超过用于确定触发操作的连续性的预定阈值来确定触发操作的连续性。在图9(a)中没有连续输入第一传感器信息而超过预定阈值的情况下,确定触发操作是单次触发操作。在图9(b)和图9(c)中连续输入了第一传感器信息而超过预定阈值的情况下,确定触发操作是具有连续性的触发操作,即,连续触发操作。
尽管输出第一传感器信息的传感器设备是相同的,但是根据触发操作的连续性是否存在,第一传感器信息的类型被认为是彼此不同的。例如,尽管传感器信息是由相同的右侧接近传感器11R中的每一个来输出的,但是单次触发操作和连续触发操作被认为是彼此类型不同的传感器信息。
因此,在图6或图7的ST105中对操作输入进行解释(处理命令的确定)时,关于相同的姿势操作,可以将对操作输入的不同解释分配给单次触发操作和连续触发操作中的每一个。
以上描述了执行检测触发操作的各个设备的不同类型的操作输入或者针对相同姿势输入的设备的各个组合的方法。此外,以上还描述了针对单次触发操作和连续触发操作这些触发操作而将操作输入认为是不同的方法。接下来,下面将描述通过使用连续触发操作而在操作输入中包括连续值的方法。
在使音乐播放器成为应用的情况下,仅上述的操作输入可能不覆盖音乐播放器所需的所有用户接口。例如,需要各种操作,诸如调节音量、馈送专辑、跳过连续音乐、以及随机再现(shuffle reproduction)的切换。此外,期望在调节音量时指定连续值。
仅对于按钮操作,可以例如通过按下并按住按钮来指定连续值。然而,如果存在可用于输入的诸如可穿戴设备的人机接口的限制,则可能引起一些问题。在没有按钮的可穿戴设备的情况下,可想到可穿戴设备通过姿势操作来进行输入。然而,通过姿势操作来指定连续值是困难的。这是由用户的自然感觉的差异引起的。
因此,在本实施方式中,在针对需要连续值的操作输入而检测到连续触发操作的情况下,使用与检测到的连续触发操作的时间长度相对应的值作为连续值。如下所述那样提取连续触发操作的时间长度。
将参照图9(b)和图(c)。优选地,结束时段(即,连续触发操作的时间长度的结束点)是连续触发操作结束的时间点。换句话说,结束点被设置为第一传感器信息的输入停止的时间点等。例如,在举手而接近传感器作出反应时用户执行诸如点头的姿势操作的情况下,举手停止的时间点变为连续触发操作的结束时间点。
连续触发操作的时间长度的起始点不受限制,并且存在三种模式,例如,第一传感器信息的输入开始的时间点、确定触发操作具有连续性的时间点、以及识别出姿势操作的时间点。可以选择任何模式。
操作输入信号生成单元34基于解释的操作输入来生成命令,并且在后一处理框中传递命令。在通过上述方法从连续触发操作中提取连续值的情况下,生成连续值或与连续值相对应的值是因数的命令。与连续值相对应的值是例如与连续值成比例的值、基于标准的量子值、基于预定函数(例如,S型函数等)计算出的值等。根据操作输入的目标,可以选择获得与连续值相对应的值的期望方法。
<4.概要>
上述实施方式的主要目的是在不给用户带来负担的情况下允许用户执行复杂的操作输入。对于可穿戴设备而言追求轻便性和小尺寸,并且可以包括在可穿戴设备中的人机接口的尺寸有时与按钮有关。然而,可以不仅仅通过按钮来执行复杂操作。
因此,可以想到,例如,接近传感器的感测被用作按钮的按压检测的替代。然而,在这种情况下,可能会增加用户不想要的输入的数量。使用静电开关的触摸设备需要具有特定面积的区域,并且担心的是,对于可穿戴设备的人机接口而言重要的小型化是不可能的。
在过去的专利文献1中,使用所谓的“触摸姿势”作为操作输入。然而,用户可以记录的“触摸姿势”的类型是有限的,并且存在难以增加操作输入的变化的问题。过去存在这样的技术问题。另一方面,根据上述的本实施方式,与一个姿势操作相对应的操作输入的数量不限于一个,并且可以执行多个操作。换句话说,根据本实施方式,可以在不给用户带来负担的情况下使操作输入多样化。
此外,如上参照图8所述,在直到超时也不存在姿势识别的情况下,根据其中未确定与操作输入相对应的处理命令的本实施方式的结构,可以防止用户不想要的输入,并且当无意中点燃触发器时不执行错误的操作输入。
另外,在本实施方式中,当输入第一传感器信息时,在连续输入第一传感器信息的时间长度短于预定阈值的情况下检测单次触发操作,而在连续输入第一传感器信息的时间长度长于预定阈值的情况下检测连续触发操作。然后,基于检测到的单次触发操作或检测到的连续触发操作与识别出的姿势操作的组合来解释操作输入。因此,可以将单次触发操作和连续触发操作这两种类型的触发操作设置为一次触发操作,并且可以扩展操作输入的变化。
此外,在本实施方式中,在检测到连续触发操作的情况下,与检测到的连续触发操作的时间长度相对应的值被包括在通过操作输入而输入的信息中。由此,在由各个人进行的不同姿势操作之间不存在差异的情况下可以鲁棒地识别使用连续值的操作输入,并且该操作输入可以通过举起手并使接近传感器作出反应、然后移开手并使接近传感器停止作出反应的简单操作来执行。
<5.变型例>
此外,可以如下所述那样对本实施方式进行变型。
例如,在实施方式中耳机2被示为可穿戴设备。然而,可穿戴设备不限于此。可穿戴设备的其他示例包括例如头戴式耳机和能够身体穿戴在肩部的颈带型终端。可以利用这样的设备对上述实施方式进行变型。
此外,该实施方式可应用于头戴式显示器。图10是示出其中本技术应用于头戴式显示器的变型实施方式中的信息处理装置1的外观结构示例的图。
如图10所示,在本变型例中,眼镜型头戴式显示器2a被用作被构造成能够由用户身体穿戴的壳体20。眼镜式头戴式显示器2a包括静电触摸设备14。
触摸设备14的布置位置不受限制,并且可以是当用户戴上眼镜型头戴显示器2a时能够检测到用户的手的操作的位置。例如,如图10所示,触摸设备14被构造成使得触摸设备14被布置在佩戴眼镜型头戴式显示器2a的用户的太阳穴周围。
在本变型例中,触摸设备14提供与由图2的结构示例中的接近传感器11R和左侧接近传感器11L提供的功能类似的功能。换句话说,触摸设备14通过感测来生成检测触发操作所需的第一传感器信息,并且将第一传感器信息输入到信息处理装置1。
触摸设备14可以是能够不仅在单个点处检测用户的手指的触摸、而且还在多个点处检测用户的手指的触摸的触摸设备。多点型触摸设备是能够感测一个或多个触摸点的触摸设备14。在这种情况下,例如,通过一根手指的触摸而进行的触发操作和通过两根手指的触摸而进行的触发操作可以被认为是不同的触发操作。此外,根据触摸设备14感测到的触摸点的数量,触发检测单元32被构造成检测不同类型的触发操作。
触摸设备14的布置位置不限于在用户的太阳穴周围,并且可以在用户的手物理地够到触摸设备14的范围内,以使得能够检测到用户的手的操作。此外,触摸设备14可以被布置在穿戴壳体20的用户的视野之外。即使触摸设备14被布置在穿戴壳体20的用户不能直接执行视觉识别的位置上,但是根据应用了本技术的本变型例,用户仍可以基于用户的触发操作和姿势操作来执行对信息处理装置1的操作输入、而不依赖于用户的视觉。
关于头戴式显示器,存在一些需求。例如,当用户正在观看虚拟现实内容时,用户有时想要对系统执行任何输入。在用户在没有远程控制器时执行输入的情况下,在本变型例中,用户可以通过轻敲眼镜型头戴式显示器2a(触摸设备14)的一部分并且执行姿势操作来执行对系统的输入。注意,眼镜型头戴式显示器2a可以包括透射型显示器,并且可以包括非透射型显示器。
<6.补充说明>
以下可以在(1)至(11)中描述本说明书中公开的技术思想的一部分。
(1)一种信息处理装置,包括:
控制器单元,其根据第一传感器信息的类型来检测触发操作,基于第二传感器信息识别由用户执行的作为操作输入的姿势操作。并且基于检测到的触发操作与识别出的姿势操作的组合来确定所述操作输入。
(2)根据(1)所述的信息处理装置,其中,
所述控制器单元在检测到所述触发操作之后、基于在预定时间内输入的所述第二传感器信息来识别所述姿势操作。
(3)根据(1)或(2)所述的信息处理装置,其中,
所述控制器单元执行以下操作:
当输入所述第一传感器信息时,在连续输入所述第一传感器信息的时间长度短于预定阈值的情况下检测单次触发操作,在连续输入所述第一传感器信息的时间长度长于所述预定阈值的情况下检测连续触发操作,并且
基于检测到的单次触发操作或检测到的连续触发操作与识别出的姿势操作的组合来确定所述操作输入。
(4)根据(3)所述的信息处理装置,其中,
在所述控制器单元检测到所述连续触发操作的情况下,所述控制器单元使通过所述操作输入而输入的信息包括与检测到的连续触发操作的时间长度相对应的值。
(5)根据(4)所述的信息处理装置,其中,
所述控制器单元将所述连续触发操作的时间长度的结束点设置为所述第一传感器信息的输入结束的时间点。
(6)根据(4)或(5)所述的信息处理装置,其中,
所述控制器单元将所述连续触发操作的时间长度的起始点设置为所述第一传感器信息的输入开始的时间点。
(7)根据(4)或(5)所述的信息处理装置,其中,
所述控制器单元将所述连续触发操作的时间长度的起始点设置为检测到所述连续触发操作的时间点。
(8)根据(4)或(5)所述的信息处理装置,其中,
所述控制器单元将所述连续触发操作的时间长度的起始点设置为识别到所述姿势操作的时间点。
(9)根据(1)至(8)中任一项所述的信息处理装置,其中,
输出所述第一传感器信息的传感器被布置在被构造成能够由所述用户身体穿戴的壳体上,并且
所述传感器被布置在所述传感器能够检测所述用户的手的操作的位置上。
(10)根据(9)所述的信息处理装置,其中,
布置所述传感器的位置是穿戴有所述壳体的所述用户的视野之外的位置。
(11)根据(9)或(10)所述的信息处理装置,其中,
所述第一传感器信息是能够感测一个或更多个触摸点的触摸传感器的感测信息,并且
所述控制器单元根据所述触摸传感器感测到的触摸点的数量来检测所述触发操作。
(12)根据(1)至(11)中任一项所述的信息处理装置,其中,
所述信息处理装置具有作为所述信息处理装置的电力消耗模式的第一电力模式和第二电力模式,
当所述信息处理装置处于所述第一电力模式并且所述控制器单元检测到所述触发操作时,所述控制器单元将所述信息处理装置的电力消耗模式切换到所述第二电力模式,以及
所述第一电力模式的电力消耗量低于所述第二电力模式的电力消耗量。
(13)一种信息处理方法,包括:
根据第一传感器信息的类型来检测触发操作;
基于第二传感器信息识别由用户执行的作为操作输入的姿势操作;以及
基于检测到的触发操作与识别出的姿势操作的组合来确定所述操作输入。
(14)一种程序,其使计算机执行以下步骤:
根据第一传感器信息的类型来检测触发操作的步骤;
基于第二传感器信息识别由用户执行的作为操作输入的姿势操作的步骤;以及
基于检测到的触发操作与识别出的姿势操作的组合来确定所述操作输入的步骤。
附图标记列表
1 信息处理装置
2 耳机
2a 眼镜型头戴式显示器
3 便携式终端
11R 右侧接近传感器
11L 左侧接近传感器
12 运动传感器
13 麦克风
14 触摸设备
19 无线通信单元
20 壳体
21,22 RAM
31 信息处理单元(SoC/CPU)
32 触发检测单元
33 姿势识别单元
34 操作输入信号生成单元
38 CPU
39 无线通信单元
Claims (14)
1.一种信息处理装置,包括:
控制器单元,其根据第一传感器信息的类型来检测触发操作,基于第二传感器信息识别由用户执行的作为操作输入的姿势操作,并且基于检测到的触发操作与识别出的姿势操作的组合来确定所述操作输入。
2.根据权利要求1所述的信息处理装置,其中,
所述控制器单元在检测到所述触发操作之后、基于在预定时间内输入的所述第二传感器信息来识别所述姿势操作。
3.根据权利要求1所述的信息处理装置,其中,
所述控制器单元执行以下操作:
当输入所述第一传感器信息时,在连续输入所述第一传感器信息的时间长度短于预定阈值的情况下检测单次触发操作,在连续输入所述第一传感器信息的时间长度长于所述预定阈值的情况下检测连续触发操作,并且
基于检测到的单次触发操作或检测到的连续触发操作与识别出的姿势操作的组合来确定所述操作输入。
4.根据权利要求3所述的信息处理装置,其中,
在所述控制器单元检测到所述连续触发操作的情况下,所述控制器单元使通过所述操作输入而输入的信息包括与检测到的连续触发操作的时间长度相对应的值。
5.根据权利要求4所述的信息处理装置,其中,
所述控制器单元将所述连续触发操作的时间长度的结束点设置为所述第一传感器信息的输入结束的时间点。
6.根据权利要求4所述的信息处理装置,其中,
所述控制器单元将所述连续触发操作的时间长度的起始点设置为所述第一传感器信息的输入开始的时间点。
7.根据权利要求4所述的信息处理装置,其中,
所述控制器单元将所述连续触发操作的时间长度的起始点设置为检测到所述连续触发操作的时间点。
8.根据权利要求4所述的信息处理装置,其中,
所述控制器单元将所述连续触发操作的时间长度的起始点设置为识别到所述姿势操作的时间点。
9.根据权利要求1所述的信息处理装置,其中,
输出所述第一传感器信息的传感器被布置在被构造成能够由所述用户身体穿戴的壳体上,并且
所述传感器被布置在所述传感器能够检测到所述用户的手的操作的位置上。
10.根据权利要求9所述的信息处理装置,其中,
布置所述传感器的位置是在穿戴有所述壳体的所述用户的视野之外的位置。
11.根据权利要求9所述的信息处理装置,其中,
所述第一传感器信息是能够感测一个或更多个触摸点的触摸传感器的感测信息,并且
所述控制器单元根据所述触摸传感器感测到的触摸点的数量来检测所述触发操作。
12.根据权利要求1所述的信息处理装置,其中,
所述信息处理装置具有作为所述信息处理装置的电力消耗模式的第一电力模式和第二电力模式,
当所述信息处理装置处于所述第一电力模式并且所述控制器单元检测到所述触发操作时,所述控制器单元将所述信息处理装置的电力消耗模式切换到所述第二电力模式,以及
所述第一电力模式的电力消耗量低于所述第二电力模式的电力消耗量。
13.一种信息处理方法,包括:
根据第一传感器信息的类型来检测触发操作;
基于第二传感器信息识别由用户执行的作为操作输入的姿势操作;以及
基于检测到的触发操作与识别出的姿势操作的组合来确定所述操作输入。
14.一种程序,其使计算机执行以下步骤:
根据第一传感器信息的类型来检测触发操作的步骤;
基于第二传感器信息识别由用户执行的作为操作输入的姿势操作的步骤;以及
基于检测到的触发操作与识别出的姿势操作的组合来确定所述操作输入的步骤。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016-208919 | 2016-10-25 | ||
JP2016208919 | 2016-10-25 | ||
PCT/JP2017/037127 WO2018079301A1 (ja) | 2016-10-25 | 2017-10-13 | 情報処理装置、方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109891364A true CN109891364A (zh) | 2019-06-14 |
CN109891364B CN109891364B (zh) | 2022-05-03 |
Family
ID=62024813
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780064524.9A Active CN109891364B (zh) | 2016-10-25 | 2017-10-13 | 信息处理装置、方法和程序 |
Country Status (6)
Country | Link |
---|---|
US (2) | US10712831B2 (zh) |
JP (1) | JP7135859B2 (zh) |
KR (1) | KR20190068543A (zh) |
CN (1) | CN109891364B (zh) |
DE (1) | DE112017005377T5 (zh) |
WO (1) | WO2018079301A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20200141699A (ko) | 2019-06-11 | 2020-12-21 | 주식회사 신영 | 보강 부재 |
CN115484524A (zh) * | 2021-06-16 | 2022-12-16 | 开酷科技股份有限公司 | 具有手势辨识功能的耳机装置 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102087712A (zh) * | 2010-02-22 | 2011-06-08 | 艾利维公司 | 个性化动作控制的系统和方法 |
CN102147657A (zh) * | 2010-02-09 | 2011-08-10 | 索尼计算机娱乐公司 | 信息处理装置及其控制方法、操作器件和信息存储介质 |
JP2011227638A (ja) * | 2010-04-19 | 2011-11-10 | Panasonic Corp | 手書き入力装置、手書き入力方法及び手書き入力プログラム |
CN102822426A (zh) * | 2010-02-02 | 2012-12-12 | 陈重嘉 | 免触摸自动水龙头的系统和方法 |
CN103186989A (zh) * | 2011-12-30 | 2013-07-03 | 罗伯特·博世有限公司 | 用于飞行员耳麦的报警设备 |
EP2821888A1 (en) * | 2013-07-01 | 2015-01-07 | BlackBerry Limited | Gesture detection using ambient light sensors |
JP2016139174A (ja) * | 2015-01-26 | 2016-08-04 | セイコーエプソン株式会社 | ヘッドマウントディスプレイ、ヘッドマウントディスプレイの制御方法および制御プログラム |
US20160299570A1 (en) * | 2013-10-24 | 2016-10-13 | Apple Inc. | Wristband device input using wrist movement |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9019201B2 (en) * | 2010-01-08 | 2015-04-28 | Microsoft Technology Licensing, Llc | Evolving universal gesture sets |
JP2016018432A (ja) | 2014-07-09 | 2016-02-01 | ローム株式会社 | ユーザインタフェイス装置 |
JP2016149587A (ja) * | 2015-02-10 | 2016-08-18 | セイコーエプソン株式会社 | ヘッドマウントディスプレイ、およびその制御方法と制御プログラム |
JP5981591B1 (ja) * | 2015-03-17 | 2016-08-31 | 株式会社コロプラ | 没入型仮想空間でオブジェクト操作を制御するためのコンピュータ・プログラムおよびコンピュータ・システム |
-
2017
- 2017-10-13 KR KR1020197010728A patent/KR20190068543A/ko active IP Right Grant
- 2017-10-13 WO PCT/JP2017/037127 patent/WO2018079301A1/ja active Application Filing
- 2017-10-13 CN CN201780064524.9A patent/CN109891364B/zh active Active
- 2017-10-13 JP JP2018547559A patent/JP7135859B2/ja active Active
- 2017-10-13 US US16/333,037 patent/US10712831B2/en active Active
- 2017-10-13 DE DE112017005377.3T patent/DE112017005377T5/de active Pending
-
2020
- 2020-07-09 US US16/924,597 patent/US20200341557A1/en not_active Abandoned
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102822426A (zh) * | 2010-02-02 | 2012-12-12 | 陈重嘉 | 免触摸自动水龙头的系统和方法 |
CN102147657A (zh) * | 2010-02-09 | 2011-08-10 | 索尼计算机娱乐公司 | 信息处理装置及其控制方法、操作器件和信息存储介质 |
CN102087712A (zh) * | 2010-02-22 | 2011-06-08 | 艾利维公司 | 个性化动作控制的系统和方法 |
JP2011227638A (ja) * | 2010-04-19 | 2011-11-10 | Panasonic Corp | 手書き入力装置、手書き入力方法及び手書き入力プログラム |
CN103186989A (zh) * | 2011-12-30 | 2013-07-03 | 罗伯特·博世有限公司 | 用于飞行员耳麦的报警设备 |
EP2821888A1 (en) * | 2013-07-01 | 2015-01-07 | BlackBerry Limited | Gesture detection using ambient light sensors |
US20160299570A1 (en) * | 2013-10-24 | 2016-10-13 | Apple Inc. | Wristband device input using wrist movement |
JP2016139174A (ja) * | 2015-01-26 | 2016-08-04 | セイコーエプソン株式会社 | ヘッドマウントディスプレイ、ヘッドマウントディスプレイの制御方法および制御プログラム |
Also Published As
Publication number | Publication date |
---|---|
DE112017005377T5 (de) | 2019-08-01 |
CN109891364B (zh) | 2022-05-03 |
JPWO2018079301A1 (ja) | 2019-09-12 |
JP7135859B2 (ja) | 2022-09-13 |
US10712831B2 (en) | 2020-07-14 |
KR20190068543A (ko) | 2019-06-18 |
WO2018079301A1 (ja) | 2018-05-03 |
US20190204933A1 (en) | 2019-07-04 |
US20200341557A1 (en) | 2020-10-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6844665B2 (ja) | 端末装置、端末装置の制御方法およびプログラム | |
US10348108B2 (en) | Charging device for removable input modules | |
CN110164440B (zh) | 基于捂嘴动作识别的语音交互唤醒电子设备、方法和介质 | |
KR102393508B1 (ko) | 스마트 와치 및 이의 제어방법 | |
EP2746979B1 (en) | Mobile device having face recognition function using additional component and method for controlling the mobile device | |
US20150062086A1 (en) | Method and system of a wearable ring device for management of another computing device | |
CN108683968A (zh) | 显示控制方法及相关产品 | |
CN112817443A (zh) | 基于手势的显示界面控制方法、装置、设备及存储介质 | |
CN109067965A (zh) | 翻译方法、翻译装置、可穿戴装置及存储介质 | |
WO2020159302A1 (ko) | 증강 현실 환경에서 다양한 기능을 수행하는 전자 장치 및 그 동작 방법 | |
CN109891364A (zh) | 信息处理装置、方法和程序 | |
CN107229856A (zh) | 手持装置的操作方法 | |
TW201737142A (zh) | 手持裝置的操作權限啟用/停用方法 | |
CN106354558A (zh) | 一种工作模式切换方法及装置 | |
TWI735171B (zh) | 設定方法、辨識方法及應用其之電子裝置 | |
WO2023018222A1 (ko) | 웨어러블 전자 장치 및 웨어러블 전자 장치에서 양치질 정보 제공 방법 | |
TW202221488A (zh) | 無線控制裝置 | |
KR20210123156A (ko) | 전자 장치 및 비접촉 제스처를 이용한 전자 장치의 기능 운용 방법 | |
KR20210123920A (ko) | 에어 제스처에 의한 편집 기능을 제공하기 위한 전자 장치, 그 동작 방법 및 저장 매체 | |
CN118012325A (zh) | 一种手势识别装置 | |
CN114661168A (zh) | 智能眼镜交互设备、智能眼镜及智能眼镜交互方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |