CN104298343A - 用于照相机控制和图像处理操作的特定手势 - Google Patents

用于照相机控制和图像处理操作的特定手势 Download PDF

Info

Publication number
CN104298343A
CN104298343A CN201410289817.5A CN201410289817A CN104298343A CN 104298343 A CN104298343 A CN 104298343A CN 201410289817 A CN201410289817 A CN 201410289817A CN 104298343 A CN104298343 A CN 104298343A
Authority
CN
China
Prior art keywords
gesture
input
plus
image
prearranged
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410289817.5A
Other languages
English (en)
Other versions
CN104298343B (zh
Inventor
亚伦·迈克尔·斯图尔特
杰弗里·E·斯克尼尔
峰新
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Singapore Pte Ltd
Original Assignee
Lenovo Singapore Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Singapore Pte Ltd filed Critical Lenovo Singapore Pte Ltd
Publication of CN104298343A publication Critical patent/CN104298343A/zh
Application granted granted Critical
Publication of CN104298343B publication Critical patent/CN104298343B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开涉及用于照相机控制和图像处理操作的特定手势。实施方式提供了一种方法，包括：在信息处理装置的传感器处接收图像输入；使用一个或更多个处理器确定在图像输入内的预定手势；捕捉与预定手势相关联的附加手势输入；以及根据与预定手势相关联的附加手势输入来处理呈现在显示装置上的图像。还描述了其他实施方式并要求保护这些实施方式。

Description

用于照相机控制和图像处理操作的特定手势
技术领域
本公开涉及用于照相机控制和图像处理操作的特定手势。
背景技术
信息处理装置(“装置”)，例如平板电脑装置、智能电话、膝上型计算机以及台式计算机等使用一个或更多个输入装置。在这些输入装置之中存在利用图像处理来识别手势输入或图案输入的装置。现有的输入装置可以例如利用二维(2D)或三维(3D)照相机来捕捉由图像处理系统处理的图像。
在图像处理系统中，例如来自2D照相机的图像输入在视觉算法或手势算法中被利用以将图像输入转换为命令。因此，例如，用户可以经由照相机追踪他或她的手势，并且将所追踪到的手势转化为用于操作装置中的各种功能的命令。图像处理技术的示例由视觉移动技术有限公司(eyesSightTM Mobile Technologies Ltd.)提供。
发明内容
总的来说，一个方面提供了一种方法，包括：在信息处理装置的传感器处接收图像输入；使用一个或更多个处理器确定在图像输入中的预定手势；捕捉与预定手势相关联的附加手势输入；以及根据与预定手势相关联的附加手势输入来处理呈现在显示装置上的图像。
另一方面提供了一种信息处理装置，包括：传感器；显示装置；一个或更多个处理器；存储装置，存储一个或更多个处理器可访问的指令，该指令可由一个或更多个处理器执行，以便：在传感器处接收图像输入；使用一个或更多个处理器确定在图像输入内的预定手势；捕捉与预定手势相关联的附加手势输入；以及根据与预定手势相关联的附加手势输入来处理呈现在显示装置上的图像。
再一方面提供了一种程序产品，包括：存储有计算机可读程序代码的存储介质，计算机可读程序代码包括：被配置成在信息处理装置的传感器处接收图像输入的计算机可读程序代码；被配置成使用一个或更多个处理器来确定在图像输入内的预定手势的计算机可读程序代码；被配置成捕捉与预定手势相关联的附加手势输入的计算机可读程序代码；以及被配置成根据与预定手势相关联的附加手势输入来处理呈现在显示装置上的图像的计算机可读程序代码。
前述是概要，因此会包含细节的简化、概括和省略；本领域的技术人员将理解概要仅仅是说明性的而不意在以任何方式进行限制。
为了更好的理解实施方式以及实施方式的其他另外的特征和优点，参照结合附图的以下说明。本发明的范围将在所附权利要求中指出。
附图说明
图1示出了信息处理装置电路系统的示例。
图2示出了信息处理装置电路系统的另一示例。
图3示出了使用特定手势来进行照相机控制和图像处理操作的示例方法。
图4A-4C示出了用于照相机控制和图像处理操作的特定手势的示例。
具体实施方式
将容易理解，除所描述的示例实施方式外，这里附图中大体描述和示出的实施方式的部件可以按各种不同的配置来布置和设计。因此，如附图中表示的，示例实施方式的以下更详细的描述并非意在限制所要求保护的实施方式的范围，而仅代表示例实施方式。
整个本说明书中对“一个实施方式”或“一种实施方式”(等)的引用表示结合实施方式所描述的具体特征、结构或特性被包含在至少一个实施方式中。因此，在整个本说明书中各处出现的短语“在一个实施方式中”或“在一种实施方式中”等未必都指代同一实施方式。
此外，在一个或更多个实施方式中，可以按任何适当的方式对所描述的特性、结构或特性进行组合。在下面的描述中，提供了许多的具体细节以便透彻理解实施方式。然而，相关领域的技术人员将认识到，可以在不具有一个或更多个具体的细节的情况下来实施各种实施方式，或者使用其他方法、部件、材料等来实施各种实施方式。在其他的实例中，未详细示出或描述公知的结构、材料、或操作以避免混淆。
对于信息处理装置(例如，智能电话、平板电脑、膝上型计算机、台式计算机等)而言，目前不存在使用手势输入来大体控制一个或更多个集成的照相机或图像处理的方法。例如，在具有集成的照相机或独立的照相机的装置中，不存在用于控制照相机和调节照相机设置的简单的方法。对于没有键盘或鼠标的装置(如智能电话、平板电脑等)而言，操纵呈现在显示装置上的图像具有挑战性(如执行裁剪和剪切动作、在图像内平移(pan)，缩放、旋转2D或3D图像等)。用户通常必须使用图形用户界面来改变照相机设置或执行这种图像处理操作。对于具有触摸屏的装置而言，用户可以利用触摸输入来完成一些功能，尽管这些触摸输入同样是非直观的。
为了实现图像数据被处理和/或被显示的方式的变化，现有解决方案的挑战是用户不得不中断照相机(如视频电话会议等)的使用并且将他或她的注意力转移到图形用户界面或触摸界面。目前不存在提供无缝的用户体验的解决方案，该无缝的用户体验使得用户能够在不中断照相机的使用的情况下控制照相机/图像处理。此外，对于许多图像处理技术而言，仅非直观输入被允许用于实现各种变化。
因此，实施方式提供了一种允许使用一个或更多个预定手势(在本文中也被称为特定手势)来进行照相机控制和执行图像处理操作的技术。基本的解决方案假定图像传感器(例如，2D照相机)被激活并且正在观察用户。实施方式将识别特定手势，该特定手势在下文进一步描述的一个示例中包括用户摆出的拐角手势(例如，通过将一只手或两只手保持为“L”图案)。识别该特定手势的实施方式将该特定手势的存在解释为指示用户打算操纵所显示的图像或执行相关联的动作(例如，遍及图像平移、旋转图像、拍摄照片或视频等)。将预定手势或特定手势使用作为用户希望以某种方式操纵图像处理的触发器或指示，实施方式在不干扰用户的体验(例如，要求用户输入照相机应用的特定设置部分等)的情况下促进这种功能的嵌入性能。
参照附图将会最好地理解所示出的示例实施方式。下面的描述仅作为示例，并且仅示出了某些示例实施方式。
参照图1和图2，虽然在信息处理装置中可以利用各种其他电路、电路系统或部件，但是对于智能电话和/或平板电路系统200，图2示出的示例包括例如出现在平板电脑或其他移动计算平台中的片上系统设计。软件和一个或多个处理器结合在单个芯片210中。内部总线等取决于不同的供应商，但是基本上所有的外围装置(220)(如照相机)都可以附接到单个芯片210。与图1示出的电路系统相比，电路系统200将处理器、存储器控制以及I/O控制器集线器全部结合到单个芯片210中。此外，这种类型的系统200通常不使用SATA或PCI或LPC。公共接口例如包括SDIO和I2C(集成电路间)。
存在一个或更多个电力管理芯片230(例如电池管理单元BMU)，电力管理芯片230例如对经由可再充电电池240供应的电力进行管理，可再充电电池240可以通过连接到电源(未示出)而再充电。在至少一个设计中，单个芯片(如210)用于提供类似BIOS的功能和DRAM存储器。
系统200通常包括WWAN收发器250和WLAN收发器260中的一个或更多个收发器，以便连接到各种网络，如电信网络和无线基站。通常，系统200包括用于数据输入和显示的触摸屏270。系统200通常还包括各种存储装置，例如闪存280和SDRAM(同步动态存储器)290。
图1就其本身而言描绘了信息处理装置电路、电路系统或部件的另一示例的框图。在图1中描绘的示例可以对应于计算系统，如位于北卡罗来纳州莫里斯维尔州的联想(美国)公司销售的THINKPAD系列的个人计算机或其他装置。根据本文的描述明显可知，实施方式可以包括其他特征或在图1示出的示例的特征中的仅一些特征。
图1的示例包括所谓的芯片组110(一起工作的一组集成电路或芯片、芯片组)，芯片组110具有可以根据制造商(例如，INTEL、AMD、ARM等)而变化的体系结构。芯片组110的体系结构包括核与存储器控制组120以及I/O控制器集线器150，I/O控制器集线器150经由直接管理接口(DMI)142或链路控制器144交换信息(例如数据、信号、命令等)。在图1中，DMI(直接存储器接口)142是芯片到芯片接口(有时被称为在“南桥”与“北桥”之间的链路)。核和存储器控制组120包括经由前端总线(FSB)124交换信息的一个或更多个处理器122(例如单核或多核)以及存储器控制器集线器126；注意，组120的部件可以被集成在代替传统“北桥”式的体系结构的芯片中。
在图1中，存储器控制器集线器126与存储器140接口(例如，为可以被称为“系统存储器”或“存储器”的一类RAM提供支持)。存储器控制器集线器126还包括用于显示装置192(例如，CRT、平板、触摸屏等)的LVDS(低电压差分信号)接口132。块138包括可以通过LVDS接口132(例如串行数字视频、HDMI(高清晰度多媒体接口)/DVI(交互式数字视频接口)、显示端口)支持的一些技术。存储器控制器集线器126还包括可以支持独立显卡136的PCI-Express(高速外部部件互连)接口(PCI-E)134。
在图1中，I/O集线器控制器150包括SATA接口151(例如，用于HDD(硬盘驱动器),SDD(固态硬盘)180等)，PCI-E接口152(例如用于无线连接182)、USB接口153(例如，用于如数字化仪、键盘、鼠标、照相机、电话、麦克风、存储器、其他连接装置等的装置184)、网络接口154(例如，LAN)、GPIO(通用输入输出)接口155、LPC(低接脚数)接口170(用于ASIC(专用集成电路)171、TPM(可信平台模块)172、超级I/O173、固件集线器174、BIOS支持175以及各种类型的存储器176，如ROM177、闪存178以及NVRAM(非易失性随机存取存储器)179)、电力管理接口161、时钟发生器接口162、音频接口163(例如用于扬声器194)、TCO接口164、系统管理总线接口(SM/I2C)165以及可以包括BIOS(基本输入输出系统)168和启动代码190的SPI(串行外围接口)闪存166。I/O集线器控制器150可以包括千兆比特以太网支持。
系统在通电时可以被配置成执行存储在SPI闪存166内的用于BIOS168的启动代码190，此后，在一个或更多个操作系统和应用软件(例如存储在系统存储器140中)的控制下处理数据。操作系统可以存储在任意的多种存储单元中并且例如根据BIOS168的指令被存取。如本文所描述的，装置可以包括比图1的系统中所示出的特征更少或更多的特征。
例如在图1和图2中概述的信息处理装置可以利用图像输入作为触发器来实现图像处理，并且此后，可以使用附加的手势输入来实现变化。例如，如在图1和图2中概述的装置可以包括图像传感器(例如，照相机)，该图像传感器感测图像数据并且将所感测的图像数据提供给手势引擎来进行处理。如在本文进一步描述的，手势引擎可以是专用的子系统或存储在装置的存储器中(或可由装置的处理器访问)，并且手势引擎将图像数据作为输入，识别包含在图像数据中的特定手势或预定手势，并且基于紧随在特定手势或预定手势后的手势来实现各种功能。
参照图3，实施方式在310处接收例如由装置的照相机捕捉的图像输入。实施方式在320处分析图像输入，即是否包含特定手势。实施方式将特定手势的包含或识别用作决策点来改变手势处理。因此，如果实施方式在320处没有识别到图像输入中存在特定手势，则在330处系统可以仍继续处理与特定手势输入不相关的默认手势输入(在装置接收一些形式的手势输入的情况下)。
另一方面，如果实施方式在320处检测到存在特定手势输入，则如本文进一步描述的那样，将该特定手势输入用作为另外的功能的触发器或启动。根据构成特定手势或预定手势的部分，实施方式识别在图像数据内的预定图案或预定手势。在实施方式中，该图案或手势被预设为特定手势，使得在识别出其存在后，实施方式可以实现基于附加手势的功能以进行图像处理。如本领域的技术人员将会理解，可以按各种方法来呈现图案或手势或者将图案或手势输入到系统中，包括但不必限于将自身包含特定图案的图像呈现给传感器或照相机，或者将所感测到的手势呈现给传感器或照相机，所述手势通过用户以使传感器或照相机进行图像捕捉的特定配置来握一只手或两只手而进行感测。
如果在320处识别到特定手势，则此后在340处实施方式可以捕捉与特定手势相关的附加图像数据，例如追踪用户的作出特定手势的手以确定另外的变化。换言之，在320处对特定手势的检测指示用于执行图像处理的附加手势输入即将发生。因此，在340处的附加手势输入(例如，由传感器或照相机捕捉)用作为在350处执行基于附加手势的功能的基础。
大体参照图4A-4C,实施方式可以将拐角图案识别为特定手势，所述拐角图案例如经由用户举起手形成‘L’图案而形成的‘L’图案。可以利用一个或更多个‘L’图案。本文提供了捕捉附加图像输入(例如，在340处)并且根据附加图像输入执行图像处理的(例如，在350处)各种非限制性示例。
当图像传感器捕捉到特定手势，例如由用户的手提供的静态‘L’图案，并且例如通过手势子系统识别到该特定手势时，实施方式将‘L’图案的拐角(以及在两个‘L’图案情况下的各个拐角)与目前显示的图像(包括静态图像或视频，如用于视频会议的视频流)的拐角相关联。通过将‘L’图案的拐角与所论述的图像的拐角相关联，实施方式可以提供基于另外的手势输入所进行的、方便的图像处理，如下文所述。
参照图4A，检测两个‘L’图案的实施方式可以确定用户的手(例如由两个‘L’图案形成的拐角)之间的距离(原始距离或按比例缩放的距离/相对距离)。该确定的距离可以由用户修改或改变，例如增加百分之x，并且此后，实施方式可以根据该变化调整所显示的图像的尺寸。例如，如图4A所示，实施方式可以动态地调整图像的尺寸，如响应于用户使‘L’图案的拐角移离来执行放大或扩大功能。因此，用户可以将两只手用作为取像器，以使实施方式按与用户两只手之间的距离成比例的方式来调整图像或视频的尺寸。同样地，用户可以按类似的方式将两只手用作为框来裁剪图像等。或者，实施方式可以利用用户的手与传感器/照相机之间的距离(及其之间的变化)(如朝向或远离照相机)来放大或缩小图像/视频。
如图4B至图4C所示，此处由两只手呈现的特定手势可以使其两只手的移动被追踪，从而实现对照相机/图像的相应控制以进行图像的旋转和平移。如图4B的示例所示，在实施方式中追踪手的旋转并且在同一平面或表面上实现图像的相应的旋转。就平移而言，如图4C所示，用户可以在水平或垂直方向上相对于传感器(例如，照相机)移动他或她的手，从而在呈现所显示的图像的过程中实现相应的平移功能。因此，图像可以在跟随手移动方向的方向上进行平移。在本说明书中，平移包括在垂直方向上移动手。
此外，在用户希望以三维方式旋转物体的情况下，用户可以使用类似的手移动来旋转三维图像。为了旋转三维图像，用户可以呈现特定手势，并且此后进行倾斜或旋转(在360度空间的任何方向上)，由此使得相应的图像被旋转。因此，手势子系统对图像进行旋转，以便匹配手在360度中的旋转。如此，特定手势，例如两只手在平面中形成两个‘L’图案可以围绕轴进行旋转，从而实施方式将以相应的三维方式来旋转所显示的图像。这可以被认为是“倾斜”的形式，注意这实际上是图形以三维方式围绕限定视点的中心轴进行旋转。
在这个方面，如果用户旋转特定手势(如由被构造为双‘L’特定手势的两只手形成)的平面来使得距照相机的‘z’距离变化(例如，朝向照相机/传感器旋转双‘L’平面的顶部)，则实施方式可能使所显示的图像梯形畸变或扭曲。
当提供特定手势时，用户可以提供附加手势输入以执行附加的动作。例如，当以双‘L’静态图案的形式呈现特定手势时，用户可以用手指做出手势以触发动作，例如，就像使快门或照相机按钮工作一样通过按下手指来触发用于拍摄照片的照相机拍摄动作。当然，可以使用各种替代方案。例如，如果用户在时间阈值内保持手指向下，则实施方式则可以捕捉视频等。
应该注意，虽然全文使用利用两只手各自形成‘L’静态手势的示例，但是用户可以使用一只手来提供特定手势，并且当该特定手势被识别到时，使用另一只手来进行旋转、缩放，平移等。因此用户可以用他或她的左手来呈现一个静态‘L’手势，此后，经由右手提供手势输入以指示平移的方向、期望的缩放功能、旋转、要触发的动作等。
此外，某些手势引擎具有识别包含在图像输入中的很精确的数据的能力。例如，手势引擎能够确定用户是否使手以手掌面向传感器/照相机的方式来取向或者使手背朝向传感器/照相机来取向(或在双手特定手势的情况下，上述两种情形的组合)。该附加输入数据可以由实施方式处理以提供如下的附加功能。
在示例中，对于具有前置照相机和后置照相机的装置而言，一个或更多个手的朝向可以用于对照相机进行切换控制。也就是说，用户可以根据对施加有处理的照相机或图像源进行限定的手势输入来指示他或她希望处理的图像或装置。作为该手势实现的示例，当检测到用户的手掌时，可以将手势解释为用于对观察用户的照相机进行控制的手势输入。或者，当检测到用户的手背时，可以将手势解释为用于控制前置照相机的手势输入。
因此，实施方式通过对指示用户希望用手势输入来控制图像处理的特定手势进行智能识别，允许对呈现在屏幕上图像进行无缝控制，包括编辑功能。当检测到特定手势时，实施方式实现下述某些预定功能，所述某些预定功能响应于与特定手势相关联的附加手势输入而被执行。各种示例包括平移、缩放、旋转、图像/视频捕捉、图像扭曲/梯形畸变等。在实施方式中，可以同时使用各种功能，例如在旋转的同时进行缩小等。
如本领域的技术人员将理解的，各个方面可以被实施为系统、方法或装置程序产品。相应地，各个方面可以采用整体硬件实施方式的形式或包含软件的实施方式的形式，其在本文中可以全部统称为“电路”、“模块”或“系统”。此外，各个方面可以采用实施在一个或更多个装置可读介质中的装置程序产品的形式，所述一个或更多个装置可读介质包含有装置可读程序代码。
可以利用一个或更多个非信号装置可读介质的任何组合。非信号介质可以是存储介质。存储介质可以是例如电子的、磁的、光学的、电磁的、红外的或半导体系统、设备或装置，或前述的任何适当的组合。存储介质更多的具体示例可以包括如下：便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器、(EPROM或闪存)、光纤、便携式光盘只读存储器(CD-ROM)、光存储装置、磁存储装置或前述的任何适当的组合。
可以使用任何适当的介质，包括但不限于无线、有线、光纤线缆、RF(无线电)等或前述的任何适合的组合，来传输在存储介质上所包含的程序代码。
可以以一种或更多种编程语言的任何组合来编写用于执行操作的程序代码。程序代码可以完全地在单个装置上执行、部分地在单个装置上执行、作为独立软件包部分地在单个装置上执行且部分地在另一装置上执行或完全在其他装置上执行。在一些情况下，可以通过任何类型的连接或网络(包括局域网(LAN)或广域网(WAN))来连接装置，或者可以通过其他装置(例如通过使用因特网服务提供商的因特网)或通过硬线连接(如通过USB连接)来进行连接。
本文参照附图描述了各个方面，这些附图示出了根据各种示例实施方式的示例方法，装置以及程序产品。将会理解，动作和功能可以至少部分地由程序指令来实现。可以将这些程序指令提供给通用信息处理装置、专用信息处理装置或者其他可编程数据处理装置或信息处理装置的处理器，以产生机构，使得经由装置的处理器运行的指令实现指定的功能或动作。
出于说明和描述的目的给出了本公开内容，本公开内容并非意在穷举或限制。对于本领域的技术人员来说，许多修改和变型是明显的。选择并描述示例实施方式，以便说明原理和实际应用，并且使得本领域其他技术人员能够理解本公开内容的各种实施方式，所述各种实施方式具有与预期的特定用途相适应的的各种修改。
因此，虽然本文参照附图描述了说明性的示例实施方式，但是要理解本描述不是限制性的，并且在不偏离本公开内容的范围或精神的情况下本领域技术人员可以作出各种其他变化和修改。

Claims (19)

1.一种方法，包括：
在信息处理装置的传感器处接收图像输入；
使用一个或更多个处理器来确定在所述图像输入内的预定手势；
捕捉与所述预定手势相关联的附加手势输入；以及
根据与所述预定手势相关联的附加手势输入来处理呈现在显示装置上的图像。
2.根据权利要求1所述的方法，其中，在所述图像输入内的预定手势包括含有拐角的一个或更多个图案，并且其中，所述一个或更多个图案的拐角与呈现在所述显示装置上的图像的相应拐角相关联。
3.根据权利要求2所述的方法，其中：
所述捕捉与所述预定手势相关联的附加手势输入包括，确定在所述预定手势的两个拐角之间的距离已改变的手势输入；以及
所述根据与所述预定手势相关联的附加手势输入来处理呈现在显示装置上的图像包括，根据所述预定手势的两个拐角之间的距离的变化来改变呈现在所述显示装置上的图像的尺寸。
4.根据权利要求2所述的方法，其中：
所述捕捉与所述预定手势相关联的附加手势输入包括，确定所述预定手势的拐角在与所述传感器基本平行的平面中已旋转的手势输入；以及
所述根据与所述预定手势相关联的附加手势输入来处理呈现在显示装置上的图像包括，根据所述预定手势的旋转来旋转呈现在所述显示装置上的图像。
5.根据权利要求1所述的方法，其中：
所述捕捉与所述预定手势相关联的附加手势输入包括，确定所述预定手势形成平面并且围绕中心点旋转的手势输入；以及
所述根据与所述预定手势相关联的附加手势输入来处理呈现在显示装置上的图像包括，根据所述预定手势的旋转以三维的方式旋转呈现在所述显示装置上的图像。
6.根据权利要求1所述的方法，其中：
捕捉与静态特定手势输入相关联的附加手势输入包括，确定与预定捕捉动作相关联的附加手势输入；以及
根据与所述静态特定手势输入相关联的附加手势输入来处理呈现在所述显示装置上的图像包括，在接收到与所述预定捕捉动作相关联的附加手势输入时存储图像数据。
7.根据权利要求6所述的方法，其中，所述预定捕捉动作选自包括图像捕捉动作和视频捕捉动作的组。
8.根据权利要求2所述的方法，其中：
所述捕捉与所述预定手势相关联的附加手势输入包括，确定与裁剪动作相关联的附加手势输入；以及
所述根据与所述预定手势相关联的附加手势输入来处理呈现在显示装置上的图像包括，在接收到与所述裁剪动作相关联的附加手势输入时裁剪呈现在所述显示装置上的图像。
9.根据权利要求1所述的方法，其中，使用一个或更多个处理器确定在所述图像输入内的静态特定手势包括，确定所述静态特定手势的方向性。
10.根据权利要求9所述的方法，其中，所述方向性指示施加有所述处理的、选自两个或更多个照相机的照相机。
11.一种信息处理装置，包括：
传感器；
显示装置；
一个或更多个处理器；
存储装置，存储能够被所述一个或更多个处理器访问的指令，所述指令能够由所述一个或更多个处理器执行，以便：
在所述传感器处接收图像输入；
使用所述一个或更多个处理器来确定在所述图像输入内的预定手势；
捕捉与所述预定手势相关联的附加手势输入；以及
根据与所述预定手势相关联的附加手势输入来处理呈现在显示装置上的图像。
12.根据权利要求11所述的信息处理装置，其中，在所述图像输入内的预定手势包括含有拐角的一个或更多个图案，并且其中，所述一个或更多个图案的拐角与呈现在所述显示装置上的图像的相应拐角相关联。
13.根据权利要求12所述的信息处理装置，其中：
所述捕捉与所述预定手势相关联的附加手势输入包括，确定所述预定手势的两个拐角之间的距离已改变的手势输入；以及
所述根据与所述预定手势相关联的附加手势输入来处理呈现在显示装置上的图像包括，根据所述预定手势的两个拐角之间的距离的变化来改变呈现在所述显示装置上的图像的尺寸。
14.根据权利要求12所述的信息处理装置，其中：
所述捕捉与所述预定手势相关联的附加手势输入包括，确定所述预定手势的拐角在与所述传感器基本平行的平面中已旋转的手势输入；以及
所述根据与所述预定手势相关联的附加手势输入来处理呈现在显示装置上的图像包括，根据所述预定手势的旋转来旋转呈现在所述显示装置上的图像。
15.根据权利要求11所述的信息处理装置，其中：
所述捕捉与所述预定手势相关联的附加手势输入包括，确定所述预定手势形成平面并且围绕中心点旋转的手势输入；以及
所述根据与所述预定手势相关联的附加手势输入来处理呈现在显示装置上的图像包括，根据所述预定手势的旋转以三维的方式旋转呈现在所述显示装置上的图像。
16.根据权利要求11所述的信息处理装置，其中：
捕捉与静态特定手势输入相关联的附加手势输入包括，确定与预定捕捉动作相关联的附加手势输入；以及
根据与所述静态特定手势输入相关联的附加手势输入来处理呈现在所述显示装置上的图像的处理包括，在接收到与所述预定捕捉动作相关联的附加手势输入时存储图像数据。
17.根据权利要求16所述的信息处理装置，其中，所述预定捕捉动作选自包括图像捕捉动作和视频捕捉动作的组。
18.根据权利要求12所述的信息处理装置，其中：
所述捕捉与所述预定手势相关联的附加手势输入包括，确定与裁剪动作相关联的附加手势输入；以及
所述根据与所述预定手势相关联的附加手势输入来处理呈现在显示装置上的图像包括，在接收到与所述裁剪动作相关联的附加手势输入时裁剪呈现在所述显示装置上的图像。
19.根据权利要求11所述的信息处理装置，其中，使用一个或更多个处理器确定在所述图像输入内的静态特定手势包括，确定所述静态特定手势的方向性。
CN201410289817.5A 2013-07-17 2014-06-25 用于照相机控制和图像处理操作的特定手势 Active CN104298343B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/944,539 US9430045B2 (en) 2013-07-17 2013-07-17 Special gestures for camera control and image processing operations
US13/944,539 2013-07-17

Publications (2)

Publication Number Publication Date
CN104298343A true CN104298343A (zh) 2015-01-21
CN104298343B CN104298343B (zh) 2018-01-02

Family

ID=52131471

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410289817.5A Active CN104298343B (zh) 2013-07-17 2014-06-25 用于照相机控制和图像处理操作的特定手势

Country Status (3)

Country Link
US (1) US9430045B2 (zh)
CN (1) CN104298343B (zh)
DE (1) DE102014106579A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104834412A (zh) * 2015-05-13 2015-08-12 深圳市蓝晨科技有限公司 一种基于非接触式的手势识别的触摸终端
CN107992184A (zh) * 2016-10-25 2018-05-04 北京东软医疗设备有限公司 一种图像处理方法、装置及设备
CN111104821A (zh) * 2018-10-25 2020-05-05 北京微播视界科技有限公司 图像生成方法和装置

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9202297B1 (en) * 2011-07-12 2015-12-01 Domo, Inc. Dynamic expansion of data visualizations
US9792017B1 (en) 2011-07-12 2017-10-17 Domo, Inc. Automatic creation of drill paths
JP2014182638A (ja) * 2013-03-19 2014-09-29 Canon Inc 表示制御装置、表示制御方法、コンピュータプログラム
CN104657061B (zh) * 2013-11-25 2018-01-30 华硕电脑股份有限公司 截屏的方法及应用其的电子装置
US9449229B1 (en) 2014-07-07 2016-09-20 Google Inc. Systems and methods for categorizing motion event candidates
US10140827B2 (en) 2014-07-07 2018-11-27 Google Llc Method and system for processing motion event notifications
US10127783B2 (en) 2014-07-07 2018-11-13 Google Llc Method and device for processing motion events
US9354794B2 (en) * 2014-07-07 2016-05-31 Google Inc. Method and system for performing client-side zooming of a remote video feed
US9501915B1 (en) 2014-07-07 2016-11-22 Google Inc. Systems and methods for analyzing a video stream
US9779307B2 (en) 2014-07-07 2017-10-03 Google Inc. Method and system for non-causal zone search in video monitoring
USD782495S1 (en) 2014-10-07 2017-03-28 Google Inc. Display screen or portion thereof with graphical user interface
US9361011B1 (en) 2015-06-14 2016-06-07 Google Inc. Methods and systems for presenting multiple live video feeds in a user interface
US10370118B1 (en) 2015-10-31 2019-08-06 Simon Saito Nielsen Lighting apparatus for remote controlled device
DE102016206142A1 (de) * 2016-04-13 2017-10-19 Volkswagen Aktiengesellschaft Anwenderschnittstelle, Fortbewegungsmittel und Verfahren zur Erkennung einer Hand eines Anwenders
US10506237B1 (en) 2016-05-27 2019-12-10 Google Llc Methods and devices for dynamic adaptation of encoding bitrate for video streaming
US11404056B1 (en) 2016-06-30 2022-08-02 Snap Inc. Remoteless control of drone behavior
DE102016008049A1 (de) * 2016-07-01 2018-01-04 Audi Ag Verfahren zum Betreiben einer Bedienvorrichtung, Bedienvorrichtung und Kraftfahrzeug
US10380429B2 (en) 2016-07-11 2019-08-13 Google Llc Methods and systems for person detection in a video feed
US11783010B2 (en) 2017-05-30 2023-10-10 Google Llc Systems and methods of person recognition in video streams
US10664688B2 (en) 2017-09-20 2020-05-26 Google Llc Systems and methods of detecting and responding to a visitor to a smart home environment
US11753142B1 (en) 2017-09-29 2023-09-12 Snap Inc. Noise modulation for unmanned aerial vehicles
US11531357B1 (en) 2017-10-05 2022-12-20 Snap Inc. Spatial vector-based drone control
US11822346B1 (en) 2018-03-06 2023-11-21 Snap Inc. Systems and methods for estimating user intent to launch autonomous aerial vehicle
CN111258825B (zh) * 2018-11-30 2023-11-14 上海海拉电子有限公司 一种用于电路板中测试点布置的装置及方法
CN110908517B (zh) * 2019-11-29 2023-02-24 维沃移动通信有限公司 图像编辑方法、装置、电子设备及介质
US11972521B2 (en) 2022-08-31 2024-04-30 Snap Inc. Multisensorial presentation of volumetric content

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040189720A1 (en) * 2003-03-25 2004-09-30 Wilson Andrew D. Architecture for controlling a computer using hand gestures
US20100050133A1 (en) * 2008-08-22 2010-02-25 Nishihara H Keith Compound Gesture Recognition
US20110316763A1 (en) * 2009-03-05 2011-12-29 Brother Kogyo Kabushiki Kaisha Head-mounted display apparatus, image control method and image control program
CN102667881A (zh) * 2010-03-30 2012-09-12 新日铁系统集成株式会社 信息处理装置、信息处理方法以及程序

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2407635B (en) * 2003-10-31 2006-07-12 Hewlett Packard Development Co Improvements in and relating to camera control
US8018579B1 (en) * 2005-10-21 2011-09-13 Apple Inc. Three-dimensional imaging and display system
GB2474536B (en) * 2009-10-13 2011-11-02 Pointgrab Ltd Computer vision gesture based control of a device
TW201135341A (en) * 2010-04-13 2011-10-16 Hon Hai Prec Ind Co Ltd Front projection system and method
US8537157B2 (en) * 2010-06-21 2013-09-17 Verizon Patent And Licensing Inc. Three-dimensional shape user interface for media content delivery systems and methods
US8717318B2 (en) * 2011-03-29 2014-05-06 Intel Corporation Continued virtual links between gestures and user interface elements
AU2013205613B2 (en) * 2012-05-04 2017-12-21 Samsung Electronics Co., Ltd. Terminal and method for controlling the same based on spatial interaction
US9503645B2 (en) * 2012-05-24 2016-11-22 Mediatek Inc. Preview system for concurrently displaying multiple preview images generated based on input image generated by image capture apparatus and related preview method thereof
US8837780B2 (en) * 2012-06-22 2014-09-16 Hewlett-Packard Development Company, L.P. Gesture based human interfaces
US8805017B2 (en) * 2012-12-13 2014-08-12 Intel Corporation Gesture pre-processing of video stream to reduce platform power
US9104240B2 (en) * 2013-01-09 2015-08-11 Intel Corporation Gesture pre-processing of video stream with hold-off period to reduce platform power

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040189720A1 (en) * 2003-03-25 2004-09-30 Wilson Andrew D. Architecture for controlling a computer using hand gestures
US20100050133A1 (en) * 2008-08-22 2010-02-25 Nishihara H Keith Compound Gesture Recognition
US20110316763A1 (en) * 2009-03-05 2011-12-29 Brother Kogyo Kabushiki Kaisha Head-mounted display apparatus, image control method and image control program
CN102667881A (zh) * 2010-03-30 2012-09-12 新日铁系统集成株式会社 信息处理装置、信息处理方法以及程序

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
MOHD FAIRUZ SHIRATUDDIN等: "Non-Contact Multi-Hand Gestures Interaction Techniques for Architectural Design in a Virtual Environment", 《INTERNATIONAL CONFERENCE ON INFORMATION TECHNOLOGY AND MULTIMEDIA》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104834412A (zh) * 2015-05-13 2015-08-12 深圳市蓝晨科技有限公司 一种基于非接触式的手势识别的触摸终端
CN107992184A (zh) * 2016-10-25 2018-05-04 北京东软医疗设备有限公司 一种图像处理方法、装置及设备
CN111104821A (zh) * 2018-10-25 2020-05-05 北京微播视界科技有限公司 图像生成方法和装置

Also Published As

Publication number Publication date
CN104298343B (zh) 2018-01-02
US20150022432A1 (en) 2015-01-22
DE102014106579A1 (de) 2015-01-22
US9430045B2 (en) 2016-08-30

Similar Documents

Publication Publication Date Title
CN104298343A (zh) 用于照相机控制和图像处理操作的特定手势
KR102664705B1 (ko) 복수의 카메라들을 이용하여 이미지의 배율을 변경하기 위한 전자 장치 및 방법
EP3296838B1 (en) Electronic device and operation method thereof
KR101981822B1 (ko) 전-공간적 제스쳐 입력
US9842571B2 (en) Context awareness-based screen scroll method, machine-readable storage medium and terminal therefor
TW202026815A (zh) 用於多形式因素資訊處理系統（ihs）的對接裝置
US20170070665A1 (en) Electronic device and control method using electronic device
US20150205994A1 (en) Smart watch and control method thereof
US8820936B2 (en) Electronic device having 3-D image projection mechanism and 3-D image projection method of the same
JP7064040B2 (ja) 表示システム、及び表示システムの表示制御方法
US9377901B2 (en) Display method, a display control method and electric device
US20150074573A1 (en) Information display device, information display method and information display program
GB2522981A (en) Expandable Display
CN107407945A (zh) 从锁屏捕获图像的系统和方法
WO2016191018A1 (en) Adaptable depth sensing system
WO2014105012A1 (en) System and method for gesture based touchscreen control of displays
US10969827B2 (en) Electronic device and method for controlling user interface therein
US20110298887A1 (en) Apparatus Using an Accelerometer to Capture Photographic Images
US9811183B2 (en) Device for cursor movement and touch input
US9756251B2 (en) Digital device and method of controlling therefor
US20170085784A1 (en) Method for image capturing and an electronic device using the method
EP3256935A1 (en) Apparatus and method for multi-touch input
JP6686319B2 (ja) 画像投影装置及び画像表示システム
CN104777898B (zh) 信息处理方法、设备和产品
US20160124602A1 (en) Electronic device and mouse simulation method

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant