CN103581541A - 摄影装置及其控制方法 - Google Patents

摄影装置及其控制方法 Download PDF

Info

Publication number
CN103581541A
CN103581541A CN201310298761.5A CN201310298761A CN103581541A CN 103581541 A CN103581541 A CN 103581541A CN 201310298761 A CN201310298761 A CN 201310298761A CN 103581541 A CN103581541 A CN 103581541A
Authority
CN
China
Prior art keywords
posture
zoom operation
zoom
path
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310298761.5A
Other languages
English (en)
Other versions
CN103581541B (zh
Inventor
金宗宣
宋沅锡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN103581541A publication Critical patent/CN103581541A/zh
Application granted granted Critical
Publication of CN103581541B publication Critical patent/CN103581541B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/69Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • User Interface Of Digital Computer (AREA)
  • Studio Devices (AREA)

Abstract

一种控制摄影装置的方法,包括:将输入图像中的姿势识别为先前定义的姿势;如果所述姿势相应于先前定义的用于变焦操作的姿势,则使用光学变焦执行所述变焦操作;以及在执行变焦操作的同时,通过考虑所述变焦操作继续识别姿势。

Description

摄影装置及其控制方法
相关申请的交叉引用
本申请要求于2012年7月26日向韩国知识产权局提交的韩国专利申请第10-2012-0081974号的优先权,其公开通过引用的方式全部合并于此。
技术领域
本发明的各种实施例涉及摄影装置以及控制该摄影装置的方法。
背景技术
因为对于电子设备的直观操作的需求目前在增长,所以提议了关于输入用户的控制信号的各种技术。如果向用户提供电子设备的直观并且容易使用的用户界面,那么用户满意度就可能增加并且还可能提高产品竞争力。但是,因为相较于现有的输入法,诸如按键输入方法,直观并且容易使用的用户界面具有较低的准确性,所以要求没有误差地从用户接收控制输入的解决方案。再有,因为电子设备在各种环境中使用,所以要求即使各种环境下也无误差地识别来自用户的控制输入的解决方案。
发明内容
各种实施例提供当通过使用姿势控制光学变焦时能够防止由于输入图像中的变化而造成识别率降低的摄影装置、控制该摄影装置的方法以及在其上记录有用于运行所述方法的计算机程序代码的计算机可读记录介质。
各种实施例还提供当通过使用姿势控制光学变焦时在执行变焦操作的同时能够给予用户反馈的摄影装置、控制该摄影装置的方法以及在其上记录有用于运行所述方法的计算机程序代码的计算机可读记录介质。
根据实施例,一种控制摄影装置的方法,包括:将输入图像中的姿势识别为先前定义的姿势;如果所述姿势相应于先前定义的用于变焦操作的姿势,则使用光学变焦执行所述变焦操作;以及在执行变焦操作的同时,通过考虑所述变焦操作继续识别姿势。
所述通过考虑所述变焦操作继续识别姿势可以包括:使用关于所述变焦操作的信息,变换输入图像中检测到的运动的路径的坐标;以及基于所述运动的经坐标变换的路径,将所述姿势识别为先前定义的用于变焦操作的姿势。
所述关于所述变焦操作的信息可以包括从以下组中选择的至少一条信息:该组由变焦操作的起始点、随着时间的视角信息和变焦操作的速度组成。
所述通过考虑所述变焦操作继续识别姿势可以包括:使用关于所述变焦操作的信息,变换输入图像中每一个像素的坐标;以及基于经坐标变换的输入图像,将所述姿势识别为先前定义的用于变焦操作的姿势。
所述通过考虑所述变焦操作继续识别姿势可以包括:使用关于所述变焦操作的信息,变换先前定义的用于变焦操作的姿势;以及使用经变换的先前定义的姿势,识别所述输入图像中的姿势。
所述关于所述变焦操作的信息可以包括从以下组中选择的至少一条信息:该组由对象的距离信息和变焦操作的速度组成。
所述方法还可以包括:显示所识别的姿势的路径;在执行所述变焦操作的同时,基于所识别的姿势的路径预测所预测的姿势的路径;以及在执行所述变焦操作同时,显示所预测的姿势的路径而非所识别的姿势的路径。
根据另一实施例,一种摄影装置包括:姿势识别单元,其将输入图像中的姿势识别为先前定义的姿势,在执行变焦操作的同时,其通过考虑变焦操作继续识别姿势;以及摄影单元,如果姿势相应于先前定义的用于变焦操作的姿势,则该摄影单元使用光学变焦执行所述变焦操作。
所述姿势识别单元可以使用关于所述变焦操作的信息,变换输入图像中检测到的运动的路径的坐标,以及可以基于所述运动的经坐标变换的路径,将所述姿势识别为先前定义的用于变焦操作的姿势。
所述关于所述变焦操作的信息可以包括从以下组中选择的至少一条信息:该组由变焦操作的起始点、随着时间的视角信息和变焦操作的速度组成。
所述姿势识别单元可以使用关于所述变焦操作的信息,变换输入图像的每一个像素的坐标,以及可以基于经坐标变换的输入图像,将所述姿势识别为先前定义的用于变焦操作的姿势。
所述姿势识别单元可以使用关于所述变焦操作的信息,变换先前定义的用于变焦操作的姿势,以及可以使用经变换的先前定义的姿势,识别所述输入图像中的姿势。
所述关于所述变焦操作的信息可以包括从以下组中选择的至少一条信息:该组由对象的距离信息和变焦操作的速度组成。
所述摄影装置还可以包括:路径预测单元,在执行所述变焦操作的同时,该路径预测单元基于所识别的姿势的路径来预测所预测的姿势的路径;显示单元,其显示所识别的姿势的路径,以及在执行所述变焦操作同时,该显示单元显示所预测的姿势的路径而非所识别的姿势的路径。
根据另一实施例,提供了一种具有计算机程序代码记录在其上的非瞬时计算机可读记录介质,该计算机程序代码将由处理器读取并运行以便运行控制摄影装置的方法,所述方法包括:将输入图像中的姿势识别为先前定义的姿势;如果该姿势相应于先前定义的用于变焦操作的姿势,则使用光学变焦执行变焦操作;以及在执行所述变焦操作的同时,通过考虑所述变焦操作继续识别姿势。
根据另一实施例,一种控制摄影装置的方法,包括:将输入图像中的姿势识别为先前定义的姿势;显示所识别的姿势的路径;如果所述姿势相应于先前定义的用于变焦操作的姿势,则使用光学变焦执行所述变焦操作;基于所识别的姿势的路径预测所预测的姿势的路径;以及在执行变焦操作的同时,显示所预测的姿势的路径。
根据另一实施例,一种摄影装置,方法,包括:姿势识别单元,其将输入图像中的姿势识别为先前定义的姿势;摄影单元,如果所述姿势相应于先前定义的用于变焦操作的姿势,则该摄影单元使用光学变焦执行所述变焦操作;路径预测单元,其基于所识别的姿势的路径预测所预测的姿势的路径;以及显示单元,其显示所识别的姿势的路径,在执行变焦操作的同时,显示所预测的姿势的路径。
根据另一实施例,提供了一种具有计算机程序代码记录在其上的非瞬时计算机可读记录介质,该计算机程序代码将由处理器读取并运行以便运行控制摄影装置的方法,所述方法包括:将输入图像中的姿势识别为先前定义的姿势;显示所识别的姿势的路径;如果该姿势相应于先前定义的用于变焦操作的姿势,则使用光学变焦执行变焦操作;基于所识别的姿势的路径预测所预测的姿势的路径;以及在执行所述变焦操作的同时,显示所预测的姿势的路径。
附图说明
上述及其他特征和优点将通过参考附图详细描述示范性具体实施例而变得更加明显,附图中:
图1是示出根据实施例如何输入姿势命令的示意图;
图2是示出根据实施例的摄影装置的框图;
图3是根据实施例控制图2中示出的摄影装置的方法的流程图;
图4和图5是示出根据各种实施例、在执行变焦趋近的操作的同时生成的全局运动的示意图;
图6和图7是示出根据各种实施例、在执行变焦趋远的操作的同时生成的全局运动的示意图;
图8和图9是示出根据各种实施例、在执行变焦趋近的操作的同时校正全局运动的方法的示意图;
图10和图11是示出根据各种实施例、在执行变焦趋远的操作的同时校正全局运动的方法的示意图;
图12至图14是示出根据各种实施例识别姿势的方法的示意图;
图15是根据实施例的摄影装置的框图;
图16和图17是根据各种实施例显示识别的姿势的屏幕的图像;
图18是示出根据实施例的在图15中示出的路径预测单元的操作的示意图;以及
图19是根据实施例控制图15中示出的摄影装置的方法的流程图。
具体实施方式
提供以下描述和附图以理解本发明的操作。本领域普通技术人员能够容易地了解的部分操作可能不进行描述。
再有,提供本说明书和附图并非用于限制本发明的范围,本发明的范围应当由所附权利要求定义。这里使用的术语应当视为具有与本发明的技术概念相应的含义和概念,以便最恰当地描述本发明。
如这里所使用的那样,术语“和/或”包括一个或多个相关联所列项的任一个或者它们的所有组合。当在元素列表之前诸如“至少一个”这样的表达,修改元素的总体列表而不修改列表的个别元素。
在下文中,将通过参考附图说明各种实施例来详细描述本发明。
图1是示出根据实施例如何输入姿势命令的示意图。
根据实施例,用户可以通过使用姿势操纵摄影装置100。例如,用户可以通过上下摇手来输入快门释放信号,或者可以通过顺时针方向旋转手来输入变焦趋近(zoom-in)信号。摄影装置100识别拍摄的输入图像中用户的姿势,并且由此识别姿势命令。
为了识别姿势,一开始检测姿势,然后通过摄影装置100识别姿势。姿势检测方法包括,例如,基于颜色跟踪目标的方法以及通过感测运动检测姿势的方法。
基于颜色跟踪目标的方法,例如均值漂移算法,是一种通过跟踪相同的颜色来检测姿势的方法。但是,在上述方法中如果相同颜色存在于不同的邻近位置,那么跟踪相同颜色以检测姿势的方法可能失败。再有,上述方法需要关于初始位置的信息。
通过感测运动来检测姿势的方法是一种通过检测输入图像中的分量,诸如运动向量,来检测姿势的方法。
但是,当通过使用姿势控制光学变焦时,尽管通过使用光学变焦执行变焦趋近或者变焦趋远操作,也会在输入图像中产生全局运动,并且由此会不容易检测到姿势。也就是说,尽管通过使用光学变焦执行变焦趋近或者变焦趋远操作,但是因为实时取景(live-view)图像的视角是连续不断地改变的,所以不容易仅检测局部运动,并且由此降低姿势识别率。
根据各种实施例,因为在通过使用姿势控制光学变焦的同时通过反映或者考虑变焦操作执行姿势识别,所以即使在光学变焦操作时也可以识别姿势。
图2是根据实施例的摄影装置100a的框图。摄影装置100a包括姿势识别单元210和摄影单元220。
姿势识别单元210检测输入图像中的姿势,并且将检测到的姿势识别为命令。例如,姿势识别单元210可以将检测到的姿势与先前定义的姿势进行比较,并且如果检测到的姿势匹配先前定义的姿势,那么姿势识别单元210可以确定先前定义的姿势被识别。再有,如果与变焦命令相应的姿势被识别,并且由此执行变焦操作,那么姿势识别单元210通过反映或者考虑变焦操作执行姿势识别。这里,变焦操作包括变焦趋近和变焦趋远操作。
摄影单元220通过对入射光进行光电变换来生成图像信号,并且生成输入图像。摄影单元220可以包括镜头、光圈和图像设备。摄影单元220可以将入射光聚焦在图像设备上,并且可以通过使用图像设备将入射光进行光电变换来生成图像信号。再有,摄影单元220可以通过对图像信号进行模数变换和编码来生成输入图像。所述图像信号可以变换为,例如,YCbCr或者联合摄影专家小组(JPEG)格式的输入图像。
再有,可以控制摄影单元220根据姿势识别单元210识别的姿势来执行操作。如果与变焦趋近或者变焦趋远操作相应的姿势被姿势识别单元210识别,那么摄影单元220可以通过移动变焦镜头执行变焦趋近或者变焦趋远操作。再有,如果与快门释放操作相应的姿势被姿势识别单元210识别,那么摄影单元220可以执行快门释放操作。
如上所述,如果在识别姿势的同时执行变焦趋近或者变焦趋远操作,则在输入图像中产生全局运动,并且由此会不容易检测和识别姿势。为此,尽管正在执行变焦操作,但是因为通过反映或者考虑变焦操作执行姿势识别,所以即使在执行变焦操作时也可以识别姿势。再有,因为尽管已经开始变焦操作,但是通过反映或者考虑变焦操作执行姿势识别,所以可以通过使用后续姿势来控制摄影装置100a。
图3是根据实施例控制图2中示出的摄影装置100a的方法的流程图。
在根据当前实施例的方法中,一开始,识别输入图像中的姿势(S302)。如上相对于图2所述,可以通过检测姿势以及将检测到的姿势与先前定义的姿势匹配来识别姿势。
如果与变焦操作相应的姿势被识别(S304),则控制摄影单元220的用于执行变焦趋近或者变焦趋远操作的元件(S306)。
如果执行了变焦操作(S306),则通过反映或者考虑变焦操作来执行姿势识别(S308)。
根据实施例,尽管执行变焦操作,但是姿势识别单元210也可以校正所识别的运动的坐标以便偏移由于变焦操作生成的全局运动,然后可以执行姿势识别。可替换地,姿势识别单元210可以校正输入图像的每一个像素的坐标以便偏移全局运动,然后可以执行姿势识别。可以通过使用各种方法,例如使用矩阵的线性变换,执行坐标的变换以便偏移全局运动。
图4和图5是示出根据各种实施例、在执行变焦趋近的操作的同时生成的全局运动的示意图。
例如,如图4的左图402中所示,如果先前定义顺时针方向旋转姿势为与变焦趋近操作相应的姿势,则用户可以做出顺时针方向旋转姿势以便命令变焦趋近操作。但是,如果在顺时针方向旋转姿势正在做出的同时已经开始了变焦趋近操作,则由于变焦趋近操作而造成在输入图像中生成全局运动,并且顺时针方向旋转姿势的路径变为如图4的右图404中所示。如果在没有校正输入图像的情况下执行了姿势识别,则输入图像中的顺时针方向旋转姿势可能不被识别为与变焦趋近操作相应的姿势。
再有,如图5的左图502中所示,如果先前定义直线向下姿势为与变焦趋近操作相应的姿势,那么在执行变焦趋近操作的同时在输入图像中生成全局运动,并且由此会识别到图5的右图504中所示的姿势。
图6和图7是示出根据各种实施例、在执行变焦趋远的操作的同时生成的全局运动的示意图。尽管在本说明书中变焦趋近操作和变焦趋远操作将定义为不同的姿势,但是为了说明的方便起见,假设变焦趋近操作和变焦趋远操作相应于相似姿势执行。
如图6的左图602中所示,如果先前定义顺时针方向旋转姿势为与变焦趋远操作相应的姿势,则用户可做出顺时针方向旋转姿势以便命令变焦趋远操作。但是,如果正在做出顺时针方向旋转姿势的同时开始了变焦趋远操作,则由于变焦趋远操作而造成输入图像中生成全局运动,并且顺时针方向旋转姿势的路径变为如图6的右图604中所示。如果在没有校正输入图像的情况下执行了姿势识别,则输入图像中的顺时针方向旋转姿势可能不被识别为与变焦趋远操作相应的姿势。
再有,如图7的左图702中所示,如果先前定义直线向下姿势为与变焦趋远操作相应的姿势,那么在执行变焦趋远操作的同时在输入图像中生成全局运动,并且由此会识别到图7的右图704中所示的姿势。
全局运动可以根据相应坐标是在屏幕中央的左侧还是右侧、或者屏幕中央的上侧还是下侧而有所不同。
图8和图9是示出根据各种实施例、在执行变焦趋近的操作的同时校正全局运动的方法的示意图。
根据实施例,可以通过变换输入图像中识别的运动的坐标,或者通过变换输入图像的像素的坐标,来校正由于变焦操作生成的全局运动例如,如图8的左图802中所示,如果识别了顺时针方向旋转姿势,则在执行变焦趋近操作的同时,可能由于变焦趋近操作而生成全局运动。根据当前实施例,如图8的右图804中所示,可以在执行姿势识别之前,变换输入图像以便校正由于视角的改变而生成的全局运动。可替换地,可以变换识别的运动的路径的坐标。
为此,可以通过使用变焦操作的起始点以及随着时间的视角信息来校正全局运动。例如,可以在开始了变焦趋近操作之后校正全局运动,并且可以通过使用随着时间的视角信息确定随着时间的校正量。再有,可以通过使用变焦操作的速度校正全局运动。可以根据变焦操作的速度确定随着时间的全局运动的校正量。
如果如上所述校正全局运动,那么因为输入图像仅具有局部运动,所以可以识别用户期望的姿势。
可替换地,如果直线向下姿势定义为与变焦趋近操作相应的姿势并且用户做出直线向下姿势以便命令变焦趋近操作,则可以生成图9的左图902中所示的全局运动。在这种情况下,根据当前实施例,可以通过使用随着时间的视角信息,从变焦趋近操作的起始点开始校正由于变焦趋近操作生成的全局运动,如图9的右图904中所示。
图10和图11是示出根据各种实施例、在执行变焦趋远的操作的同时校正全局运动的方法的示意图。
如图10的左图1002中所示,如果识别了顺时针方向旋转姿势,则在执行变焦趋远操作的同时,可能由于变焦趋远操作而生成全局运动。根据当前实施例,如图10的右图1004中所示,可以在执行姿势识别之前,变换输入图像以便校正由于视角的改变而生成的全局运动。可替换地,可以变换识别的运动的路径的坐标。可以在开始了变焦趋远操作之后校正全局运动,并且可以通过使用随着时间的视角信息确定随着时间的校正量。
可替换地,如果直线向下姿势定义为与变焦趋远操作相应的姿势并且用户做出直线向下姿势以便命令变焦趋远操作,则会生成图11的左图1102中所示的全局运动。在这种情况下,根据当前实施例,可以通过使用随着时间的视角信息,从变焦趋远操作的起始点开始校正由于变焦趋远操作生成的全局运动,如图11的右图1104中所示。
图12至图14是示出根据各种实施例识别姿势的方法的示意图。
根据实施例,当识别了与变焦操作相应的姿势并且执行了变焦趋近或者变焦趋远操作时,可以在执行姿势识别之前,通过反映或者考虑变焦趋近或者变焦趋远操作改变所定义的姿势的路径。为此,因为在没有变换输入图像或者运动的坐标的情况下执行姿势识别,所以可以缩减从校正全局运动而来的负担。
例如,如图12中所示,如果顺时针方向旋转姿势定义为与变焦趋近操作相应的姿势,则在开始变焦趋近操作之后,可以在执行姿势识别之前将所定义的姿势变换为图12的右方中所示的姿势。
可替换地,如图13中所示,如果直线向下姿势定义为与变焦趋近操作相应的姿势,则可以在执行姿势识别之前将所定义的姿势变换为向右或向左弯曲的姿势。在这种情况下,所定义的姿势可以在不同情况下不同地变换:在输入图像的右侧识别运动的情况,以及在输入图像的左侧识别运动的情况。
再有,如图14中所示,如果顺时针方向旋转姿势被定义为与变焦趋远操作相应的姿势,则在执行变焦趋远操作的同时,可以在执行姿势识别之前将所定义的姿势变换为图14的右方中所示的姿势。
当变换所定义的姿势时,可以考虑到对象的距离以及变焦速度来变换所定义的姿势。可以通过使用自动对焦信息来计算到对象的距离。如果到对象的距离较小的话,所定义的姿势可以较大地改变,而如果到对象的距离较大的话,所定义的姿势可以几乎不改变。再有,如果变焦速度较快的话,则所定义的姿势可以较大地改变,而如果变焦速度较慢的话,则所定义的姿势可以几乎不改变。
图15是根据另一实施例的摄影装置100b的框图。摄影装置100b可以包括姿势识别单元210、摄影单元220、路径预测单元1510和显示单元1520。
根据当前实施例,当使用姿势控制摄影装置100b时,所识别的姿势可以显示在显示单元1520上。
图16和图17是根据各种实施例的、用于显示识别的姿势的屏幕的图像。如图16和图17中所示,为了给予用户关于姿势识别的反馈,摄影装置100b可以将所识别的姿势显示在显示单元1520上。用户可以查看图16和图17中示出的屏幕,并且由此可以获得姿势通过摄影装置100b被识别的反馈。
再有,根据当前实施例,当所识别的姿势显示在显示单元1520上时,在执行变焦操作的同时,可以预测运动的路径,并且可以显示所预测的运动的路径而非所识别的运动的路径。如上所述,如果通过使用姿势控制执行变焦趋近或者变焦趋远操作,那么在执行变焦趋近或者变焦趋远操作的同时,可以生成全局运动,并且由此可以识别不同于用户期望的姿势的姿势。在当前实施例中,当识别变焦操作中的姿势时,因为显示预测姿势而非所识别的姿势,所以可以提供智能用户界面。
姿势识别单元210识别由摄影单元220输入的输入图像中的姿势,并且根据所识别的姿势控制摄影单元220。
摄影单元220通过将入射光进行光电变换来生成输入图像,并且根据所识别的姿势执行光学变焦操作。
路径预测单元1510基于输入图像中识别的运动的路径,预测运动的路径。
图18是示出根据实施例的在图15中示出的路径预测单元1510的操作的示意图。
在图18中,从A点到B点执行运动检测,但是根据姿势识别的变焦操作尚未执行,并且,从B点到D点,识别姿势并且执行变焦操作。从A点到B点,因为尚未识别姿势,所以不执行变焦操作并且所识别的运动的路径显示在屏幕上。但是,如果在B点识别与变焦操作相应的姿势并且由此执行变焦操作,则路径预测单元1510基于从点A到B点的运动的路径,预测B点之后的运动的路径。例如,路径预测单元1510可以预测运动的路径为从B点到C点的路径。在开始变焦操作之后,路径预测单元1510可以在显示单元1520上显示所预测的运动的路径而非所识别的运动的路径。因此,虽然该运动实际上在输入图像从A点出发到B点然后到D点,但是显示单元1520可以显示好像运动从A点出发到B点然后到C点。
路径预测单元1510可以通过使用,例如,卡尔曼滤波器,预测运动的方向。
根据实施例,在执行变焦操作的同时,姿势识别装置210可以通过使用路径预测单元1510预测的运动的路径执行姿势识别。为此,不需要通过反映或者考虑变焦操作来执行姿势识别,并且可以根据预测的运动的路径来执行姿势识别。
根据另一实施例,在执行变焦操作的同时,姿势识别装置210可以如上所述通过反映或者考虑变焦操作来识别姿势,并且用户界面可以仅显示由路径预测单元1510预测的运动的路径。因此,姿势识别装置210识别的姿势的路径与显示在显示单元1520上的姿势互不相同。为此,用户可以当作好像根据用户期望的运动的路径识别姿势,并且由此可以将摄影装置100b当作智能装置。再有,因为通过反映或者考虑变焦操作连续不断地识别姿势,所以可以使能连续的姿势识别和控制。
图19是根据实施例控制图15中所示的摄影装置100b的方法的流程图。
根据当前实施例,一开始,识别输入图像中的姿势(S1902)。如果该识别姿势是与变焦操作相应的姿势(S1904“是”),则执行变焦操作(S1908)。如果未识别与变焦操作相应的姿势(S1904“否”),则显示所识别的姿势的路径(S1906),并且连续不断地识别输入图像中的姿势(S1902)。
如果执行变焦操作,则基于所识别运动的路径预测运动的路径(S1910)。然后显示所预测的运动的路径(S1912)。
根据各种实施例,当通过使用姿势控制光学变焦时,可以防止由于输入图像中的变化而造成的姿势识别率的降低。
再有,当通过使用姿势控制光学变焦时,可以在执行变焦操作的同时给用户反馈。
这里描述的设备可以包含处理器、用于存储将由处理器运行的编程数据的存储器、诸如盘驱动器之类的永久性存储器、用于操控与外部设备的通信的通信端口以及包括触摸面板、键、按钮等等的用户界面设备。当涉及软件模块或者算法时,这些软件模块可以作为可以处理器上运行的程序指令或者计算机可读代码存储在计算机可读记录介质上。计算机可读记录介质的例子包括磁存储介质(例如,ROM、软盘、硬盘等等)以及光学记录介质(例如,CD-ROM或者DVD)。计算机可读记录介质也可以分布在计算机系统耦联的网络上,以使得以分布式存储和运行计算机可读代码。该介质可以由计算机读取、存储在存储器中以及由处理器运行。
这里引用的包括出版物、专利申请和专利的全部参考文件通过在相同范围上的引用并入此处,就好像每一参考文件被分别并且具体地指示通过引用并入,并且其全部内容在这里阐述。
可以依据功能块组件以及各种处理步骤来描述本发明。这些功能块可以由配置为执行规定功能的任意数量的硬件和/或软件组件实现。例如,本发明可以采用各种集成电路组件,例如存储器元件、处理元件、逻辑元件、查找表等等,它们可以在一个或多个微处理器或者其他控制设备的控制下执行各种功能。类似地,在使用软件编程或者软件元素实施本发明的元件的情况下,本发明可以利用各种算法通过任意编程或者脚本语言实施,诸如C、C++、Java、汇编语言等等之类,所述算法通过数据结构、对象、处理过程、例程或者其他的编程元素的任意组合来实现。功能方面可以通过可以在一个或多个处理器上运行的算法实施。而且,本发明可以采用任意数量的用于电子结构、信号处理和/或控制、数据处理等等的传统技术。词“机制”、“元素”、“装置”和“结构”可以被宽范围地使用,并且不局限于机械或物理实施例,而是可以包括结合处理器等等的软件例程。
这里示出和描述的特定实施例是本发明的说明性示例,并且无论如何不意欲以其它方式限制本发明的范围。出于促进对本发明的原理的理解的目的,对附图中示出的优选实施例进行了引用,并且使用了特定语言来描述这些实施例。但是,此特定语言并不意在限制本发明的范围,本发明应当解释为包含对本领域普通技术人员之一来说将正常发生的全部实施例。这里使用的术语仅用于描述特定实施例的目的,而不意为限制本发明的示范性实施例。在实施例的描述中,当推定相关技术的某些详细说明可能不必要地模糊本发明的本质时,将其略去。
为了简要起见,可能不详细描述传统电子、控制系统、软件开发和系统的其他功能方面。而且,所示的各种图中示出的连接线或者连接器是用来表示各种元件之间的示范性功能关系和/或物理连接或者逻辑连接。应当注意,许多替换性或者附加功能关系、物理连接或者逻辑连接可以在实际设备中呈现。而且,没有项目或者组件对本发明的实践是必不可少的,除非该元件被特地描述为“必不可少”或者“关键”的。
在描述本发明的上下文(特别是在所附权利要求的上下文)中使用术语“一个”、“一”、“该”以及类似的指代,将被解释为覆盖单数形式和复数形式。还将认识到,如这里使用的术语“包含”、“包括”、“具有”,专门用于读作本领域开放式术语。此外,应当理解,,尽管术语“第一”、“第二”等等可以在这里用于描述各种元件,但是这些元件不应当被这些术语限制,它们仅用于将一个元件与其它元件区分开来。而且,这里对值的范围的列举仅仅意欲用作对单另引用落入该范围内的每一单独值的简写方法,除非这里指出不是这样,并且每一单独值被并入说明书就好像这里单另列举一样。最后,这里描述的所有方法的步骤可以以任意适当的次序执行,除非这里指示以其它方式或者上下文清楚地以其它方式否定。本发明不局限于所描述的步骤的次序。这里提供的任意一个和所有示例或者示范性语言(例如“诸如”)的使用仅仅想要更好地阐明本发明,而不是对本发明的范围造成限制,除非主张不是这样。数字修改和改编对本领域普通技术人员来说明显可见,而不脱离本发明的精神和范围。

Claims (14)

1.一种控制摄影装置的方法,所述方法包括:
将输入图像中的姿势识别为先前定义的姿势;
如果所述姿势相应于先前定义的用于变焦操作的姿势,则使用光学变焦执行该变焦操作;以及
在执行该变焦操作的同时,通过考虑该变焦操作继续识别所述姿势。
2.如权利要求1所述的方法,其中所述通过考虑所述变焦操作继续识别所述姿势包括:
使用关于所述变焦操作的信息,变换在输入图像中检测到的运动的路径的坐标;以及
基于所述运动的经坐标变换的路径,将所述姿势识别为先前定义的用于变焦操作的姿势。
3.如权利要求2所述的方法,其中,所述关于所述变焦操作的信息包括从以下组中选择的至少一条信息:该组由变焦操作的起始点、随着时间的视角信息和变焦操作的速度组成。
4.如权利要求1所述的方法,其中,所述通过考虑所述变焦操作继续识别所述姿势包括:
使用关于所述变焦操作的信息,变换输入图像中每一个像素的坐标;以及
基于经坐标变换的输入图像,将所述姿势识别为先前定义的用于变焦操作的姿势。
5.如权利要求1所述的方法,其中,所述通过考虑所述变焦操作继续识别所述姿势包括:
使用关于所述变焦操作的信息变换先前定义的用于变焦操作的姿势;以及
使用经变换的、先前定义的用于变焦操作的姿势,识别所述输入图像中的姿势。
6.如权利要求5所述的方法,其中,所述关于所述变焦操作的信息包括从以下组中选择的至少一条信息:该组由对象的距离信息和变焦操作的速度组成。
7.如权利要求1所述的方法,还包括:
显示所识别的姿势的路径;
在执行变焦操作的同时,基于所识别的姿势的路径预测所预测的姿势的路径;以及
在执行变焦操作的同时,显示所预测的姿势的路径而非所识别的姿势的路径。
8.一种摄影装置,包括:
姿势识别单元,其将输入图像中的姿势识别为先前定义的姿势,在执行变焦操作的同时,通过考虑变焦操作继续识别姿势;以及
摄影单元,如果所识别的姿势相应于先前定义的用于变焦操作的姿势,则该摄影单元使用光学变焦执行变焦操作。
9.如权利要求8所述的摄影装置,其中,所述姿势识别单元使用关于变焦操作的信息变换输入图像中检测到的运动的路径的坐标,以及基于所述运动的经坐标变换的路径,将所述姿势识别为先前定义的用于变焦操作的姿势。
10.如权利要求9所述的摄影装置,其中,所述关于所述变焦操作的信息包括从以下组中选择的至少一条信息:该组由变焦操作的起始点、随着时间的视角信息和变焦操作的速度组成。
11.如权利要求8所述的摄影装置,其中,所述姿势识别单元使用关于变焦操作的信息变换输入图像中每一个像素的坐标,以及基于经坐标变换的输入图像,将所述姿势识别为先前定义的用于变焦操作的姿势。
12.如权利要求8所述的摄影装置,其中,所述姿势识别单元使用关于变焦操作的信息变换先前定义的用于变焦操作的姿势,以及使用经变换的、先前定义的用于变焦操作的姿势,识别所述输入图像中的姿势。
13.如权利要求12所述的摄影装置,其中,所述关于所述变焦操作的信息包括从以下组中选择的至少一条信息:该组由对象的距离信息和变焦操作的速度组成。
14.如权利要求8所述的摄影装置,还包括:
路径预测单元,其在执行变焦操作的同时,基于识别的姿势的路径,预测所预测的姿势的路径;以及
显示单元,其显示所识别的姿势的路径,以及在执行变焦操作的同时,该显示单元显示所预测的姿势的路径而非所识别的姿势的路径。
CN201310298761.5A 2012-07-26 2013-07-17 摄影装置及其控制方法 Active CN103581541B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2012-0081974 2012-07-26
KR1020120081974A KR101892267B1 (ko) 2012-07-26 2012-07-26 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 기록매체

Publications (2)

Publication Number Publication Date
CN103581541A true CN103581541A (zh) 2014-02-12
CN103581541B CN103581541B (zh) 2018-04-20

Family

ID=48049887

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310298761.5A Active CN103581541B (zh) 2012-07-26 2013-07-17 摄影装置及其控制方法

Country Status (4)

Country Link
US (1) US9292095B2 (zh)
EP (1) EP2690863B1 (zh)
KR (1) KR101892267B1 (zh)
CN (1) CN103581541B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015019215A (ja) * 2013-07-10 2015-01-29 オリンパスイメージング株式会社 撮像装置及び撮像方法
USD745039S1 (en) * 2013-09-03 2015-12-08 Samsung Electronics Co., Ltd. Display screen or portion thereof with animated graphical user interface
US20150169531A1 (en) * 2013-12-17 2015-06-18 Microsoft Corporation Touch/Gesture-Enabled Interaction with Electronic Spreadsheets
KR20170104819A (ko) * 2016-03-08 2017-09-18 삼성전자주식회사 제스처를 가이드하는 전자 장치 및 그의 제스처 가이드 방법
US10868955B2 (en) * 2017-09-05 2020-12-15 Facebook, Inc. Modifying capture of video data by an image capture device based on video data previously captured by the image capture device
US10805521B2 (en) 2017-09-05 2020-10-13 Facebook, Inc. Modifying capture of video data by an image capture device based on video data previously captured by the image capture device

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101316324A (zh) * 2007-06-01 2008-12-03 三星电子株式会社 终端及其图像捕捉方法
US20100013943A1 (en) * 2008-07-18 2010-01-21 Sony Ericsson Mobile Communications Ab Arrangement and method relating to an image recording device
JP2010028446A (ja) * 2008-07-18 2010-02-04 Casio Comput Co Ltd 撮像装置、撮像方法及びプログラム
CN102420942A (zh) * 2011-11-28 2012-04-18 康佳集团股份有限公司 一种基于拍照设备的拍照控制方法及拍照设备

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07121713A (ja) * 1993-10-21 1995-05-12 Kobe Steel Ltd パターン認識方法
JP3084208B2 (ja) * 1995-05-18 2000-09-04 株式会社日立製作所 画像処理装置
JP2005051472A (ja) * 2003-07-28 2005-02-24 Nikon Corp 自動撮影制御装置、自動撮影用プログラム、カメラ
TW200816798A (en) * 2006-09-22 2008-04-01 Altek Corp Method of automatic shooting by using an image recognition technology
KR20110060296A (ko) * 2009-11-30 2011-06-08 삼성전자주식회사 디지털 촬영 장치 및 이의 제어 방법
JP2012015660A (ja) * 2010-06-29 2012-01-19 Fujifilm Corp 撮像装置及び撮像方法
JP6021512B2 (ja) * 2012-08-10 2016-11-09 オリンパス株式会社 撮像装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101316324A (zh) * 2007-06-01 2008-12-03 三星电子株式会社 终端及其图像捕捉方法
US20100013943A1 (en) * 2008-07-18 2010-01-21 Sony Ericsson Mobile Communications Ab Arrangement and method relating to an image recording device
JP2010028446A (ja) * 2008-07-18 2010-02-04 Casio Comput Co Ltd 撮像装置、撮像方法及びプログラム
CN102420942A (zh) * 2011-11-28 2012-04-18 康佳集团股份有限公司 一种基于拍照设备的拍照控制方法及拍照设备

Also Published As

Publication number Publication date
EP2690863B1 (en) 2015-06-24
US20140033138A1 (en) 2014-01-30
KR20140014850A (ko) 2014-02-06
US9292095B2 (en) 2016-03-22
CN103581541B (zh) 2018-04-20
KR101892267B1 (ko) 2018-09-28
EP2690863A1 (en) 2014-01-29

Similar Documents

Publication Publication Date Title
US11245806B2 (en) Method and apparatus for scanning and printing a 3D object
TW464800B (en) A method for inputting data to an electronic device, an article comprising a medium for storing instructions, and an image processing system
CN103581541A (zh) 摄影装置及其控制方法
US9654685B2 (en) Camera apparatus and control method thereof
EP2359309B1 (en) System and method for manipulation of a digital image
US20080267607A1 (en) Image pickup apparatus and electronic device
JP6525611B2 (ja) 画像処理装置およびその制御方法
US20140333585A1 (en) Electronic apparatus, information processing method, and storage medium
KR101457976B1 (ko) 입력 사용자 인터페이스 장치, 투영 장치, 커맨드 결정 방법 및 프로그램이 기록된 기록 매체
US10168790B2 (en) Method and device for enabling virtual reality interaction with gesture control
JP2002351603A (ja) 携帯情報処理装置
US11496670B2 (en) Electronic device with display screen capable of reliable detection of a user selected displayed eye region in a scene to be captured, and region selection method
JP2012238293A (ja) 入力装置
US10904442B2 (en) Image sensing apparatus with improved user operability when performing an enlarged display of a live view image and control method of image sensing apparatus
CN114360047A (zh) 举手手势识别方法、装置、电子设备及存储介质
WO2011096571A1 (ja) 入力装置
CN114529926A (zh) 一种弯曲文本的字符选择方法、装置和终端设备
KR20180074124A (ko) 얼굴 인식을 통해 전자 장치를 제어하는 방법 및 이를 수행하는 전자 장치
CN110989873B (zh) 一种用于模拟触摸屏的光学成像系统
JP2021005168A (ja) 画像処理装置、撮像装置、画像処理装置の制御方法、及びプログラム
CN103581542A (zh) 电子装置及其控制方法
CN115623317B (zh) 一种对焦的方法、设备及存储介质
US20240187725A1 (en) Photographing method and electronic device
US20240155226A1 (en) Information processing apparatus, control apparatus, and control method
US20230177705A1 (en) Image processing apparatus, image processing method, and non-transitory computer-readable storage medium

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant