CN105847668A - 相机的动作识别驱动方法 - Google Patents

相机的动作识别驱动方法 Download PDF

Info

Publication number
CN105847668A
CN105847668A CN201610056598.5A CN201610056598A CN105847668A CN 105847668 A CN105847668 A CN 105847668A CN 201610056598 A CN201610056598 A CN 201610056598A CN 105847668 A CN105847668 A CN 105847668A
Authority
CN
China
Prior art keywords
user
camera
action
driving method
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610056598.5A
Other languages
English (en)
Inventor
李吉宰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Macron Co Ltd
Original Assignee
Macron Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Macron Co Ltd filed Critical Macron Co Ltd
Publication of CN105847668A publication Critical patent/CN105847668A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/69Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)

Abstract

本发明涉及一种能够减少误报且提高识别率、并且在远程也能够动作的相机的动作识别驱动方法。本发明涉及的相机的动作识别驱动方法,用于在自拍时控制相机的驱动,其包括如下步骤:利用相机获取使用者的连续图像;利用安装在所述相机上的移动传感器检测所述相机的移动;从所述连续图像中检测出使用者的面部区域;判断所述相机的移动是否已停止且所述使用者的面部位置是否已固定;在判断为所述相机的移动已停止且所述使用者的面部位置已固定的状态下,对所述连续图像进行分析的结果识别出预先设定的使用者的动作时,输出驱动信号以拍摄照片。

Description

相机的动作识别驱动方法
技术领域
本发明涉及相机的动作识别驱动方法,更具体地,涉及一种当通过智能手机等进行自拍时,解析从相机进入的图像,并且识别出预先设定的手势动作或面部动作时驱动快门,以进行自拍的方法。
背景技术
用相机拍摄自己的自拍是很多人喜欢使用的功能。随着SNS的发展,用来表现自己的自拍使用频率持续增长。最近,广泛使用用于自拍的、被称为自拍棒的道具。然而,为了进行自拍需要按快门的动作,而在用一只手举着自拍棒的状态下不方便按相机的快门。特别是,在使用自拍棒的情况下,相机位于无法用手触碰的远处,因此,需要能够远程下达快门驱动命令的方法。
另一方面,用来实现自拍棒的快门功能的一般方法有利用蓝牙遥控器的方法。然而,蓝牙遥控器多为比自拍棒器具的价格更加昂贵的高价。
不利用诸如蓝牙遥控器等附加装置而进行自拍的方法有动作识别方法或者语音识别方法。可以在自拍相机上安装语音识别程序来识别快门动作,可以识别诸如“茄子”等特定单词来命令快门驱动。然而,语音识别方法难以在吵杂的地方使用。最近,上市了识别人的动作来命令快门驱动的智能手机(韩国授权专利第10-1434533号)。然而,如使用自拍棒那样距离较远的情况下,难以识别手的形状,并且在识别手的形状时存在识别错误。
在先技术文献
专利文献
专利文献1:韩国授权专利第10-1434533号(发明名称:基于手指动作识别的相机拍摄系统及其方法)
发明内容
所要解决的技术问题
本发明是为了解决上述问题而做出的,本发明的目的在于,提供一种能够减少误报且提高识别率的在远程也能够操作的相机的动作识别驱动方法。解决技术问题的方法
本发明涉及的相机的动作识别驱动方法,用于在自拍时控制相机的驱动,其特征在于,包括如下步骤:利用相机获取使用者的连续图像;利用安装在所述相机上的移动传感器检测所述相机的移动;从所述连续图像中检测出使用者的面部区域;判断所述相机的移动是否已停止且所述使用者的面部位置是否已固定;在判断为所述相机的移动已停止且所述使用者的面部位置已固定的状态下,对所述连续图像进行分析的结果识别出预先设定的使用者的动作时,输出驱动信号以拍摄照片。
根据本发明,优选进一步包括如下步骤:当所述连续图像中包含多数使用者的面部时,将多数使用者中的一个人的面部指定为代表面部,并在显示器上进行显示,以便使用者能够确认代表面部,其中,对被指定为所述代表面部的使用者的动作进行识别,并输出驱动信号。
此外,根据本发明,优选为,所述预先设定的使用者的动作是使用者的嘴形变化,识别所述使用者的嘴形的过程为,取得从所述连续图像中所检测的使用者面部区域的差值图像,并从所取得的所述差值图像中识别出所述嘴形变化。
此外,根据本发明,优选进一步包括如下步骤:当判断为所述相机的移动已停止且所述使用者的面部位置已固定时,在显示器上显示具有规定画面大小的动作执行区域,以便使用者能够用肉眼确认,在识别所述预先设定的使用者的动作的过程中,对所述动作执行区域内的图像进行分析。
此外,根据本发明,优选可以由使用者变更所述动作执行区域的大小以及位置。
发明效果
根据本发明,在用相机自拍时,仅通过简单的动作就能够容易、方便并且稳定地进行拍摄。
附图说明
图1是本发明的一实施例涉及的相机的动作识别驱动方法的概略流程图。
图2是用于说明通过差值图像识别嘴形的过程的示意图。
附图标记:
S10:连续图像获取步骤
S20:相机移动检测步骤
S30:面部区域检测步骤
S40:拍摄准备步骤
S50:拍摄步骤
具体实施方式
下面,参照附图对本发明的优选实施例涉及的相机的动作识别驱动方法进行说明。
图1是本发明的一实施例涉及的相机的动作识别驱动方法的概略流程图,图2是用于说明通过差值图像识别嘴形的过程的示意图。
首先,本发明涉及的相机的动作识别驱动方法用于在通过相机进行自拍时识别使用者的动作以进行相机拍摄。此时,相机可以包括智能手机、平板电脑、数码相机等具有拍摄功能的所有电子设备。只是,为了便于说明,下面以智能手机为例进行说明。
参照图1及图2,本实施例涉及的相机的动作识别驱动方法包括:连续图像获取步骤S10、相机移动检测步骤S20、面部区域检测步骤S30、拍摄准备步骤S40、拍摄步骤S50。作为参考,所述步骤通过智能手机所具备的控制部执行。
在连续图像获取步骤S10中,相机获取使用者的连续的图像。以智能手机为准进行说明,若在智能手机上按相机图标而转换拍摄方向(即,选择自拍),则相当于通过智能手机前置镜头拍摄图像的步骤。
在相机移动检测步骤S20中,通过搭载在智能手机上的移动传感器、例如加速度传感器、陀螺仪传感器、地磁传感器等能够检测相机移动的传感器来检测相机的移动。
在面部区域检测步骤S30中,从在连续图像获取步骤中所获取的连续图像中检测出使用者的面部区域。检测面部区域的图像处理方法已经开发出了很多,如果使用这些方法即可检测出使用者的面部区域。
在拍摄准备步骤S40中,通过在相机移动检测步骤以及面部区域检测步骤中所获得的信息,判断相机的移动是否已停止,并且在显示器上使用者的面部位置是否已固定。一般来说,拍照时确定照片的构图或者使用者的姿势后,相机的移动会停止并且显示器上的面部位置也会固定。因而,能够由此确认使用者是否已完成拍照的准备。
在拍摄步骤S50中,对所获取的连续图像进行分析并识别出预设的使用者的动作时,输出驱动信号以进行拍照。特别是,在本实施例中,利用差值图像来识别使用者的嘴形变化,并将其作为驱动信号使用。具体而言,如图2的(a)所示,在拍摄就绪的状态下,使用者从嘴闭合的状态下张开嘴后再次闭合。并且,在此过程中,从相机获取的连续图像中分析使用者面部区域(即,在图2的(b)中用虚线表示的区域)的差值图像,即可得出如图2的(b)所示的差值图像,由此能够识别出使用者的嘴形变化。
特别是,如本实施例这样将嘴形变化作为驱动信号使用时,具有如下优点。首先,比起对所拍摄图像的整个区域进行分析的情况,如本实施例这样,当只分析一部分区域(面部区域)时,所要分析的图像尺寸变小,因此能够提高效率,进而能够防止背景变化(例如,使用者的背后有车辆或者人经过的情况)所引起的误操作。并且,检测使用者的面部区域的方法是目前相当稳定的技术,因此具有非常高的可靠性(反复再现性)。此外,嘴形变化是使用者非常容易做到的,而且通过非常小的动作来实现。因此,能够防止拍摄时相机晃动等(例如,通过摆手来输出驱动信号的情况,摆手时举着相机的手有可能一同晃动)问题。
另一方面,在多数人拍照的情况,所拍摄的图像中会包含多张面部。在这种情况下,将多张面部中的一个人的面部指定为代表面部。此时,代表面部可以以随机方式指定,或者也可以以预先设定的基准而定,例如在多张面部中指定位于中间的面部。并且,指定代表面部后在显示器上进行显示(例如,在代表面部上显示特定图形(或者闪烁)),以便使用者能够确认被指定的代表面部是哪一个。而且,在识别使用者的嘴形变化时,通过对代表面部的图像分析来识别嘴形变化,以输出驱动信号。
另一方面,可以识别其它的动作来输出驱动信号,而不识别如上所述的使用者的嘴形变化。在这种情况下,如果为了识别使用者的动作而对所拍摄的整个图像进行分析时,如上所述,由于所要分析的图像尺寸大而有可能降低处理效率,进而存在背景变化(例如,使用者的背后有车辆或者人经过的情况)引起的误操作的隐患。
为此,在本发明中,在显示器上显示动作执行区域,并且分析在该动作执行区域内有没有执行预先设定的动作。具体而言,如果拍摄准备步骤结束(即,相机停止以及面部位置固定),则在显示器上显示具有规定画面大小的动作执行区域。动作执行区域应显示为使用者能够用肉眼确认,例如可以显示为虚线矩形框(或者闪烁)。而且,使用者以使预先设定的动作在该动作执行区域内进行的方式移动。例如,如果预先设定的动作是摆手的动作,则使用者一边确认显示器一边伸出手使得手置于动作执行区域内,并在这个位置上摆手。这样,只需分析动作执行区域内的图像即可确认有没有执行预先设定的动作。
另一方面,如果在显示器上动作执行区域的位置以及大小固定不变,则有可能发生拍照时根据照片构图在该动作执行区域内难以执行预先设定的动作的情况。为此,优选能够由使用者变更所述动作执行区域的位置以及大小。例如,可以在设定画面上放大或缩小动作执行区域的大小,并且拖拽动作执行区域以变更其位置。
以上,图示本发明的优选实施例并进行了说明,然而,本发明并不限定于上述的具体的优选实施例,本发明所属技术领域的普通技术人员在不脱离权利要求书中所要求保护的本发明要旨的情况下均可实施各种变形,而这种变更属于权利要求书所记载的范围之内。

Claims (5)

1.一种相机的动作识别驱动方法,用于在自拍时控制相机的驱动,其特征在于,包括如下步骤:
利用相机获取使用者的连续图像;
利用安装在所述相机上的移动传感器检测所述相机的移动;
从所述连续图像中检测出使用者的面部区域;
判断所述相机的移动是否已停止且所述使用者的面部位置是否已固定;
在判断为所述相机的移动已停止且所述使用者的面部位置已固定的状态下,对所述连续图像进行分析的结果识别出预先设定的使用者的动作时,输出驱动信号以拍摄照片。
2.根据权利要求1所述的相机的动作识别驱动方法,其特征在于,进一步包括如下步骤:
当所述连续图像包含多数使用者的面部时,将多数使用者中的一个人的面部指定为代表面部,并在显示器上进行显示,以便使用者能够确认代表面部,
其中,对被指定为所述代表面部的使用者的动作进行识别,并输出驱动信号。
3.根据权利要求1所述的相机的动作识别驱动方法,其特征在于,
所述预先设定的使用者的动作是使用者的嘴形变化,
识别所述使用者的嘴形的过程为,
取得从所述连续图像中所检测的使用者面部区域的差值图像,并从所取得的所述差值图像中识别出所述嘴形变化。
4.根据权利要求1所述的相机的动作识别驱动方法,其特征在于,进一步包括如下步骤:
当判断为所述相机的移动已停止且所述使用者的面部位置已固定时,在显示器上显示具有规定画面大小的动作执行区域,以便使用者能够用肉眼确认,
在识别所述预先设定的使用者的动作的过程中,对所述动作执行区域内的图像进行分析。
5.根据权利要求4所述的相机的动作识别驱动方法,其特征在于,可以由使用者变更所述动作执行区域的大小以及位置。
CN201610056598.5A 2015-02-03 2016-01-27 相机的动作识别驱动方法 Pending CN105847668A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020150016579A KR20160095379A (ko) 2015-02-03 2015-02-03 카메라의 동작인식 구동방법
KR10-2015-0016579 2015-02-03

Publications (1)

Publication Number Publication Date
CN105847668A true CN105847668A (zh) 2016-08-10

Family

ID=56580666

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610056598.5A Pending CN105847668A (zh) 2015-02-03 2016-01-27 相机的动作识别驱动方法

Country Status (2)

Country Link
KR (1) KR20160095379A (zh)
CN (1) CN105847668A (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004361659A (ja) * 2003-06-04 2004-12-24 Olympus Corp 携帯端末
JP2008283502A (ja) * 2007-05-11 2008-11-20 Casio Comput Co Ltd デジタルカメラ、及び撮影制御方法、撮影制御プログラム
CN101646018A (zh) * 2008-08-08 2010-02-10 佛山普立华科技有限公司 摄影装置及其自拍方法
CN101702199A (zh) * 2009-11-13 2010-05-05 深圳华为通信技术有限公司 笑脸检测方法及装置、移动终端
JP2010181490A (ja) * 2009-02-03 2010-08-19 Olympus Imaging Corp 撮像装置
CN103024275A (zh) * 2012-12-17 2013-04-03 东莞宇龙通信科技有限公司 自动拍摄方法及终端
CN103607537A (zh) * 2013-10-31 2014-02-26 北京智谷睿拓技术服务有限公司 相机的控制方法及相机
KR20140073628A (ko) * 2012-11-30 2014-06-17 한국과학기술원 이미지 처리 기반의 모바일 기기 구동 방법, 모바일 기기의 이미지 처리 방법 및 이를 이용하는 모바일 기기

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101434533B1 (ko) 2013-06-25 2014-08-27 엔그램테크놀로지(주) 손가락 동작인식 기반의 카메라 촬영 시스템 및 그 방법

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004361659A (ja) * 2003-06-04 2004-12-24 Olympus Corp 携帯端末
JP2008283502A (ja) * 2007-05-11 2008-11-20 Casio Comput Co Ltd デジタルカメラ、及び撮影制御方法、撮影制御プログラム
CN101646018A (zh) * 2008-08-08 2010-02-10 佛山普立华科技有限公司 摄影装置及其自拍方法
JP2010181490A (ja) * 2009-02-03 2010-08-19 Olympus Imaging Corp 撮像装置
CN101702199A (zh) * 2009-11-13 2010-05-05 深圳华为通信技术有限公司 笑脸检测方法及装置、移动终端
KR20140073628A (ko) * 2012-11-30 2014-06-17 한국과학기술원 이미지 처리 기반의 모바일 기기 구동 방법, 모바일 기기의 이미지 처리 방법 및 이를 이용하는 모바일 기기
CN103024275A (zh) * 2012-12-17 2013-04-03 东莞宇龙通信科技有限公司 自动拍摄方法及终端
CN103607537A (zh) * 2013-10-31 2014-02-26 北京智谷睿拓技术服务有限公司 相机的控制方法及相机

Also Published As

Publication number Publication date
KR20160095379A (ko) 2016-08-11

Similar Documents

Publication Publication Date Title
US11119577B2 (en) Method of controlling an operation of a camera apparatus and a camera apparatus
US10165199B2 (en) Image capturing apparatus for photographing object according to 3D virtual object
EP2880508B1 (en) Improved identification of a gesture
RU2612892C2 (ru) Способ автоматической фокусировки и устройство автоматической фокусировки
KR102462644B1 (ko) 전자 장치 및 그의 동작 방법
US20130190043A1 (en) Portable device including mouth detection to initiate speech recognition and/or voice commands
US10291843B2 (en) Information processing apparatus having camera function and producing guide display to capture character recognizable image, control method thereof, and storage medium
US20130308835A1 (en) Mobile Communication Device with Image Recognition and Method of Operation Therefor
CN102196176A (zh) 信息处理设备、信息处理方法和程序
US10958825B2 (en) Electronic apparatus and method for controlling the same
TW201237773A (en) An electronic system, image adjusting method and computer program product thereof
US11496670B2 (en) Electronic device with display screen capable of reliable detection of a user selected displayed eye region in a scene to be captured, and region selection method
JP2015215720A (ja) 画像表示撮影システム、撮影装置、表示装置、画像の表示および撮影の方法、およびコンピュータープログラム
KR20150085289A (ko) 촬영 조건을 설정하는 방법 및 이를 수행하는 전자 장치
US9148537B1 (en) Facial cues as commands
US8866921B2 (en) Devices and methods involving enhanced resolution image capture
JP2011022927A (ja) 手画像認識装置
JP2018500587A (ja) 方向認識オートフォーカス
US8866934B2 (en) Image pickup apparatus capable of deleting video effect superimposed on moving image, method of controlling the apparatus, and moving image-recording apparatus, as well as storage medium
WO2017126216A1 (ja) 撮像制御装置、撮像制御方法及びコンピュータプログラム
US9264603B2 (en) Imaging apparatus and imaging method
CN105847668A (zh) 相机的动作识别驱动方法
US10212382B2 (en) Image processing device, method for controlling image processing device, and computer-readable storage medium storing program
JP6679430B2 (ja) 撮像装置、撮像装置の制御方法及びプログラム
JP2018173907A (ja) 情報処理装置、および情報処理装置の制御方法、プログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160810