KR101336924B1

KR101336924B1 - Apparatus for processing digital image and method for controlling thereof

Info

Publication number: KR101336924B1
Application number: KR1020130033672A
Authority: KR
Inventors: 이승윤
Original assignee: 삼성전자주식회사
Priority date: 2013-03-28
Filing date: 2013-03-28
Publication date: 2013-12-04
Also published as: KR20130041029A

Abstract

본 발명은, 촬영을 위한 촬영 준비 설정을 완료하고 촬영을 수행하기 전에도 얼굴 인식을 수행할 수 있는 디지털 영상 처리장치 및 그 제어방법에 관한 것이다. 본 발명은, (a) 입력된 제1 입력 영상에서 사람의 얼굴을 인식하는 단계; (b) 촬영 준비 신호의 입력에 따라 상기 제1 입력 영상에 대하여 촬영 준비 설정을 수행하고, 상기 설정된 촬영 준비 설정을 고정하는 단계; 및 (c) 상기 촬영 준비 설정이 고정된 상태에서 촬영 개시 신호 입력 전에, 새로이 입력되는 제2 입력 영상에서 사람의 얼굴을 인식하는 단계를 구비하는 디지털 영상 처리장치의 제어방법을 제공한다. The present invention relates to a digital image processing apparatus and a method of controlling the same, which can perform face recognition even after completing a preparation preparation for photographing and performing photographing. The present invention provides a method for manufacturing a human face, the method comprising: (a) recognizing a face of a person in an input first input image; (b) performing shooting preparation setting on the first input image according to an input of a shooting preparation signal and fixing the set shooting preparation setting; And (c) recognizing a face of a person in a newly input second input image before inputting a photographing start signal while the photographing preparation setting is fixed.

Description

[0001] The present invention relates to a digital image processing apparatus and a control method thereof,

본 발명은 디지털 영상 처리장치 및 그 제어방법에 관한 것으로서, 보다 상세하게는 영상을 입력받고, 입력받은 영상에서 사람의 얼굴을 검출할 수 있는 디지털 영상 처리장치 및 그 제어방법에 관한 것이다. The present invention relates to a digital image processing apparatus and a control method thereof, and more particularly, to a digital image processing apparatus capable of receiving an image and detecting a face of a person from the received image and a control method thereof.

통상적으로, 디지털 영상 처리장치는 디지털 카메라, PDA(personal digital assistant), 폰 카메라, PC 카메라 등의 영상을 처리하거나 영상 인식 센서를 사용하는 모든 장치를 포함한다. Typically, the digital image processing apparatus includes all apparatuses that process images of a digital camera, a PDA (personal digital assistant), a phone camera, a PC camera, or the like and use an image recognition sensor.

디지털 영상 처리장치는 촬상 소자를 통하여 입력받은 영상을 디지털 신호 처리기에서 이미지 프로세싱하고 이를 압축하여 이미지 파일을 생성하고, 그 이미지 파일을 메모리에 저장할 수 있다.
The digital image processing apparatus may image an image received through an image pickup device by a digital signal processor, compress the image, generate an image file, and store the image file in a memory.

*또한, 디지털 영상 처리장치는 촬상 소자를 통하여 입력받거나 저장매체에 저장된 이미지 파일의 이미지를 LCD(Liquid Crystal Display)와 같은 표시장치에 표시하여 보여줄 수 있다. Also, the digital image processing apparatus may display and display an image of an image file input through an imaging device or stored in a storage medium on a display device such as a liquid crystal display (LCD).

입력된 영상에는 사람의 얼굴이 포함될 수 있다. 이 경우, 사람의 얼굴이 촬영하고자 하는 영상에서 관심의 대상이 되는 경우가 많다. 이 경우, 사람의 얼굴을 중심으로 초점을 맞출 수 있다. 이러한 경우를 포함하여 다양한 필요에 의하여 입력된 영상에서 얼굴 영역을 검출할 수 있다. The input image may include a face of a person. In this case, a human face is often of interest in an image to be photographed. In this case, the human face can be focused. In this case, a face region may be detected from an image input by various needs.

본 발명은, 촬영을 위한 촬영 준비 설정을 완료하고 촬영을 수행하기 전에도 얼굴 인식을 수행할 수 있는 디지털 영상 처리장치 및 그 제어방법을 제공하는 것을 목적으로 한다. An object of the present invention is to provide a digital image processing apparatus and a method of controlling the same, which can perform face recognition even after completing the preparation of photographing preparation for photographing and before photographing.

본 발명은, (a) 입력된 제1 입력 영상에서 사람의 얼굴을 인식하는 단계; (b) 상기 제1 입력 영상에 대하여 촬영 준비 설정을 수행하고, 그에 따른 촬영 준비 설정을 고정하는 단계; 및 (c) 상기 촬영 준비 설정이 고정된 상태에서 새로이 입력되는 제2 입력 영상에서 사람의 얼굴을 인식하는 단계를 구비하는 디지털 영상 처리장치의 제어방법을 제공한다. The present invention provides a method for manufacturing a human face, the method comprising: (a) recognizing a face of a person in an input first input image; (b) performing shooting preparation setting on the first input image and fixing the shooting preparation setting accordingly; And (c) recognizing a face of a person in a second input image newly input while the photographing preparation setting is fixed.

(d) 상기 제1 입력 영상과 상기 제2 입력 영상의 각각에서 검출되는 얼굴 영역이 설정된 기준 거리 이상 떨어져 있는지 여부를 판단하는 단계, 및 (e) 상기 (d) 단계의 판단 결과에 따라, 상기 제2 입력 영상에 대하여 촬영 준비 설정을 수행하고, 그에 따른 촬영 준비 설정을 고정하는 단계를 더 구비할 수 있다. (d) determining whether a face area detected in each of the first input image and the second input image is separated by a set reference distance or more, and (e) according to the determination result of step (d), The method may further include performing shooting preparation setting on the second input image and fixing the shooting preparation setting accordingly.

상기 제2 입력 영상에 대한 촬영 준비 설정에 따라 촬영을 수행하는 단계를 더 구비할 수 있다. The method may further include performing photographing according to the photographing preparation setting for the second input image.

상기 (a) 단계가, 제1 입력 영상을 입력받는 단계, 상기 제1 입력 영상에서 얼굴을 검색하는 단계, 상기 제1 입력 영상에 사람의 얼굴이 포함되어 있는가를 판단하는 단계, 및 상기 제1 입력 영상에 사람의 얼굴이 포함된 경우에 상기 제1 입력 영상에서 사람의 얼굴이 포함된 얼굴 영역을 검출하는 단계를 구비할 수 있다. The step (a) may include receiving a first input image, searching for a face in the first input image, determining whether a face of a person is included in the first input image, and the first input. The method may further include detecting a face region including the face of the person from the first input image when the face includes the face of the person.

상기 (c) 단계가, 제2 입력 영상을 입력받는 단계, 상기 제2 입력 영상에서 얼굴을 검색하는 단계, 상기 제2 입력 영상에 사람의 얼굴이 포함되어 있는가를 판단하는 단계, 및 상기 제2 입력 영상에 사람의 얼굴이 포함된 경우에 상기 제1 입력 영상에서 사람의 얼굴이 포함된 얼굴 영역을 검출하는 단계를 구비할 수 있다. The step (c) may include receiving a second input image, searching for a face in the second input image, determining whether a face of a person is included in the second input image, and the second input. The method may further include detecting a face region including the face of the person from the first input image when the face includes the face of the person.

(f) 상기 제1 입력 영상에서 상기 얼굴 영역이 검출되었는가 여부를 판단하는 단계를 더 구비하고, 상기 (f) 단계에서 상기 얼굴 영역이 검출된 경우에 상기 (b) 단계가 수행될 수 있다. (f) determining whether the face area is detected in the first input image, and if the face area is detected in step (f), step (b) may be performed.

상기 (f) 단계에서 상기 얼굴 영역이 검출되지 아니한 경우에, 설정된 기준 영역에 대하여 촬영 준비 설정을 수행하는 단계, 및 상기 촬영 준비 설정을 고정하는 단계를 더 구비할 수 있다. When the face area is not detected in the step (f), the method may further include performing shooting preparation setting with respect to the set reference area, and fixing the shooting preparation setting.

촬영 개시 신호의 입력에 의하여, 상기 촬영 준비 설정에 의하여 촬영을 수행하는 단계를 더 구비할 수 있다. The method may further include performing photographing by the photographing preparation setting by input of a photographing start signal.

(g) 촬영 준비 신호가 입력 여부를 판단하는 단계를 더 구비하고, 상기 (f) 단계가 상기 (g) 단계에서 상기 촬영 준비 신호가 입력된 것으로 판단되는 경우에 수행될 수 있다. (g) further comprising determining whether or not a photographing preparation signal is input, wherein step (f) may be performed when it is determined that the photographing preparation signal is input in step (g).

본 발명의 다른 측면은, 입력 영상을 입력받는 영상 입력부; 촬영 준비 신호의 입력에 따라 상기 입력 영상에 대한 촬영 준비 설정을 수행하는 촬영준비 설정부; 및 상기 입력 영상에서 사람의 얼굴 영역을 인식하고, 상기 얼굴 영역에 대하여 촬영 준비 설정이 수행되도록 하고, 상기 촬영 준비 설정이 고정된 상태에서 새로이 입력되는 입력 영상에서 사람의 얼굴 영역을 인식하는 제어부를 구비하는 디지털 영상 처리장치를 제공한다. Another aspect of the invention, the image input unit for receiving an input image; A shooting preparation setting unit configured to perform shooting preparation setting for the input image according to an input of a shooting preparation signal; And a control unit configured to recognize a face region of a person in the input image, to perform shooting preparation setting on the face region, and to recognize a face region of a person in a newly input input image while the shooting preparation setting is fixed. It provides a digital image processing apparatus provided.

상기 입력 영상이 표시되고, 상기 입력 영상에서 상기 얼굴 영역이 표시되는 표시부를 더 구비할 수 있다. The display apparatus may further include a display unit configured to display the input image and to display the face region in the input image.

상기 촬영 준비 설정에 의하여 자동 포커스 조정, 자동 노출 조정, 및 자동 화이트 밸런스 조정 중의 적어도 하나 이상이 설정될 수 있다. At least one of auto focus adjustment, auto exposure adjustment, and auto white balance adjustment may be set by the shooting preparation setting.

본 발명에 따른 디지털 영상 처리장치 및 그 제어방법에 의하면, 촬영을 위한 촬영 준비 설정을 완료하고 촬영을 수행하기 전에도 얼굴 인식을 수행할 수 있도록 함으로써, 필요에 따라 촬영 준비 설정을 다시 수행할 수 있다. According to the digital image processing apparatus and the control method thereof according to the present invention, by completing the shooting preparation setting for shooting and enabling the face recognition even before performing the shooting, it is possible to perform the shooting preparation setting again if necessary. .

도 1은 본 발명에 따른 디지털 영상 처리장치의 실시예로서, 디지털 카메라의 뒷면 외형을 보여주는 도면이다.
도 2는 도 1의 디지털 카메라 내부에 포함될 수 있는 제어장치를 개략적으로 도시한 블록도이다.
도 3은 본 발명에 따른 바람직한 실시예로서, 디지털 영상 처리장치를 개략적으로 도시한 블록도이다.
도 4는 본 발명에 따른 디지털 영상 처리장치의 제어방법에서, 얼굴인식 수행단계를 개략적으로 도시한 흐름도이다.
도 5는 본 발명에 따른 바람직한 실시예로서, 디지털 영상 처리장치의 제어방법을 개략적으로 도시한 흐름도이다.
도 6은 본 발명에 따른 바람직한 다른 실시예로서, 디지털 영상 처리장치의 제어방법을 개략적으로 도시한 흐름도이다. 1 is a diagram illustrating a rear surface of a digital camera as an embodiment of a digital image processing apparatus according to the present invention.
FIG. 2 is a block diagram schematically illustrating a control apparatus that may be included in the digital camera of FIG. 1.
3 is a block diagram schematically showing a digital image processing apparatus according to a preferred embodiment of the present invention.
4 is a flowchart schematically illustrating a face recognition performing step in a control method of a digital image processing apparatus according to the present invention.
5 is a flowchart schematically illustrating a control method of a digital image processing apparatus as a preferred embodiment according to the present invention.
6 is a flowchart schematically illustrating a control method of a digital image processing apparatus according to another exemplary embodiment of the present invention.

이하, 첨부된 도면을 참조하여 바람직한 실시예에 따른 본 발명을 상세히 설명하기로 한다. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1에는 본 발명에 따른 디지털 영상 처리장치의 제어장치 및 그 방법이 적용되는 디지털 영상 처리장치의 일 실시예인 디지털 카메라(100)의 뒷면 외형이 도시되어 있다. FIG. 1 is a rear view of a digital camera 100, which is an embodiment of a control device of a digital image processing apparatus and a digital image processing apparatus to which the method is applied, according to the present invention.

도면을 참조하면, 디지털 카메라(100)의 뒷면에는 방향 버튼(21), 메뉴-OK 버튼(22), 광각(Wide angle)-줌(Zoom) 버튼(W), 망원(Telephoto)-줌(Zoom) 버튼(T), 및 디스플레이 패널(25) 등이 구비될 수 있다. Referring to FIG. 1, a direction button 21, a menu-OK button 22, a wide angle-zoom button W, a telephoto-zoom button Zoom ) Button T, a display panel 25, and the like.

방향 버튼(21)에는 상향 버튼(21a), 하향 버튼(21b), 좌향 버튼(21c), 우향 버튼(21d)의 총4개의 버튼이 포함될 수 있다. 방향 버튼(21)과 메뉴-OK 버튼(22)은 디지털 카메라와 같은 디지털 영상 처리장치의 동작에 관한 각종 메뉴를 실행시키기 위해 입력하는 키이다. The direction button 21 may include a total of four buttons including an up button 21a, a down button 21b, a left button 21c, and a right button 21d. The direction button 21 and the menu-OK button 22 are keys for inputting various menus related to the operation of the digital image processing apparatus such as a digital camera.

광각-줌 버튼(W) 또는 망원-줌 버튼(T)은 그 입력에 따라 화각이 넓어지거나, 화각이 좁아진다. 특히, 선택된 노출영역의 크기를 변경시키고자 할 때 사용될 수 있다. 이때, 광각-줌 버튼(W)이 입력되면 선택된 노출영역의 크기가 작아지고, 망원-줌 버튼(T)이 입력되면 선택된 노출영역의 크기가 커질 수 있다. 디스플레이 패널(25)로는 LCD(liquid crystal display)등의 영상 표시소자가 사용될 수 있다. Wide angle-zoom button W or telephoto-zoom button T widens the view angle or narrows the view angle depending on the input. In particular, it can be used to change the size of the selected exposure area. At this time, when the wide-angle zoom button W is input, the size of the selected exposure area is reduced, and when the telephoto-zoom button T is input, the size of the selected exposure area may be enlarged. As the display panel 25, an image display device such as a liquid crystal display (LCD) may be used.

디스플레이 패널(25)이 본 발명에 따른 입력 영상이 표시되고, 입력 영상에 얼굴 영역이 표시될 수 있는 표시부(도 3의 350)에 포함될 수 있다. The display panel 25 may be included in the display unit 350 of FIG. 3 in which an input image according to the present invention is displayed and a face region may be displayed on the input image.

한편, 디지털 카메라(100)의 앞면 또는 윗면에는 셔터 릴리즈 버튼(26), 플래시(미도시), 전원 스위치(28), 렌즈부(미도시)가 구비될 수 있다. 또한, 디지털 카메라(100)의 앞면과 뒷면에는 뷰 파인더(27)의 대물 렌즈와 접안 렌즈가 구비될 수 있다. Meanwhile, a shutter release button 26, a flash (not shown), a power switch 28, and a lens unit (not shown) may be provided on the front or top surface of the digital camera 100. In addition, an objective lens and an eyepiece lens of the viewfinder 27 may be provided on the front and rear surfaces of the digital camera 100.

셔터 릴리즈 버튼(26) 및 전원 스위치(28) 등은 사용자가 외부로부터 조작하고자 하는 사항을 입력하는 사용자 조작부(도 3의 360)에 포함될 수 있다. The shutter release button 26 and the power switch 28 may be included in a user manipulation unit (360 of FIG. 3) for inputting items to be manipulated by the user from the outside.

셔터 릴리즈 버튼(26)은 정해진 시간 동안 CCD(Charge Coupled Device)와 같은 촬상 소자나 필름을 빛에 노출시키기 위해 열리고 닫힌다. 또한, 셔터 릴리즈 버튼은 조리개(미도시)와 연동하여 피사체를 적정하게 노출시켜 촬상 소자에 영상을 기록한다. The shutter release button 26 is opened and closed to expose an image pickup element or film such as a CCD (Charge Coupled Device) to light for a predetermined time. Further, the shutter release button interlocks with an iris (not shown) to appropriately expose the subject to record the image on the imaging element.

한편, 셔터 릴리즈 버튼(26)은 2단으로 눌려질 수 있다. 셔터 릴리즈 버튼(26)이 일단으로 눌려지면 제1신호(S1)가 생성되고, 이단으로 눌려지면 제2신호(S2)가 생성될 수 있다. 제1신호(S1)에 의하여 촬영 준비 설정이 수행되고, 제2신호(S2)에 의하여 촬영 작업이 수행될 수 있다. On the other hand, the shutter release button 26 can be pressed in two stages. The first signal S1 is generated when the shutter release button 26 is pressed at one end, and the second signal S2 is generated when the shutter release button 26 is depressed at this end. The shooting preparation setting may be performed by the first signal S1, and the shooting operation may be performed by the second signal S2.

본 발명이 적용될 수 있는 디지털 영상 처리장치의 일 실시예로서 디지털 카메라와 그 제어장치, 및 그 제어방법이 본 출원인의 미국 특허출원 공개번호 제2004/0130650호(명칭: 카메라의 이차함수를 이용한 자동 포커싱 방법, Method of automatically focusing using a quadratic function in camera)에 개시되어 있다. As an embodiment of the digital image processing apparatus to which the present invention can be applied, a digital camera, a control apparatus thereof, and a control method thereof are disclosed in U.S. Patent Application Publication No. 2004/0130650 (titled: automatic using a quadratic function of a camera A focusing method, a focusing method, and a quadratic function in camera.

상기 미국출원에 개시된 디지털 카메라와 그 제어장치, 및 그 제어방법에 관한 사항은 본 명세서에 포함되는 것으로 하고, 그 자세한 설명은 생략한다. The digital camera, its control device, and control method disclosed in the above-mentioned U.S. application are incorporated in this specification, and a detailed description thereof will be omitted.

도 2에는 본 발명에 따른 바람직한 실시예인 디지털 영상 처리장치의 제어장치(200)의 블록도가 도시되어 있다. 디지털 영상 처리장치의 제어장치(200)는 도 1의 디지털 카메라(100)의 내부에 장착될 수 있다. 2 is a block diagram of a control device 200 of a digital image processing apparatus, which is a preferred embodiment of the present invention. The control device 200 of the digital image processing apparatus can be installed inside the digital camera 100 of FIG.

도면을 참조하면, 렌즈부와 필터부를 포함한 광학계(OPS)는 피사체로부터의 빛을 광학적으로 처리한다. 광학계(OPS)의 렌즈부는 줌 렌즈, 포커스 렌즈 및 보상 렌즈를 포함한다. 사용자가 사용자 입력부(INP)에 포함된 광각-줌 버튼(W) 또는 망원-줌 버튼(T)을 누르면, 이에 상응하는 신호가 마이크로제어기(212)에 입력된다. Referring to the drawings, an optical system (OPS) including a lens unit and a filter unit optically processes light from a subject. The lens unit of the optical system OPS includes a zoom lens, a focus lens, and a compensation lens. When the user presses the wide-zoom button W or telephoto-zoom button T included in the user input unit INP, a corresponding signal is input to the microcontroller 212.

이에 따라, 마이크로제어기(212)가 렌즈 구동부(210)를 제어함에 따라, 줌 모터(M_Z)가 구동되어 줌 렌즈가 이동된다. 즉, 광각-줌 버튼(W)이 눌려지면 줌 렌즈의 초점 길이가 짧아져서 화각이 넓어지고, 망원-줌 버튼(T)이 눌려지면 줌 렌즈의 초점 길이가 길어져서 화각이 좁아진다. Accordingly, as the microcontroller 212 controls the lens driving unit 210, the zoom motor M _Z is driven to move the zoom lens. That is, when the wide-angle zoom button W is depressed, the focal length of the zoom lens is shortened to enlarge the angle of view, and if the telephoto-zoom button T is depressed, the focal length of the zoom lens becomes long and the angle of view becomes narrow.

한편, 자동 초점 모드(auto focusing mode)에는, 디지털 신호 처리기(207) 안에 내장된 주 제어기가 마이크로제어기(212)를 통하여 렌즈 구동부(210)를 제어하고, 그에 따라 포커스 모터(M_F)가 구동된다. 즉, 포커스 모터(M_F)를 구동하여 가장 선명한 사진을 얻을 수 있는 위치로 포커스 렌즈를 이동시킨다. Meanwhile, in the auto focusing mode, the main controller built in the digital signal processor 207 controls the lens driving unit 210 through the micro controller 212, so that the focus motor M _F is driven do. That is, the focus motor M _F is driven to move the focus lens to a position where the sharpest picture can be obtained.

자동 초점 모드는 사용자 입력부(INP)를 통하여 입력되는 셔터 릴리즈 버튼이 일단으로 눌려져 생성되는 제1신호에 따라 수행될 수 있다. 이때, 포커스 렌즈의 위치를 광축을 따라 이동시키면서 복수개의 영상을 입력받고, 복수개의 영상들 중에서 가장 선명한 영상을 얻어지는 포커스 렌즈의 위치를 구한다. The auto focus mode may be performed according to a first signal generated by pushing the shutter release button input through the user input unit INP at one time. At this time, the position of the focus lens, which receives the plurality of images while moving the position of the focus lens along the optical axis and obtains the clearest image among the plurality of images, is obtained.

보상 렌즈는 전체적인 굴절률을 보상하는 역할을 하므로 별도로 구동되지 않는다. 참조 부호 M_A는 조리개(aperture, 도시되지 않음)를 구동하기 위한 조리개 조정 모터(M_A)를 가리킨다. The compensation lens compensates for the overall refractive index and is not driven separately. Reference numeral M _A denotes an aperture adjusting motor M _A for driving an aperture (not shown).

이때, 포커스 모터(M_F)는 자동 포커스 조정을 수행하는 촬영 준비 설정부(도 3의 370)에 포함될 수 있다. 또한, 조리개를 조정하기 위한 조리개 조정 모터(M_A)도 자동 노출 조정을 수행하는 촬영 준비 설정부(도 3의 370)에 포함될 수 있다.In this case, the focus motor M _F may be included in the shooting preparation setting unit 370 of FIG. 3. In addition, the aperture adjustment motor M _A for adjusting the aperture may also be included in the shooting preparation setting unit 370 of FIG. 3.

광학계(OPS)의 필터부에 있어서, 광학적 저역통과필터(Optical Low Pass Filter)는 고주파 성분의 광학적 노이즈를 제거한다. 적외선 차단 필터(Infra-Red cut Filter)는 입사되는 빛의 적외선 성분을 차단한다. In the filter section of the optical system (OPS), an optical low pass filter removes optical noise of a high frequency component. Infra-red cut filter blocks the infrared component of incident light.

광전 변환부(OEC)는 CCD(Charge Coupled Device) 또는 CMOS(Complementary Metal-Oxide- Semiconductor) 등의 촬상 소자를 포함하여 이루어질 수 있다. 광전 변환부(OEC)는 광학계(OPS)로부터의 빛을 전기적 아날로그 신호로 변환시킨다. The photoelectric conversion unit OEC may include an image pickup device such as a CCD (Charge Coupled Device) or a CMOS (Complementary Metal-Oxide-Semiconductor). The photoelectric conversion unit OEC converts light from the optical system OPS into an electrical analog signal.

아날로그-디지털 변환부는 CDS-ADC(Correlation Double Sampler and Analog-to-Digital Converter) 소자(201)를 포함하여 이루어질 수 있다. 아날로그-디지털 변환부는 광전 변환부(OEC)로부터의 아날로그 신호를 처리하여, 그 고주파 노이즈를 제거하고 진폭을 조정한 후, 디지털 신호로 변환시킨다. 여기서, 디지털 신호 처리기(207)는 타이밍 회로(202)를 제어하여 광전 변환부(OEC)와 아날로그-디지털 변환부(201)의 동작을 제어한다. The analog-to-digital conversion unit may include a CDS-ADC (Correlation Double Sampler and Analog-to-Digital Converter) The analog-to-digital converter processes the analog signal from the photoelectric converter (OEC), removes the high-frequency noise, adjusts the amplitude, and converts the analog signal into a digital signal. Here, the digital signal processor 207 controls the timing circuit 202 to control the operations of the photoelectric conversion unit (OEC) and the analog-digital conversion unit 201.

광학계(OPS), 광전 변환부(OEC), CDS-ADC 소자(201) 등은 본 발명에 따른 영상 입력부(도 3의 310)에 포함될 수 있다. The optical system OPS, the photoelectric conversion unit OEC, the CDS-ADC 201, and the like may be included in the image input unit 310 of FIG. 3 according to the present invention.

실시간 클럭(203)은 디지털 신호 처리기(207)에 시간 정보를 제공한다. 디지털 신호 처리기(207)는 CDS-ADC 소자(201)로부터의 디지털 신호를 처리하여 휘도(Y 값) 및 색도(R, G, B) 신호로 분류된 디지털 화상 신호를 발생시킨다. The real-time clock 203 provides time information to the digital signal processor 207. The digital signal processor 207 processes digital signals from the CDS-ADC device 201 to generate digital image signals classified into luminance (Y value) and chromaticity (R, G, B) signals.

디지털 신호 처리기(207)에 내장된 주 제어기의 제어에 따라 마이크로 제어기(212)에 의하여 구동되는 발광부(LAMP)에는, 셀프-타이머 램프, 자동-초점 램프, 모드 지시 램프 및 플래시 대기 램프 등이 포함될 수 있다. A self-timer lamp, an auto-focus lamp, a mode indicating lamp, a flash standby lamp, and the like are connected to the light emitting unit (LAMP) driven by the microcontroller 212 under the control of the main controller incorporated in the digital signal processor 207 .

디지털 신호 처리기(207) 및/또는 마이크로 제어기(212)는 본 발명에 따른 제어부(도 3의 320)에 포함될 수 있다. 또한, 디지털 신호 처리기(207) 및/또는 마이크로 제어기(212)에는 임시 저장 공간으로 캐시 메모리가 장착될 수 있다. The digital signal processor 207 and / or the microcontroller 212 may be included in the controller (320 of FIG. 3) according to the present invention. The digital signal processor 207 and / or the microcontroller 212 may also be equipped with cache memory as temporary storage space.

이러한 캐시 메모리는 본 발명에 따라 찾은 얼굴 영역의 위치가 일시적으로 저장되는 제1 저장부(도 3의 330)에 포함될 수 있다. 제1 저장부(도 3의 330)에 포함되는 캐시 메모리는 디지털 신호 처리기(207) 및/또는 마이크로 제어기(212)와 분리되어 별도로 제어장치(200)에 포함될 수 있다. Such a cache memory may be included in the first storage unit 330 of FIG. 3 where the location of the face region found in accordance with the present invention is temporarily stored. The cache memory included in the first storage unit 330 of FIG. 3 may be included in the controller 200 separately from the digital signal processor 207 and / or the micro controller 212.

사용자 입력부(INP)에는, 방향 버튼(21), 광각-줌 버튼(W) 및 망원-줌 버튼(T) 등이 포함될 수 있다. 이러한 사용자 입력부(INP)는 본 발명에 따른 사용자 조작부(도 3의 360)에 포함될 수 있다. The user input unit INP may include a direction button 21, a wide-angle zoom button W, a tele-zoom button T, and the like. The user input unit INP may be included in the user manipulation unit 360 of FIG. 3.

DRAM(Dynamic Random Access Memory, 204)에는 디지털 신호 처리기(207)로부터의 디지털 화상 신호가 일시 저장된다. EEPROM(Electrically Erasable and Programmable Read Only Memory, 205)에는 디지털 신호 처리기(207)의 동작에 필요한 부팅 프로그램 및 키 입력 프로그램 등과 같은 알고리즘 및 설정 데이터가 저장된다. 메모리 카드 인터페이스(206)에서는 사용자의 메모리 카드가 착탈될 수 있다. A digital image signal from the digital signal processor 207 is temporarily stored in a DRAM (Dynamic Random Access Memory) 204. The EEPROM (Electrically Erasable and Programmable Read Only Memory) 205 stores algorithms and setting data such as a boot program and a key input program required for the operation of the digital signal processor 207. In the memory card interface 206, a user's memory card can be attached and detached.

DRAM(204) 또는 메모리 카드 인터페이스(206)를 통하여 인식되는 메모리 카드는 촬영된 영상이 일시적으로 또는 비휘발성으로 저장되는 것으로 도 3의 제2 저장부(340)에 포함될 수 있다. The memory card recognized through the DRAM 204 or the memory card interface 206 may be included in the second storage unit 340 of FIG. 3 in which a captured image is temporarily or nonvolatilely stored.

디지털 신호 처리기(207)로부터의 디지털 화상 신호는 디스플레이 패널 구동부(214)에 입력되고, 이로 인하여 디스플레이 패널(215)에 화상이 디스플레이 된다. The digital image signal from the digital signal processor 207 is input to the display panel driver 214, thereby displaying an image on the display panel 215. [

디지털 영상 처리장치의 제어장치(200)는 표시부(214, 215)를 더 구비할 수 있다. 표시부(214, 215)는 디스플레이 패널(215) 및 디스플레이 패널(215)을 구동하는 디스플레이 패널 구동부(214)를 구비할 수 있다. 표시부(214, 215)는 본 발명에 따른 표시부(도 3의 350)에 포함될 수 있다. The controller 200 of the digital image processing apparatus may further include display units 214 and 215. The display units 214 and 215 may include a display panel 215 and a display panel driver 214 for driving the display panel 215. The display units 214 and 215 may be included in the display unit 350 of FIG. 3 according to the present invention.

한편, 디지털 신호 처리기(207)로부터의 디지털 화상 신호는, USB(Universal Serial Bus) 접속부(31a) 또는 RS232C 인터페이스(208)와 그 접속부(31b)를 통하여 직렬 통신으로써 전송될 수 있고, 비디오 필터(209) 및 비디오 출력부(31c)를 통하여 비디오 신호로서 전송될 수 있다. 여기서, 디지털 신호 처리기(207)는 그 내부에 마이크로제어기를 내장할 수 있다. On the other hand, the digital image signal from the digital signal processor 207 can be transmitted by serial communication through a USB (Universal Serial Bus) connection part 31a or an RS232C interface 208 and its connection part 31b, 209 and the video output unit 31c as video signals. Here, the digital signal processor 207 may incorporate a micro controller therein.

오디오 처리기(213)는, 마이크로폰(MIC)으로부터의 음성 신호를 디지털 신호 처리기(207) 또는 스피커(SP)로 출력하고, 디지털 신호 처리기(207)로부터의 오디오 신호를 스피커(SP)로 출력한다. The audio processor 213 outputs the audio signal from the microphone MIC to the digital signal processor 207 or the speaker SP and outputs the audio signal from the digital signal processor 207 to the speaker SP.

도 3에는 본 발명에 따른 바람직한 실시예인 디지털 영상 처리장치(300)의 블록도가 도시되어 있다. FIG. 3 is a block diagram of a digital image processing apparatus 300 according to a preferred embodiment of the present invention.

도면을 참조하면, 디지털 영상 처리장치(300)는 영상 입력부(310); 제어부(320); 저장부(330, 340); 표시부(350); 사용자 조작부(360); 및 촬영 준비 설정부(370)를 구비할 수 있다. 디지털 영상 처리장치(300)는 얼굴 인식에 의하여 촬영 준비 설정을 수행하고, 촬영 준비 설정을 고정한 상태에서도, 설정된 시간 간격으로 얼굴 인식을 계속적으로 수행할 수 있다. Referring to the drawings, the digital image processing apparatus 300 includes an image input unit 310; A control unit 320; Storage units 330 and 340; Display unit 350; A user manipulation unit 360; And a shooting preparation setting unit 370. The digital image processing apparatus 300 may perform shooting preparation setting by face recognition, and may continuously perform face recognition at a set time interval even when the shooting preparation setting is fixed.

이때, 얼굴 인식은 입력 영상에 대하여 얼굴 인식을 수행하고, 얼굴 영역을 검출함으로써 수행될 수 있다. 또한, 촬영 준비 설정은 검출된 얼굴 영역을 기준으로 하여 자동 포커스 조정, 자동 노출 조정, 자동 화이트 밸런스 조정 중의 적어도 하나 이상을, 바람직하게는 모두를 조정하여 수행될 수 있다. In this case, the face recognition may be performed by performing face recognition on the input image and detecting a face region. In addition, the shooting preparation setting may be performed by adjusting at least one or more, preferably all of the automatic focus adjustment, the automatic exposure adjustment, and the automatic white balance adjustment based on the detected face region.

디지털 영상 처리장치(300)는 도 4 내지 도 6에 도시된 디지털 영상 처리장치의 제어방법(S500, S600)에 의하여 제어될 수 있다. 따라서, 도 4 내지 도 6에 도시된 디지털 영상 처리장치의 제어방법(S500, S600)에서와 동일한 사항에 대해서는 이를 참조하고, 자세한 설명이 생략될 수 있다. The digital image processing apparatus 300 may be controlled by the control methods S500 and S600 of the digital image processing apparatus illustrated in FIGS. 4 to 6. Therefore, for the same matters as those in the control methods S500 and S600 of the digital image processing apparatus illustrated in FIGS. 4 to 6, this description may be omitted, and a detailed description thereof may be omitted.

영상 입력부(310)는 외부로부터 입력 영상을 입력받는다. 촬영 준비 설정부(370)는 촬영 준비 신호의 입력에 따라 입력 영상에 대한 촬영 준비 설정을 수행한다. The image input unit 310 receives an input image from the outside. The shooting preparation setting unit 370 performs shooting preparation setting for the input image according to the input of the shooting preparation signal.

제어부(320)는 입력 영상에서 사람의 얼굴 영역을 인식하고, 얼굴 영역에 대하여 촬영 준비 설정이 수행되도록 하고, 촬영 준비 설정이 고정된 상태에서 새로이 입력되는 입력 영상에서 사람의 얼굴 영역을 인식한다. The controller 320 recognizes the face region of the person in the input image, allows the shooting preparation setting to be performed on the face region, and recognizes the face region of the person in the newly input input image while the shooting preparation setting is fixed.

저장부(330, 340)는 제1 저장부(330) 및 제2 저장부(340)를 구비할 수 있다. 제1 저장부(330)에는 입력 영상 및 촬영 준비 설정에 따른 설정 값들이 임시 저장될 수 있다. 제2 저장부(340)에는 촬영된 영상이 저장될 수 있다. The storage units 330 and 340 may include a first storage unit 330 and a second storage unit 340. The first storage unit 330 may temporarily store setting values according to an input image and a shooting preparation setting. The captured image may be stored in the second storage unit 340.

표시부(350)에는 입력 영상이 표시되고, 입력 영상에서 얼굴 영역이 표시될 수 있다. 사용자 조작부(360)를 통하여 사용자가 외부로부터 원하는 지령을 입력한다. The display unit 350 may display an input image and may display a face region on the input image. The user inputs a desired command from the outside through the user manipulation unit 360.

영상 입력부(310)는 도 2에 도시된 광학계(OPS), 광전 변환부(OEC), CDS-ADC 소자(201) 등을 포함할 수 있다. 제어부(320)는 도 2에 도시된 디지털 신호 처리기(207) 및/또는 마이크로 제어기(212)를 포함할 수 있다. The image input unit 310 may include an optical system (OPS), a photoelectric converter (OEC), a CDS-ADC device 201, and the like illustrated in FIG. 2. The controller 320 may include the digital signal processor 207 and / or the microcontroller 212 illustrated in FIG. 2.

제1 저장부(330)는 찾은 얼굴 영역의 위치가 일시적으로 저장되는 것으로, 도 2의 디지털 신호 처리기(207) 및/또는 마이크로 제어기(212)에는 임시 저장 공간으로 캐시 메모리 또는 별도로 장착되는 캐시 메모리를 포함할 수 있다. The first storage unit 330 temporarily stores the location of the found face region. The first memory unit 330 may temporarily store the location of the found face region. It may include.

제2 저장부(340)는 입력된 영상이 일시적으로 또는 비휘발성으로 저장되는 것으로, DRAM(204) 또는 메모리 카드 인터페이스(206)를 통하여 인식되는 메모리 카드 등을 포함할 수 있다. The second storage unit 340 may store the input image temporarily or nonvolatile, and may include a memory card recognized through the DRAM 204 or the memory card interface 206.

표시부(350)는 도 1에 도시된 디스플레이 패널(25) 및/또는 도 2의 디스플레이 패널 구동부(214) 및 디스플레이 패널(215)을 포함할 수 있다. 사용자 조작부(360)는 도 1의 셔터 릴리즈 버튼(26) 및 전원 스위치(28) 등 및/또는 도 2의 사용자 입력부(INP) 등을 포함할 수 있다. The display unit 350 may include the display panel 25 shown in FIG. 1 and / or the display panel driver 214 and the display panel 215 of FIG. 2. The user manipulation unit 360 may include a shutter release button 26 and a power switch 28 of FIG. 1 and / or a user input unit INP of FIG. 2.

촬영 준비 설정부(370)는 자동 포커스 조정을 수행하는 포커스 모터(M_F), 자동 노출 조정을 수행하기 위하여 조리개를 조정하기 위한 조리개 조정 모터(M_A)를 포함할 수 있다.The shooting preparation setting unit 370 may include a focus motor M _F for performing auto focus adjustment, and an aperture adjustment motor M _A for adjusting aperture for performing auto exposure adjustment.

입력 영상에서 검출된 얼굴 영역과 새로이 입력되는 입력 영상에서 검출된 얼굴 영역이 설정된 기준 거리 이상 떨어져 있으면, 새로이 입력되는 입력 영상에서 검출된 얼굴 영역에 대하여 촬영 준비 설정이 다시 수행되고, 그에 따른 촬영 준비 설정이 고정될 수 있다. If the face area detected in the input image and the face area detected in the newly input image are separated by more than a set reference distance, the shooting preparation setting is performed again on the face region detected in the newly input input image, and thus preparation for shooting is performed. The setting can be fixed.

이 경우, 촬영 개시 신호(S2)가 입력되면, 설정된 촬영 준비 설정에 의하여 촬영이 수행될 수 있다. In this case, when the photographing start signal S2 is input, photographing may be performed by the set photographing preparation setting.

이때, 제어부(320)는 새로이 입력되는 입력 영상에서 검출된 얼굴 영역에 대하여 수행된 촬영 준비 설정에 따라 영상 입력부(310)를 통하여 입력되는 입력 영상의 촬영이 수행되도록 제어할 수 있다. In this case, the controller 320 may control to capture the input image input through the image input unit 310 according to the shooting preparation setting performed on the face region detected in the newly input image.

또한, 제어부(320)가, 입력 영상에서 얼굴 영역이 인식되면 얼굴 영역에 대하여 촬영 준비 설정이 수행되도록 제어하고, 입력 영상에서 얼굴 영역이 인식되지 아니하면 설정된 기준 영역에 대하여 촬영 준비 설정이 수행되도록 제어할 수 있다. 이때, 도 6에 도시된 제어방법(S600)에서와 같이 촬영 개시 신호의 입력에 의하여, 이때 설정된 촬영 준비 설정에 의하여 촬영을 수행할 수 있다. In addition, the control unit 320 controls the shooting preparation setting to be performed on the face area when the face area is recognized in the input image, and performs the shooting preparation setting on the set reference area when the face area is not recognized in the input image. Can be controlled. At this time, as in the control method (S600) shown in FIG. 6, the photographing may be performed by the photographing preparation setting set at this time by the photographing start signal input.

한편, 촬영 준비 신호(S1)의 입력에 의하여 촬영 준비 설정이 수행되고, 촬영 준비 신호가 입력될 때까지 일정한 시간 간격으로 입력 영상이 입력되고, 입력 영상에서 얼굴 영역이 인식될 수 있다. Meanwhile, the photographing preparation setting may be performed by the input of the photographing preparation signal S1, the input image may be input at a predetermined time interval until the photographing preparation signal is input, and the face region may be recognized from the input image.

본 발명에 따르면, 얼굴 인식에 의하여 촬영 준비 설정을 수행하고, 촬영 준비 설정을 고정한 상태에서도, 설정된 시간 간격으로 얼굴 인식을 계속적으로 수행할 수 있다. According to the present invention, face preparation can be performed by face recognition, and face recognition can be continuously performed at set time intervals even in a state in which the picture preparation setting is fixed.

그에 따라, 일정한 조건이 되는 경우에는 촬영 준비 설정을 재 수행하여 입력 영상에 맞는 촬영 준비 설정에 의하여 촬영을 수행할 수 있다. 따라서, 향상된 품질의 영상을 촬영할 수 있게 된다. Accordingly, when a certain condition is reached, the photographing preparation may be performed by performing the photographing preparation setting again according to the photographing preparation setting suitable for the input image. Therefore, it is possible to shoot an image of improved quality.

도 5에는 본 발명에 따른 바람직한 실시예로서, 디지털 영상 처리장치의 제어방법(S500)에 대한 흐름도가 도시되어 있다. 또한, 도 4에는 도 5의 디지털 영상 처리장치의 제어방법(S500)에서 얼굴인식 수행단계(S400)에 대한 흐름도가 도시되어 있다. 5 is a flowchart illustrating a control method (S500) of a digital image processing apparatus as a preferred embodiment according to the present invention. In addition, FIG. 4 is a flowchart illustrating a face recognition performing step S400 in the control method S500 of the digital image processing apparatus of FIG. 5.

디지털 영상 처리장치의 제어방법(S500)은 도 2 및/또는 도 3의 디지털 영상 처리장치 및 그 제어장치(200, 300)에서 구현될 수 있다. 이를 위하여, 본 발명에 따른 디지털 영상 처리장치의 제어방법(S500)이 도 2의 저장 수단에 저장되거나 펌웨어(Firmware) 등의 반도체 칩의 형태로 구현된 프로그램 또는 알고리즘이 될 수 있다. The control method S500 of the digital image processing apparatus may be implemented in the digital image processing apparatus of FIGS. 2 and / or 3 and the control apparatuses 200 and 300 thereof. To this end, the control method S500 of the digital image processing apparatus according to the present invention may be a program or algorithm stored in the storage means of FIG. 2 or implemented in the form of a semiconductor chip such as firmware.

따라서, 디지털 영상 처리장치의 제어방법(S500)에서 디지털 영상 처리장치 및 그 제어장치(200, 300)에 대하여 설명된 사항과 동일한 사항에 대해서는 이를 참조하고 자세한 설명은 생략한다. Therefore, in the control method (S500) of the digital image processing apparatus, the same items as those described with respect to the digital image processing apparatus and its control apparatus (200, 300) will be referred to and the detailed description will be omitted.

도면을 참조하면, 디지털 영상 처리장치의 제어방법(S500)은 제1 얼굴 인식 단계(S401); 촬영 준비 설정 및 고정 단계(S530, S540); 및 제2 얼굴 인식 단계(S402)를 구비할 수 있다. Referring to the drawings, the control method (S500) of the digital image processing apparatus includes a first face recognition step (S401); Shooting preparation setting and fixing steps S530 and S540; And a second face recognition step S402.

제1 얼굴 인식 단계(S401)에는 입력된 제1 입력 영상에서 사람의 얼굴을 인식한다. 촬영 준비 설정 및 고정 단계(S530, S540)에는 제1 입력 영상에 대하여 촬영 준비 설정을 수행하고, 그에 따른 촬영 준비 설정을 고정한다. 제2 얼굴 인식 단계(S402)에는 촬영 준비 설정이 고정된 상태에서 새로이 입력되는 제2 입력 영상에서 사람의 얼굴을 인식한다. In a first face recognition step S401, a face of a person is recognized from an input first input image. In the shooting preparation setting and fixing steps S530 and S540, shooting preparation setting is performed on the first input image, and the shooting preparation setting is fixed accordingly. In the second face recognizing step (S402), a face of a person is recognized from a second input image newly input while the photographing preparation setting is fixed.

디지털 영상 처리장치의 제어방법(S500)은 얼굴 인식에 의하여 촬영 준비 설정을 수행하고, 촬영 준비 설정을 고정한 상태에서도, 설정된 시간 간격으로 얼굴 인식을 계속적으로 수행할 수 있다. The control method S500 of the digital image processing apparatus may perform shooting preparation setting by face recognition, and may continuously perform face recognition at a set time interval even when the shooting preparation setting is fixed.

이때, 얼굴 인식은 입력 영상에 대하여 얼굴 인식을 수행하고, 얼굴 영역을 검출함으로써 수행될 수 있다. 또한, 촬영 준비 설정은 검출된 얼굴 영역을 기준으로 하여 자동 포커스(Auto Focus) 조정, 자동 노출(Auto Exposure) 조정, 자동 화이트 밸런스(Auto White Balance) 조정 중의 적어도 하나 이상을, 바람직하게는 모두를 조정하여 수행될 수 있다. In this case, the face recognition may be performed by performing face recognition on the input image and detecting a face region. In addition, the shooting preparation setting is based on the detected face area, at least one or more of auto focus adjustment, auto exposure adjustment, and auto white balance adjustment. It can be done by adjusting.

제1 얼굴 인식 단계(S401) 및 제2 얼굴 인식 단계(S402)는 도 4에 도시된 얼굴 인식 단계(S400)에 의하여 수행될 수 있다. The first face recognition step S401 and the second face recognition step S402 may be performed by the face recognition step S400 shown in FIG. 4.

제1 얼굴 인식 단계(S401)에는 입력된 제1 입력 영상에서 사람의 얼굴을 인식한다. 이를 위하여, 제1 얼굴 인식 단계(S401)는 영상 입력단계(S410), 얼굴 검색단계(S420), 및 얼굴영역 검출단계(S440)를 구비할 수 있다. In a first face recognition step S401, a face of a person is recognized from an input first input image. To this end, the first face recognition step S401 may include an image input step S410, a face search step S420, and a face region detection step S440.

영상 입력단계(S410)에는 제1 입력 영상을 입력받는다. 얼굴 검색단계(S420)에는 제1 입력 영상에서 얼굴을 검색한다. 얼굴영역 검출단계(S440)에는 제1 입력 영상에서 사람의 얼굴이 포함된 얼굴 영역을 검출한다. In the image input step S410, a first input image is received. In the face searching operation S420, a face is searched for in the first input image. In the face region detecting operation S440, a face region including a face of a person is detected from the first input image.

얼굴 포함 여부를 판단하는 단계(S430)에서 얼굴 검색단계(S420)에서의 얼굴 검색 결과로부터 제1 입력 영상에 사람의 얼굴이 포함되어 있는가 여부를 판단하여, 제1 입력 영상에 사람의 얼굴이 포함된 것으로 판단되는 경우에, 얼굴영역 검출단계(S440)가 수행될 수 있다. In step S430, whether a face is included in the first input image is determined based on the face search result in the face search step S420, and the face is included in the first input image. If it is determined that the image is detected, the face area detection step S440 may be performed.

얼굴영역 검출단계(S440)에는 표시부(도 3의 350)에 제1 입력 영상을 표시 영상으로 하여 표시하고, 표시 영상에 검출된 얼굴 영역을 표시할 수 있다. 이때, 얼굴 영역은 사각형 등의 도형으로 표시될 수 있다. 다만, 본 발명에서의 얼굴 영역 표시는 이에 한정되지 아니하고, 얼굴 영역은 사용자가 인식할 수 있는 다양한 형태의 표시가 될 수 있다. In the face region detection step S440, the first input image may be displayed as the display image on the display unit 350 (FIG. 3), and the detected face region may be displayed on the display image. In this case, the face area may be displayed in a shape such as a rectangle. However, the display of the face area in the present invention is not limited thereto, and the face area may be various types of display that can be recognized by the user.

제1 얼굴 인식 단계(S401)는 라이브 뷰(Live View) 형식으로 수행될 수 있다. 즉, 일정한 시간 간격으로 계속적으로 수행될 수 있다. 이 경우, 라이브 뷰에서의 얼굴 인식이 사용자에 의하여 메뉴 또는 단축키 등의 선택에 의하여 온(ON) 또는 오프(OFF)로 설정될 수 있다. The first face recognition step S401 may be performed in a live view format. That is, it can be performed continuously at regular time intervals. In this case, the face recognition in the live view may be set to ON or OFF by a user selecting a menu or a shortcut key.

즉, 라이브 뷰에서의 얼굴 인식이 온(ON)으로 설정되어 있는 경우에만 제1 얼굴 인식 단계(S401)가 도 4에 도시된 방법에 의하여 수행될 수 있다. 이때, 촬영 준비 신호(S1)의 입력 여부를 판단하여(S510), 촬영 준비 신호(S1)가 입력되기 전까지 설정된 일정한 시간 간격으로 제1 얼굴 인식 단계(S401)가 수행될 수 있다. That is, the first face recognition step S401 may be performed by the method illustrated in FIG. 4 only when face recognition in the live view is set to ON. In this case, by determining whether the photographing preparation signal S1 is input (S510), the first face recognition step S401 may be performed at a predetermined time interval set before the photographing preparation signal S1 is input.

제1 얼굴 인식 단계(S401)가 수행되는 시간 간격은 미리 설정될 수도 있으며, 입력 영상 또는 촬영 조건 또는 사용자에 의한 설정에 따라 적응적으로 변경되어 설정될 수 있다. The time interval at which the first face recognition step S401 is performed may be set in advance, or may be adaptively changed and set according to an input image or a shooting condition or a setting by a user.

촬영 준비 신호(S1)는 셔터 릴리즈 버튼(도 1의 26)이 일단으로 눌려지는 것에 의하여 생성되어 제어부(도 3의 320)로 입력될 수 있다. 또한, 촬영 개시 신호(S2)는 셔터 릴리즈 버튼(도 1의 26)이 이단으로 눌려지는 것에 의하여 생성되어 제어부(도 3의 320)로 입력될 수 있다. The shooting preparation signal S1 may be generated by pressing the shutter release button 26 of FIG. 1 to one end and may be input to the controller 320 of FIG. 3. In addition, the photographing start signal S2 may be generated by pressing the shutter release button 26 of FIG. 1 in two steps and may be input to the controller 320 of FIG. 3.

촬영 준비 설정 및 고정 단계(S530, S540)에는 제1 입력 영상에 대하여 촬영 준비 설정을 수행하고, 그에 따른 촬영 준비 설정을 고정한다. 촬영 준비 설정 및 고정 단계(S530, S540)는 촬영 준비 설정 단계(S530), 및 촬영 준비 설정 고정 단계(S540)를 구비한다. In the shooting preparation setting and fixing steps S530 and S540, shooting preparation setting is performed on the first input image, and the shooting preparation setting is fixed accordingly. The shooting preparation setting and fixing steps S530 and S540 include a shooting preparation setting step S530, and a shooting preparation setting setting step S540.

촬영 준비 설정 단계(S530)에는 제1 얼굴 인식 단계(S401)에서 검출된 얼굴 영역을 기준으로 촬영 준비 설정을 수행할 수 있다. 이때, 촬영 준비 설정은 검출된 얼굴 영역을 기준으로 하여 자동 포커스 조정, 자동 노출 조정, 자동 화이트 밸런스 조정 중의 적어도 하나 이상을, 바람직하게는 모두를 조정하여 수행될 수 있다. In the shooting preparation setting step S530, the shooting preparation setting may be performed based on the face area detected in the first face recognition step S401. In this case, the photographing preparation setting may be performed by adjusting at least one or more, preferably all of the automatic focus adjustment, the automatic exposure adjustment, and the automatic white balance adjustment based on the detected face region.

촬영 준비 설정 고정 단계(S540)에는 촬영 준비 설정 단계(S530)에서 설정된 촬영 준비 설정을 고정한다. 따라서, 디지털 영상 처리장치가 움직이는 경우에도, 다시 촬영 준비 설정을 하지 아니한다. 이러한 촬영 준비 설정의 고정은 사용자에 의하여 셔터 릴리즈 버튼(도 1의 26)이 눌려진 상태에서 한 번 촬영 준비 설정이 이루어지면, 그때의 촬영 준비 설정이 고정될 수 있다. In the shooting preparation setting fixing step (S540), the shooting preparation setting set in the shooting preparation setting step (S530) is fixed. Therefore, even when the digital image processing apparatus moves, the shooting preparation setting is not made again. If the shooting preparation setting is made once in the state where the shutter release button (26 in FIG. 1) is pressed by the user, the shooting preparation setting at that time may be fixed.

한편, 촬영 준비 설정 및 고정 단계(S530, S540)는 입력 영상에서 얼굴 영역이 검출된 경에만 수행될 수 있다. 이를 위하여, 디지털 영상 처리장치의 제어방법(S500)은 얼굴영역 판단단계(S520)를 더 구비할 수 있다. On the other hand, the shooting preparation setting and fixing step (S530, S540) may be performed only when the face area is detected in the input image. To this end, the control method (S500) of the digital image processing apparatus may further include a face region determination step (S520).

얼굴영역 판단단계(S520)에는 제1 얼굴 인식 단계(S401)에서 얼굴 영역이 검출되었는가 여부를 판단한다. 이에 따라, 얼굴 영역이 검출된 경우에는 촬영 준비 설정 및 고정 단계(S530, S540)가 수행될 수 있다. In the face area determination step (S520), it is determined whether the face area is detected in the first face recognition step (S401). Accordingly, when the face region is detected, the shooting preparation setting and fixing steps S530 and S540 may be performed.

얼굴영역 판단단계(S520)에서의 판단 결과, 얼굴 영역이 검출되지 아니한 경우에는 기준 영역을 기준으로 기본 촬영 준비 설정 및 고정단계(S535, S545)를 수행할 수 있다. 기본 촬영 준비 설정 및 고정단계(S535, S545)는 기본 촬영 준비 설정단계(S535) 및 기본 촬영 준비 설정 고정단계(S545)를 구비할 수 있다. As a result of the determination in the face region determination step S520, when the face region is not detected, the basic photographing preparation setting and fixing steps S535 and S545 may be performed based on the reference region. The basic shooting preparation setting and fixing steps S535 and S545 may include a basic shooting preparation setting step S535 and a basic shooting preparation setting fixing step S545.

기본 촬영 준비 설정단계(S535)에는 설정된 기준 영역에 대하여 촬영 준비 설정을 수행한다. 이때, 기준 영역은 입력되는 영상의 설정된 크기의 중앙 영역이 될 수 있다. 기본 촬영 준비 설정 고정단계(S545)에는 기본 촬영 준비 설정단계(S535)에서 설정된 촬영 준비 설정을 고정한다. In the basic shooting preparation setting step (S535), shooting preparation setting is performed on the set reference area. In this case, the reference area may be a central area of a set size of the input image. In the basic shooting preparation setting fixing step (S545), the shooting preparation setting set in the basic shooting preparation setting step (S535) is fixed.

이때, 촬영 준비 설정을 고정한 상태에서 촬영 개시 신호(S2)가 입력될 때까지 라이브 뷰를 수행하면서 대기할 수 있다. At this time, the camera may wait while performing the live view until the shooting start signal S2 is input while the shooting preparation setting is fixed.

또한, 촬영 개시 신호 판단단계(S580)에서의 판단 결과 촬영 개시 신호(S2)가 입력된 것으로 판단되면, 설정된 촬영 준비 설정에 의하여 촬영 단계(S590)에서 촬영이 수행될 수 있다. In addition, when it is determined that the photographing start signal S2 is input as a result of the determination in the photographing start signal determining step S580, photographing may be performed in the photographing step S590 by the set photographing preparation setting.

한편, 얼굴영역 판단단계(S520)는 촬영 준비 신호(S1)의 입력 여부를 판단하여(S510) 촬영 준비 신호(S1)가 입력된 것으로 판단되는 경우에 수행될 수 있다. Meanwhile, the face region determination step S520 may be performed when it is determined whether the photographing preparation signal S1 is input by determining whether the photographing preparation signal S1 is input (S510).

제2 얼굴 인식 단계(S402)에는 촬영 준비 설정이 고정된 상태에서 새로이 입력되는 제2 입력 영상에서 사람의 얼굴을 인식한다. 이를 위하여, 제2 얼굴 인식 단계(S402)는 영상 입력단계(S410), 얼굴 검색단계(S420), 및 얼굴영역 검출단계(S440)를 구비할 수 있다. In the second face recognizing step (S402), a face of a person is recognized from a second input image newly input while the photographing preparation setting is fixed. To this end, the second face recognition step S402 may include an image input step S410, a face search step S420, and a face region detection step S440.

영상 입력단계(S410)에는 제2 입력 영상을 입력받는다. 얼굴 검색단계(S420)에는 제2 입력 영상에서 얼굴을 검색한다. 얼굴영역 검출단계(S440)에는 제2 입력 영상에서 사람의 얼굴이 포함된 얼굴 영역을 검출한다. In the image input step S410, a second input image is received. In the face searching operation S420, a face is searched for in the second input image. In the face region detecting operation S440, a face region including a face of a person is detected from the second input image.

얼굴 포함 여부를 판단하는 단계(S430)에서 얼굴 검색단계(S420)에서의 얼굴 검색 결과로부터 제2 입력 영상에 사람의 얼굴이 포함되어 있는가 여부를 판단하여, 제2 입력 영상에 사람의 얼굴이 포함된 것으로 판단되는 경우에, 얼굴영역 검출단계(S440)가 수행될 수 있다. In step S430, whether a face is included in the second input image may be determined based on the face search result in the face search operation S420. If it is determined that the image is detected, the face area detection step S440 may be performed.

얼굴영역 검출단계(S440)에는 표시부(도 3의 350)에 제2 입력 영상을 표시 영상으로 하여 표시하고, 표시 영상에 검출된 얼굴 영역을 표시할 수 있다. 이때, 얼굴 영역은 사각형 등의 도형으로 표시될 수 있다. 다만, 본 발명에서의 얼굴 영역 표시는 이에 한정되지 아니하고, 얼굴 영역은 사용자가 인식할 수 있는 다양한 형태의 표시가 될 수 있다. In the face region detection step S440, the second input image may be displayed as a display image on the display unit 350 (FIG. 3), and the detected face region may be displayed on the display image. In this case, the face area may be displayed in a shape such as a rectangle. However, the display of the face area in the present invention is not limited thereto, and the face area may be various types of display that can be recognized by the user.

제2 얼굴 인식 단계(S402)는 촬영 개시 신호(S2)가 입력될 때까지 설정된 일정한 시간 간격으로 계속적으로 수행될 수 있다. 이때, 제2 얼굴 인식 단계(S402)가 촬영 준비 설정이 고정된 상태에서도 수행될 수 있다. The second face recognition step S402 may be continuously performed at a predetermined time interval until the photographing start signal S2 is input. In this case, the second face recognition step S402 may be performed even when the shooting preparation setting is fixed.

제2 얼굴 인식 단계(S402)가 수행되는 시간 간격은 미리 설정될 수도 있으며, 입력 영상 또는 촬영 조건 또는 사용자에 의한 설정에 따라 적응적으로 변경되어 설정될 수 있다. The time interval at which the second face recognition step S402 is performed may be set in advance, or may be adaptively changed and set according to an input image or a shooting condition or a setting by a user.

이때, 촬영 개시 신호 판단단계(S580)에서의 판단 결과 촬영 개시 신호(S2)가 입력된 것으로 판단되면, 설정된 촬영 준비 설정에 의하여 촬영 단계(S590)에서 촬영이 수행될 수 있다. 이때, 촬영 개시 신호(S2)가 입력되지 아니한 경우에, 일정한 시간 간격으로 제2 얼굴 인식 단계(S402)가 반복적으로 수행될 수 있다. In this case, when it is determined that the photographing start signal S2 is input as a result of the determination in the photographing start signal determining step S580, photographing may be performed at the photographing step S590 by the set photographing preparation setting. In this case, when the photographing start signal S2 is not input, the second face recognition step S402 may be repeatedly performed at regular time intervals.

한편, 촬영 준비 설정이 고정된 후에도 계속적으로 얼굴 인식을 수행하여, 영상의 변화가 큰 경우에 촬영 준비 설정을 다시 수행할 수 있다. 따라서, 이에 따라 촬영되는 영상으로 향상된 품질의 영상을 얻을 수 있다. Meanwhile, even after the shooting preparation setting is fixed, face recognition may be continuously performed, and when the change of the image is large, the shooting preparation setting may be performed again. Therefore, an image of improved quality can be obtained from the image photographed accordingly.

이를 위하여, 디지털 영상 처리장치의 제어방법(S500)은 표시된 제1 얼굴 인식 단계(S401)와 제2 얼굴 인식 단계(S402) 각각에서 검출된 얼굴 영역의 위치가 설정된 기준 거리 이상 이동된 경우에는 촬영 준비 설정 및 촬영 준비 설정의 고정을 다시 수행할 수 있다. To this end, the control method (S500) of the digital image processing apparatus photographs when the position of the face region detected in each of the displayed first face recognition step S401 and the second face recognition step S402 is moved by a set distance or more. Fixing the ready setting and the shooting ready setting can be performed again.

디지털 영상 처리장치의 제어방법(S500)은 이동거리 판단단계(S550), 촬영 준비 설정 재수행 단계(S560), 및 촬영 준비 설정 재고정 단계(S570)를 더 구비할 수 있다. The control method (S500) of the digital image processing apparatus may further include a moving distance determination step (S550), a shooting preparation setting re-execution step (S560), and a shooting preparation setting resetting step (S570).

이동거리 판단단계(S550)에는 제1 입력 영상과 제2 입력 영상의 각각에서 검출된 얼굴 영역이 설정된 기준 거리 이상 떨어져 있는지 여부를 판단한다. 촬영 준비 설정 재수행 단계(S560)에는 제2 얼굴 인식 단계(S402)에서 검출된 얼굴 영역을 기준으로 촬영 준비 설정을 수행할 수 있다. 촬영 준비 설정 재고정 단계(S570)에는 촬영 준비 설정 재수행 단계(S560)에서 설정된 촬영 준비 설정을 고정한다. In the movement distance determination step (S550), it is determined whether the face area detected in each of the first input image and the second input image is separated by a set reference distance or more. In the re-imaging preparation step (S560), the photographing preparation setting may be performed based on the face area detected in the second face recognition step (S402). In the shooting preparation setting resetting step (S570), the shooting preparation setting set in the shooting preparation setting redo step (S560) is fixed.

이동거리 판단단계(S550)에서의 판단 결과, 제1 입력 영상과 제2 입력 영상의 각각에서 검출된 얼굴 영역이 설정된 기준 거리 이상 떨어져 있어, 얼굴 영역의 위치가 기준 거리 이상 이동된 것으로 판단되면, 촬영 준비 설정 재수행 단계(S560) 및 촬영 준비 설정 재고정 단계(S570)가 수행될 수 있다. As a result of the determination in the movement distance determining step S550, when the face region detected in each of the first input image and the second input image is separated by a set reference distance or more, and the position of the face region is determined to be moved by the reference distance or more, The shooting preparation setting re-execution step S560 and the shooting preparation setting reconsideration step S570 may be performed.

이동거리 판단단계(S550)에서의 판단 결과, 제1 입력 영상과 제2 입력 영상의 각각에서 검출된 얼굴 영역이 설정된 기준 거리 이상 떨어져 있지 아니하여, 얼굴 영역의 위치가 기준 거리 이상 이동되지 아니한 것으로 판단되면, 촬영 준비 설정 재수행 단계(S560) 및 촬영 준비 설정 재고정 단계(S570)를 수행하지 아니하고, 촬영 개시 신호(S2)가 입력될 때까지 라이브 뷰를 수행하면서 대기할 수 있다. As a result of the determination in the movement distance determining step S550, the face regions detected in each of the first input image and the second input image are not separated by more than the set reference distance, and thus the position of the face region is not moved by the reference distance. If it is determined, the camera may wait while performing the live view until the shooting start signal S2 is input without performing the shooting preparation setting re-execution step S560 and the shooting preparation setting resetting step S570.

이때, 촬영 개시 신호(S2)가 입력될 때까지 제2 얼굴 인식 단계(S402), 촬영 준비 설정 재수행 단계(S560), 및 촬영 준비 설정 재고정 단계(S570)가 설정된 시간 간격으로 수행될 수 있다. In this case, the second face recognition step S402, the shooting preparation setting re-execution step S560, and the shooting preparation setting resetting step S570 may be performed at set time intervals until the shooting start signal S2 is input. have.

또한, 다른 실시예로서 디지털 영상 처리장치의 제어방법(S600)은 도 6에 도시된 바와 같이 제2 입력 영상에 대한 촬영 준비 설정에 따라 촬영을 수행하는 단계(S690)를 더 구비할 수 있다. In another exemplary embodiment, the control method S600 of the digital image processing apparatus may further include performing photographing according to the photographing preparation setting for the second input image as illustrated in FIG. 6.

즉, 이동거리 판단단계(S550)에서의 판단 결과, 제1 입력 영상과 제2 입력 영상의 각각에서 검출된 얼굴 영역이 설정된 기준 거리 이상 떨어져 있는 것으로 판단되는 경우, 촬영 준비 설정 재수행 단계(S560) 및 촬영 준비 설정 재고정 단계(S570)가 수행하고, 이때의 촬영 준비 설정에 의하여 촬영이 수행될 수 있다(S690). That is, when it is determined in the moving distance determination step S550 that the face area detected in each of the first input image and the second input image is separated by a set reference distance or more, re-executing the shooting preparation setting step S560. ) And the photographing preparation setting reconsideration step (S570) may be performed, and photographing may be performed by the photographing preparation setting at this time (S690).

이때, 촬영 개시 신호(S2)의 입력을 기다리지 아니하고, 촬영 준비 설정 재수행 단계(S560)에서 설정된 촬영 준비 설정에 의하여 촬영이 수행될 수 있다. In this case, the recording may be performed by the shooting preparation setting set in the shooting preparation setting re-execution step S560 without waiting for the input of the shooting start signal S2.

또한, 이동거리 판단단계(S550)에서의 판단 결과, 제1 입력 영상과 제2 입력 영상의 각각에서 검출된 얼굴 영역이 설정된 기준 거리 이상 떨어져 있지 아니한 것으로 판단되는 경우, 현재 설정된 촬영 준비 설정에 의하여 촬영 개시 신호(S2)의 입력을 기다리지 아니하고 촬영이 수행될 수 있다. In addition, when it is determined in the moving distance determination step S550 that the face area detected in each of the first input image and the second input image is not separated by more than the set reference distance, the current shooting preparation setting is performed. The imaging may be performed without waiting for the input of the imaging start signal S2.

또한, 얼굴영역 판단단계(S520)에서의 판단 결과, 얼굴 영역이 검출되지 아니한 경우에는 기준 영역을 기준으로 기본 촬영 준비 설정 및 고정단계(S535, S545)를 수행하고, 촬영 개시 신호 판단단계(S680)에서의 판단 결과 촬영 개시 신호(S2)가 입력된 것으로 판단되면, 설정된 촬영 준비 설정에 의하여 촬영 단계(S690)에서 촬영이 수행될 수 있다. In addition, when the face region is not detected as a result of the determination in the face region determination step S520, the basic shooting preparation setting and fixing steps S535 and S545 are performed based on the reference region, and the shooting start signal determination step S680. If it is determined that the photographing start signal S2 is input, the photographing may be performed in the photographing step S690 by the photographing preparation setting.

도 6에 도시된 디지털 영상 처리장치의 제어방법(S600)은 도 5에 도시된 디지털 영상 처리장치의 제어방법(S500)에 대하여, 이상에서 설명되는 사항을 제외하고 동일하다. 따라서, 디지털 영상 처리장치의 제어방법(S600)에 대하여, 도 5에 도시된 디지털 영상 처리장치의 제어방법(S500)에 대한 설명을 참조한다. The control method S600 of the digital image processing apparatus illustrated in FIG. 6 is the same as the control method S500 of the digital image processing apparatus illustrated in FIG. 5 except for the matters described above. Therefore, the control method S500 of the digital image processing apparatus shown in FIG. 5 will be described with reference to the control method S600 of the digital image processing apparatus.

본 발명은 첨부된 도면에 도시된 일 실시예를 참고로 설명되었으나, 이는 예시적인 것에 불과하며, 당해 기술분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 수 있을 것이다. 따라서, 본 발명의 진정한 보호 범위는 첨부된 청구 범위에 의해서만 정해져야 할 것이다. While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is clearly understood that the same is by way of illustration and example only and is not to be taken by way of limitation, You will understand. Accordingly, the true scope of protection of the present invention should be determined only by the appended claims.

100, 200 : 디지털 카메라 21 : 방향버튼
22 : 메뉴 OK버튼 W : 광각-줌 버튼
T : 망원-줌 버튼 25 : 디스플레이 패널
26 : 셔터 릴리즈 버튼 27 : 뷰 파인더
28 : 전원 스위치 201 : CDS-ADC
202 : 타이밍 회로 203 : RTC
204 : DRAM 205 : EEPROM
206 : MCI 207 : DSP
208 : RS232C I/F 209 : 비디오 필터
210 : 구동부 211 : 플래시 제어기
212 : 마이크로 제어기 213 : 오디오 처리기
214 : 디스플레이 패널 구동부 215 : 디스플레이 패널100, 200: digital camera 21: direction button
22: Menu OK button W: Wide-Zoom button
T: Tele-Zoom Button 25: Display Panel
26: shutter release button 27: viewfinder
28: power switch 201: CDS-ADC
202: timing circuit 203: RTC
204: DRAM 205: EEPROM
206: MCI 207: DSP
208: RS232C I / F 209: Video filter
210: driver 211: flash controller
212: microcontroller 213: audio processor
214: display panel driver 215: display panel

Claims

(a) displaying an input first input image and recognizing a face of a person in the first input image;
(b) performing shooting preparation setting on the first input image according to an input of a shooting preparation signal and fixing the set shooting preparation setting; And
(c) controlling a digital image processing apparatus comprising displaying a newly input second input image and recognizing a face of a person in the second input image before inputting a shooting start signal while the shooting preparation setting is fixed; Way.

The method of claim 1,
(d) determining whether a face area detected in each of the first input image and the second input image is separated by a set reference distance or more, and
and (e) performing shooting preparation setting on the second input image and fixing the shooting preparation setting according to the determination result of step (d).

3. The method of claim 2,
And performing photographing according to a photographing preparation setting for the second input image.

The method of claim 1,
In step (a),
Receiving a first input image,
Searching for a face in the first input image;
Determining whether a face of a person is included in the first input image, and
And detecting a face area in which the face of the person is included in the first input image when the face of the person is included in the first input image.

The method of claim 1,
In step (c),
Receiving a second input image;
Searching for a face in the second input image;
Determining whether a face of a person is included in the second input image, and
And detecting a face area in which the face of the person is included in the first input image when the face of the person is included in the second input image.

5. The method of claim 4,
(f) determining whether the face area is detected in the first input image;
And (b) the step is performed when the face region is detected in the step (f).

The method according to claim 6,
When the face area is not detected in step (f), performing shooting preparation setting on the set reference area; and
And fixing the photographing preparation setting.

The method of claim 7, wherein
And performing a photographing operation by the photographing preparation setting by inputting a photographing start signal.

The method according to claim 6,
(g) further comprising determining whether a shooting ready signal is input,
The control method of the digital image processing apparatus is performed when the step (f) is determined to be the input signal ready to shoot in the step (g).

The method of claim 1,
The control method of the digital image processing apparatus is performed in step (a) is repeatedly performed at a set time interval until the shooting preparation signal is input.

The method of claim 1,
The control method of the digital image processing apparatus is the step (c) is repeatedly performed at a set time interval until the shooting start signal is input.

The method of claim 1,
And at least one of auto focus adjustment, auto exposure adjustment, and auto white balance adjustment is set by the shooting preparation setting.

An image input unit configured to receive a first input image;
A shooting preparation setting unit configured to perform shooting preparation setting for the first input image according to an input of a shooting preparation signal;
In the first input image, a face region of a person is recognized, and a shooting preparation setting is performed on the face area, and before a shooting start signal is input in a state where the shooting preparation setting is fixed, the newly input second input image is inputted. A controller for recognizing a face region of a person; And
And a display unit configured to display the first input image and the second input image.

The method of claim 13,
If the face area detected in the first input image and the face area detected in the second input image are separated by a predetermined reference distance or more, a shooting preparation setting is performed again on the face area detected in the second input image. Digital image processing apparatus is fixed according to the shooting preparation settings.

15. The method of claim 14,
And the controller is configured to perform photographing of an input image input through the image input unit according to the photographing preparation setting performed on the face region detected in the second input image.

The method of claim 13,
The controller controls the photographing preparation setting to be performed for the face region when the face region is recognized in the first input image, and sets the reference region when the face region is not recognized in the first input image. A digital image processing apparatus that controls shooting preparation settings to be performed.

17. The method according to claim 13 or 16,
A digital image processing apparatus which performs photographing by the photographing preparation setting by input of a photographing start signal.

17. The method according to claim 13 or 16,
A digital image in which the photographing preparation setting is performed by inputting a photographing preparation signal, a first input image is input at a predetermined time interval until the photographing preparation signal is input, and the face region is recognized from the first input image. Processing unit.

The method of claim 13,
And at least one of auto focus adjustment, auto exposure adjustment, and auto white balance adjustment by the shooting preparation setting.

The method of claim 13,
And the display unit further displays a face region of a person recognized in the first input image and a face region of a person recognized in the second input image.

The method of claim 1,
Recognizing a face of a person in the first input image includes displaying a face region of the person recognized in the first image,
Recognizing a face of a person in the second input image comprises the step of displaying the face area of the person recognized in the second image.