KR101788740B1 - 피사체 검출 방법 및 장치와, 디지털 촬영 장치 - Google Patents

피사체 검출 방법 및 장치와, 디지털 촬영 장치 Download PDF

Info

Publication number
KR101788740B1
KR101788740B1 KR1020110119127A KR20110119127A KR101788740B1 KR 101788740 B1 KR101788740 B1 KR 101788740B1 KR 1020110119127 A KR1020110119127 A KR 1020110119127A KR 20110119127 A KR20110119127 A KR 20110119127A KR 101788740 B1 KR101788740 B1 KR 101788740B1
Authority
KR
South Korea
Prior art keywords
input image
subject
degrees
coordinate value
detected
Prior art date
Application number
KR1020110119127A
Other languages
English (en)
Other versions
KR20130053340A (ko
Inventor
김종선
송원석
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020110119127A priority Critical patent/KR101788740B1/ko
Priority to US13/599,120 priority patent/US9111129B2/en
Publication of KR20130053340A publication Critical patent/KR20130053340A/ko
Application granted granted Critical
Publication of KR101788740B1 publication Critical patent/KR101788740B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/24—Aligning, centring, orientation detection or correction of the image
    • G06V10/242—Aligning, centring, orientation detection or correction of the image by image rotation, e.g. by 90 degrees
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0492—Change of orientation of the displayed image, e.g. upside-down, mirrored
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/53—Constructional details of electronic viewfinders, e.g. rotatable or detachable

Abstract

본 발명은 피사체 검출 방법 및 장치에 관한 것으로, 본 발명의 일 실시 예에 따른 피사체 검출 방법은 디스플레이부가 플립되는 디지털 촬영 장치에서 얼굴 검출을 효율적으로 수행할 수 있고, 디지털 촬영 장치의 회전에 따라 이미지 센서를 통해 입력되는 영상과 디스플레이부에 디스플레이되는 영상이 달라지는 경우에 얼굴 검출 좌표를 보정해줌으로써 얼굴 검출의 신뢰성을 높일 수 있다.

Description

피사체 검출 방법 및 장치와, 디지털 촬영 장치{Subject detecting method and apparatus, and digital photographing apparatus}
본 발명은 피사체 검출 방법 및 장치와, 디지털 촬영 장치에 관한 것이다.
최근 출시되는 대부분의 디지털 카메라는 피사체 검출 또는 얼굴 검출 기능을 제공하고 있다. 기본적으로 얼굴 검출은 얼굴 데이터의 학습에 기반하기 때문에 이미지 센서를 통해 입력된 영상에서 학습한 얼굴 데이터를 찾아서 얼굴 영역을 검출한다.
한편, 디지털 카메라들은 대부분 LCD 창과 같은 표시 장치가 장착되므로, 촬영하고자 하는 피사체가 LCD 창에 표시되어 촬영 작업을 편리하게 실시할 수 있다. 그런데 최근의 디지털 카메라들은 이러한 LCD 창의 각도를 변경할 수 있도록 함으로써 셀프-카메라 촬영의 편리성을 향상시키고 있다. 즉 디지털 카메라에서 렌즈가 위치하는 면의 반대 측면에 배치되는 LCD 창이 본체에 회전 가능하게 연결됨으로써, 셀프-카메라 촬영을 하는 사용자가 LCD 창을 회전시킨 후 LCD 창을 통해 자신의 모습을 확인하며 촬영을 할 수 있게 하는 기술이 사용되기도 한다.
본 발명의 일 실시 예는 디스플레이부가 플립되는 디지털 촬영 장치에서 얼굴 검출을 효율적으로 수행할 수 있고, 디지털 촬영 장치의 회전에 따라 이미지 센서를 통해 입력되는 영상과 디스플레이부에 디스플레이되는 영상이 달라지는 경우에 얼굴 검출 좌표를 보정해줌으로써 얼굴 검출의 신뢰성을 높일 수 있는 피사체 검출 방법 및 장치를 제공하는 것이다.
상기 기술적 과제를 달성하기 위한, 본 발명의 일 실시 예에 따른 피사체 검출 방법은 입력 영상을 표시부에 디스플레이하는 단계; 및 상기 입력 영상에 포함된 피사체를 검출하는 단계를 포함하되, 상기 입력 영상의 회전상태 및 상기 입력 영상의 디스플레이 상태에 따라 상기 피사체를 검출하는 것을 특징으로 한다.
상기 디스플레이 상태는, 상기 피사체와 대면하도록 디스플레이되는 상태인 것을 특징으로 한다.
상기 입력 영상의 회전상태는, 실질적으로 0도, 90도 또는 180도 중 하나를 포함하는 것을 특징으로 한다.
상기 피사체 검출 방법은 상기 표시부에 디스플레이되는 입력 영상에 포함된 피사체의 좌표값과, 상기 검출된 피사체의 좌표값은 동일하지 않은 것을 특징으로 한다.
상기 표시부가 플립되고, 상기 입력 영상이 기준각도에서 실질적으로 0도 회전된 경우, 상기 피사체 검출 방법은 상기 검출된 피사체의 좌표값을 상하 반전시키는 단계; 및 상기 검출된 피사체를 가리키는 피사체 검출 프레임을 상기 반전한 좌표값에 상응하도록 디스플레이하는 단계를 포함하는 것을 특징으로 한다.
상기 피사체 검출 방법은 상기 입력 영상의 회전상태에 따라 상기 입력 영상을 상기 회전방향에 역방향으로 회전시키는 것을 특징으로 한다.
상기 피사체 검출 방법은 상기 표시부가 플립되고, 상기 입력 영상이 기준각도에서 실질적으로 90도 시계 방향으로 회전된 경우, 상기 입력 영상을 실질적으로 90도 반 시계 방향으로 회전시키는 단계; 상기 회전된 입력 영상으로부터 상기 피사체를 검출하는 단계; 및 상기 피사체의 좌표값을 좌우 반전시키고, 상기 검출한 피사체를 가리키는 피사체 검출 프레임을 상기 반전한 좌표값에 상응하도록 디스플레이하는 단계를 포함하는 것을 특징으로 한다.
상기 피사체 검출 방법은 상기 표시부가 플립되고, 상기 입력 영상이 기준각도에서 실질적으로 90도 반 시계 방향으로 회전된 경우, 상기 입력 영상을 실질적으로 90도 시계 방향으로 회전시키는 단계; 상기 회전된 입력 영상으로부터 상기 피사체를 검출하는 단계; 및 상기 피사체의 좌표값을 좌우 반전시키고, 상기 검출한 피사체를 가리키는 피사체 검출 프레임을 상기 반전한 좌표값에 상응하도록 디스플레이하는 단계를 포함하는 것을 특징으로 한다.
상기 피사체 검출 방법은 상기 표시부가 플립되고, 상기 입력 영상이 기준각도에서 실질적으로 180도 회전된 경우, 상기 입력 영상을 실질적으로 180도 회전시키는 단계; 상기 회전된 입력 영상으로부터 상기 피사체를 검출하는 단계; 및 상기 검출한 피사체의 좌표값을 상하 반전시키고, 상기 검출한 피사체를 가리키는 피사체 검출 프레임을 상기 반전한 좌표값에 상응하도록 디스플레이하는 단계를 포함하는 것을 특징으로 한다.
상기 피사체는, 얼굴인 것을 특징으로 한다.
본 발명의 다른 실시 예에 따른 피사체 검출 방법은 입력 영상을 표시부에 디스플레이하는 단계; 및 상기 입력 영상에 포함된 피사체를 검출하는 단계를 포함하되, 상기 표시부에 디스플레이되는 입력 영상에 포함된 피사체의 좌표값과, 상기 검출된 피사체의 좌표값은 동일하지 않은 것을 특징으로 한다.
상기 또 다른 기술적 과제를 달성하기 위한, 본 발명의 또 다른 실시 예에 따른 피사체 검출 장치는 입력 영상을 디스플레이하는 표시부; 및 상기 입력 영상에 포함된 피사체를 검출하는 피사체 검출부를 포함하되,
상기 피사체 검출부는 상기 입력 영상의 회전상태 및 상기 입력 영상의 디스플레이 상태에 따라 상기 피사체를 검출하는 것을 특징으로 한다.
상기 디스플레이 상태는, 상기 피사체와 대면하도록 디스플레이되는 상태인 것을 특징으로 한다.
상기 피사체 검출 장치는 상기 표시부에 디스플레이되는 입력 영상에 포함된 피사체의 좌표값과, 상기 검출된 피사체의 좌표값은 동일하지 않은 것을 특징으로 한다.
상기 피사체 검출 장치는 상기 표시부가 플립되고, 상기 입력 영상이 기준각도에서 실질적으로 0도 회전된 경우, 상기 검출된 피사체의 좌표값을 상하 반전시키는 검출 좌표 변환부; 및 상기 검출된 피사체를 가리키는 피사체 검출 프레임을 상기 반전한 좌표값에 상응하도록 디스플레이하는 검출 프레임 표시 제어부를 포함하는 것을 특징으로 한다.
상기 피사체 검출 장치는 상기 입력 영상의 회전상태 및 상기 입력 영상의 디스플레이 상태를 감지하는 센서부; 및 상기 감지한 입력 영상의 회전상태에 따라 상기 입력 영상을 상기 회전방향에 역방향으로 회전시키는 영상 변환부를 더 포함하는 것을 특징으로 한다.
상기 피사체는, 얼굴인 것을 특징으로 한다.
상기 또 다른 기술적 과제를 달성하기 위한, 본 발명의 또 다른 실시 예에 따른 디지털 촬영 장치는 촬영될 피사체로부터 빛을 수신하여 입력 영상을 생성하는 촬상 소자; 상기 입력 영상을 디스플레이하기 위한 디스플레이 스크린; 상기 입력 영상의 회전상태 및 상기 디스플레이 스크린의 회전상태를 감지하는 센서부; 및 상기 입력 영상의 회전상태 및 상기 입력 영상의 디스플레이 상태에 따라 상기 피 사체를 검출하고, 상기 검출한 피사체를 가리키는 피사체 검출 프레임을 상기 디스플레이 스크린에 디스플레이하는 디지털 신호 처리부를 포함한다.
상기 디스플레이 스크린은, 상기 피사체와 대면하도록 플립되도록 구성된 것을 특징으로 한다.
상기 입력 영상의 회전상태는, 실질적으로 0도, 90도 또는 180도 중 하나를 포함하는 것을 특징으로 한다.
상기 디지털 신호 처리부는, 상기 디스플레이 스크린에 디스플레이되는 상기 입력 영상에 포함된 피사체의 좌표값과, 상기 검출된 피사체의 좌표값은 동일하지 않은 것을 특징으로 한다.
상기 센서부는, 상기 입력 영상의 회전상태를 감지하는 가속도 센서; 및 상기 디스플레이의 회전 상태를 감지하는 홀 센서를 포함하는 것을 특징으로 한다.
상기 또 다른 기술적 과제를 달성하기 위한, 상기 피사체 검출 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 기록매체를 포함한다.
본 발명의 일 실시 예에 따른 피사체 검출 방법은 디스플레이부가 플립되는 디지털 촬영 장치에서 얼굴 검출을 효율적으로 수행할 수 있고, 디지털 촬영 장치의 회전에 따라 이미지 센서를 통해 입력되는 영상과 디스플레이부에 디스플레이되는 영상이 달라지는 경우에 얼굴 검출 좌표를 보정해줌으로써 얼굴 검출의 신뢰성을 높일 수 있다.
도 1은 본 발명의 일 실시 예에 따른 디지털 촬영 장치의 일 예로서 디지털 카메라(100)의 개략도이다.
도 2는 도 1에 도시된 디지털 신호 처리부(200)의 일 실시 예에 따른 개략도이다.
도 3은 도 1에 도시된 디지털 신호 처리부(200)의 다른 실시 예에 따른 개략도이다.
도 4는 도 1에 도시된 디지털 카메라(100)의 디스플레이 스크린의 디스플레이 상태에 따른 예시도들이다.
도 5는 도 1에 도시된 디지털 카메라(100)의 디스플레이 스크린이 플립되는 것을 설명하기 위한 도면이다.
도 6은 도 1에 도시된 디지털 카메라(100)의 디스플레이 스크린이 플립된 상태에서 입력 영상의 회전상태를 설명하기 위한 도면이다.
도 7 내지 10은 본 발명의 또 다른 실시 예들에 따른 피사체 검출 방법들을 설명하기 위한 예시 도들이다.
도 11은 본 발명의 또 다른 실시 예에 따른 피사체 검출 방법을 설명하기 위한 흐름도이다.
본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시 예를 가질 수 있는바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
본 출원에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이하, 본 발명의 실시 예를 첨부도면을 참조하여 상세히 설명하기로 하며, 첨부 도면을 참조하여 설명함에 있어, 동일하거나 대응하는 구성 요소는 동일한 도면번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
도 1은 본 발명의 일 실시 예에 따른 디지털 촬영 장치의 일 예로 디지털 카메라(100)의 개략적인 구조를 도시한 도면이다.
본 발명의 일 실시 예에 따른 디지털 촬영 장치의 일 실시 예로서 디지털 카메라(100)를 설명한다. 그러나 상기 디지털 촬영 장치가 도 1에 도시된 디지털 카메라(100)에 한정되는 것은 아니며, 카메라폰, PDA(personal digital assistant), PMP(portable multimedia player), 캠코더 등의 디지털 기기에도 적용될 수 있다.
본 발명의 일 실시 예에 따른 디지털 카메라(100)는 렌즈부(110), 렌즈부 구동부(111), 조리개(112), 조리개 구동부(113), 촬상 소자(115), 촬상 소자 제어부(116), 센서부(117), 아날로그 신호 처리부(120), 프로그램 저장부(130), 버퍼 저장부(140), 데이터 저장부(150), 디스플레이 구동부(162), 디스플레이부(160), 디지털 신호 처리부(200), 및 조작부(170)를 포함할 수 있다. 여기서 렌즈부(110), 렌즈부 구동부(111), 조리개(112), 조리개 구동부(113), 촬상 소자(115), 촬상 소자 제어부(116), 아날로그 신호 처리부(120)는 촬상부로 지칭할 수 있다.
렌즈부(lens unit, 110)는 광학 신호를 집광한다. 렌즈부(110)는 초점 거리(focal length)에 따라 화각이 좁아지거나 또는 넓어지도록 제어하는 줌 렌즈 및 피사체의 초점을 맞추는 포커스 렌즈 등을 포함하며, 줌 렌즈 및 피사체 렌즈는 각각 하나의 렌즈로 구성될 수도 있지만, 복수의 렌즈들의 군집으로 이루어질 수도 있다. 조리개(112)는 그 개폐 정도를 조절하여 입사광의 광량을 조절한다. 여기서, 줌 렌즈는 플러스와 마이너스 굴절력을 가진 복수의 렌즈 군을 포함하여 구성할 수 있다. 예를 들면, 물체 측으로부터 차례로 플러스의 굴절력을 가지는 제1 렌즈군, 마이너스의 굴절력을 가지는 제2 렌즈군, 플러스의 굴절력을 가지는 제3 렌즈군 및 플러스의 굴절력을 가지는 제4 렌즈 군을 포함하여 구성할 수 있다. 따라서, 렌즈부 구동부(111)의 구동 제어에 따라 각각의 렌즈 군의 위치를 조절함으로써 화각을 변화시킬 수 있다. 즉, 광학 구동부(111)의 제어에 따라 광각 단에서 망원 단으로 줌 렌즈를 이동시켜 줌인 동작을 수행하거나, 또는 망원 단에서 광각 단으로 줌 렌즈를 이동시켜 줌 아웃 동작을 수행할 수 있다.
렌즈부 구동부(111) 및 조리개 구동부(113)는 디지털 신호 처리부(200)로부터 제어 신호를 제공받아, 각각 렌즈(110) 및 조리개(112)를 구동한다. 렌즈부 구동부(111)는 렌즈의 위치를 조절하여 초점 거리를 조절하고, 오토 포커싱, 줌 변경, 초점 변경들의 동작을 수행한다. 조리개 구동부(113)는 조리개의 개폐 정도를 조절하고, 특히 f 넘버 또는 조리개 값을 조절하여 오토 포커스, 자동 노출 보정, 초점 변경, 피사계 심도 조절 등의 동작을 수행한다.
렌즈부(110)를 투과한 광학 신호는 촬상 소자(115)의 수광면에 이르러 피사체의 상을 결상한다. 상기 촬상 소자(115)는 광학 신호를 전기 신호로 변환하는 CCD(Charge Coupled Device), CIS(Complementary Metal Oxide Semiconductor Image Sensor) 또는 고속 이미지 센서 등을 사용할 수 있다. 이와 같은 촬상소자(115)는 촬상소자 제어부(116)에 의해 감도 등이 조절될 수 있다. 촬상소자 제어부(116)는 실시간으로 입력되는 영상 신호에 의해 자동으로 생성되는 제어 신호 또는 사용자의 조작에 의해 수동으로 입력되는 제어 신호에 따라 촬상 소자(115)를 제어할 수 있다. 촬상 소자(115)의 노광 시간은 셔터(미도시)로 조절된다. 셔터는 가리개의 이동하여 빛의 입사를 조절하는 기계식 셔터와, 촬상 소자(115)에 전기 신호를 공급하여 노광을 제어하는 전자식 셔터가 있다.
디지털 카메라(100)는 이의 동작 상태 또는 상기 디지털 카메라(100)에서 촬영한 정지 영상 데이터 또는 동영상 데이터를 표시하는 디스플레이부(160)를 포함한다. 디스플레이부(160)는 시각적인 정보 및 청각적인 정보를 사용자에게 제공할 수 있다. 시각적인 정보를 제공하기 위해 디스플레이부(160)는 예를 들면, 액정 디스플레이 패널(LCD), 유기 발광 디스플레이 패널(OLED) 등으로 이루어질 수 있다. 디스플레이 구동부(162)는 디스플레이부(160)에 구동 신호를 제공한다. 본 발명의 일 실시 예에 따른 디스플레이부(160)는 촬영될 피사체와 대면하는 위치에 구비된다. 예를 들면, 디스플레이부(160)가 후면에 구비되어 있다가, 디지털 카메라(100)의 윗 방향으로 플립되어 촬영될 피사체와 대면가능한 전면으로 움직일 수 있도록 구성될 수 있다. 도 5를 참조하면, 본 발명의 일 실시 예에 따른 디스플레이부가 플립 가능하도록 구성된 디지털 카메라가 도시되어 있다. 도시된 것처럼, 좌측에 도시된 것처럼, 디스플레이부(160)가 디지털 카메라의 후면에 있다가 사용자의 조작 등에 의해 디스플레이부(160)가 플립되어 윗방향으로 이동된다. 따라서, 디스플레이부(160)는 촬영될 피사체와 대면하도록 구성된다.
센서부(117)는 디지털 카메라(100)의 회전 상태, 예를 들면, 기준각도인 0도, 시계 방향으로 회전, 반 시계 방향으로 회전, 180도 회전 등을 감지하는 가속도 센서를 포함한다.
도 6을 참조하면, 도 5에 도시된 디스플레이부(160)가 플립된 상태에서, 기준각도인 0도 상태(600), 시계 방향으로 90도 회전한 상태(610), 180도 회전한 상태(620), 반시계 방향으로 90도 회전한 상태(630)가 도시되어 있다. 센서부(117)의 가속도 센서는 도 6에 도시된 회전 방향에 따른 각도 범위를 감지한다. 가속도 센서는 고정된 전도체와 움직일 수 있는 전도체로 구성된 형태로 되어 있으며 한 방향으로 움직일 때 중력가속도(g)의 범위에서 일어나는 변화를 감지하여 데이터를 생성하며 이를 이용하여 기울어진 각도를 계산할 수 있다. 가속도 센서에서 전달되는 각도 중 디지털 신호 처리부(200)를 통해 사용하는 각도는 시계 방향 90, 180도와 반 시계 방향 90, 180도이다. 이를 이용하여 디스플레이부(160)에서 기울어진 각도에 맞게 영상을 디스플레이한다. 즉, 각각의 회전한 상태에서, 디스플레이부(160)에 디스플레이되는 입력 영상은 각각의 회전한 상태에 맞도록 회전되어 디스플레이된다.
또한, 센서부(117)는 디스플레이부(160)의 플립 상태를 감지하는 홀 센서를 포함한다. 도 5에 도시된 것처럼, 디스플레이부(160)가 플립되는 경우, 이를 감지하여 디지털 신호 처리부(200)에 플립 상태에 해당하는 정보를 제공한다. 홀 센서는 회전자 위치검출 장치로 디스플레이부(160)가 플립될 때, 자력에 반응하여 출력을 변하게 하고 이를 통해 디지털 신호 처리부(200)가 플립 여부를 판단한다.
아날로그 신호 처리부(120)는 촬상 소자(115)로부터 공급된 아날로그 신호에 대하여, 노이즈 저감 처리, 게인 조정, 파형 정형화, 아날로그-디지털 변환 처리 등을 수행한다.
조작부(170)는 사용자 등의 외부로부터의 제어 신호를 입력할 수 있도록 하는 사용자 인터페이스이다. 조작부(170)는 정해진 시간 동안 촬상 소자(115)를 빛에 노출하여 사진을 촬영하는 셔터-릴리즈 신호를 입력하는 셔터-릴리즈 버튼, 전원의 온-오프를 제어하기 위한 제어 신호를 입력하는 전원 버튼, 입력에 따라 화각을 넓어지게 하거나 화각을 좁아지게 하는 광각-줌 버튼 및 망원-줌 버튼과, 문자 입력 또는 촬영 모드, 재생 모드 등의 모드 선택, 화이트 밸런스 설정 기능 선택, 노출 설정 기능 선택 등의 다양한 기능 버튼들을 포함할 수 있다. 조작부(170)는 상기와 같이 다양한 버튼의 형태를 가질 수도 있지만, 이에 한정되는 것은 아니며, 키보드, 터치 패드, 터치스크린, 원격 제어기 등과 같이 사용자가 입력할 수 있는 어떠한 형태로 구현되어도 무방하다.
디지털 카메라(100)는 이를 구동하는 운영 시스템, 응용 시스템 등의 프로그램을 저장하는 프로그램 저장부(130), 연산 수행 중에 필요한 데이터 또는 결과 데이터들을 임시로 저장하는 버퍼 저장부(140), 영상 신호를 포함하는 이미지 파일을 비롯하여 상기 프로그램에 필요한 다양한 정보들을 저장하는 데이터 저장부(150)를 포함한다.
그리고 디지털 카메라(100)는 입력되는 영상 신호를 처리하고, 이에 따라 또는 외부 입력 신호에 따라 각 구성부들을 제어하는 디지털 신호 처리부(200)(Digital signal processing, DSP)를 포함한다. 디지털 신호 처리부(200)는 입력된 영상 데이터에 대해 노이즈를 저감하고, 감마 보정(Gamma Correction), 색필터 배열보간(color filter array interpolation), 색 매트릭스(color matrix), 색보정(color correction), 색 향상(color enhancement) 등의 화질 개선을 위한 영상 신호 처리를 수행할 수 있다. 또한, 화질 개선을 위한 영상 신호 처리를 하여 생성한 영상 데이터를 압축 처리하여 영상 파일을 생성할 수 있으며, 또는 상기 영상 파일로부터 영상 데이터를 복원할 수 있다. 영상의 압축형식은 가역 형식 또는 비가역 형식을 포함한다. 압축한 데이터가 데이터 저장부(150)에 저장될 수 있다. 또한, 디지털 신호 처리부(200)에서는 기능적으로 색채 처리, 블러 처리, 엣지 강조 처리, 영상 해석 처리, 영상 인식 처리, 영상 이펙트 처리 등도 행할 수 있다. 영상 인식 처리로 얼굴 인식, 장면 인식 처리 등을 행할 수 있다. 예를 들어, 휘도 레벨 조정, 색 보정, 콘트라스트 조정, 윤곽 강조 조정, 화면 분할 처리, 캐릭터 영상 등 생성 및 영상의 합성 처리 등을 행할 수 있다.
또한, 디지털 신호 처리부(200)는 프로그램 저장부(130)에 저장된 프로그램을 실행하거나, 별도의 모듈을 구비하여, 오토 포커싱, 줌 변경, 초점 변경, 자동 노출 보정 등을 제어하기 위한 제어 신호를 생성하여, 렌즈부 구동부(111), 조리개 구동부(113), 및 촬상 소자 제어부(116)에 제공하고, 셔터, 플래시 등 디지털 카메라(100)에 구비된 구성 요소들의 동작을 총괄적으로 제어할 수 있다.
도 4는 도 1에 도시된 디지털 카메라(100)의 디스플레이 스크린의 디스플레이 상태에 따른 예시도들이다.
도 4a를 참조하면, 디스플레이부(160)가 위로 플립되었을 경우가 도시되어 있다. 이 경우, 디스플레이부(160)는 미러 효과로 인하여 촬상소자(115)를 통해 입력된 영상과 반전된다. 즉, 촬상 소자(115)를 통해 들어오는 영상에는 변함이 없지만, 프리뷰 영상 및 퀵뷰 영상은 반전된다.
도 4b를 참조하면, 디스플레이부(160)가 플립되지 않은 경우가 도시되어 있다. 이 경우, 디스플레이부(160) 및 촬상 소자(115)를 통해 입력된 영상을 동일하다.
도 4c를 참조하면, 디스플레이부(160)가 아래도 플립된 경우, 즉, 플립 방향은 디지털 카메라의 위로 플립되지만, 디지털 카메라를 180도 돌려서 디스플레이부(160)가 아래에 위치하는 경우이다. 이 경우에는 촬상 소자(115)에 입력되는 영상에서 상하 반전이 이루어지기 때문에 디스플레이부(160)에 디스플레이되는 영상과는 달리 영상이 거꾸로 생성된다. 따라서, 종래의 정면 얼굴 검출기, 즉 정면 얼굴만을 학습한 데이터로 입력 영상에서 얼굴을 검출하는 경우에는 얼굴 검출이 불가능하거나 검출 시간이 많이 소요될 수 있다.
본 발명의 일 실시 예에 따른 디지털 카메라(100)는 디스플레이부(160)가 플립된 상태에서, 디지털 카메라(100)가 회전되어, 촬상 소자(115)에 피사체가 90도 회전 혹은 거꾸로 맺힐 경우 별도의 추가 학습 방법 없이 얼굴을 쉽고 빠르게 검출할 수 있다. 예를 들면, 180도 회전 시에도 정면 검출기만을 사용하여 검출이 가능하다. 또한, 디지털 카메라(100)의 디스플레이부(160)가 플립되는 경우에, 얼굴 검출 후 얼굴의 좌표값이 플립되는 조건에 따라 디스플레이부(160)에 디스플레이되는 영상과 촬상 소자(115)로 들어오는 영상이 서로 다르기 때문에 얼굴 좌표값이 정상적으로 표기되지 않은 문제를 디스플레이부(160)에 디스플레이되는 영상에 맞추어 정상적으로 얼굴 검출 좌표를 디스플레이해 줄 수 있다.
도 2는 도 1에 도시된 디지털 신호 처리부(200)의 개략도이다.
도 2를 참조하면, 디지털 신호 처리부(200)는 센서 신호 감지부(210), 영상 변환부(220) 및 얼굴 검출부(230)를 포함한다.
본 발명의 일 실시 예에 따른 디지털 신호 처리부(200)는 입력 영상을 디스플레이부(160)에 디스플레이하고, 입력 영상에 포함된 피사체의 적어도 일부 영역을 가리키는 피사체 검출 프레임을 디스플레이부(160)에 함께 디스플레이한다. 여기서, 입력 영상은 피사체를 촬영하기 전의 라이브 뷰 영상 또는 프리뷰 영상을 의미한다. 여기서, 피사체 검출 프레임은 특정 피사체의 일 부분, 예를 들면 사람의 얼굴 영역을 검출하는 얼굴 검출 프레임일 수 있다. 디지털 신호 처리부(200)는 디스플레이부(160)가 플립된 상태에서, 디지털 카메라(100)가 회전되어, 촬상 소자(115)에 피사체가 90도 회전 혹은 거꾸로 맺힐 경우 별도의 추가 학습 방법 없이 얼굴을 쉽고 빠르게 검출할 수 있다. 또한, 얼굴 검출 후 얼굴의 좌표값이 플립되는 조건에 따라 디스플레이부(160)에 디스플레이되는 영상과 촬상 소자(115)로 들어오는 영상이 서로 다르기 때문에 얼굴 좌표값이 정상적으로 표기되지 않은 문제를 디스플레이부(160)에 디스플레이되는 영상에 맞추어 정상적으로 얼굴 검출 좌표를 디스플레이해 줄 수 있다.
센서 신호 감지부(210)는 도 1에 도시된 센서부(117)로부터 입력 영상의 회전 상태와 입력 영상의 디스플레이 상태에 상응하는 센싱 신호를 수신한다. 여기서, 입력 영상의 회전 상태는 도 6에 도시된 것처럼, 디지털 카메라(100)를 회전시킴으로써 입력 영상이 기울어지는 각도 정보를 의미하고, 예를 들면 시계 방향으로 90도, 반 시계 방향으로 90도, 또는 180도를 포함하는 각도 정보이다. 여기서, 입력 영상의 디스플레이 상태는 피사체와 대면하도록 디스플레이되는 것을 의미한다. 도 5에 도시된 것처럼, 디스플레이부(160)의 플립되어 피사체와 대면하도록 구성되어 디스플레이되는 것을 의미한다.
영상 변환부(220)는 입력 영상을 센서 신호 감지부(210)로부터 획득한 정보들을 이용하여 피사체 검출을 위해 들어오는 입력 영상을 상하 또는 좌우로 반전시킨다. 즉, 시계 방향으로 90도 회전되어 입력된 영상을 다시 반시계 방향으로 90도 회전, 즉 좌우를 반전시켜 피사체 검출부(230)에 출력하거나, 180도 회전되어 입력된 영상을 180도 회전시켜, 즉 상하를 반전시켜 피사체 검출부(230)에 출력한다.
피사체 검출부(230)는 입력 영상에서 피사체를 검출한다. 여기서, 피사체는 사람의 얼굴일 수 있다. 입력 영상은 촬상 소자(115)를 통해 바로 입력되는 영상이거나, 또는 영상 변환부(220)를 통해 입력 영상의 회전 상태 및 디스플레이 상태에 맞추어 변환 또는 회전된 영상일 수 있다. 이하, 피사체를 얼굴로 가정하고, 얼굴 검출을 위주로 설명하지만, 이에 한정되지 않고 다른 피사체를 동일한 학습 방법을 통해 검출할 수 있음은 물론이다.
피사체 검출부(230)는 입력 영상으로부터 소정의 얼굴 영역을 검출한다. 얼굴을 검출한 경우, 얼굴 영역에 얼굴 검출 프레임을 디스플레이한다. 여기서, 얼굴 검출에 한정하여 설명하지만, 다른 피사체의 특정 영역을 검출할 수 있음은 물론이다. 일반적으로, 얼굴 검출은 미리 기억된 얼굴의 특징 데이터와 입력된 영상 데이터를 비교하여 입력된 영상 중에 얼굴의 데이터가 있는지 여부를 인식하고, 얼굴 데이터가 있다고 판단되면 어느 위치에 그 얼굴의 화상 데이터가 있는지를 인식한다. 얼굴 영역 검출 기법 내지는 알고리즘은 많은 기술이 존재하며, 본 발명의 일 실시 예에 따른 얼굴 검출에 사용할 수 있다. 예를 들면 움직임 벡터 기법, 특징점 검출 기법, 에이다부스트(Adaboost) 학습 기법 등을 사용하여 얼굴 영역을 검출할 수 있다.
도 3은 도 1에 도시된 디지털 신호 처리부(200)의 다른 실시 예에 따른 개략도이다.
도 3을 참조하면, 도 2에 도시된 디지털 신호 처리부(200)의 구성과 동일하며, 검출 좌표 변환부(240) 및 검출 프레임 표시 제어부(250)를 더 포함한다. 이하 동일한 부분에 대한 설명은 생략하고, 추가 구성들에 대해서 설명한다.
본 발명의 일 실시 예에 따른 디지털 신호 처리부(200)는 얼굴 검출 후 얼굴의 좌표값이 플립되는 조건에 따라 디스플레이부(160)에 디스플레이되는 영상과 촬상 소자(115)로 들어오는 영상이 서로 다르기 때문에 얼굴 좌표값이 정상적으로 표기되지 않은 문제를 디스플레이부(160)에 디스플레이되는 영상에 맞추어 정상적으로 얼굴 검출 좌표를 디스플레이한다.
검출 좌표 변환부(240)는 피사체 검출부(230)가 검출한 피사체의 좌표와 디스플레이부(160)에 디스플레이되는 피사체의 좌표가 일치하지 않는 경우에는 디스플레이되는 좌표에 맞도록 검출한 피사체의 좌표를 변환한다.
검출 프레임 표시 제어부(250)는 변환한 피사체의 좌표에 맞도록 검출 프레임을 디스플레이부(160)에 디스플레이하도록 제어한다.
예를 들면, 디스플레이부(160)가 도 5에서와 같이 플립된 상태에서, 촬상 소자(115)를 통해 입력된 영상은 정면영상이지만, 디스플레이부(160)에 디스플레이되는 영상은 반전된 영상이 되기 때문에, 검출한 피사체의 좌표값이 상하 반대로 디스플레이된다. 따라서, 이 경우, 검출한 피사체의 좌표값을 상하 반전시키고, 검출 프레임을 디스플레이한다.
도 7 내지 10은 본 발명의 또 다른 실시 예들에 따른 피사체 검출 방법들을 설명하기 위한 예시 도들이다.
도 7을 참조하여, 디스플레이부(160)가 플립된 상태에서 기준 방향, 즉 입력 영상이 회전되지 않는 경우에 대해 설명한다.
디스플레이부(160)가 플립된 상태에서, 입력 영상이 회전되지 않은 경우에는 촬상 소자를 통해 입력된 영상에서 얼굴 검출을 수행하여, 얼굴을 검출한다. 하지만, 디스플레이부(160)에 디스플레이된 영상은 촬상 소자를 통해 입력된 영상에서 상하반전이 일어난다. 따라서, 촬상 소자를 통해 입력된 영상에서 정상적으로 얼굴을 검출하더라도, 검출한 얼굴 검출 프레임은 디스플레이부(160)에서 상하반전된 영역에 얼굴 검출 프레임이 디스플레이된다. 따라서, 이 경우에는 촬상 소자(115)를 통해 입력된 영상에서 검출한 얼굴 검출 프레임의 좌표를 상하반전, 즉 검출 좌표를 보정하여 디스플레이부(160)에 디스플레이한다. 이 경우에는 디스플레이부(160)가 플립되는 경우뿐만 아니라, 디스플레이부(160)가 촬상 소자(115)와 동일한 면 또는 피사체와 대면하도록 구성된 전면 디스플레이부에도 동일하게 적용할 수 있다.
도 8을 참조하여, 디스플레이부(160)가 플립된 상태에서 반시계 방향으로 90도 입력 영상이 회전된 경우에 대해 설명한다.
디스플레이부(160)가 플립된 상태에서, 입력 영상이 반시계 방향으로 90도만큼 회전된 경우에는 촬상 소자를 통해 입력된 영상에서 얼굴 검출을 수행하는 경우에 얼굴 검출 확률이 떨어지거나 얼굴 검출에 실패할 수 있다. 따라서, 입력 영상을 90도 만큼 시계방향으로 회전시킨 후 얼굴 검출을 수행하여, 얼굴을 검출한다. 또한, 디스플레이부(160)에 디스플레이된 영상은 촬상 소자를 통해 입력된 영상에서 좌우반전이 일어난다. 따라서, 촬상 소자를 통해 입력된 영상을 회전시켜 얼굴을 검출하더라도, 검출한 얼굴 검출 프레임은 디스플레이부(160)에서 좌우반전된 영역에 얼굴 검출 프레임이 디스플레이된다. 따라서, 이 경우에는 촬상 소자(115)를 통해 입력된 영상을 회전시켜 검출한 얼굴 검출 프레임의 좌표를 좌우반전, 즉 검출 좌표를 보정하여 디스플레이부(160)에 디스플레이한다. 이 경우 얼굴 검출 프레임의 보정된 좌표는 원래 위치, 즉 촬상 소자(115)를 통해 입력된 영상에서의 얼굴의 좌표에 해당한다. 여기서, 반시계 방향으로 90도 회전한 경우에 대해 설명하였지만, 시계 방향으로 90도 회전한 경우에도 동일하게 적용할 수 있음은 물론이다.
도 9를 참조하여, 디스플레이부(160)가 플립된 상태에서 180도 입력 영상이 회전된 경우에 대해 설명한다.
디스플레이부(160)가 플립된 상태에서, 입력 영상이 180도만큼 회전된 경우에는 촬상 소자를 통해 입력된 영상에서 얼굴 검출을 수행하는 경우에 얼굴 검출 확률이 떨어지거나 얼굴 검출에 실패할 수 있다. 따라서, 입력 영상을 180도 만큼 회전시킨 후 얼굴 검출을 수행하여, 얼굴을 검출한다. 또한, 디스플레이부(160)에 디스플레이된 영상은 촬상 소자를 통해 입력된 영상에서 상하반전이 일어난다. 따라서, 촬상 소자를 통해 입력된 영상을 회전시켜 얼굴을 검출하더라도, 검출한 얼굴 검출 프레임은 디스플레이부(160)에서 상하반전된 영역에 얼굴 검출 프레임이 디스플레이된다. 따라서, 이 경우에는 촬상 소자(115)를 통해 입력된 영상을 회전시켜 검출한 얼굴 검출 프레임의 좌표를 상하반전, 즉 검출 좌표를 보정하여 디스플레이부(160)에 디스플레이한다. 이 경우 얼굴 검출 프레임의 보정된 좌표는 원래 위치, 즉 촬상 소자(115)를 통해 입력된 영상에서의 얼굴의 좌표에 해당한다.
도 10은 본 발명의 다양한 실시 예들에 따른 디스플레이부가 플립된 상태에서 디지털 카메라가 0도, 시계 방향으로 90도, 180도, 반시계 방향으로 90도 회전된 경우에 디스플레이되는 입력 영상들과, 얼굴 검출 프레임들이 도시되어 있다. 여기서, 회전 각도를 0도, 90도 180도에 대해서 설명하였지만, 이에 한정되지 않고, 다양한 각도들에 대해서도 유사하게 적용할 수 있음은 물론이다. 또한, 디스플레이부가 위로 플립되는 형태에 대해서 설명하였지만, 아래로 플립되거나 다른 방향으로 플립되는 경우에도 유사하게 적용할 수 있음은 물론이다.
도 8 내지 10을 참조하여 설명한 바와 같이, 본 발명의 일 실시 예에 따른 피사체 검출 방법은 디스플레이부가 플립되는 디지털 카메라에서 얼굴 검출을 효율적으로 수행할 수 있다. 또한, 디지털 카메라의 회전에 따라 이미지 센서를 통해 입력되는 영상과 디스플레이부에 디스플레이되는 영상이 달라지는 경우에 얼굴 검출 좌표를 보정해줌으로써 얼굴 검출의 신뢰성을 높일 수 있다.
도 11은 본 발명의 또 다른 실시 예에 따른 피사체 검출 방법을 설명하기 위한 흐름도이다.
도 11을 참조하면, 단계 1100에서, 촬상 소자를 통해 피사체를 포함한 영상이 입력된다. 단계 1102에서, 디스플레이부가 플립되었는지 판단한다. 여기서, 디스플레이부의 플립 여부는 홀 센서를 통해 플립 여부를 판단하지만, 이에 한정되지 않고, 다른 방법으로 입력 영상의 디스플레이 상태를 판단할 수도 있다.
단계 1102에서, 디스플레이부가 플립되지 않은 경우에는 단계 1104에서, 얼굴 검출을 수행한다.
단계 1102에서, 디스플레이부가 플립된 경우에는 단계 1106에서, 0도 회전된 경우에는 단계 1108에서, 정면 얼굴 검출을 수행한다. 단계 1110에서, 디스플레이부에 디스플레이되는 영상은 상하가 반전된 영상이므로, 단계 1108에서, 검출한 얼굴 좌표를 상하 반전시킨다. 또한, 도시되지는 않았지만, 상하 반전된 얼굴 좌표에 해당하는 얼굴 검출 프레임을 디스플레이부에 디스플레이한다.
단계 1112에서, 시계/반시계 방향으로 90도만큼 회전된 경우에는 단계 1114에서, 시계/반시계 방향으로 90도 만큼 영상을 회전시키고, 단계 1116에서 정면 얼굴 검출을 수행한다. 단계 1118에서, 디스플레이부에 디스플레이되는 영상은 좌우가 반전된 영상이므로 단계 1118에서, 단계 1116에서 검출한 얼굴의 좌표를 좌우 반전시킨다. 또한, 도시되지는 않았지만, 좌우 반전된 얼굴 좌표에 상응하는 얼굴 검출 프레임을 디스플레이부에 디스플레이한다.
단계 1120에서, 시계/반시계 방향으로 180도만큼 회전된 경우에는 단계 1122에서, 시계/반시계 방향으로 180도 만큼 영상을 회전시키고, 단계 1124에서 정면 얼굴 검출을 수행한다. 단계 1126에서, 디스플레이부에 디스플레이되는 영상은 상하가 반전된 영상이므로 단계 1124에서 검출한 얼굴의 좌표를 상하 반전시킨다. 또한, 도시되지는 않았지만, 상하 반전된 얼굴 좌표에 상응하는 얼굴 검출 프레임을 디스플레이부에 디스플레이한다.
본 발명에 따른 장치는 프로세서, 프로그램 데이터를 저장하고 실행하는 메모리, 디스크 드라이브와 같은 영구 저장부(permanent storage), 외부 장치와 통신하는 통신 포트, 터치 패널, 키(key), 버튼 등과 같은 사용자 인터페이스 장치 등을 포함할 수 있다. 소프트웨어 모듈 또는 알고리즘으로 구현되는 방법들은 상기 프로세서상에서 실행 가능한 컴퓨터가 읽을 수 있는 코드들 또는 프로그램 명령들로서 컴퓨터가 읽을 수 있는 기록 매체 상에 저장될 수 있다. 여기서 컴퓨터가 읽을 수 있는 기록 매체로 마그네틱 저장 매체(예컨대, ROM(read-only memory), RAM(random-access memory), 플로피 디스크, 하드 디스크 등) 및 광학적 판독 매체(예컨대, 시디롬(CD-ROM), 디브이디(DVD: Digital Versatile Disc)) 등이 있다. 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템들에 분산되어, 분산 방식으로 컴퓨터가 판독 가능한 코드가 저장되고 실행될 수 있다. 매체는 컴퓨터에 의해 판독가능하며, 메모리에 저장되고, 프로세서에서 실행될 수 있다.
본 발명에서 인용하는 공개 문헌, 특허 출원, 특허 등을 포함하는 모든 문헌들은 각 인용 문헌이 개별적으로 및 구체적으로 병합하여 나타내는 것 또는 본 발명에서 전체적으로 병합하여 나타낸 것과 동일하게 본 발명에 병합될 수 있다.
본 발명의 이해를 위하여, 도면에 도시된 바람직한 실시 예들에서 참조 부호를 기재하였으며, 본 발명의 실시 예들을 설명하기 위하여 특정 용어들을 사용하였으나, 특정 용어에 의해 본 발명이 한정되는 것은 아니며, 본 발명은 당업자에 있어서 통상적으로 생각할 수 있는 모든 구성 요소들을 포함할 수 있다.
본 발명은 기능적인 블록 구성들 및 다양한 처리 단계들로 나타내어질 수 있다. 이러한 기능 블록들은 특정 기능들을 실행하는 다양한 개수의 하드웨어 또는/및 소프트웨어 구성들로 구현될 수 있다. 예를 들어, 본 발명은 하나 이상의 마이크로프로세서들의 제어 또는 다른 제어 장치들에 의해서 다양한 기능들을 실행할 수 있는, 메모리, 프로세싱, 로직(logic), 룩 업 테이블(look-up table) 등과 같은 직접 회로 구성들을 채용할 수 있다. 본 발명에의 구성 요소들이 소프트웨어 프로그래밍 또는 소프트웨어 요소들로 실행될 수 있는 것과 유사하게, 본 발명은 데이터 구조, 프로세스들, 루틴들 또는 다른 프로그래밍 구성들의 조합으로 구현되는 다양한 알고리즘을 포함하여, C, C++, 자바(Java), 어셈블러(assembler) 등과 같은 프로그래밍 또는 스크립팅 언어로 구현될 수 있다. 기능적인 측면들은 하나 이상의 프로세서들에서 실행되는 알고리즘으로 구현될 수 있다. 또한, 본 발명은 전자적인 환경 설정, 신호 처리, 및/또는 데이터 처리 등을 위하여 종래 기술을 채용할 수 있다. “매커니즘”, “요소”, “수단”, “구성”과 같은 용어는 넓게 사용될 수 있으며, 기계적이고 물리적인 구성들로서 한정되는 것은 아니다. 상기 용어는 프로세서 등과 연계하여 소프트웨어의 일련의 처리들(routines)의 의미를 포함할 수 있다.
본 발명에서 설명하는 특정 실행들은 일 실시 예들로서, 어떠한 방법으로도 본 발명의 범위를 한정하는 것은 아니다. 명세서의 간결함을 위하여, 종래 전자적인 구성들, 제어 시스템들, 소프트웨어, 상기 시스템들의 다른 기능적인 측면들의 기재는 생략될 수 있다. 또한, 도면에 도시된 구성 요소들 간의 선들의 연결 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것으로서, 실제 장치에서는 대체 가능하거나 추가의 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들로서 나타내어질 수 있다. 또한, “필수적인”, “중요하게” 등과 같이 구체적인 언급이 없다면 본 발명의 적용을 위하여 반드시 필요한 구성 요소가 아닐 수 있다.
본 발명의 명세서(특히 특허청구범위에서)에서 “상기”의 용어 및 이와 유사한 지시 용어의 사용은 단수 및 복수 모두에 해당하는 것일 수 있다. 또한, 본 발명에서 범위(range)를 기재한 경우 상기 범위에 속하는 개별적인 값을 적용한 발명을 포함하는 것으로서(이에 반하는 기재가 없다면), 발명의 상세한 설명에 상기 범위를 구성하는 각 개별적인 값을 기재한 것과 같다. 마지막으로, 본 발명에 따른 방법을 구성하는 단계들에 대하여 명백하게 순서를 기재하거나 반하는 기재가 없다면, 상기 단계들은 적당한 순서로 행해질 수 있다. 반드시 상기 단계들의 기재 순서에 따라 본 발명이 한정되는 것은 아니다. 본 발명에서 모든 예들 또는 예시적인 용어(예들 들어, 등등)의 사용은 단순히 본 발명을 상세히 설명하기 위한 것으로서 특허청구범위에 의해 한정되지 않는 이상 상기 예들 또는 예시적인 용어로 인해 본 발명의 범위가 한정되는 것은 아니다. 또한, 당업자는 다양한 수정, 조합 및 변경이 부가된 특허청구범위 또는 그 균등물의 범주 내에서 설계 조건 및 팩터에 따라 구성될 수 있음을 알 수 있다.
100: 디지털 카메라
115: 촬상 소자
117: 센서부
160: 디스플레이부
200: 디지털 신호 처리부
210: 센서 신호 감지부
220: 영상 변환부
230: 피사체 검출부

Claims (23)

  1. 입력 영상을 표시부에 디스플레이하는 단계;
    상기 입력 영상에 포함된 피사체를 검출하고 상기 검출된 피사체의 좌표값을 생성하는 단계;
    상기 입력 영상의 회전상태 및 상기 입력 영상의 디스플레이 상태에 따라 상기 검출된 피사체의 좌표값을 변환하는 단계; 및
    상기 검출된 피사체를 가리키는 피사체 검출 프레임을 상기 변환한 좌표값에 상응하도록 디스플레이하는 단계를 포함하는 것을 특징으로 하는 피사체 검출 방법.
  2. 제 1 항에 있어서,
    상기 디스플레이 상태는,
    상기 피사체와 대면하도록 디스플레이되는 상태인 것을 특징으로 하는 피사체 검출 방법.
  3. 제 1 항에 있어서,
    상기 입력 영상의 회전상태는,
    실질적으로 0도, 90도 또는 180도 중 하나를 포함하는 것을 특징으로 하는 피사체 검출 방법.
  4. 제 1 항에 있어서,
    상기 표시부에 디스플레이되는 입력 영상에 포함된 피사체의 좌표값과, 상기 검출된 피사체의 좌표값은 동일하지 않은 것을 특징으로 하는 피사체 검출 방법.
  5. 제 1 항에 있어서,
    상기 표시부가 플립되고, 상기 입력 영상이 기준각도에서 실질적으로 0도 회전된 경우,
    상기 검출된 피사체의 좌표값을 상하 반전시키는 단계를 포함하고,
    상기 피사체 검출 프레임은 상기 반전한 좌표값에 상응하는 것을 특징으로 하는 피사체 검출 방법.
  6. 제 1 항에 있어서,
    상기 입력 영상의 회전상태에 따라 상기 입력 영상을 상기 회전방향에 역방향으로 회전시키는 것을 특징으로 하는 피사체 검출 방법.
  7. 제 1 항에 있어서,
    상기 표시부가 플립되고, 상기 입력 영상이 기준각도에서 실질적으로 90도 시계 방향으로 회전된 경우,
    상기 입력 영상을 실질적으로 90도 반 시계 방향으로 회전시키는 단계;
    상기 회전된 입력 영상으로부터 상기 피사체를 검출하는 단계; 및
    상기 피사체의 좌표값을 좌우 반전시키는 단계를 더 포함하고,
    상기 피사체 검출 프레임은 상기 반전한 좌표값에 상응하는 것을 특징으로 하는 피사체 검출 방법.
  8. 제 1 항에 있어서,
    상기 표시부가 플립되고, 상기 입력 영상이 기준각도에서 실질적으로 90도 반 시계 방향으로 회전된 경우,
    상기 입력 영상을 실질적으로 90도 시계 방향으로 회전시키는 단계;
    상기 회전된 입력 영상으로부터 상기 피사체를 검출하는 단계; 및
    상기 피사체의 좌표값을 좌우 반전시키는 단계를 더 포함하고,
    상기 피사체 검출 프레임은 상기 반전한 좌표값에 상응하는 것을 특징으로 하는 피사체 검출 방법.
  9. 제 1 항에 있어서,
    상기 표시부가 플립되고, 상기 입력 영상이 기준각도에서 실질적으로 180도 회전된 경우,
    상기 입력 영상을 실질적으로 180도 회전시키는 단계;
    상기 회전된 입력 영상으로부터 상기 피사체를 검출하는 단계; 및
    상기 회전된 입력 영상으로부터 상기 피사체를 검출하는 단계; 및
    상기 검출한 피사체의 좌표값을 상하 반전시키는 단계를 더 포함하고,
    상기 피사체 검출 프레임은 상기 반전한 좌표값에 상응하는 것을 특징으로 하는 피사체 검출 방법.
  10. 제 1 항에 있어서,
    상기 피사체는,
    얼굴인 것을 특징으로 하는 피사체 검출 방법.
  11. 삭제
  12. 제 1 항 내지 제 10 항 중 어느 한 항에 따른 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 기록매체.
  13. 입력 영상을 디스플레이하는 표시부;
    상기 입력 영상에 포함된 피사체를 검출하고 상기 검출된 피사체의 좌표값을 생성하는 피사체 검출부;
    상기 입력 영상의 회전상태 및 상기 입력 영상의 디스플레이 상태에 따라 상기 검출된 피사체의 좌표값을 변환하는 검출 좌표 변환부; 및
    상기 검출된 피사체를 가리키는 피사체 검출 프레임을 상기 변환한 좌표값에 상응하도록 디스플레이하는 검출 프레임 표시 제어부를 포함하는 것을 특징으로 하는 피사체 검출 장치.
  14. 제 13 항에 있어서,
    상기 디스플레이 상태는,
    상기 피사체와 대면하도록 디스플레이되는 상태인 것을 특징으로 하는 피사체 검출 장치.
  15. 제 13 항에 있어서,
    상기 표시부에 디스플레이되는 입력 영상에 포함된 피사체의 좌표값과, 상기 검출된 피사체의 좌표값은 동일하지 않은 것을 특징으로 하는 피사체 검출 장치.
  16. 제 13 항에 있어서,
    상기 표시부가 플립되고, 상기 입력 영상이 기준각도에서 실질적으로 0도 회전된 경우,
    상기 검출 좌표 변환부는 상기 검출된 피사체의 좌표값을 상하 반전시키고,
    상기 검출 프레임 표시 제어부는 상기 피사체 검출 프레임을 상기 반전한 좌표값에 상응하도록 디스플레이하는 것을 특징으로 하는 피사체 검출 장치.
  17. 제 13 항에 있어서,
    상기 입력 영상의 회전상태 및 상기 입력 영상의 디스플레이 상태를 감지하는 센서부; 및
    상기 감지한 입력 영상의 회전상태에 따라 상기 입력 영상을 상기 회전방향에 역방향으로 회전시키는 영상 변환부를 더 포함하는 것을 특징으로 하는 피사체 검출 장치.
  18. 제 13 항에 있어서,
    상기 피사체는,
    얼굴인 것을 특징으로 하는 피사체 검출 장치.
  19. 촬영될 피사체로부터 빛을 수신하여 입력 영상을 생성하는 촬상 소자;
    상기 입력 영상을 디스플레이하기 위한 디스플레이 스크린;
    상기 입력 영상의 회전상태 및 상기 디스플레이 스크린의 회전상태를 감지하는 센서부; 및
    상기 피사체를 검출하고 상기 검출된 피사체의 좌표값을 생성하고, 상기 입력 영상의 회전상태 및 상기 입력 영상의 디스플레이 상태에 따라 상기 검출된 피사체의 좌표값을 변환하고, 상기 검출된 피사체를 가리키는 피사체 검출 프레임을 상기 변환한 좌표값에 상응하도록 상기 디스플레이 스크린에 디스플레이하는 디지털 신호 처리부를 포함하는 디지털 촬영 장치.
  20. 제 19 항에 있어서,
    상기 디스플레이 스크린은,
    상기 피사체와 대면하도록 플립되도록 구성된 것을 특징으로 하는 디지털 촬영 장치.
  21. 제 19 항에 있어서,
    상기 입력 영상의 회전상태는,
    실질적으로 0도, 90도 또는 180도 중 하나를 포함하는 것을 특징으로 하는 디지털 촬영 장치.
  22. 제 19 항에 있어서,
    상기 디스플레이 스크린에 디스플레이되는 상기 피사체의 좌표값과, 상기 검출된 피사체의 좌표값은 동일하지 않은 것을 특징으로 하는 디지털 촬영 장치.
  23. 제 19 항에 있어서,
    상기 센서부는,
    상기 입력 영상의 회전상태를 감지하는 가속도 센서; 및
    상기 디스플레이의 회전 상태를 감지하는 홀 센서를 포함하는 것을 특징으로 하는 디지털 촬영 장치.
KR1020110119127A 2011-11-15 2011-11-15 피사체 검출 방법 및 장치와, 디지털 촬영 장치 KR101788740B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020110119127A KR101788740B1 (ko) 2011-11-15 2011-11-15 피사체 검출 방법 및 장치와, 디지털 촬영 장치
US13/599,120 US9111129B2 (en) 2011-11-15 2012-08-30 Subject detecting method and apparatus, and digital photographing apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110119127A KR101788740B1 (ko) 2011-11-15 2011-11-15 피사체 검출 방법 및 장치와, 디지털 촬영 장치

Publications (2)

Publication Number Publication Date
KR20130053340A KR20130053340A (ko) 2013-05-23
KR101788740B1 true KR101788740B1 (ko) 2017-10-20

Family

ID=48280294

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110119127A KR101788740B1 (ko) 2011-11-15 2011-11-15 피사체 검출 방법 및 장치와, 디지털 촬영 장치

Country Status (2)

Country Link
US (1) US9111129B2 (ko)
KR (1) KR101788740B1 (ko)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101788740B1 (ko) * 2011-11-15 2017-10-20 삼성전자주식회사 피사체 검출 방법 및 장치와, 디지털 촬영 장치
KR20130098675A (ko) * 2012-02-28 2013-09-05 삼성전자주식회사 얼굴 검출 처리 회로 및 이를 포함하는 촬상 장치
JP5923759B2 (ja) * 2012-03-23 2016-05-25 パナソニックＩｐマネジメント株式会社 撮像装置
US9146394B1 (en) * 2012-12-13 2015-09-29 Optics 1, Inc. Clip-on eye piece system for handheld and device-mounted digital imagers
JP5921427B2 (ja) * 2012-12-27 2016-05-24 キヤノン株式会社 撮像制御装置及びその制御方法
CN105453544B (zh) * 2013-07-30 2018-12-25 佳能株式会社 显示控制设备及其控制方法
JP6314645B2 (ja) * 2014-05-08 2018-04-25 ソニー株式会社 撮像装置
JP2015216484A (ja) * 2014-05-09 2015-12-03 キヤノン株式会社 撮像装置、画像処理方法、プログラム及び記憶媒体

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003289531A (ja) 2002-03-28 2003-10-10 Minolta Co Ltd 画像処理システムおよび画像処理プログラム
JP2005260870A (ja) * 2004-03-15 2005-09-22 Matsushita Electric Ind Co Ltd デジタルカメラ及びデジタルカメラ機能付き携帯電話機並びに顔画像自動回転方法
JP2010103921A (ja) * 2008-10-27 2010-05-06 Olympus Imaging Corp 撮像装置および撮像装置の制御方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6597817B1 (en) * 1997-07-15 2003-07-22 Silverbrook Research Pty Ltd Orientation detection for digital cameras
EP1628471B1 (en) * 1999-05-28 2009-08-26 Sony Corporation Image pick-up apparatus
KR100806390B1 (ko) * 2003-08-18 2008-02-27 삼성전자주식회사 영상 촬영장치
KR100708178B1 (ko) * 2005-09-01 2007-04-16 삼성전자주식회사 영상 처리 방법, 장치 및 영상 정보를 기록한 정보저장매체
KR20080084021A (ko) * 2007-03-14 2008-09-19 삼성테크윈 주식회사 회전형 표시장치를 장착한 디지털 영상 처리장치
US20090202180A1 (en) * 2008-02-11 2009-08-13 Sony Ericsson Mobile Communications Ab Rotation independent face detection
GB2471647B (en) * 2009-06-16 2016-03-23 Aptina Imaging Corp Use of Z-order data in an image sensor
JP2011119997A (ja) * 2009-12-03 2011-06-16 Sony Computer Entertainment Inc 画像処理装置および画像処理方法
JP2011134045A (ja) * 2009-12-24 2011-07-07 Seiko Epson Corp 画像処理装置
KR101752698B1 (ko) * 2011-01-06 2017-07-04 삼성전자주식회사 촬영 장치 및 그 촬영 방법
JP2013051535A (ja) * 2011-08-31 2013-03-14 Sanyo Electric Co Ltd 回動型電子機器
KR101788740B1 (ko) * 2011-11-15 2017-10-20 삼성전자주식회사 피사체 검출 방법 및 장치와, 디지털 촬영 장치
JP5923759B2 (ja) * 2012-03-23 2016-05-25 パナソニックＩｐマネジメント株式会社 撮像装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003289531A (ja) 2002-03-28 2003-10-10 Minolta Co Ltd 画像処理システムおよび画像処理プログラム
JP2005260870A (ja) * 2004-03-15 2005-09-22 Matsushita Electric Ind Co Ltd デジタルカメラ及びデジタルカメラ機能付き携帯電話機並びに顔画像自動回転方法
JP2010103921A (ja) * 2008-10-27 2010-05-06 Olympus Imaging Corp 撮像装置および撮像装置の制御方法

Also Published As

Publication number Publication date
US20130120635A1 (en) 2013-05-16
KR20130053340A (ko) 2013-05-23
US9111129B2 (en) 2015-08-18

Similar Documents

Publication Publication Date Title
KR101788740B1 (ko) 피사체 검출 방법 및 장치와, 디지털 촬영 장치
US9019387B2 (en) Imaging device and method of obtaining image
KR101811717B1 (ko) 줌 제어 방법 및 장치와, 디지털 촬영 장치
KR101528860B1 (ko) 디지털 촬영 장치의 흔들림 보정 방법 및 장치
US8749687B2 (en) Apparatus and method of capturing jump image
US8648960B2 (en) Digital photographing apparatus and control method thereof
KR101755598B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
JP5623256B2 (ja) 撮像装置、その制御方法及びプログラム
KR101710626B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
US20100053363A1 (en) Photographing method and apparatus
US9549126B2 (en) Digital photographing apparatus and control method thereof
JP6863284B2 (ja) 検出装置、検出方法、検出プログラムおよび撮像装置
JP2013070164A (ja) 撮像装置及び撮像方法
JP2012239156A (ja) 撮像装置、撮像方法および撮像プログラム
KR20120081514A (ko) 동영상 촬영 방법 및 장치
KR101728042B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
US20100315528A1 (en) Digital photographing apparatus, method of controlling the same, and computer readable storage medium having recorded thereon program for executing the method
KR101817659B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
KR101797040B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
US9143684B2 (en) Digital photographing apparatus, method of controlling the same, and computer-readable storage medium
EP2690859B1 (en) Digital photographing apparatus and method of controlling same
US9456140B2 (en) Optimized image stabilization
KR101635102B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
JP5832618B2 (ja) 撮像装置、その制御方法及びプログラム
US8558910B2 (en) Method and apparatus for detecting red eyes

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant