KR20090034084A - 얼굴 인식 마크를 디스플레이하는 디지털 영상 처리장치 및그 제어방법 - Google Patents

얼굴 인식 마크를 디스플레이하는 디지털 영상 처리장치 및그 제어방법 Download PDF

Info

Publication number
KR20090034084A
KR20090034084A KR1020070099247A KR20070099247A KR20090034084A KR 20090034084 A KR20090034084 A KR 20090034084A KR 1020070099247 A KR1020070099247 A KR 1020070099247A KR 20070099247 A KR20070099247 A KR 20070099247A KR 20090034084 A KR20090034084 A KR 20090034084A
Authority
KR
South Korea
Prior art keywords
face
mark
face recognition
image
input image
Prior art date
Application number
KR1020070099247A
Other languages
English (en)
Other versions
KR101406799B1 (ko
Inventor
이승윤
Original Assignee
삼성테크윈 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성테크윈 주식회사 filed Critical 삼성테크윈 주식회사
Priority to KR1020070099247A priority Critical patent/KR101406799B1/ko
Publication of KR20090034084A publication Critical patent/KR20090034084A/ko
Application granted granted Critical
Publication of KR101406799B1 publication Critical patent/KR101406799B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

본 발명은 얼굴 인식 마크를 디스플레이하는 디지털 영상 처리장치 및 그 제어방법에 관한 것으로 라이브 뷰(live-view) 모드에서 얼굴 인식 기능을 수행하는 디지털 영상 처리장치의 제어방법에 있어서, (a) 입력 영상에 얼굴이 포함되어 있는지를 판단하는 단계, (b) 상기 (a) 단계의 판단에 따라서 얼굴을 인식하였다는 것을 나타내기 위한 얼굴 인식 마크 또는 얼굴을 인식하지 못하였다는 것을 나타내기 위한 얼굴 인식 마크를 생성하는 단계 및 (c) 상기 (b) 단계의 얼굴 인식 마크를 디스플레이하는 단계를 포함하는 디지털 영상 처리장치의 제어방법을 제공하여 얼굴 인식 기능이 실행되는 라이브 뷰(live-view) 모드에서 입력 영상에 얼굴이 포함된 경우 얼굴의 상태를 표시하고 얼굴이 포함되어 있지 않은 경우에는 얼굴이 포함되어 있지 않음을 표시함으로 인하여 사용가 용이하게 입력되는 얼굴의 상태를 인식할 수 있는 것을 특징으로 한다.
디지털 영상 처리장치, 얼굴 인식 마크

Description

얼굴 인식 마크를 디스플레이하는 디지털 영상 처리장치 및 그 제어방법{Digital image processing apparatus displaying the face recognition mark and the method of controlling the same}
본 발명은 디지털 영상 처리장치 및 그 제어방법에 관한 것으로, 특히 얼굴 인식 기능을 실행하는 라이브 뷰(live-view) 모드에서 얼굴의 상태를 나타내기 위한 얼굴 인식 마크를 생성하여 디스플레이하는 디지털 영상 처리장치 및 그 제어방법에 관한 것이다.
디지털 카메라에서 라이브 뷰 모드는 피사체의 영상을 포착하여 저장하기 위한 모드로서, 영상을 포착하는 부분이 피사체의 영상을 디지털 영상 처리장치에서 인식하고 이를 디지털 신호로 변환시킨 후 LCD 등의 화면을 통하여 디스플레이함으로 인하여 상기 디지털 영상 처리장치가 포착하고자 하는 영상을 실시간으로 확인할 수 있도록 한다. 이와 같이, 포착하고자 하는 영상을 나타내는 화면을 프리뷰 영상이라고 한다.
최근에는 라이브 뷰 모드에서 디스플레이되는 이러한 프리뷰 영상에서 사람의 얼굴을 인식하여 초점을 자동으로 조절하는 얼굴 인식 기능이 포함된 디지털 카 메라가 제공되고 있다. 얼굴 인식 기능을 실행시키면 영상 포착부로부터 입력되는 영상에 얼굴이 포함되어 있는 경우, 디지털 카메라에서 이를 인식하여 얼굴 영역에 사각형 형태의 박스를 디스플레이한다. 종래의 얼굴 인식 기능에서는 사용자가 얼굴 인식 기능을 실행시키면 작은 아이콘이 디스플레이부에 표시되는 것으로 일반 라이브 뷰 모드와 구별하도록 하였다.
그러나 얼굴 인식 기능을 실행하고 있는 것을 작은 아이콘을 통하여서만 확인할 수 있어서 프리뷰 영상에 얼굴이 포함되어 있지 않은 경우에는 일반 라이브 뷰 모드와 구별이 용이하지 않다는 문제점이 존재하였다.
또한 얼굴이 포함되어 얼굴 영역에 사각형의 박스를 디스플레이하는 경우에도 얼굴이 기울어지거나 정면을 바라보고 있지 않은 경우에는 디스플레이되는 사각형의 박스만으로는 얼굴의 상태를 직관적으로 인식하는 것이 용이하지 않다는 문제점이 존재하였다.
본 발명이 해결하고자 하는 기술적 과제는 얼굴 인식 기능이 실행되는 라이브 뷰 모드에서 사용자가 얼굴의 존재 여부 및 얼굴의 상태를 용이하게 인식할 수 있는 디지털 영상 처리장치 및 그 제어방법을 제공하는데 있다.
상기 기술적 과제를 해결하기 위하여, 본 발명의 제 1 측면은 얼굴 인식 기능을 수행하는 디지털 영상 처리장치의 제어방법에 있어서, (a) 입력 영상에 얼굴이 포함되어 있는지를 판단하는 단계, (b) 상기 (a) 단계의 판단에 따라서 얼굴을 인식하였다는 것을 나타내기 위한 얼굴 인식 마크 또는 얼굴을 인식하지 못하였다는 것을 나타내기 위한 얼굴 인식 마크를 생성하는 단계 및 (c) 상기 (b) 단계의 얼굴 인식 마크를 디스플레이하는 단계를 포함하는 디지털 영상 처리장치의 제어방법을 제공한다.
본 발명에 있어서, 상기 (b) 단계에서, 상기 얼굴을 인식하였다는 것을 나타내기 위한 얼굴 인식 마크는 상기 얼굴 영역 및 얼굴이 바라보는 방향을 나타내는 얼굴 방향 마크를 포함할 수 있다.
본 발명에 있어서, 상기 (b) 단계에서, 상기 얼굴을 인식하였다는 것을 나타내기 위한 얼굴 인식 마크는 상기 얼굴의 기울어짐을 나타내는 얼굴 상태 마크를 더 포함할 수 있다.
본 발명에 있어서, 상기 얼굴 방향 마크는 타원형으로 형성하고, 상기 얼굴 상태 마크는 다각형으로 형성할 수 있다.
본 발명에 있어서, 상기 얼굴 상태 마크는 삼각형으로 형성할 수 있다.
본 발명에 있어서, 상기 (b)단계가, (b1) 상기 (a) 단계의 판단에서 입력 영상에 얼굴이 포함되어 있다고 판단한 경우, 원형의 얼굴 방향 마크 및 밑변이 수평 방향에 평행한 얼굴 상태 마크를 생성하는 단계, (b2) 상기 입력 영상에 포함된 얼굴의 중심축이 수직 방향을 기준으로 기울어진 각도인 경사각 및 상기 중심축을 기준으로 회전한 각도인 회전각을 계산하는 단계, (b3) 상기 (b2) 단계의 경사각에 따라서 상기 얼굴 상태 마크의 밑변이 수평방향과 이루는 각도를 수정하는 단계 및 (b4) 상기 (b2) 단계의 회전각에 따라서 상기 얼굴 방향 마크의 단반경의 길이를 수정하는 단계를 포함할 수 있다.
또한 본 발명에 있어서, 상기 (c) 단계는, (c1) 상기 (b) 단계의 얼굴 인식 마크와 상기 (a) 단계의 입력 영상을 합성하는 단계 및 (c2) 상기 (c1) 단계에서 합성된 영상을 디스플레이하는 단계를 포함할 수 있다.
또한 상기 기술적 과제를 해결하기 위하여, 본 발명의 제 2 측면은 영상을 입력하는 영상 포착부, 상기 영상 포착부를 통하여 입력된 입력 영상을 디지털 신호로 변환하여 디스플레이하고, 상기 입력 영상에 얼굴이 포함되어 있는지를 판단하고, 상기 판단에 따라서 얼굴 인식 마크를 생성하는 디지털 신호 처리부 및 상기 입력 영상 및 상기 얼굴 인식 마크를 디스플레이하는 디스플레이부를 포함하는 디지털 영상 처리장치를 제공한다.
본 발명에 있어서, 상기 디지털 신호 처리부는, 상기 입력 영상에서 얼굴이 포함되어 있는지를 인식하는 얼굴 인식부, 상기 얼굴 인식부에 의하여 인식된 얼굴의 중심축이 수직 방향을 기준으로 기울어진 각도를 나타내는 경사각 및 상기 중심축을 기준으로 회전한 각도를 나타내는 회전각을 계산하는 얼굴 상태 계산부, 얼굴 인식 마크를 생성하고, 상기 계산한 경사각 및 회전각을 사용하여 얼굴 인식 마크를 수정하는 마크 생성부, 상기 생성된 얼굴 인식 마크 및 상기 입력 영상을 합성하는 영상 합성부 및 상기 합성된 영상을 디스플레이부에 제공하고 상기 얼굴 인식부, 얼굴 상태 계산부, 마크 생성부 및 영상 합성부를 제어하는 제어부를 포함할 수 있다.
이와 같이, 영상 포착부를 통하여 입력된 입력 영상에 얼굴이 포함되어 있지 않다고 판단한 경우에는 얼굴을 인식하지 못하였다는 것을 나타내기 위한 얼굴 인식 마크를 생성하여 디스플레이함으로 인하여 사용자가 디지털 영상 처리장치가 얼굴 인식 기능을 실행하고 있음을 직관적으로 인식할 수 있도록 한다.
또한 상기 인가된 영상에 얼굴이 포함되어 있다고 판단한 경우에는 얼굴 방향 마크 및 얼굴 상태 마크를 포함하는 얼굴 인식 마크를 생성하여 디스플레이함으로 인하여 사용자가 지금 입력되는 영상에 포함된 얼굴의 방향, 각도 등을 직관적으로 인식할 수 있도록 한다.
이하, 도 1(a) 내지 도 7(b)를 참조하여 바람직한 실시 예들에 대하여 보다 상세히 설명한다.
도 1(a) 및 도 1(b)는 종래기술에 의한 디지털 영상 처리장치에 있어서 얼굴 인식 기능을 실행한 라이브 뷰(live-view) 모드에서의 디스플레이부(100)를 나타낸 도면이다.
도 1(a)를 참조하면, 얼굴 인식 기능을 실행하여도 디지털 영상 처리장치에 입력되는 입력 영상에 얼굴이 포함되어 있지 않은 경우에는 디스플레이부(100)에 아무런 표시도 되지 않는다. 다만 작은 크기로 얼굴 인식 기능을 실행함을 나타내는 아이콘(110)이 디스플레이된다. 따라서 사용자는 지금 디지털 영상 처리장치가 얼굴 인식 기능을 실행하고 있는지 여부를 쉽게 판단할 수 없다.
도 1(b)를 참조하면, 디지털 영상 처리장치에 입력되는 영상에 얼굴이 포함되어 있는 경우에 사각형의 박스(120)로 얼굴의 영역을 디스플레이하고 있는 디스플레이부(100)를 나타낸 도면이다. 사람의 얼굴을 사각형의 박스(120)만을 사용하여 나타내고 있어서 사람의 얼굴이 어느 방향을 바라보는지, 고개를 어느 방향으로 기울였는지 등의 상태를 용이하게 판단할 수 없다.
도 2 내지 도 3(b)는 본 발명의 일 실시 예에 따른 디지털 영상 처리장치의 내부 및 외부 구성을 나타낸 도면이다.
도 2 내지 도 3(b)를 참조하면, 본 발명에 의한 디지털 영상 처리장치(200)는 영상 포착부(210), 디지털 신호 처리부(220) 및 디스플레이부(230)를 포함하고, 상기 디지털 신호 처리부(220)는 제어부(221), 얼굴 인식부(222), 얼굴 상태 계산부(223), 마크 생성부(224) 및 영상 합성부(225)를 포함할 수 있다. 또한 일반적인 디지털 영상 처리장치로서 제어부(240) 및 사용자 입력부(250)를 더 포함할 수 있 다.
영상 포착부(210)는 피사체의 영상을 디지털 신호 처리부에 입력한다. 또한 영상을 포착하여 디지털 신호로 변환하는 부분이다. 상기 입력 영상 또는 포착된 영상은 디지털 신호로 변환하여 디지털 신호 처리부에 인가한다.
디지털 신호 처리부(220)는 디지털 영상 처리장치(200)의 전반적인 동작을 수행하고 제어한다. 상기 디지털 신호 처리부(220)는 제어부(221), 얼굴 인식부(222), 얼굴 상태 계산부(223), 마크 생성부(224) 및 영상 합성부(225)를 포함할 수 있다.
제어부(221)는 디지털 영상 처리장치(200)의 동작을 위한 신호들을 제어한다.
얼굴 인식부(222)는 상기 영상 포착부(210)에 의하여 입력된 입력 영상에서 사람의 얼굴이 포함되어 있는지를 판단한다. 얼굴이 포함되어 있는지를 판단하기 위하여 얼굴 인식 알고리즘이 사용될 수 있다.
얼굴 상태 계산부(223)는 상기 인식한 얼굴에서 얼굴의 중심축을 판단하고, 상기 중심축에 대하여 얼굴이 얼마나 위치를 이동하여 상태가 변경되었는지를 계산한다. 상태가 변경한 정도는 중심축에 대하여 얼굴이 좌측 또는 우측으로 기울어진 각도인 경사각 및 중심축에 대하여 얼굴이 좌측 또는 우측으로 회전한 각도인 회전각을 계산하는 방식으로 이루어질 수 있다.
마크 생성부(224)는 상기 얼굴 인식부(222)에서의 판단 결과에 따라서 얼굴 인식 마크를 생성한다. 상기 얼굴 인식부(222)에서 영상에 얼굴이 포함되어 있지 않다고 판단한 경우에는 얼굴을 인식하지 못하였다는 것을 나타내기 위한 얼굴 인식 마크를 생성할 수 있다. 반대로 상기 얼굴 인식부(2220에서 영상에 얼굴이 포함되어 있다고 판단한 경우에는 얼굴을 인식하였다는 것을 나타내기 위한 얼굴 인식 마크를 생성할 수 있다. 상기 얼굴 인식 마크는 디스플레이부(230)에 OSD(On screen display) 형식으로 표시되는 이미지이다. 상기 얼굴 인식 마크로는 얼굴의 영역 및 얼굴이 바라보는 방향을 나타내는 얼굴 방향 마크, 얼굴의 기울어짐을 나타내는 얼굴 상태 마크를 포함할 수 있다.
또한 상기 얼굴 상태 계산부(223)에 의하여 계산된 각도에 따라서 상기 생성된 얼굴 인식 마크를 수정하는 것이 가능하다.
영상 합성부(225)는 상기 마크 생성부(224)에 의하여 생성되고 수정된 얼굴 인식 마크를 영상 포착부에 의하여 입력되는 입력 영상과 합성한다.
디스플레이부(230)는 피사체, 사용자에 의한 기능버튼들(256)의 조작에 따라 제공되는 UI(user interface) 및 프리뷰 영상 등을 표시하는 부분이다. 또한 본 발명에 있어서 얼굴 인식 마크를 프리뷰 영상에 합성하여 디스플레이하는 것이 가능하다. 상기 디스플레이부(230)는 일반적으로 LCD 디스플레이 패널이 사용되나 이에 한정되는 것은 아니다.
저장부(240)는 제1 저장부(241), 제2 저장부(242), 제3 저장부(243)를 포함할 수 있다.
제1 저장부(241)는 촬영 조건 등과 관련된 사용자의 설정 데이터가 저장될 수 있다. 또한 디지털 신호 처리부(220)에서 디지털 영상 처리장치(200)를 제어하 기 위하여 사용하는 알고리즘이 저장될 수 있다. 제1 저장부(241)로는 EEPROM(electrically erasable and programmable read only memory) 등이 사용될 수 있다.
제2 저장부(242)는 데이터를 임시로 저장하는 임시 저장부로서 디지털 신호 처리부(220)로부터의 디지털 영상 신호가 일시 저장될 수 있다. 상기 제2 저장부(242)로는 DRAM(dynamic random access memory) 등이 사용될 수 있다.
제3 저장부(243)는 상기 영상 포착부(210)에 의하여 포착된 영상이 저장될 수 있다. 상기 제3 저장부(243)로는 메모리 카드 등이 사용될 수 있으며 내장형 또는 탈착이 가능한 외장형일 수 있다.
사용자 입력부(250)는 도 3(a) 및 도 3(b)에 나타난 셔터-릴리즈 버튼(252), 광각(wide angle)-줌(zoom) 버튼(253w), 망원(telephoto)-줌 버튼(253t), 모드 버튼(254), 특수효과 버튼(255), 기능버튼(256), 재생버튼(257) 등의 버튼들을 포함할 수 있다. 도 3에 나타난 버튼들에 의하여 본 발명에 의한 디지털 영상 처리장치(200)는 사용자로부터의 입력 명령을 받을 수 있다.
물론 도 3(a) 및 도 3(b)에 도시된 카메라는 본 발명에 따른 디지털 영상 처리장치의 일 실시 예일 뿐이며, 본 발명에 따른 디지털 영상 처리장치는 카메라가 아닌 캠코더 등일 수도 있다. 또한, 본 발명에 따른 디지털 영상 처리장치가 카메라라고 할지라도, 도 3(a) 및 도 3(b)에 도시된 형상과 상이한 형상을 갖거나 SLR(single lens reflex) 카메라와 같은 렌즈교환식 카메라일 수도 있는 등 다양한 변형이 가능함은 물론이다.
상기 언급한 바와 같이, 영상 포착부(210), 디지털 신호 처리부(220) 및 디스플레이부(230)를 포함하며, 상기 디지털 신호 처리부(220)는 제어부(221), 얼굴 인식부(222), 얼굴 상태 계산부(223), 마크 생성부(224) 및 영상 합성부(225)를 포함하는 디지털 영상 처리장치(200)는 얼굴 인식 기능을 실행하는 경우 얼굴 인식 마크를 디스플레이하여 사용자가 얼굴 인식 기능을 실행하고 있는지 용이하게 확인할 수 있고, 또한 영상 포착부(210)에 의하여 입력되는 입력 영상에 얼굴이 포함되어 있는 경우 상기 얼굴의 상태를 용이하게 확인할 수 있도록 한다.
도 4(a) 및 도 4(b)는 본 발명의 일 실시 예에 따른 디지털 영상 처리장치의 제어방법을 나타낸 흐름도(400a, 400b)이다.
도 2 및 4(a)를 참조하면, 본 발명에 의한 디지털 영상 처리장치(200)는 얼굴 인식 기능을 실행시키고 영상 포착부(210)를 통하여 피사체의 영상을 디지털 신호 처리부에 입력시킨다(410단계).
상기 얼굴 인식부(222)는 상기 입력된 입력 영상에 얼굴이 포함되어 있는지를 판단하는 얼굴 인식 알고리즘을 수행한다(420단계).
상기 얼굴 인식 알고리즘에 의하여 상기 영상에 얼굴이 포함되어 이는지를 판단하여(430단계) 얼굴을 포함하지 않는다고 판단한 경우에는 얼굴을 인식하지 못하였다는 것을 나타내기 위한 얼굴 인식 마크를 생성한다(441단계). 상기 얼굴을 인식하지 못하였다는 것을 나타내기 위한 얼굴 인식 마크는 원형, 다각형 등의 도형으로 이루어질 수 있으며, 하나 이상의 도형을 사용하여 생성할 수도 있을 것이다. 또한 얼굴을 인식하지 못하였다는 것을 보다 명확하게 나타내기 위하여 상기 도형들 위에 사선을 표시하는 것도 가능하다. 그러나 상기 얼굴을 인식하지 못하였다는 것을 나타내기 위한 얼굴 인식 마크는 반드시 상기 언급한 것에 한정되지 아니하며 다양한 형태로 이루어질 수 있을 것이다.
반면에 얼굴을 포함하고 있다고 판단한 경우에는 얼굴을 인식하였다는 것을 나타내기 위하여 얼굴 방향 마크 및 얼굴 상태 마크를 포함하는 얼굴 인식 마크를 생성한다(440단계).
얼굴 상태 계산부(223)는 상기 생성된 얼굴 인식 마크에서 얼굴의 경사각 및 얼굴의 회전각을 계산한다(450단계).
상기 계산한 경사각 및 회전각을 사용하여 마크 생성부(224)는 생성되어 있는 얼굴 인식 마크를 수정한다(460단계).
상기 얼굴의 경사각 및 회전각을 계산하고 얼굴 인식 마크를 수정하는 단계에 대하여는 도 4(b)에서 더욱 자세하게 설명한다.
생성된 얼굴 인식 마크의 수정을 완료하면 영상 합성부(225)는 상기 디지털 신호 처리부(220)에 입력된 입력 영상 및 상기 얼굴 인식 마크를 하나의 디스플레이부(230)에서 디스플레이할 수 있도록 합성하는 과정을 수행한다(470단계).
영상의 합성이 완료되면 상기 합성된 영상을 디스플레이부(230)에서 디스플레이한다(480단계).
이하, 도 2 및 도 4(b)를 참조하여 상기 얼굴의 경사각 및 회전각을 계산하고 얼굴 인식 마크를 수정하는 단계에 대하여 자세하게 설명하도록 한다.
일단, 디지털 신호 처리부(220)에 입력된 입력 영상에 얼굴이 포함되어 있다 고 판단한 경우에는 상기 언급한 바와 같이 얼굴 방향 마크 및 얼굴 상태 마크를 포함하는 얼굴 인식 마크를 생성한다(440단계).
상기 얼굴 방향 마크란 종래기술에서 얼굴이 디스플레이되는 영역에 얼굴을 인식하고 있음을 표시하는 사각형 모양의 박스의 기능에 얼굴이 바라보는 방향을 나타내는 기능을 더 포함한 마크로 본 발명에서는 상기 얼굴 방향 마크를 타원형으로 형성하고 있다. 타원형으로 형성한 경우 장반경을 이루는 방향을 수직 방향으로 하고 단반경을 이루는 방향을 수평 방향으로 하여 형성할 수 있다. 반드시 상기 언급한 바와 같이 형성되는 것에 한정되는 것은 아니나 이하 본 발명을 설명함에 있어서 장반경을 이루는 방향을 수직 방향으로 하고 단반경을 이루는 방향을 수평 방향으로 하는 타원형으로 형성된 것으로 한다.
또한 상기 얼굴 상태 마크란 상기 입력된 입력 영상에 포함되어 있는 얼굴의 중심축이 수직 방향에 대하여 얼마나 기울어져 있는지, 상기 얼굴이 바라보는 방향이 중심축에 대하여 얼마나 회전하였는지를 나타내는 마크이다.
상기 단계에서는 얼굴의 경사각 및 회전각이 계산되기 이전이므로 얼굴 인식 마크의 최초 형태로 생성될 것이다. 상기 얼굴 인식 마크의 최초 형태로는 얼굴 방향 마크가 원형으로 형성되고, 상기 얼굴 상태 마크가 삼각형의 밑변이 수평 방향에 평행한 상태로 형성되는 것이 될 수 있다.
얼굴 인식 마크가 생성되면 상기 입력된 입력 영상에 포함되어 있는 얼굴의 중심축을 판단한다(451단계). 얼굴의 중심축은 사람이 바르게 서거나 앉아있을 때 대략적으로 사람의 목의 중심에서 수직 방향으로 연장되는 직선일 수 있다. 상기 얼굴의 중심축은 반드시 정확한 것일 필요는 없으며 알고리즘에 의하여 수행되므로 실제 중심축과는 오차가 발생할 수도 있을 것이다.
얼굴의 중심축을 판단하면 상기 중심축이 수직 방향을 기준으로 기울어진 각도인 경사각을 계산한다(452단계).
또한 상기 판단된 얼굴의 중심축을 기준으로 상기 얼굴이 회전한 각도인 회전각을 계산한다(453단계). 상기 회전한 각도란 중심 축을 기준으로 얼굴이 바라보는 방향이 정면을 향하였을 때와 비교하여 몇 도만큼 회전하였느냐를 나타내는 각도이다.
상기 계산된 경사각 및 회전각에 따라서 마크 생성부(224)는 생성된 얼굴 인식 마크의 얼굴 방향 마크 및 얼굴 상태 마크를 수정한다(461단계 및 462단계).
얼굴 방향 마크가 타원형으로 형성되는 경우 상기 계산한 회전각에 따라서 단반경의 길이를 조절할 수 있다. 상기 인가된 영상에 포함된 얼굴이 정면을 바라보고 있을 때에는 단반경의 길이를 장반경의 길이와 같게 하여 원형이 되도록 하고, 상기 얼굴이 좌측 또는 우측을 바라보고 있을 때에는 단반경의 길이를 장반경의 길이보다 짧게 할 수 있을 것이다. 또한 상기 회전각이 커질수록 상기 단반경의 길이를 짧게 하는 것이 가능할 것이다. 상기 회전각이 좌측 또는 우측으로 90 도 이상이 되는 경우에는 얼굴을 인식할 수 없게 될 것이며, 이 경우에는 얼굴을 인식하지 못하였다는 것을 나타내기 위한 얼굴 인식 마크가 생성될 것이다.
얼굴 상태 마크가 삼각형으로 형성되는 경우 상기 계산한 경사각에 따라서 밑변이 수평 방향과 이루는 각도를 조절할 수 있다. 상기 인가된 영상에 포함된 얼 굴이 똑바로 서있는 경우에는 삼각형의 밑변이 수평 방향과 평행하게 하고, 상기 얼굴이 옆으로 기울어져 있을 때에는 삼각형의 밑변이 수평 방향과 이루는 각도를 크게 할 수 있을 것이다. 상기 얼굴이 좌측으로 기울어져 있는 경우에는 상기 밑변의 우측이 올라간 형태로 형성될 수 있으며, 상기 얼굴이 우측으로 기울어져 있는 경우에는 상기 밑변이 좌측으로 올라간 형태로 형성될 수 있을 것이다. 또한 상기 얼굴 방향 마크에서 얼굴의 회전각에 따라서 얼굴의 방향을 나타낸 것과 같이 얼굴 상태 마크에서 얼굴의 회전각에 따라서 삼각형의 밑변의 길이를 조절하여 얼굴의 방향을 나타내는 것도 가능할 것이다.
상기 단계에 의하여 얼굴 방향 마크 및 얼굴 상태 마크의 수정을 완료하면 상기 수정된 얼굴 방향 마크 및 얼굴 상태 마크를 영상 합성부(225)에 제공한다(463단계).
상기 언급한 바와 같이, 영상 포착부(210)를 통하여 입력된 입력 영상에 얼굴이 포함되어 있지 않다고 판단한 경우에는 얼굴을 인식하지 못하였다는 것을 나타내기 위한 얼굴 인식 마크를 생성하여 디스플레이함으로 인하여 사용자가 디지털 영상 처리장치(200)가 얼굴 인식 기능을 실행하고 있음을 직관적으로 인식할 수 있도록 한다.
또한 상기 입력된 입력 영상에 얼굴이 포함되어 있다고 판단한 경우에는 얼굴 방향 마크 및 얼굴 상태 마크를 포함하는 얼굴 인식 마크를 생성하여 디스플레이함으로 인하여 사용자가 지금 입력되는 영상에 포함된 얼굴의 방향, 각도 등을 직관적으로 인식할 수 있도록 한다.
도 5는 본 발명의 일 실시 예에 따른 디지털 영상 처리장치에서 얼굴을 인식하지 못한 경우를 나타내는 도면이다.
도 5를 참조하면, 본 발명에 의한 디지털 영상 처리장치는 디스플레이부(230)에 OSD(On screen display) 방식으로 얼굴을 인식하지 못하였다는 것을 나타내는 얼굴 인식 마크를 생성하여 디스플레이한다. 도 5에서는 상기 얼굴을 인식하지 못하였다는 것을 나타내기 위한 얼굴 인식 마크는 얼굴 영역 및 방향을 나타내는 원형의 마크 및 얼굴의 상태를 나타내는 삼각형의 마크 위에 사선을 형성하여 사용자가 직관적으로 얼굴 인식 기능이 실행되고 있다는 것을 인식시켜줌과 동시에 얼굴이 포함되어 있지 않다는 것을 인식할 수 있도록 한다.
도 6은 본 발명의 일 실시 예에 따른 디지털 영상 처리장치에서 얼굴을 인식한 경우를 나타내는 도면이다.
도 6을 참조하면, 디지털 신호 처리부에 입력된 입력 영상에 얼굴이 포함되어 있다고 판단한 경우 얼굴 영역 및 방향을 나타내는 얼굴 방향 마크 및 얼굴의 상태를 나타내는 얼굴 상태 마크를 디스플레이한다. 도 6에서는 피사체인 사람이 똑바른 자세로 있기 때문에 얼굴 방향 마크는 장반경 및 단반경의 길이가 같은 타원형, 즉 원형으로 형성되고, 얼굴 상태 마크는 밑변이 수평 방향과 평행한 삼각형으로 형성되었다.
도 7(a) 및 도 7(b)는 본 발명의 다른 일 실시 예에 따른 디지털 영상 처리장치에서 얼굴을 인식한 경우를 나타낸 도면이다.
도 7(a)를 참조하면, 디지털 신호 처리부에 입력된 입력 영상에 포함된 얼굴 이 좌측을 바라보고 있는 경우로서 얼굴 방향 마크에서 타원형의 단반경의 길이가 장반경의 길이보다 짧게 형성된 것을 확인할 수 있다. 그러나 상기 얼굴의 중심축이 수직 방향을 기준으로 기울어져 있지는 아니하므로 얼굴 상태 마크로 나타내진 삼각형의 밑변은 수평 방향과 평행하게 형성되었다.
도 7(b)를 참조하면, 디지털 신호 처리부에 인가된 영상에 포함된 얼굴이 우측으로 기울어진 경우로서 얼굴 상태 마크에서 삼각형의 밑변이 수평방향에 대하여 일정한 각도를 가지고 형성된다. 반면에 상기 얼굴이 바라보는 방향은 정면이므로 회전각이 0 도이고, 따라서 얼굴 방향 마크는 완전한 원형으로 형성되었다.
상기 도 5 내지 도 7(b)에 있어서, 상기 얼굴 인식 마크가 반드시 상기 언급한 바와 같은 형태로 형성되어야 하는 것은 아니며, 다양한 변형이 가능함을 알 수 있을 것이다.
상기 발명의 상세한 설명과 도면은 단지 본 발명의 예시적인 것으로서, 이는 단지 본 발명을 설명하기 위한 목적에서 사용된 것이지 의미 한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다. 따라서 이상 설명한 내용을 통해 당업자라면 본 발명의 기술 사상을 일탈하지 아니하는 범위에서 다양한 변경 및 수정이 가능함을 알 수 있을 것이다. 따라서 본 발명의 기술적 보호 범위는 명세서의 상세한 설명에 기재된 내용으로 한정되는 것이 아니라 특허청구범위에 의해 정하여 져야만 할 것이다.
도 1(a) 및 도 1(b)는 종래기술에 의한 디지털 영상 처리장치에 있어서 얼굴 인식 기능을 실행한 라이브 뷰 모드에서의 디스플레이부를 나타낸 도면이다.
도 2는 본 발명의 일 실시 예에 따른 디지털 영상 처리장치의 내부 구성을 나타낸 도면이다.
도 3(a) 및 도 3(b)는 본 발명의 일 실시 예에 따른 디지털 영상 처리장치의 외부 구성을 나타낸 도면이다.
도 4(a) 및 도 4(b)는 본 발명의 일 실시 예에 따른 디지털 영상 처리장치의 제어방법을 나타낸 흐름도이다.
도 5는 본 발명의 일 실시 예에 따른 디지털 영상 처리장치에서 얼굴을 인식하지 못한 경우를 나타내는 도면이다.
도 6은 본 발명의 일 실시 예에 따른 디지털 영상 처리장치에서 얼굴을 인식한 경우를 나타내는 도면이다.
도 7(a) 및 도 7(b)는 본 발명의 다른 일 실시 예에 따른 디지털 영상 처리장치에서 얼굴을 인식한 경우를 나타낸 도면이다.

Claims (9)

  1. 얼굴 인식 기능을 수행하는 디지털 영상 처리장치의 제어방법에 있어서,
    (a) 입력 영상에 얼굴이 포함되어 있는지를 판단하는 단계;
    (b) 상기 (a) 단계의 판단에 따라서 얼굴을 인식하였다는 것을 나타내기 위한 얼굴 인식 마크 또는 얼굴을 인식하지 못하였다는 것을 나타내기 위한 얼굴 인식 마크를 생성하는 단계; 및
    (c) 상기 (b) 단계의 얼굴 인식 마크를 디스플레이하는 단계를 포함하는 디지털 영상 처리장치의 제어방법.
  2. 제1항에 있어서, 상기 (b) 단계에서,
    상기 얼굴을 인식하였다는 것을 나타내기 위한 얼굴 인식 마크는 상기 얼굴 영역 및 얼굴이 바라보는 방향을 나타내는 얼굴 방향 마크를 포함하는 디지털 영상 처리장치의 제어방법.
  3. 제2항에 있어서, 상기 (b) 단계에서,
    상기 얼굴을 인식하였다는 것을 나타내기 위한 얼굴 인식 마크는 상기 얼굴의 기울어짐을 나타내는 얼굴 상태 마크를 더 포함하는 디지털 영상 처리장치의 제어방법.
  4. 제3항에 있어서,
    상기 얼굴 방향 마크는 타원형으로 형성하고,
    상기 얼굴 상태 마크는 다각형으로 형성하는 디지털 영상 처리장치의 제어방법.
  5. 제4항에 있어서,
    상기 얼굴 상태 마크는 삼각형으로 형성하는 디지털 영상 처리장치의 제어방법.
  6. 제5항에 있어서, 상기 (b)단계가,
    (b1) 상기 (a) 단계의 판단에서 입력 영상에 얼굴이 포함되어 있다고 판단한 경우, 원형의 얼굴 방향 마크 및 밑변이 수평 방향에 평행한 얼굴 상태 마크를 생성하는 단계;
    (b2) 상기 입력 영상에 포함된 얼굴의 중심축이 수직 방향을 기준으로 기울어진 각도인 경사각 및 상기 중심축을 기준으로 회전한 각도인 회전각을 계산하는 단계;
    (b3) 상기 (b2) 단계의 경사각에 따라서 상기 얼굴 상태 마크의 밑변이 수평방향과 이루는 각도를 수정하는 단계; 및
    (b4) 상기 (b2) 단계의 회전각에 따라서 상기 얼굴 방향 마크의 단반경의 길이를 수정하는 단계를 포함하는 디지털 영상 처리장치의 제어방법.
  7. 제1항에 있어서, 상기 (c) 단계는,
    (c1) 상기 (b) 단계의 얼굴 인식 마크와 상기 (a) 단계의 입력 영상을 합성하는 단계; 및
    (c2) 상기 (c1) 단계에서 합성된 영상을 디스플레이하는 단계를 포함하는 디지털 영상 처리장치의 제어방법.
  8. 영상을 입력하는 영상 포착부;
    상기 영상 포착부를 통하여 입력된 입력 영상을 디지털 신호로 변환하여 디스플레이하고, 상기 입력 영상에 얼굴이 포함되어 있는지를 판단하고, 상기 판단에 따라서 얼굴 인식 마크를 생성하는 디지털 신호 처리부; 및
    상기 입력 영상 및 상기 얼굴 인식 마크를 디스플레이하는 디스플레이부를 포함하는 디지털 영상 처리장치.
  9. 제8항에 있어서, 상기 디지털 신호 처리부는,
    상기 입력 영상에서 얼굴이 포함되어 있는지를 인식하는 얼굴 인식부;
    상기 얼굴 인식부에 의하여 인식된 얼굴의 중심축이 수직 방향을 기준으로 기울어진 각도를 나타내는 경사각 및 상기 중심축을 기준으로 회전한 각도를 나타내는 회전각을 계산하는 얼굴 상태 계산부;
    얼굴 인식 마크를 생성하고, 상기 계산한 경사각 및 회전각을 사용하여 얼굴 인식 마크를 수정하는 마크 생성부;
    상기 생성된 얼굴 인식 마크 및 상기 입력 영상을 합성하는 영상 합성부; 및
    상기 합성된 영상을 디스플레이부에 제공하고 상기 얼굴 인식부, 얼굴 상태 계산부, 마크 생성부 및 영상 합성부를 제어하는 제어부를 포함하는 디지털 영상 처리장치.
KR1020070099247A 2007-10-02 2007-10-02 얼굴 인식 마크를 디스플레이하는 디지털 영상 처리장치 및그 제어방법 KR101406799B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070099247A KR101406799B1 (ko) 2007-10-02 2007-10-02 얼굴 인식 마크를 디스플레이하는 디지털 영상 처리장치 및그 제어방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070099247A KR101406799B1 (ko) 2007-10-02 2007-10-02 얼굴 인식 마크를 디스플레이하는 디지털 영상 처리장치 및그 제어방법

Publications (2)

Publication Number Publication Date
KR20090034084A true KR20090034084A (ko) 2009-04-07
KR101406799B1 KR101406799B1 (ko) 2014-06-12

Family

ID=40760133

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070099247A KR101406799B1 (ko) 2007-10-02 2007-10-02 얼굴 인식 마크를 디스플레이하는 디지털 영상 처리장치 및그 제어방법

Country Status (1)

Country Link
KR (1) KR101406799B1 (ko)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3895892B2 (ja) 1999-09-22 2007-03-22 株式会社東芝 マルチメディア情報収集管理装置およびプログラムを格納した記憶媒体
JP2006211139A (ja) 2005-01-26 2006-08-10 Sanyo Electric Co Ltd 撮像装置
JP4639837B2 (ja) 2005-02-15 2011-02-23 株式会社ニコン 電子カメラ
JP4572815B2 (ja) 2005-11-18 2010-11-04 富士フイルム株式会社 撮像装置及び撮像方法

Also Published As

Publication number Publication date
KR101406799B1 (ko) 2014-06-12

Similar Documents

Publication Publication Date Title
CN107026973B (zh) 图像处理装置、图像处理方法与摄影辅助器材
US7801360B2 (en) Target-image search apparatus, digital camera and methods of controlling same
US8400532B2 (en) Digital image capturing device providing photographing composition and method thereof
US11190747B2 (en) Display control apparatus, display control method, and storage medium
CN104754216A (zh) 一种拍照方法及装置
JP2006293782A (ja) 画像処理装置及び画像処理プログラム
CN110213493A (zh) 设备成像方法、装置、存储介质及电子设备
WO2015194084A1 (ja) 情報処理装置、情報処理システム、情報処理方法およびプログラム
TWI676113B (zh) 虹膜識別過程中的預覽方法及裝置
JP4894708B2 (ja) 撮像装置
US8937676B2 (en) Video processing apparatus, imaging apparatus, video processing method, and storage medium
US8194147B2 (en) Image presentation angle adjustment method and camera device using the same
JP2019106604A (ja) 撮像装置、撮像装置の制御方法およびプログラム
JP6677900B2 (ja) 画像処理装置、画像処理方法及びプログラム
KR20110014450A (ko) 얼굴 인식률 개선 장치 및 방법
WO2018196854A1 (zh) 一种拍照方法、拍照装置及移动终端
US9373050B2 (en) Image processing apparatus, image capturing apparatus, and method of controlling the same
JP5805013B2 (ja) 撮像画像表示装置、撮像画像表示方法、プログラム
KR101406799B1 (ko) 얼굴 인식 마크를 디스플레이하는 디지털 영상 처리장치 및그 제어방법
JPWO2015141185A1 (ja) 撮像制御装置、撮像制御方法およびプログラム
KR101396349B1 (ko) 얼굴을 포함하는 영상의 회전 정보를 포함한 디지털 영상처리장치 및 그 제어방법
KR20150026358A (ko) 피사체 정보에 따른 템플릿 피팅 방법 및 그 장치
KR20200070611A (ko) 가상카메라 영상 형성 및 적용 방법
JP2012120003A (ja) 撮影装置、撮影装置における制御方法及びその制御プログラム
JP5775620B2 (ja) 画像処理装置、撮像装置、制御方法及びプログラム

Legal Events

Date Code Title Description
N231 Notification of change of applicant
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170529

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180530

Year of fee payment: 5