KR20090004190A - 디지털 영상 처리 장치 및 그 제어 방법 - Google Patents

디지털 영상 처리 장치 및 그 제어 방법 Download PDF

Info

Publication number
KR20090004190A
KR20090004190A KR1020070068197A KR20070068197A KR20090004190A KR 20090004190 A KR20090004190 A KR 20090004190A KR 1020070068197 A KR1020070068197 A KR 1020070068197A KR 20070068197 A KR20070068197 A KR 20070068197A KR 20090004190 A KR20090004190 A KR 20090004190A
Authority
KR
South Korea
Prior art keywords
facial expression
face
detected
image processing
processing apparatus
Prior art date
Application number
KR1020070068197A
Other languages
English (en)
Other versions
KR101369752B1 (ko
Inventor
김태경
권오현
Original Assignee
삼성테크윈 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성테크윈 주식회사 filed Critical 삼성테크윈 주식회사
Priority to KR1020070068197A priority Critical patent/KR101369752B1/ko
Publication of KR20090004190A publication Critical patent/KR20090004190A/ko
Application granted granted Critical
Publication of KR101369752B1 publication Critical patent/KR101369752B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/32Monitoring with visual or acoustical indication of the functioning of the machine
    • G06F11/324Display of status information
    • G06F11/325Display of status information by lamps or LED's

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은 별도의 원격 조정 장치 없이, 얼굴 인식 및 얼굴 표정 인식을 이용하여 원격 제어할 수 있는 디지털 영상 처리 장치 및 그 동작 방법에 관한 것으로, 원격 조정 모드를 설정하는 원격 조정 모드 설정부; 상기 원격 조정 모드 시, 사전 설정된 얼굴 표정을 검출하고, 상기 검출된 얼굴 표정에 대응하는 동작을 수행하게 하는 제어부; 및 상기 사전 설정된 얼굴 표정이 검출되었음을 알려주는 신호 출력부;를 구비하는 디지털 영상 처리 장치를 제공한다.

Description

디지털 영상 처리 장치 및 그 제어 방법{Digital image processing apparatus and method for controlling the same}
본 발명은 디지털 영상 처리 장치 및 그 제어 방법에 관한 것으로, 더 상세하게는 얼굴 인식 및 얼굴 표정 인식을 이용하여 원격 제어할 수 있는 디지털 영상 처리 장치 및 그 동작 방법에 관한 것이다.
디지털 카메라, 카메라 모듈이 장착된 핸드폰, 디지털 캠코드, PDA 등을 포함한 디지털 영상 처리 장치는 렌즈를 통해 들어오는 빛 데이터를 전기적 신호로 전환 시키는 CCD 또는 CMOS와 같은 이미지 센서를 이용하여 피사체의 모습을 기록하는 장치이다.
일반적으로 디지털 영상 처리 장치는, 촬영 동작에 의하여 얻어진 이미지 파일을 저장매체에 저장하고 이 저장매체에 저장된 이미지 파일들을 재생하는 등의 일련의 동작을 수행하기 위해서는, 조작부의 버튼을 누르거나 LCD 창에 디스플레이된 메뉴를 터치스크린 하는 등 기계적이고 물리적인 입력 동작을 필요로 한다.
한편, 종래에는 카메라로 자기 자신을 원거리에서 촬영하기 위해서는, 사용자가 셀프 타이머(self timer) 모드를 설정하고 소정 위치를 정하여 포즈를 잡으 면, 카메라는 사전 설정된 일정 시간이 소요된 후 자동으로 촬영 동작을 수행하는 방법이 있었다. 그러나 셀프 타이머를 이용하는 방법은 사전 설정된 시간 내에 포즈를 취해야 하기 때문에 촬영 시 제약이 많았다.
이 셀프 타이머를 이용하는 방법보다 개선된 방법으로 리모트 콘트롤러(remote controller)를 이용하는 방법이 있다. 이 방법에 의하면, 사용자가 리모트 모드를 설정하고 리모트 콘트롤러로 촬영 동작을 지시하면, 카메라 본체의 수신부는 리모트 콘트롤러로부터 입력되는 RF(radio frequency)를 샘플링하여 사전 설정된 동작을 수행하였다. 리모트 콘트롤러는 셀프 타이머보다 사용자를 촬영 동작에 있어서 자유롭게 하지만, 원격 조정에 따른 전력 소모가 커서 리모트 콘트롤러의 배터리를 자주 교체해야 하는 점과, 리모트 콘트롤러의 분실 위험이 크고 분실할 경우에는 원격 조정을 할 수 없게 되는 문제가 있다.
본 발명은 상기와 같은 문제점을 포함하여 여러 문제점들을 해결하기 위한 것으로서, 별도의 리모트 콘트롤러 없이 얼굴 인식 및 얼굴 표정 인식을 이용하여 원격 제어할 수 있는 디지털 영상 처리 장치 및 그 제어 방법을 제공하는 것을 목적으로 한다.
본 발명은 원격 조정 모드를 설정하는 원격 조정 모드 설정부; 상기 원격 조정 모드 시, 사전 설정된 얼굴 표정을 검출하고, 상기 검출된 얼굴 표정에 대응하는 동작을 수행하게 하는 제어부; 및 상기 사전 설정된 얼굴 표정이 검출되었음을 알려주는 신호 출력부;를 구비하는 디지털 영상 처리 장치를 제공한다.
이러한 본 발명의 다른 특징에 의하면, 상기 제어부는, 실시간으로 촬영되는 이미지 가운데 얼굴을 인식하는 얼굴 검출부; 상기 검색된 얼굴에 사전 설정된 얼굴 표정이 검출되는지 여부를 판단하는 얼굴 표정 검출부; 및 상기 검출된 얼굴 표정에 대응하는 동작을 수행하게 하는 동작 수행 제어부:를 포함할 수 있다.
본 발명의 또 다른 특징에 의하면, 상기 얼굴 표정 검출부는, 상기 사전 설정된 얼굴 표정이 사전 설정된 시간 동안 지속 되는지 여부를 판단할 수 있다.
본 발명의 또 다른 특징에 의하면, 상기 얼굴 표정 검출부는, 상기 사전 설정된 얼굴 표정을 만드는 동작이 사전 설정된 횟수만큼 반복되는지 여부를 판단할 수 있다.
본 발명의 또 다른 특징에 의하면, 상기 신호 출력부는, 상기 얼굴 검색부가 실시간으로 촬영되는 이미지 가운데 얼굴을 인식하였음을 알려줄 수 있다.
본 발명의 또 다른 특징에 의하면, 기 신호 출력부는 발광 수단을 구비할 수 있다.
본 발명의 또 다른 특징에 의하면, 상기 발광 수단은, 상기 얼굴 인식 및 얼굴 표정의 검출 시, 점멸할 수 있다.
본 발명의 또 다른 특징에 의하면, 상기 발광 수단은 LED 일 수 있다.
본 발명의 또 다른 특징에 의하면, 상기 신호 출력부는 음성 출력 수단을 구비할 수 있다.
또한, 본 발명은 (a) 원격 조정 모드에서, 실시간으로 촬영되는 이미지 가운데 얼굴을 검색하는 단계; (b) 소정 시간 내에 사전 설정된 얼굴 표정이 상기 얼굴에서 검출되는지 여부를 판단하는 단계; (c) 상기 얼굴 표정이 상기 얼굴에서 검출되었음을 알리는 단계; 및 (d) 상기 얼굴 표정에 대응하여 사전에 정의된 동작을 수행하는 단계;를 포함하는 디지털 영상 처리 장치의 제어방법을 제공한다.
이러한 본 발명의 다른 특징에 의하면, 상기 (a) 단계 및 상기 (b) 단계 사이에, 상기 얼굴이 검색되었음을 알리는 단계를 더 포함할 수 있다.
본 발명의 또 다른 특징에 의하면, 상기 (c) 단계는, 상기 디지털 영상 처리 장치의 발광 수단이 점멸함으로써, 상기 얼굴 및 상기 얼굴 표정이 검출되었음을 알릴 수 있다.
본 발명의 또 다른 특징에 의하면, 상기 (c) 단계는, 상기 디지털 영상 처리 장치의 음성 출력 수단이 음성을 출력함으로써, 상기 얼굴 및 상기 얼굴 표정이 검출되었음을 알릴 수 있다.
본 발명의 또 다른 특징에 의하면, 상기 (d) 단계는, 상기 (c) 단계 후 소정 시간이 경과 한 후 수행될 수 있다.
상기한 바와 같이 이루어진 본 발명의 디지털 영상 처리 장치 및 그 제어방법에 따르면, 얼굴 인식 및 표정 인식 방법을 사용하여 별도의 리모트 콘트롤러 없이 디지털 영상 처리 장치를 원격 제어할 수 있다.
이하, 첨부된 도면들을 참조하여 본 발명의 실시예를 상세히 설명하면 다음과 같다.
도 1은 본 실시예에 따른 디지털 영상 처리 장치로서의 디지털 카메라를 개략적으로 도시하는 사시도이다. 도 1을 참조하면, 본 실시예에 따른 디지털 카메라는 셔터-릴리즈 버튼(11), 전원 버튼(12), 플래시(13), 마이크로폰(MIC), 뷰파인더(14), 렌즈부(15), 플래쉬-광량 센서(16) 및 LED 램프(17)를 구비한다.
셔터-릴리즈 버튼(11)은, 정해진 시간 동안 CCD(charge-coupled device) 또는 CMOS(complementary metal-oxide semiconductor)와 같은 이미지 센서(image sensor)를 빛에 노출시키기 위해 열리고 닫히며, 조리개(미도시)와 연동하여 피사체를 적정하게 노출시켜 이미지 센서(미도시)에 영상을 기록한다.
또한, 셔터-릴리즈 버튼(11)은 촬영자 입력에 의해 제1 및 제2 영상 촬영 신 호를 생성한다. 반 셔터로 셔터-릴리즈 버튼(11)을 눌러 제1 영상 촬영 신호를 입력하면, 디지털 영상 처리 장치는 초점을 잡고 빛의 양을 조절한다. 제1 영상 촬영 신호의 입력으로 초점이 잡히고 빛의 양이 조절되면, 비로소 완전 셔터로 셔터-릴리즈 버튼(11)을 눌러 제2 영상 촬영 신호를 입력하면 영상을 촬영, 즉 캡쳐한다.
전원 버튼(12)은 디지털 영상 처리 장치에 전원을 공급하여 동작시키기 위해 입력된다.
플래시(13)는 어두운 곳에서 촬영할 경우 밝은 빛을 순간적으로 비추어 밝게 해주는 것으로 플래시 모드에는 자동플래시, 강제발광, 발광금지, 적목감소, 슬로우 싱크로 등이 있다. 플래쉬-광량 센서(16)는 프래쉬(13)가 동작하는 경우에 그 광량을 감지하여 마이크로제어기(미도시)를 통하여 디지털 카메라 프로세서(미도시)에 입력시킨다.
뷰파인더(14a)는 접안 렌즈를 통해 피사체를 구도를 관찰하는 통로로서, 본 실시예에서는 렌즈부(15)를 통과하지 않는 별도의 창을 통과하는 빛으로 피사체를 관찰하는 광학실상식 뷰파인더(14a)를 장착하고 있지만, 본 발명은 이에 한정되지 않고 전자식 뷰 파인더를 구비하거나, 이러한 뷰 파인더를 별도로 구비하지 않을 수도 있다.
렌즈부(15)는 외부 광원으로부터 빛을 받아 피사체의 이미지를 광학적으로 처리한다. 비록 도시되지 않았지만, 렌즈부(29)는 줌 렌즈, 포커스 렌즈, 및 보상 렌즈를 포함할 수 있다.
LED 램프(17)는, 후술하겠지만 촬영하는 영상 데이터 가운데 카메라가 얼굴 부분을 인식하거나 얼굴 표정을 검출한 경우, 사용자에게 이를 알려주는 발광 수단이다. 물론 본 발명의 경우, 발광 수단으로 상기 LED 램프(17)가 아니더라도 셀프-타이머 램프(미도시)를 구비할 경우, 셀프-타이머 램프가 상기 LED 램프(17)의 기능을 대신하여 사용자에게 얼굴 부분이 인식되었거나 얼굴 표정이 검출되었음을 알려줄 수도 있다. 또한, 발광 수단 외에 스피커(SP, 도 2 참조)를 이용한 음성 출력 수단을 이용하여, 사용자에게 얼굴 부분이 인식되었거나 얼굴 표정이 검출되었음을 알려줄 수도 있다.
도 2는 도 1의 디지털 카메라의 배면을 개략적으로 도시하는 배면도이다.
도 2를 참조하면, 디지털 영상 처리 장치의 뒤쪽에는 뷰파인더(17b), 광각-줌(wide angle-zoom) 버튼(21w), 망원-줌(telephoto-zoom) 버튼(21t), 모드 다이얼(22), 기능 버튼(23), 재생 모드 버튼(24), 스피커(SP) 및 디스플레이 패널(25)이 구비되어 있다.
광각-줌 버튼(21w) 및 망원-줌 버튼(21t)은 그 입력에 따라 화각이 넓어지거나 화각이 좁아진다. 특히 선택된 노출 영역의 크기를 변경시키고자 할 때 사용될 수 있다. 이때, 광각-줌 버튼(21w)을 누르면, 선택된 노출 영역의 크기가 작아지고, 망원-줌 버튼(21t)을 누르면, 선택된 노출 영역의 크기가 커진다.
모드 다이얼(22)은, 카메라의 동작 모드들, 예컨대 간편 촬영 모드, 프로그램 촬영 모드, 인물 촬영 모드, 야경 촬영 모드, 수동 촬영 모드, 동영상 촬영 모드, 사용자 설정 모드 및 녹음 모드 중에서 어느 한 동작 모드를 사용자가 선택하는데 사용된다.
기능 버튼(23)은, 상향 키(23U), 하향 키(23D), 좌향 키(23L), 우향 키(23R) 등을 포함하여, 디스플레이 패널(35) 상에서의 이미지 재생 시 이미지의 이동 등에 사용되거나 디스플레이 패널(35) 상의 메뉴 화면에서 활성화 커서의 방향-이동 등에 사용될 수 있다. 또한, 메뉴 버튼(26M)을 포함하여 디지털 영상 처리 장치의 동작에 관한 각종 메뉴를 실행하는데 사용될 수 있으며, 상기 키들은 특정 기능을 수행하는 단축키로써도 이용될 수 있다.
또한, 상기 모드 다이얼(22)와 기능 버튼(23)은 본 발명의 원격 조정 모드를 설정하는 기능 키로 사용될 수도 있다. 즉, 모드 다이얼 가운데 원격 조정 모드를 설정할 수도 있고, 기능 버튼(23) 가운데 어느 하나의 키에 원격 조정 기능을 수행하는 단축키로 이용할 수도 있다. 뿐만 아니라, 위와 같은 모드 다이얼(22)이나 기능 버튼(23)과 별도의 버튼을 구비하여, 원격 조정 모드를 설정하도록 하는 등 다양한 변형이 가능하다.
재생 모드 버튼(24)은 재생 모드와 프리뷰(preview) 모드의 상호 전환을 위하여 사용된다.
디스플레이 패널(25)는, 통상적으로 LCD 패널이 사용되며 촬영되는 피사체의 이미지가 디스플레이된다. 따라서, 사용자는 LCD 패널을 통하여 촬영 전 이미지를 볼 수 있고, 촬영 후 즉시 촬영된 결과물의 확인이 가능하다. 또한 LCD 패널을 통해서 카메라의 동작에 필요한 각종 조작을 할 수도 있다.
물론 도 1 및 도 2에 도시된 카메라는 본 발명에 따른 디지털 촬영장치의 일 실시예일 뿐이며, 본 발명에 따른 디지털 촬영장치는 카메라가 아닌 캠코더 등일 수도 있다. 또한, 본 발명에 따른 디지털 촬영장치가 카메라라고 할지라도, 도 1 및 도 2에 도시된 형상과 상이한 형상을 갖거나 SLR(single lens reflex) 카메라와 같은 렌즈 교환식 카메라일 수도 있는 등 다양한 변형이 가능함은 물론이다.
도 3은 본 실시예에 따른 디지털 카메라의 전체적인 구성을 설명하기 위한 블록도이다. 상기 도면을 참조하면, 본 실시예에 따른 디지털 카메라는 사용자 입력부(110), 촬영부(120), 영상처리부(130), 디스플레이부(140), 저장부(150), 신호 출력부(160) 및 제어부(170)를 구비한다.
사용자 입력부(110)는, 사용자의 조작에 의해 디지털 카메라의 각종 동작을 제어하는 신호를 입력하는 곳으로, 도 1 및 도 2를 참조하여 전술하였듯이, 셔터-릴리즈 버튼(11), 전원 버튼(12), 광각-줌 버튼(21w)과 망원-줌 버튼(21t), 모드 다이얼(22) 및 기능 버튼(23) 등과 같은 각종 버튼들을 사용자가 조작함으로써, 각 버튼들에 정의된 신호를 후술할 제어부(170)에 입력한다.
한편, 도 3에 도시하지는 않았지만, 사용자 입력부(110)에는 사용자가 원격으로 디지털 카메라를 조정하기를 원하는 경우에 신호를 입력하는 원격 조정 설정부(미도시)가 포함된다. 원격 조정 설정부(미도시)는 전술한 바와 같이, 원격 조정 모드로의 진입이 설정된 모드 다이얼(22)이나 기능 버튼(23)을 누름으로서, 또는 별도의 버튼에 의해 구현될 수 있다.
촬영부(120)는 피사체의 이미지에 대한 광신호를 전기 신호로 변환하는 곳으로, 렌즈부(15)와 필터부(미도시)를 포함하는 광학계 및 이미지 센서를 포함한다. 렌즈부(15)는 전술한 줌 렌즈, 포커스 렌즈, 및 보상 렌즈를 포함할 수 있다. 프리 뷰(Preview) 모드 또는 동영상 촬영 모드에서 사용자가 사용자 입력부(110)에 포함된 버튼을 누르면, 이에 상응하는 신호가 제어부(170)에 입력된다. 이에 따라, 제어부(170)가 렌즈 구동부를 제어함에 딸, 줌 모터가 구동되어 줌 렌즈가 이동된다. 또한 조리개(미도시)의 개폐 정도에 따라 입사되는 빛의 양(광량)을 조절하는데, 조리개의 개폐 정도는 제어부(170)에 의해 제어된다.
예컨대, CCD 또는 CMOS와 같은 이미지 센서는 렌즈부(15)를 통하여 입력되는 광량을 축적하고 그 축적된 광량에 따라 렌즈부(15)에서 촬영된 영상을 수직 동기신호에 맞추어 출력한다. 디지털 영상 처리 장치의 영상 획득은 피사체로부터 반사되어 나오는 빛을 전기적인 신호로 변환시켜 주는 CCD에 의해 이루어진다. CCD를 이용하여 컬러 영상을 얻기 위해서는 컬러 필터를 필요로 하며, 대부분 CFA(Color filter array)라는 필터(미도시)를 채용하고 있다. CFA는 한 픽셀마다 한 가지 컬러를 나타내는 빛만을 통과시키며 규칙적으로 배열된 구조를 가지며, 배열 구조에 따라 여러 가지 형태를 가진다. A/D 변환부(Anolog-to-Digtal Converter, 미도시)는 CCD로부터 출력되는 아날로그 영상 신호를 디지털 신호로 변환한다. 여기서 CCD로부터 출력된 아날로그 영상 신호를 디지털 신호로 변환한 데이터를 RAW 데이터가 된다.
영상 처리부(130)는 디지털 변환된 RAW 데이터를 디스플레이 가능하도록 신호 처리하는 곳으로, 온도변화에 민감한 CCD 및 CFA 필터에서 발생하는 암 전류에 의한 블랙레벨(Black level)을 제거한다. 또한, 영상 처리부(130)는 인간 시각의 비선형성에 맞추어 정보를 부호화하는 감마 보정, 감마 보정된 소정 데이터의 RGRG 라인 및 GBGB 라인으로 구현된 베이어 패턴을 RGB 라인으로 보간 하는 CFA 보간, 보간 된 RGB 신호를 YUV 신호로 변환하고 고 대역 필터에 의해 Y 신호를 필터링 하여 영상을 뚜렷하게 처리하는 에지 보상, 및 표준 컬러 좌표계를 이용하여 U, V 신호의 컬러 값을 정정하고 노이즈를 제거하고, 노이즈가 제거된 Y, U, V 신호를 압축 및 신호 처리하여 JPEG, VAI 파일 등을 생성한다.
생성된 JPEG, AVI 파일 등은 LCD 패널(25) 등의 디스플레부(140)에 디스플레이 되거나 저장부(150)에 저장된다. 디스플레이부(140)는 이미지 파일의 디스플레이뿐만 아니라, 카메라의 동작에 필요한 각종 조작을 할 수도 있다.
저장부(150)는 생성된 JPEG, AVI 파일 등의 이미지 데이터가 일시 저장되는 DRAM(Dynamic Random Access Memory), 디지털 카메라 프로세서의 동작에 필요한 알고리듬이 저장되는 EEPROM(Electrically Erasable and Programmable Read Only Memory), 디지털 카메라 프로세서의 동작에 필요한 설정 데이터가 저장되는 플래시 메모리(flash memory) 등을 포함하는 개념이다.
제어부(160)는 디지털 카메라의 전체 동작을 제어하는 곳으로, 원격 조정 모드 시, 사전 설정된 얼굴 표정을 검출하고, 상기 검출된 얼굴 표정에 대응하는 동작을 디지털 카메라가 수행하게 한다. 상기 제어부(160)는, 얼굴 부분 검출부(161), 얼굴 표정 검출부(162) 및 동작 수행 지시부(163)를 포함한다.
얼굴 검출부(161)는 영상 처리부로부터 출력된 이미지 데이터를 분석하여 이미지 내에서 얼굴 부분을 검출한다. 물론 얼굴 검색부(161)는 영상 처리부(130)로부터 출력된 데이터가 아닌 A/D 변환부(미도시)로부터 출력된 이미지 데이터를 분 석하여 이미지 내에서 얼굴 부분을 검출하는 등 다양한 변형이 가능함은 물론이다.
얼굴 부분을 검출하는 방법은 다양한 방법을 이용할 수 있는데, 예컨대 얼굴의 주된 색에 관한 데이터가 사전 입력되어 있어 이미지 데이터 중 얼굴의 주된 색에 관한 데이터가 있는지 여부를 판단하여 얼굴 부분을 검출할 수도 있고, 눈썹 부분(또는 눈)과 코 부분의 T 형상에 관한 데이터가 사전 입력되어 있어 이미지 데이터 중 그와 같은 T 형상에 관한 데이터가 있는지 여부를 판단하여 얼굴 부분을 검출할 수도 있는 등 다양한 방법을 이용할 수 있다.
도 4는 촬영된 이미지 데이터 가운데 얼굴 부분을 검출하는 동작을 설명하기 위한 개략적인 개념도이다. 상기 도면을 참조하면, 프리뷰(preview) 모드에서 렌즈부(15, 도 1 참조)를 통하여 이미지 센서 및 영상 처리부에서 신호 처리된 얼굴 부분을 포함한 이미지 데이터가 디스플레이 패널(25)에 디스플레이된 상태를 도시하고 있다. 얼굴 부분 검출부(161)은 촬영된 이미지 데이터 가운데 상술한 얼굴 부분 검출 방법을 이용하여, 얼굴 부분(A)을 검출하여 후술할 얼굴 표정을 검출하기 위해 얼굴 부분(A)을 포커싱하고 있다. 상기 도면에서는 얼굴 부분을 검출하는 과정이 디스플레이 패널(25)에 디스플레이되는 경우를 도시하였으나, 이는 설명의 편의를 위한 예시이며 얼굴 검출부(161)는 이미지 데이터가 디스플레이 패널(25)에 디스플레이되는지 여부와 관계없이 제어부(160)와 주변 기기의 도움을 받아 상기의 동작을 수행할 수 있다.
얼굴 표정 검출부(162)는, 얼굴 검출부(161)에 의해 검색된 얼굴 부분의 데이터를 분석하여 사전 설정되어 있는 얼굴 표정이 검출되는지 여부를 판단한다. 얼 굴 표정을 검출하는 방법은 다양한 방법을 이용할 수 있는데, 얼굴의 눈동자 또는 눈의 형상에 관한 데이터가 사전 입력되어 있어 얼굴 부분의 데이터 중 얼굴의 눈동자 또는 눈의 형상에 관한 데이터가 있는지 여부를 판단하여 얼굴 표정을 검출하는 방법이 있다. 이때, 얼굴 표정 검출부(162)는 사전 설정된 얼굴 표정이 사전 설정된 시간 동안 지속 되는지 여부도 함께 판단할 수 있다.
도 5(a) 내지 도 5(c)는 사전 설정된 얼굴 표정에 대한 데이터를 설명하기 위한 예시들이다. 예컨대, 도 5(a)는 양쪽 눈 중 오른쪽 눈이 감긴 표정(오른쪽 눈으로 윙크하는 동작)을 개략적으로 나타내는 도면이고, 도 5(b)는 양쪽 눈 중 왼쪽 눈이 감긴 표정(왼쪽 눈으로 윙크하는 동작)을 개략적으로 나타내는 도면이며, 도 5(c)는 양쪽 눈이 모두 표정(두 눈을 감는 동작)을 개략적으로 나타내는 도면이다. 얼굴 표정 검출부(162)는 이와 같은 얼굴 표정에 관한 데이터가 사전 입력되어 있어 얼굴 부분에서 이와 같은 표정이 검출되는지 여부 및 이와 같은 표정이 얼마나 지속 되는지 여부를 판단한다. 물론 상술한 얼굴 표정들은 하나의 예시일 뿐, 본 발명이 이에 한정되지 않음은 물론이다.
한편, 얼굴 표정 검출부(162)는 사전 설정된 얼굴 표정이 사전 설정된 횟수만큼 수행하는지 여부를 더 판단할 수 있다. 예컨대, 도 5(a)에서 양쪽 눈 중 오른쪽 눈이 감긴 표정(오른쪽 눈으로 윙크하는 동작)의 경우, 오른쪽 눈이 감긴 표정이 두 번 반복 되는 경우, 즉 오른쪽 눈으로 윙크하는 동작을 몇 번 반복하는지 여부도 더 판단할 수 있다.
동작 수행 제어부(163)는 검출된 얼굴 표정이 검출되면, 검출된 얼굴 표정에 대응되어 사전 설정된 소정 동작을 판단하여 이를 수행하게 한다.
예컨대, 도 5(a)를 참조하면, 사전 설정된 시간인 1초 동안 양쪽 눈 중 오른쪽 눈이 감긴 표정(오른쪽 눈으로 윙크하는 동작)이 지속 되거나, 오른쪽 눈으로 윙크하는 동작을 사전 설정된 횟수인 2회를 반복하는 것이 검출되면 "줌(zoom)이 와이드(wide)로 이동한다"고 정의된 경우에는, 동작 수행 제어부(163)는 줌 렌즈 구동부(미도시)를 제어하여 줌 모터를 구동시켜 줌 렌즈를 이동시킨다. 도 5(b)와 같이 사전 설정된 시간인 1초 동안 양쪽 눈 중 왼쪽 눈이 감긴 표정(왼쪽 눈으로 윙크하는 동작)이 지속 되거나, 왼쪽 눈으로 윙크하는 동작을 사전 설정된 횟수인 2회를 반복하는 것이 검출되면 "줌(zoom)이 텔리(tele)로 이동한다"고 정의된 경우에는, 동작 수행 제어부(163)는 줌 렌즈 구동부(미도시)를 제어하여 줌 모터를 구동시켜 줌 렌즈를 이동시킨다. 한편, 도 5(c)와 같이 양쪽 눈이 모두 표정(두 눈을 감는 동작)이 검출되면 "캡쳐(capture) 동작을 한다"로 정의된 경우에는, 동작 수행 제어부(163)는 디지털 영상 처리 장치는 초점을 잡고 빛의 양을 조절하고 영상을 촬영한다.
신호 출력부(170) 얼굴 표정 검출부(162)가 얼굴 부분(A)에서 사전 설정된 얼굴 표정이 검출되었음을 알려준다. 이와 같은 신호 출력부(170)로는 LED 램프(17, 도 1 참조) 같은 발광 수단 및 스피커(SP, 도 2 참조)와 같은 음성 출력 수단을 이용할 수 있다. 예컨대, 도 5(a)의 사전 설정된 시간인 1초 동안 양쪽 눈 중 오른쪽 눈이 감긴 표정(오른쪽 눈으로 윙크하는 동작)이 지속 되거나, 오른쪽 눈으로 윙크하는 동작을 사전 설정된 횟수인 2회를 반복하는 것이 검출되면, 신호 출력 부(170)는 LED 램프(17)를 점멸한다든지, 또는 스피커(SP)를 통해서 "줌(zoom)이 와이드(wide)로 이동한다"는 음성을 출력함으로써, 사용자에게 디지털 카메라가 사전 설정된 얼굴 표정을 정확하게 인식하였음을 알려준다.
한편, 신호 출력부(170)는 전술한 얼굴 표정이 검출되었을 경우뿐만 아니라, 실시간으로 촬영되는 이미지 데이터 가운데 얼굴 부분이 인식되었을 경우에도 발광 수단이나 음성 출력 수단을 이용해서 사용자에게 얼굴 부분이 인식되었음을 알려줄 수 있다. 예컨대, 신호 출력부(170)가 LED 램프(17)와 같은 발광 수단을 구비할 경우, 먼저 얼굴 부분이 검출되면 LED 램프(17)가 느리게 점멸하고, 검출된 얼굴 부분에서 사전 설정된 얼굴 표정이 검출되면 LED 램프(17)가 빠르게 점멸하게 할 수 있다. 즉, LED 램프(17)의 점멸 속도를 서로 다르게 함으로써 하나의 발광 수단으로 얼굴 검출 및 얼굴 표정 검출을 사용자에게 알리게 할 수 있다. 마찬가지로 스피커(SP)와 같은 음성 출력 수단을 구비할 경우에는 각각의 경우에 해당되는 사전 설정된 음성 데이터를 출력해줄 수 있음은 물론이다.
도 6은 본 발멸의 다른 실시예에 따른 디지털 영상 처리 장치의 제어 방법을 보여주는 흐름도이다. 본 발명에 따른 디지털 영상 처리 장치의 제어 방법은 도 3에 도시된 바와 같은 영상 처리 장치의 내부에서 수행될 수 있는데, 동작 방법의 주 알고리즘은 장치 내의 주변 구성 요소들의 도움을 받아 제어부(160) 내부에서 수행될 수 있다.
상기 도면을 참조하면, 먼저 사용자가 디지털 영상 처리 장치의 사용자 입력부(110)에 포함되는 다이얼 모드(22), 기능 버튼(23) 또는 별도의 버튼을 이용하여 원격 조정 메뉴를 선택하면, 제어부(160)는 디지털 영상 처리 장치를 원격 조정 모드로 진입시킨다(S210).
디지털 영상 처리 장치가 원격 조정 모드로 진입하면, 제어부(160)의 얼굴 검출부(161)는 도 4에 도시된 바와 같이 프리뷰에서 촬영되는 이미지 가운데 얼굴 부분을 검출하는 방법을 이용하여 얼굴 부분을 검출한다(S220).
얼굴 부분이 검출된 다음, 얼굴 표정 검출부(162)는 검출된 얼굴 부분 가운데 사전 설정된 얼굴 표정이 있는지 여부를 판단한다. 예컨대, 도 5에 도시된 표정들에 대한 데이터가 사전 설정되어 있는 경우에는, 검출된 얼굴 부분 가운데 이와 같은 표정 데이터들이 검출되는지 여부를 판단한다(S240). 한편, 도면상에 도시되지는 않았으나, 얼굴 표정을 표시하는 단계에서, 사전 설정된 얼굴 표정을 사전 설정된 소정 시간 동안 지속하는지 여부, 또는 사전 설전 설정된 얼굴 표정을 만드는 동작을 사전 설정된 회수 동안 반복하는지 여부를 같이 판단 할 수도 있다.
사전 설정된 얼굴 표정이 검출된 경우에는, 제어부(160)는 이를 신호 출력부(170)에 전달하여 얼굴 표정이 검출되었음을 사용자에게 알리도록 한다(S250). 이때, 얼굴 표정 검출을 알리는 방법으로는 전술한 발광 수단이나 음성 출력 수단을 사용할 수 있으며, 이외에도 다양한 방법이 가능함은 물론이다.
사전 설정된 얼굴 표정을 검출하였음을 알린 후, 동작 수행 제어부(263)는 사전 설정된 얼굴 표정에 정의된 동작을 판단하고 정의된 동작을 수행한다(S260). 이때, 상기 동작 수행은 사전 설정된 얼굴 표정을 검출하였음을 알린 후, 사용자가 다음 동작을 준비할 수 있는 소정 시간, 예컨대 1초 뒤에 얼굴 표정에 대응하여 사 전 정의된 동작을 수행할 수 있다.
원격 조정 모드를 종료하고자 하는 경우에는 사용자가 사용자 입력부(110)를 이용하여 원격 조정 모드를 종료시킬 수 있다(S270). 원격 조정 모드를 계속 진행할 경우에는, 제어부는 다시 입력된 이미지 가운데 얼굴 부분을 검출(S220)하여 사전 설정된 얼굴 표정이 검출되는지 여부를 판단(S240)하게 된다.
도 7은 본 발명의 또 다른 실시예에 따른 디지털 영상 처리 장치의 제어 방법을 보여주는 흐름도이다. 상기 도면을 참조하면, 원격 조정 모드 진입(S 310)후, 입력된 이미지 가운데 얼굴 부분을 검출(S320) 한 후, 얼굴 부분의 검출이 완료된 경우에는 얼굴 부분 검출 신호를 출력(S330)하는 점이 전 실시예에 따른 제어방법과의 차이점이다. 즉 본 실시예에서는 얼굴을 검출한 다음, 다음 단계인 얼굴 표정을 검출하는 단계(S340)으로 곧 바로 넘어가기 전에, 얼굴을 검출하는 단계(S320)가 완료되어 다음 단계(S340)로 진행할 수 있는지 여부를 사용자에게 미리 알려줌으로써 편리한 인터페이스를 제공하는 것이다.
본 발명은 도면에 도시된 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 당해 기술분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 다른 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의하여 정해져야 할 것이다.
도 1은 본 발명의 일 실시예에 따른 디지털 영상 처리 장치로서의 디지털 카메라를 개략적으로 도시하는 사시도이다.
도 2는 도 1의 디지털 카메라의 배면을 개략적으로 도시하는 배면도이다.
도 3은 본 발명의 일 실시예에 따른 디지털 카메라의 전체적인 구성을 설명하기 위한 블록도이다.
도 4는 본 발명의 일 실시예에 따른 디지털 카메라의 작동을 설명하기 위한 개념도이다.
도 5a 내지 도 5b는 본 발명의 일 실시예에 따른 디지털 카메라의 작동을 설명하기 위한 개념도이다.
도 6은 본 발명의 다른 실시예에 따른 디지털 영상 처리 장치의 제어 방법을 설명하기 위한 흐름도이다.
도 7은 본 발명의 또 다른 실시예에 따른 디지털 영상 처리 장치의 제어 방법을 설명하기 위한 흐름도이다.
< 도면의 주요부분에 대한 간략한 설명 >
110: 사용자 입력부 120: 촬영부
130: 영상 처리부 140: 디스플레이부
150: 저장부 160: 제어부
161: 얼굴 검출부 162: 얼굴 표정 검출부
163: 동작 수행 제어부 170: 신호 출력부

Claims (14)

  1. 원격 조정 모드를 설정하는 원격 조정 모드 설정부;
    상기 원격 조정 모드 시, 사전 설정된 얼굴 표정을 검출하고, 상기 검출된 얼굴 표정에 대응하는 동작을 수행하게 하는 제어부; 및
    상기 사전 설정된 얼굴 표정이 검출되었음을 알려주는 신호 출력부;를 구비하는 디지털 영상 처리 장치.
  2. 제1항에 있어서, 상기 제어부는,
    실시간으로 촬영되는 이미지 가운데 얼굴을 인식하는 얼굴 검출부;
    상기 검색된 얼굴에 사전 설정된 얼굴 표정이 검출되는지 여부를 판단하는 얼굴 표정 검출부; 및
    상기 검출된 얼굴 표정에 대응하는 동작을 수행하게 하는 동작 수행 제어부:를 포함하는 것을 특징으로 하는 디지털 영상 처리 장치.
  3. 제2항에 있어서,
    상기 얼굴 표정 검출부는, 상기 사전 설정된 얼굴 표정이 사전 설정된 시간 동안 지속 되는지 여부를 판단하는 것을 특징으로 하는 디지털 영상 처리 장치.
  4. 제2항에 있어서,
    상기 얼굴 표정 검출부는, 상기 사전 설정된 얼굴 표정을 만드는 동작이 사전 설정된 횟수만큼 반복되는지 여부를 판단하는 것을 특징으로 하는 디지털 영상 처리 장치.
  5. 제2항에 있어서,
    상기 신호 출력부는, 상기 얼굴 검색부가 실시간으로 촬영되는 이미지 가운데 얼굴을 인식하였음을 알려주는 것을 특징으로 하는 디지털 영상 처리 장치.
  6. 제5항에 있어서,
    상기 신호 출력부는 발광 수단을 구비하는 것을 특징으로 하는 디지털 영상 처리 장치.
  7. 제6항에 있어서,
    상기 발광 수단은, 상기 얼굴 인식 및 얼굴 표정의 검출 시, 점멸하는 것을 특징으로 하는 디지털 영상 처리 장치.
  8. 제6항에 있어서,
    상기 발광 수단은 LED인 것을 특징으로 하는 디지털 영상 처리 장치.
  9. 제1항에 있어서,
    상기 신호 출력부는 음성 출력 수단을 구비하는 것을 특징으로 하는 디지털 영상 처리 장치.
  10. (a) 원격 조정 모드에서, 실시간으로 촬영되는 이미지 가운데 얼굴을 검색하는 단계;
    (b) 소정 시간 내에 사전 설정된 얼굴 표정이 상기 얼굴에서 검출되는지 여부를 판단하는 단계;
    (c) 상기 얼굴 표정이 상기 얼굴에서 검출되었음을 알리는 단계;
    (d) 상기 얼굴 표정에 대응하여 사전에 정의된 동작을 수행하는 단계;를 포함하는 디지털 영상 처리 장치의 제어방법.
  11. 제10항에 있어서,
    상기 (a) 단계 및 상기 (b) 단계 사이에, 상기 얼굴이 검색되었음을 알리는 단계를 더 포함하는 것을 특징으로 하는 디지털 영상 처리 장치의 제어방법.
  12. 제11항에 있어서,
    상기 (c) 단계는, 상기 디지털 영상 처리 장치의 발광 수단이 점멸함으로써, 상기 얼굴 및 상기 얼굴 표정이 검출되었음을 알리는 것을 특징으로 하는 디지털 영상 처리 장치의 제어 방법.
  13. 제11항에 있어서,
    상기 (c) 단계는, 상기 디지털 영상 처리 장치의 음성 출력 수단이 음성을 출력함으로써, 상기 얼굴 및 상기 얼굴 표정이 검출되었음을 알리는 것을 특징으로 하는 디지털 영상 처리 장치의 제어 방법.
  14. 제11항에 있어서,
    상기 (d) 단계는, 상기 (c) 단계 후 소정 시간이 경과 한 후 수행되는 것을 특징으로 하는 디지털 영상 처리 장치의 제어 방법.
KR1020070068197A 2007-07-06 2007-07-06 디지털 영상 처리 장치 및 그 제어 방법 KR101369752B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070068197A KR101369752B1 (ko) 2007-07-06 2007-07-06 디지털 영상 처리 장치 및 그 제어 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070068197A KR101369752B1 (ko) 2007-07-06 2007-07-06 디지털 영상 처리 장치 및 그 제어 방법

Publications (2)

Publication Number Publication Date
KR20090004190A true KR20090004190A (ko) 2009-01-12
KR101369752B1 KR101369752B1 (ko) 2014-03-06

Family

ID=40486695

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070068197A KR101369752B1 (ko) 2007-07-06 2007-07-06 디지털 영상 처리 장치 및 그 제어 방법

Country Status (1)

Country Link
KR (1) KR101369752B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101860687A (zh) * 2009-04-10 2010-10-13 索尼公司 图像处理装置和图像处理部的控制方法
EP2993891B1 (en) * 2014-09-02 2022-03-23 HTC Corporation Electronic device and image capture method thereof

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004007296A (ja) 2002-06-03 2004-01-08 Toshiba Eng Co Ltd カメラ撮影システム及びカメラ撮影装置
JP2008053856A (ja) 2006-08-22 2008-03-06 Olympus Imaging Corp 撮像装置
KR101478560B1 (ko) * 2007-05-28 2015-01-02 삼성전자주식회사 원격 영상 촬영 휴대단말기 및 그의 촬영 방법

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101860687A (zh) * 2009-04-10 2010-10-13 索尼公司 图像处理装置和图像处理部的控制方法
CN101860687B (zh) * 2009-04-10 2012-08-08 索尼公司 图像处理装置和图像处理部的控制方法
EP2993891B1 (en) * 2014-09-02 2022-03-23 HTC Corporation Electronic device and image capture method thereof

Also Published As

Publication number Publication date
KR101369752B1 (ko) 2014-03-06

Similar Documents

Publication Publication Date Title
US8427430B2 (en) Apparatus for and method of controlling digital image processing apparatus
US8395694B2 (en) Apparatus and method for blurring image background in digital image processing device
KR101814604B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
US8441542B2 (en) Self-timer photographing apparatus and method involving checking the number of persons
US20070237513A1 (en) Photographing method and photographing apparatus
JP2007311861A (ja) 撮影装置及び方法
JP5064926B2 (ja) 撮像装置及びその制御方法
KR20100001272A (ko) 셀프 촬영 안내 기능을 구비한 디지털 영상 처리 장치 및그 동작 방법
JP5027580B2 (ja) 撮影装置および方法並びにプログラム
KR101369752B1 (ko) 디지털 영상 처리 장치 및 그 제어 방법
JP6362338B2 (ja) 撮像装置及び撮像装置の制御方法
KR101396335B1 (ko) 얼굴 인식 장치 및 방법
US10284783B2 (en) Imaging apparatus and control method of imaging apparatus
US8073319B2 (en) Photographing method and photographing apparatus based on face detection and photography conditions
KR20130092213A (ko) 디지털 촬영 장치 및 이의 제어 방법
KR101436324B1 (ko) 동영상으로부터 정지영상을 검출하는 디지털 영상 처리장치 및 이의 제어 방법
KR20100013697A (ko) 디지털 촬영장치, 그 제어방법 및 제어방법을 실행시키기위한 프로그램을 저장한 기록매체
JP2011013682A (ja) 撮像装置、自動合焦方法、およびその方法をコンピュータが実行するためのプログラム
KR101417811B1 (ko) 디지털 영상 처리기에서 얼굴인식을 통한 줌-인 장치 및방법
KR101385959B1 (ko) 전원 on 또는 off 시 특정 방향에 대응하는 특정동작을 수행하는 휴대용 촬영 장치 및 그 제어 방법
JP5686869B2 (ja) 撮像装置
KR101427656B1 (ko) 디지털 영상 처리기에서 인물 촬영 장치 및 방법
JP2020102794A (ja) 画像処理装置
JP2014206592A (ja) 撮像装置、その制御方法及びプログラム
KR20090077490A (ko) 동영상 및 정지영상을 동시에 촬영 및 재생하는 디지털영상 처리 장치 및 그의 제어 방법

Legal Events

Date Code Title Description
N231 Notification of change of applicant
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170125

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee