KR20080104610A - 원격 영상 촬영 휴대단말기 및 그의 촬영 방법 - Google Patents

Abstract

본 발명은 휴대단말기에 관한 것으로, 카메라 기능을 탑재한 휴대단말기를 얼굴인식을 통한 눈 깜박임으로 원격 조작하여 영상을 촬영할 수 있도록 한 휴대단말기 및 그의 촬영 방법에 관한 것이다. 이를 위하여 본 발명은 피사체를 촬영하는 카메라부와; 상기 카메라부를 통하여 입력되는 상기 피사체를 디스플레이하는 표시부와; 피사체의 얼굴인식을 통해 눈을 트래킹하고 눈 깜박임을 감지하는 얼굴인식부와; 상기 눈 깜박임을 촬영 신호로 판단하여 상기 카메라부로 전달하여 카메라 기능이 수행되도록 제어하는 제어부를 구비한 원격 영상 촬영 휴대단말기임을 특징으로 한다.

얼굴인식, 원격, 촬영

Description

원격 영상 촬영 휴대단말기 및 그의 촬영 방법{A mobile terminal for photographing image by remote control and a method therefor}

도1은 본 발명의 실시예에 따른 휴대단말기를 나타내는 구성도.

도2는 본 발명의 실시예에 따른 원격 영상 촬영 방법을 나타내는 흐름도.

도3은 본 발명의 실시예에 따른 휴대단말기의 화면 예시도.

본 발명은 휴대단말기에 관한 것으로, 특히 카메라를 탑재한 휴대단말기를 원격으로 조작하여 이미지를 촬영할 수 있도록 한 카메라 기능을 가진 원격 영상 촬영 휴대단말기 및 그의 촬영 방법에 관한 것이다.

일반적으로 휴대단말기는 이동통신단말기, PDA(personal digital assistance) 등과 같이 휴대가 간편하며 무선 통신으로 음성, 정지영상 및 동영상 등의 데이터를 송신 또는 수신하며 통화가 가능한 단말기를 말한다.

휴대단말기는 멀티미디어 시대에 맞추어 디지털 카메라 기능을 탑재하여 어떠한 장면이나, 필요한 피사체를 촬영하여 내부에 저장할 수 있다.

그러나, 종래 휴대단말기는 촬영버튼을 누를 수 없는 원거리에서 사진을 찍 기 위한 방법이 단순히 수초 후에 촬영하는 방식밖에는 없었다. 이는 사용자가 촬영하고자 하는 피사체를 휴대단말기의 표시창을 통해 확인한 후 수초 후 촬영을 위한 키 조작을 수행해야 하는 번거로움과 사용자가 일정 시간 동안 포즈를 유지하고 있어야 하는 불편함이 있었다.

따라서 본 발명은 상기와 같은 문제점을 해결하기 위하여 창안한 것으로, 카메라 기능을 탑재한 휴대단말기를 얼굴인식을 통한 눈 깜박임으로 원격 조작하여 영상을 촬영할 수 있도록 한 휴대단말기 및 그의 촬영 방법을 제공함에 목적이 있다.

상기와 같은 목적을 달성하기 위한 본 발명은 휴대단말기에 있어서,

피사체를 촬영하는 카메라부와; 상기 카메라부를 통하여 입력되는 상기 피사체를 디스플레이하는 표시부와; 피사체의 얼굴인식을 통해 눈을 트래킹하고 눈 깜박임을 감지하는 얼굴인식부와; 상기 눈 깜박임을 촬영 신호로 판단하여 상기 카메라부로 전달하여 카메라 기능이 수행되도록 제어하는 제어부를 구비한 것을 특징으로 한다.

또한, 상기와 같은 목적을 달성하기 위한 본 발명은 휴대단말기를 이용한 원격 영상 촬영 방법에 있어서,

카메라 모드 시, 원격 촬영 모드로 설정되었는가를 판단하는 과정과; 상기 판단결과, 원격 촬영 모드로 설정되어 있으면 피사체의 눈을 트래킹하여 눈 깜박임을 감지하는 과정과; 상기 피사체의 눈 깜박임이 있으면 피사체를 촬영하는 과정으 로 이루어진 것을 특징으로 한다.

이하, 본 발명에 따른 실시예를 첨부한 도면을 참조하여 상세히 설명하면 다음과 같다.

하기의 설명에서는 본 발명에 따른 동작 및 작용을 이해하는데 필요한 부분만이 설명되며, 그 이외 부분의 설명은 본 발명의 요지를 흩트리지 않도록 생략될 것이라는 것을 유의하여야 한다.

하기의 설명에서 본 발명의 원격 영상 촬영 휴대단말기 및 그의 촬영 방법에 따른 특정 상세들이 본 발명의 보다 전반적인 이해를 제공하기 위해 나타나 있다. 이들 특정 상세들 없이 또한 이들의 변형에 의해서도 본 발명이 용이하게 실시될 수 있다는 것은 이 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.

도 1은 본 발명의 실시예에 따른 휴대단말기를 보인 구성도이다.

상기 도 1을 참조하면, 상기 휴대단말기는 무선통신부(101), 카메라부(103), 제어부(105), 메모리부(107), 얼굴인식부(109), 표시부(111), 키입력부(113)를 포함한다.

무선통신부(101)는 휴대단말기와 이동통신망과의 통상적인 무선통신을 수행한다. 예를 들어, 무선통신부(101)는 이동통신망을 통한 음성데이터의 송/수신, 문자메시지의 송/수신 및 멀티미디어메시지의 송/수신 등을 수행한다.

카메라부(103)는 피사체 촬영을 요구하는 신호 수신 시 피사체를 촬영한다. 여기서 상기 카메라부(103)는 영상데이터를 촬영하며, 촬영된 광신호를 전기적 신 호로 변환하는 카메라 센서(미도시)를 구비한 카메라와, 그 카메라로부터 출력되는 영상신호를 이미지 신호로 변환하는 신호처리부(미도시)와, 그 신호처리부에서 출력되는 영상신호를 표시하기 위한 화면 데이터를 발생하는 기능을 수행하는 영상처리부(미도시)를 포함한다. 특히, 본 명세서에서 상기 피사체는 얼굴인식이 가능한 인물이 피사체의 대상이 되는 것을 예를 들어 설명하도록 한다.

제어부(105)는 휴대단말기의 내부 블록에시 이루어지는 전반적인 동작에 대한 제어를 담당한다. 그리고, 상기 제어부(105)는 무선통신부(101)에서 송신되는 신호를 부호화 및 변조하는 송신기 및 수신되는 신호를 복조 및 복호화하는 수신기를 구비하는 모뎀 및 코덱을 포함한다. 특히, 상기 제어부(105)는 휴대단말기의 설정에 따라 상기 카메라부(103) 및 얼굴인식부(109)를 동작시켜 본 발명인 원격 영상 촬영을 수행할 수 있도록 한다.

메모리부(107)는 프로그램 메모리 및 데이터 메모리들로 구성될 수 있다. 상기 프로그램 메모리에는 휴대단말기의 일반적인 동작을 제어하기 위한 프로그램들 및 본 발명의 실시예에 따라 촬영모드에 따른 프로그램들이 저장된다. 또한 상기 메모리부(107)에는 카메라부에서 복수의 얼굴이 검출될 경우 상기 복수의 얼굴 중 특정 얼굴의 눈을 트래킹 하기 위하여 상기 제어부(105)가 지정해 둔 인물이 저장된다. 또한 상기 데이터 메모리에는 상기 프로그램들을 수행하는 중에 발생되는 데이터들을 저장하는 기능 및 본 발명의 실시예에 따라 원격 영상 촬영 후의 화상이 저장된다.

그리고 상기 메모리부(107)는 본 발명의 실시예에 따라 얼굴인식부(109)가 상기 카메라부(101)를 통해 입력된 프레임에서 피사체의 눈 깜박임을 촬영을 위한 눈 깜박임으로 판단할 수 있는 눈 깜박임 횟수 또는 눈 깜박임 시간이 저장된다.

얼굴인식부(109)는 상기 카메라부(103)의 프리뷰(Preview) 상태에서 입력되는 피사체 프레임으로부터 얼굴 영역을 검출한다. 이때, 상기 얼굴인식부(109)가 얼굴 인식 기법을 이용해 상기 프레임으로부터 에지(Edge)정보를 추출하고, 추출된 에지 정보내의 영역으로부터 눈을 포함하는 특징 요소를 검출한다. 특히, 상기 얼굴인식부(109)는 본 발명의 실시예에 따라 눈을 트래킹 하여 깜박임을 검출한다.

또한, 상기 얼굴인식부(109)는 본 발명의 실시예에 따라 피사체 프레임으로부터 검출된 얼굴과 상기 메모리부(103)에 미리 설정된 얼굴과의 일치 여부를 판단한다.

상기 얼굴인식부(109)는 상기 제어부(105) 내에 포함될 수 있으며, 상기 얼굴인식부(109)의 얼굴인식 기법을 이용해 눈을 검출하는 기술에 관련해서는 이 출원 이전에 이미 다양하게 공지되어 시행되는 통상의 기술이므로 이에 대한 자세한 설명은 생략하기로 한다.

표시부(111)는 제어부(105)의 제어를 받아 휴대단말기 내부 블록에서 이루어지는 일련의 동작상태와 동작결과 및 다수의 정보를 표시한다. 특히, 상기 표시부(111)는 카메라 모드 시 상기 카메라부(103)에서 출력되는 영상신호를 화면으로 표시한다. 이때, 표시부(111)는 LCD(Liquid Crystal Display), OLED(Organic Light Emitting Diodes) 등의 디스플레이 장치로 구성될 수 있다.

키입력부(113)는 숫자 또는 문자 정보를 입력받고 각종 기능들을 설정하기 위한 다수의 입력키들 및 기능키들을 포함한다. 상기 기능키들은 특정 기능을 수행하도록 설정된 방향키, 사이트 키 및 단축키 등을 포함할 수 있다. 또한 키입력부(113)는 사용자 설정 및 휴대단말기의 기능 제어와 관련하여 입력되는 키 신호를 제어부(105)로 전달한다. 특히, 본 발명의 실시예에 따른 상기 키입력부(113)는 사용자가 선택하는 촬영 모드에 해당하는 키 신호를 생성하여 상기 제어부(105)에 전달한다.

도2는 본 발명의 실시예에 따른 원격 영상 촬영 방법을 나타내는 흐름도이고, 도3은 본 발명의 실시예에 따른 휴대단말기의 화면 예시도이다.

도2와 도3을 참조하면, 휴대단말기는 S200 단계에서 제어부(105)에 따라 카메라 모드로 동작하고, 표시부(111)에 프리뷰 화면을 디스플레이하고 S210 단계로 이동한다.

S210 단계에서 상기 제어부(105)는 상기 휴대단말기가 원격 영상 촬영 모드인지 판단한다. 상기 S200 단계에서 상기 표시(111)부에 프리뷰 화면을 디스플레이 하는 도중 키 입력부(113)를 통해 전달되는 키 신호가 있다면 S210 단계로 이동하여 상기 제어부(105)는 상기 키 신호가 원격 영상 촬영을 위한 것인지 판단한다. 만약 S210 단계에서 상기 제어부(105)가 상기 키 신호를 원격 영상 촬영을 위한 신호로 판단하면 S220단계로 이동한다. 그러나, S210 단계에서 상기 제어부(105)가 상기 키 신호를 원격 영상 촬영을 위한 신호가 아니라고 판단하면, S250단계로 이동하여 일반적인 영상 촬영 모드로 동작한다.

S220 단계에서 상기 제어부(105)는 얼굴인식부(109)를 통해 프리뷰로 입력되 는 피사체의 눈을 트래킹하도록 한다. 상기 휴대단말기가 카메라 모드로 진입하면 프리뷰 상태가 되어 카메라에 의해 촬영되는 화면이 1초당 수 프레임씩 휴대단말기의 표시부에 디스플레이 된다. 이 때 원격 영상 촬영 모드일 경우 본 발명의 실시예에 따른 얼굴인식 기법을 이용하여 상기 얼굴인식부(109)는 상기 프리뷰 화면에 표시되는 피사체로부터 에지(Edge) 정보를 추출하고, 추출된 에지 정보내의 이미지 영역으로부터 눈을 검출한다. 그리고 상기 얼굴인식부(109)는 검출된 눈을 계속해서 트래킹 하도록 하여 S230단계에서 눈 깜박임을 검출할 수 있도록 한다.

상기 얼굴인식부(109)가 피사체의 눈을 트래킹 하는 것은 양쪽 눈 중 한쪽 눈을 트래킹 하는 것도 가능하다. 상기 휴대단말기가 피사체의 의도하지 않은 일반적인 생리적인 눈 깜박임에 있어서 영상 촬영이 되는 것을 막기 위하여 상기 얼굴인식부(109)는 한쪽 눈을 트래킹하여 눈 깜박임을 검출할 수 있도록 한다.

또한, S220 단계에서 상기 얼굴인식부(109)는 상기 제어부(105)의 설정에 따라 특정 횟수 이상의 눈 깜박임 또는 특정 시간 이상의 눈 깜박임이 있어야 실제적인 눈 깜박임으로 판단한다. 예를 들어, 상기 제어부(105)가 1초 내에 3번의 눈 깜박임이 있을 경우 상기 눈 깜박임을 촬영 신호로 처리한다고 설정되어 있다면, 얼굴인식부(109)는 눈을 트래킹 하면서 1초 내에 눈 깜박임이 몇번 있었는지 체크하여 3번을 넘을 경우에 한해서만 눈이 깜박였다고 판단한다. 그리고 상기 제어부(105)가 눈 깜박임 시간이 2초 이상일 경우 상기 눈 깜박임을 촬영 신호로 처리한다고 설정되어 있다면, 상기 얼굴인식부(109)는 눈을 트래킹 하면서 눈이 감겨진 시간을 체크하여 2초를 넘을 경우에 한해서만 눈이 깜박였다고 판단할 수도 있다.

만약 S220 단계에서 프리뷰로 입력되는 프레임에서 도3의 예시도에서와 같이 복수의 얼굴이 검출되면 상기 제어부(105)는 복수의 얼굴에 숫자를 부여하고 표시부(111)에 디스플레이한다. 이 때, 키입력부(113)로부터 선택된 숫자가 있으면 상기 얼굴인식부(109)는 숫자에 해당하는 얼굴의 눈만을 트래킹하도록 한다.

또한, S220 단계에서 프리뷰로 입력되는 프레임에서 복수의 얼굴이 검출되면 상기 얼굴인식부(109)는 복수의 얼굴 중 메모리부(107)에 미리 지정된 인물이 저장되어 있는지 판단한다. 만약 상기 복수의 얼굴 중 상기 메모리부(107)에 미리 지정된 인물이 저장되어 있다면 상기 제어부(105)는 얼굴인식부(109)가 상기 복수의 얼굴 중 상기 메모리부(107)에 미리 지정된 인물의 눈을 트래킹하도록 한다.

상기 프리뷰로 입력되는 프레임에서 검출된 복수의 얼굴과 상기 메모리부(107)에 미리 지정된 인물을 비교하는 방법은 이 출원 이전에 이미 다양하게 공지되어 시행되는 통상의 기술로, 얼굴의 기하학적 특징점을 추출하여 일치 여부를 판단하는 기하학적 방법, 특징점 추출로 PCA(Principal Component Analysis)를 적용하고 유사도 측정으로 Euclidean 거리를 적용하는 Eigenfaces 방법, FLD(Fisher Linear Discriminant)를 분류 알고리즘으로 적용한 Fisherfaces 방법, PCA와 SVM(Support Vector Machine) 알고리즘을 사용한 SVM에 기초한 방법, 흑백의 정지영상에서 슬라이딩 윈도우를 이용해 학습된 얼굴모양을 검색하는 신경회로망 방법 등이 될 수 있다.

S230 단계에서 상기 얼굴인식부(109)가 눈을 트래킹 하는 도중 눈 깜박임을 검출하면 상기 휴대단말기는 S240 단계로 이동하여 영상 촬영을 수행하고, 메모리 부(107)에 촬영된 영상을 저장한다. 만약 S230 단계에서 눈 깜박임이 없으면 S220 단계로 이동하여 계속해서 눈을 트래킹 하는 과정을 수행한다. 상기 얼굴인식부(109)가 눈 깜박임을 검출하면 상기 눈 깜박임을 상기 제어부(105)로 전달하고, 상기 제어부(105)는 상기 눈 깜박임을 촬영 신호로 처리하여 카메라부(101)로 전달하면 원격으로 영상을 촬영할 수 있다. 이때, 상기 제어부(105)는 상기 얼굴인식부(109)로부터 피사체의 눈 깜박임이 있었다는 것을 받고, 일정 시간이 지난 뒤 촬영 신호로 처리하여 카메라부(101)로 전달할 수도 있다. 피사체의 눈 깜박임이 있은 직후, 영상이 촬영되면 찡그린 표정의 얼굴이 될 수도 있고, 원하는 표정이 나오지 않을 경우가 발생할 수 있기 때문에 눈 깜박임 후 일정 시간이 지난 뒤 촬영할 수 있도록 하는 것도 가능하다.

상기한 바와 같이 본 발명에서 제안하는 원격 영상 촬영 방법 및 장치에 따르면, 카메라를 탑재한 휴대단말기에서 피사체의 얼굴인식을 통한 눈 깜박임으로 원격으로 피사체를 촬영함으로써, 사용자의 편의성을 증대시키는 효과가 있다.

Claims (14)

1. 휴대단말기의 원격 영상 촬영 방법에 있어서,

   카메라 모드 시, 원격 촬영 모드로 설정되었는가를 판단하는 과정과;

   상기 판단결과, 원격 촬영 모드로 설정되어 있으면 피사체의 눈을 트래킹하여 눈 깜박임을 감지하는 과정과;

   상기 피사체의 눈 깜박임이 있으면 피사체를 촬영하는 과정으로 이루어진 것을 특징으로 하는 휴대단말기의 원격 영상 촬영 방법.
2. 제1항에 있어서, 상기 눈 깜박임이 있으면 피사체를 촬영하는 과정은,

   양쪽 눈 중 한쪽 눈을 깜박인 경우에 피사체를 촬영하는 것을 특징으로 하는 휴대단말기의 원격 영상 촬영 방법.
3. 제1항 내지 제2항 중 어느 한 항에 있어서, 상기 눈 깜박임이 있으면 피사체를 촬영하는 과정은,

   눈 깜박임 후 일정 시간이 지난 뒤 상기 피사체를 촬영하는 것을 특징으로 하는 원격 영상 촬영 방법.
4. 제1항 내지 제2항 중 어느 한 항에 있어서, 상기 눈 깜박임을 감지하는 과정은,

   눈 깜박임 횟수 및 눈 깜박임 시간 중 적어도 하나를 이용하여 판단하는 과정을 포함하는 것을 특징으로 하는 휴대단말기의 원격 영상 촬영 방법.
5. 제4항에 있어서, 상기 눈 깜박임이 있으면 피사체를 촬영하는 과정은,

   상기 눈 깜박임이 일정 횟수 이상 또는 상기 눈 깜박임 시간이 일정 시간 이상이면 촬영하는 것을 특징으로 하는 휴대단말기의 원격 영상 촬영 방법.
6. 제1항에 있어서, 피사체의 눈을 트래킹하는 과정은,

   프리뷰로 입력되는 프레임에서 얼굴인식을 수행하는 과정과;

   상기 프레임에서 복수의 얼굴이 검출되면 상기 복수의 얼굴 중 하나의 얼굴을 선택받는 과정과;

   상기 선택받은 얼굴의 눈을 검출하여 트래킹하는 과정을 포함하는 것을 특징으로 하는 휴대단말기의 원격 영상 촬영 방법.
7. 제6항에 있어서, 상기 하나의 얼굴을 선택받는 과정은,

   복수의 얼굴이 검출되면 상기 복수의 얼굴 각각에 숫자를 부여하고, 상기 사용자가 원하는 얼굴에 해당하는 숫자를 입력하는 것을 특징으로 하는 휴대단말기의 원격 영상 촬영 방법.
8. 제1항에 있어서, 피사체의 눈을 트래킹하는 과정은,

   프리뷰로 입력되는 프레임에서 얼굴인식을 수행하는 과정과;

   상기 프레임에서 복수의 얼굴이 검출되면, 상기 복수의 얼굴 중 미리 설정된 얼굴의 눈을 검출하여 트래킹하는 과정을 포함하는 것을 특징으로 하는 휴대단말기의 원격 영상 촬영 방법.
9. 피사체를 촬영하는 카메라부와;

   상기 카메라부를 통하여 입력되는 상기 피사체를 디스플레이하는 표시부와;

   피사체의 얼굴인식을 통해 눈을 트래킹하고 눈 깜박임을 감지하는 얼굴인식부와;

   상기 눈 깜박임을 촬영 신호로 판단하여 상기 카메라부로 전달하여 카메라 기능이 수행되도록 제어하는 제어부를 구비한 원격 영상 촬영 휴대단말기.
10. 제9항에 있어서,

    상기 제어부는 원격 촬영 모드로 설정되어 있는지의 여부에 따라 얼굴인식부를 구동하도록 하는 것을 특징으로 하는 원격 영상 촬영 휴대단말기.
11. 제9항에 있어서,

    상기 제어부는 한쪽 눈을 깜박인 경우에 촬영 신호로 판단하는 것을 특징으로 하는 원격 영상 촬영 휴대단말기.
12. 제9항 내지 제11항 중 어느 한 항에 있어서,

    상기 제어부는 상기 얼굴인식부가 눈 깜박임을 감지하면 눈 깜박임 후 일정 시간이 지난 뒤 촬영 신호로 판단하는 것을 특징으로 하는 원격 영상 촬영 휴대단말기.
13. 제9항에 있어서,

    상기 제어부는 상기 얼굴인식부가 감지한 눈 깜박임의 횟수 및 눈 깜박임 시간 중 어느 하나를 추가로 판단하는 것을 특징으로 하는 원격 영상 촬영 휴대단말기.
14. 제12항에 있어서,

    상기 제어부는 눈 깜박임이 일정 횟수 이상 또는 상기 눈 깜박임 시간이 일정 시간 이상이면 촬영 신호로 판단하는 것을 특징으로 하는 원격 영상 촬영 휴대단말기.

Images