KR101679290B1 - 영상 처리 방법 및 장치 - Google Patents

Abstract

본 발명은 영상 처리 방법 및 장치에 관한 것으로, 본 발명의 일 실시 예에 따른 영상 처리 방법은 입력 영상으로부터 얼굴 영역과 눈을 검출하고, 검출한 눈을 기초로 왜곡 처리를 위한 중심점을 판단하고, 이를 기준으로 입력 영상을 왜곡 처리함으로써, 왜곡 처리를 위한 영역 설정을 할 필요가 없다.

얼굴, 눈, 왜곡 처리

Description

영상 처리 방법 및 장치{Image processing method and apparatus}

본 발명은 영상 처리에 관한 것으로, 더 상세하게는 디지털 촬영 장치에서의 얼굴 검출을 이용한 왜곡 처리 방법 및 장치에 관한 것이다.

영상 왜곡(Image warping)기술은 영상 변형 기술의 하나로, 영상의 전체 또는 일부를 팽창시키거나 축소시키는 기술이다. 화각이 매우 큰 렌즈의 경우, 렌즈의 광학적 특성에 의하여 광축을 중심으로 타원형으로 영상의 왜곡이 일어나는 데, 이를 보정하기 위하여 영상 왜곡 기술이 응용되고 있다.

때때로 사용자들은, 렌즈 왜곡 현상을 활용하여 개성 있는 사진을 연출하기도 한다. 이러한 렌즈 왜곡 현상을 연출하기 위해서는 화각이 매우 큰 어안렌즈와 같은 렌즈들은 사용해야 하는데, 이는 매우 고가의 제품이다.

본 발명은 입력 영상에 렌즈 왜곡 효과를 줌에 있어서 최적의 영역 또는 왜곡 처리의 기준점을 자동으로 판단하여 입력 영상을 왜곡 처리할 수 있는 영상 처리 방법 및 장치를 제공하는데 목적이 있다.

상기 기술적 과제를 달성하기 위한, 본 발명의 일 실시 예에 따른 영상 처리 방법은 입력 영상으로부터 얼굴 영역을 검출하는 단계; 상기 검출한 얼굴 영역에서 눈을 검출하는 단계; 상기 검출한 눈을 기초로 왜곡 처리를 위한 중심점을 판단하는 단계; 및 상기 중심점을 기준으로 상기 입력 영상을 왜곡 처리하는 단계를 포함한다.

바람직하게, 상기 왜곡 처리는, 어안 렌즈 필터를 이용한 이미지 워핑(image warping)인 것을 특징으로 한다.

바람직하게, 상기 판단 단계는, 상기 검출한 눈의 위치 정보를 기초로 상기 왜곡 처리를 위한 중심점을 판단하는 것을 특징으로 한다.

바람직하게, 상기 판단 단계는, 2개의 눈을 검출한 경우, 각각의 눈의 중심으로부터 중간 위치에 해당하는 좌표를 중심점으로 판단하는 것을 특징으로 한다.

바람직하게, 상기 판단 단계는, 1개의 눈을 검출한 경우, 상기 검출한 눈의 위치가 상기 검출한 얼굴 영역 내에서 어느 위치에 있는지 판단하고, 상기 얼굴 영역 내의 위치와 반대 위치로 소정 거리만큼 떨어진 위치에 해당하는 좌표를 중심점 으로 판단하는 것을 특징으로 한다.

바람직하게, 상기 영상 처리 방법은 상기 입력 영상으로부터 적어도 2 이상의 얼굴 영역을 검출한 경우, 상기 검출한 적어도 2 이상의 얼굴 영역 중 하나를 선택하는 단계를 더 포함하는 것을 특징으로 한다.

바람직하게, 상기 선택 단계는 사용자에 의해 상기 검출한 적어도 2 이상의 얼굴 영역 중 하나를 선택하는 것을 특징으로 한다.

바람직하게, 상기 눈 검출 단계는, 상기 선택한 얼굴 영역에서 눈을 검출하는 것을 특징으로 한다.

바람직하게, 상기 입력 영상은, 라이브 뷰 영상 또는 재생 영상을 포함하는 것을 특징으로 한다.

상기 다른 기술적 과제를 달성하기 위한, 본 발명의 다른 실시 예에 따른 영상 처리 장치는 입력 영상으로부터 얼굴 영역을 검출하는 얼굴 영역 검출부; 상기 검출한 얼굴 영역에서 눈을 검출하는 눈 검출부; 상기 검출한 눈을 기초로 왜곡 처리를 위한 중심점을 판단하는 중심 판단부; 및 상기 중심점을 기준으로 상기 입력 영상을 왜곡 처리하는 왜곡 처리부를 포함한다.

바람직하게, 상기 왜곡 처리부는, 어안 렌즈 필터를 이용한 이미지 워핑(image warping)를 수행함으로써 상기 입력 영상에 대해 왜곡 처리를 수행하는 것을 특징으로 한다.

바람직하게, 상기 중심 판단부는, 상기 검출한 눈의 위치 정보를 기초로 상기 왜곡 처리를 위한 중심점을 판단하는 것을 특징으로 한다.

바람직하게, 상기 눈 검출부가 2개의 눈을 검출한 경우, 상기 중심 판단부는 각각의 눈의 중심으로부터 중간 위치에 해당하는 좌표를 중심점으로 판단하는 것을 특징으로 한다.

바람직하게, 상기 눈 검출부가 1개의 눈을 검출한 경우,

상기 중심 판단부는, 상기 검출한 눈의 위치가 상기 검출한 얼굴 영역 내에서 어느 위치에 있는지 판단하고, 상기 얼굴 영역 내의 위치와 반대 위치로 소정 거리만큼 떨어진 위치에 해당하는 좌표를 중심점으로 판단하는 것을 특징으로 한다.

바람직하게, 상기 얼굴 영역 검출부가 상기 입력 영상으로부터 적어도 2 이상의 얼굴 영역을 검출한 경우,

상기 영상 처리 장치는 상기 검출한 적어도 2 이상의 얼굴 영역 중 하나를 선택하는 얼굴 영역 선택부를 더 포함하는 것을 특징으로 한다.

바람직하게, 상기 얼굴 영역 선택부는, 사용자 입력부를 통해 입력된 상기 검출한 적어도 2 이상의 얼굴 영역 중 하나를 선택하는 것을 특징으로 한다.

바람직하게, 상기 눈 검출부는, 상기 얼굴 영역 선택부가 선택한 얼굴 영역에서 눈을 검출하는 것을 특징으로 한다.

바람직하게, 상기 입력 영상은, 라이브 뷰 영상 또는 재생 영상을 포함하는 것을 특징으로 한다.

상기 또 다른 기술적 과제를 달성하기 위한, 본 발명의 또 다른 실시 예에 따른 상기 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 기록매체를 포함 한다.

본 발명의 일 실시 예에 따른 영상 처리 방법은 왜곡 처리를 위해 사용자의 영역 지정이 필요치 않으며, 얼굴을 보다 효과적으로 과장함으로써, 귀엽게 또는 익살스럽게 연출된 인물 사진을 보다 더 간편하게 얻을 수 있다. 또한, 라이브 뷰 모드 뿐만 아니라 재생 모드에서 후 보정 기능으로 활용할 수도 있다.

이하, 첨부한 도면들을 참조하여 본 발명의 바람직한 실시 예들을 상세히 설명한다. 하기의 설명에서는 본 발명에 따른 동작을 이해하는데 필요한 부분만이 설명되며 그 이외 부분의 설명은 본 발명의 요지를 흩트리지 않도록 생략될 수 있다.

또한, 이하에서 설명되는 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니 되며, 본 발명을 가장 적절하게 표현할 수 있도록 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야 한다.

도 1은 본 발명의 일 실시 예에 따른 디지털 촬영 장치(100)의 블록도이다. 또한, 도 1과 함께 설명할 도 2는 상기 디지털 촬영 장치의 디지털 신호 처리부(70)를 설명하기 위한 블록도이다.

도 1에 도시된 바에 따르면, 디지털 촬영 장치(100)는 광학부(10), 광학 구동부(11), 촬상소자(15), 촬상소자 제어부(16), 조작부(20), 프로그램 저장부(30), 버퍼 저장부(40), 데이터 저장부(50), 표시 제어부(60), 데이터 구동부(61), 주사 구동부(63), 표시부(65) 및 디지털 신호 처리부(DSP, 70)를 포함한다.

광학부(10)는 피사체로부터의 광학 신호가 입력되어 촬상 소자(13)로 제공한다. 광학부(10)는 초점 거리(focal length)에 따라 화각이 좁아지거나 또는 넓어지도록 제어하는 줌 렌즈 및 피사체의 초점을 맞추는 포커스 렌즈 등 적어도 하나의 렌즈를 포함할 수 있다. 또한, 광학부(10)는 광량을 조절하는 조리개를 더 포함할 수 있다.

광학 구동부(11)는 렌즈의 위치, 조리개의 개폐 등을 조절한다. 렌즈의 위치를 이동시켜 초점을 맞출 수 있다. 또한, 조리개의 개폐를 조절하여 광량을 조절할 수 있다. 실시간으로 입력되는 영상 신호에 의해 자동으로 생성되는 제어 신호 또는 사용자의 조작에 의해 수동으로 입력되는 제어 신호에 따라 광학 구동부(11)가 광학부(10)를 제어할 수 있다.

광학부(10)를 투과한 광학 신호는 촬상 소자(15)의 수광면에 이르러 피사체의 상을 결상한다. 촬상 소자(15)는 광학 신호를 전기 신호로 변환하는 CCD(Charge Coupled Device) 또는 CIS(Complementary Metal Oxide Semiconductor Image Sensor) 등을 사용할 수 있다. 이와 같은 촬상소자(15)는 촬상소자 제어부(16)에 의해 감도 등이 조절될 수 있다. 촬상소자 제어부(16)도 실시간으로 입력되는 영상 신호에 의해 자동으로 생성되는 제어 신호 또는 사용자의 조작에 의해 수동으로 입력되는 제어 신호에 따라 촬상소자(15)를 제어할 수 있다.

조작부(20)는 사용자 등의 외부로부터의 제어 신호를 입력할 수 있는 곳이 다. 조작부(20)는 정해진 시간 동안 촬상 소자(15)를 빛에 노출하여 사진을 촬영하는 셔터-릴리즈 신호를 입력하는 셔터-릴리즈 버튼, 전원을 공급하기 위해 입력하는 전원 버튼, 입력에 따라 화각을 넓어지게 하거나 화각을 좁아지게 하는 광각-줌 버튼 및 망원-줌 버튼과, 문자 입력 또는 촬영 모드, 재생 모드 등의 모드 선택, 화이트 밸런스 설정 기능 선택, 노출 설정 기능 선택 등의 다양한 기능 버튼들이 있다. 조작부(20)는 상기와 같이 다양한 버튼의 형태를 가질 수도 있지만, 이에 한정되는 것은 아니며, 키보드, 터치 패드, 터치 스크린, 리모트 컨트롤러 등과 같이 사용자가 입력할 수 있는 어떠한 형태로 구현되어도 무방하다.

또한, 디지털 촬영 장치(100)는 이를 구동하는 운영 시스템, 응용 시스템 등의 프로그램을 저장하는 프로그램 저장부(30), 연산 수행 중에 필요한 데이터 또는 결과 데이터들을 임시로 저장하는 버퍼 저장부(40), 영상 신호를 포함하는 이미지 파일을 비롯하여 프로그램에 필요한 다양한 정보들을 저장하는 데이터 저장부(50)를 포함한다.

아울러, 디지털 촬영 장치(100)는 이의 동작 상태 또는 디지털 촬영 장치(100)에서 촬영한 이미지 정보를 표시하도록 제어하는 표시 제어부(60), 표시 제어부(60)로부터 입력되어 표시 데이터를 전달하는 데이터 구동부(61)와 주사 구동부(63), 데이터 구동부(61)와 주사 구동부(63)로부터 입력되는 신호에 따라 소정 영상을 표시하는 표시부(65)를 포함한다. 표시부(65)는 액정 디스플레이 패널(LCD), 유기 발광 디스플레이 패널(OLED), 전기 영동 디스플레이 패널(EDD) 등으로 이루어질 수 있다.

그리고 디지털 촬영 장치(100)는 입력되는 영상 신호를 처리하고, 이에 따라 또는 외부 입력 신호에 따라 각 구성부들을 제어하는 디지털 신호 처리부(70)를 포함한다.

디지털 신호 처리부(70)에 관하여 도 2를 함께 참조하여 설명한다.

도 2를 참조하면, 디지털 신호 처리부(70)는 제어부(71), 영상 신호 처리부(72), 얼굴 영역 검출부(73), 눈 검출부(74), 중심 판단부(75), 왜곡 처리부(76) 및 얼굴 영역 선택부(77)를 포함한다. 여기서, 디지털 신호 처리부(70)는 특허청구범위에 사용된 영상 처리 장치와 동일한 의미로 이해되어야 한다.

제어부(71)는 디지털 신호 처리부(70)의 전반적인 동작을 제어한다.

영상 신호 처리부(72)는 촬상 소자(15)로부터 입력된 영상 신호를 디지털 신호로 변환하고, 사람의 시각에 맞게 영상 신호를 변환하도록 감마 컬렉션(Gamma Correction), 색필터 배열보간(color filter array interpolation), 색 매트릭스(color matrix), 색보정(color correction), 색 향상(color enhancement) 등의 영상 신호 처리를 수행한다. 상술한 영상 신호 처리부(72)의 일반적인 기능과는 분리하여, 본 발명의 바람직한 실시 예에서의 디지털 어안렌즈 필터를 이용한 왜곡 처리와 관련한 기능들은 왜곡 처리부(76)의 기능으로 분리하여 설명한다.

또한, 영상 신호 처리부(72)는 그 기능이 설정된 경우 오토화이트밸런스(Auto White Balance)나 오토익스포저(Auto Exposure) 알고리즘을 수행할 수 있다. 또한, 영상 데이터를 스케일러를 이용하여 그 크기를 조절하며, 압축하여 소정 형식의 이미지 파일을 형성한다. 반대로 이미지 파일의 압축을 해제하기도 한 다. 영상 신호 처리부(72)는 사진 촬영 전 라이브-뷰 모드에서 실시간으로 입력되는 영상 신호와 셔터-릴리즈 신호에 의해 입력된 영상 신호에 대해 상기와 같은 영상 신호 처리들을 행할 수 있다. 이때, 상기 영상 신호들 각각에 대해 다른 영상 신호 처리가 행해질 수 있다.

얼굴 영역 검출부(73)는 영상 신호 처리부(72)를 통해 영상 처리된 영상에서 얼굴 영역을 검출한다. 얼굴 영역 검출은 입력된 영상에서 어느 위치에 얼굴이 있는지를 검출한다. 얼굴 영역 검출부(73)는 미리 기억된 얼굴의 특징 데이터와 입력된 영상 데이터를 비교하여 입력된 영상 중에 얼굴의 특징 데이터가 있는지 여부를 인식하고, 얼굴 데이터가 있다고 판단되면 어느 위치에 그 얼굴의 화상 데이터가 있는지를 인식한다. 얼굴 영역 검출과 관련하여 많은 종래기술들이 존재하며, 아다부스팅(Adaboosting) 알고리즘, 피부색상 정보를 이용하여 얼굴 영역을 검출할 수 있다. 여기서, 입력 영상에는 얼굴 영역이 존재하지 않을 수 있으며, 하나의 얼굴 영역, 또는 적어도 2 이상의 얼굴 영역이 존재할 수도 있다. 입력 영상은 라이브 뷰 영상 또는 재생 영상을 포함한다.

눈 검출부(74)는 얼굴 영역 검출부(73)가 검출한 얼굴 영역에서 눈의 존재와 위치를 검출한다. 얼굴 영역에서 주요 관심 부위, 예를 들면 눈을 검출하는 다양한 종래기술들이 존재한다. 예를 들면, 프로젝션 분석, 가변 템플릿(deformable template), 엑티브 형상 모델(ASM) 등을 이용하여 얼굴 영역에서 눈과 그 위치를 검출할 수 있다. 프로젝션 분석 방법은 x축과 y축 프로젝션을 사용하여 각 요소의 특성을 해석하여 영역 분할을 하는 방법이다. 가변 템플릿을 이용한 방법은 유 사도(similarity) 변환을 이용하여 윤곽선을 추출하는 방법이다. 엑티브 형상 모델을 이용하는 방법은 추출하고자 하는 모양을 PDM(pointdistribution model)이라고 불리는 모델로 정의하여 이 모델과 비슷한 형태를 가지는 물체를 에너지 함수를 이용하여 영상에서 찾는 방법이다. 본 발명의 바람직한 실시 예에서, 전술한 얼굴 영역에서 눈을 검출하는 방법들에 한정되지 않고, 컴퓨터 비전과 패턴 인식 분야에서 일반적으로 사용되는 방법을 사용할 수 있음은 물론이다.

중심 판단부(75)는 눈 검출부(74)가 검출한 눈을 기초로 왜곡 처리를 위한 중심점을 판단한다. 여기서, 중심 판단부(75)는 눈의 개수와 눈의 위치를 기초로 왜곡 처리를 위한 중심점을 판단한다. 왜곡 처리를 위한 중심 판단은 도 3a 및 3b를 참조하여 후술한다.

왜곡 처리부(76)는 중심 판단부(75)가 판단한 중심점을 기준으로 입력 영상을 왜곡 처리한다. 여기서, 왜곡 처리는 디지털 어안 렌즈 필터를 이용한 이미지 워핑(image warping)이고, 워핑은 영상 변형 기술의 하나로, 영상의 전체 또는 일부를 팽창시키거나 축소시키는 영상 처리이다. 일반적으로 어안 렌즈는 초광각 렌즈로 시야가 180˚를 넘는 렌즈를 의미하며, 결과 영상은 원형으로 일그러진 영상이 출력된다. 디지털 어안 렌즈 필터는 어안 렌즈를 사용한 것과 동일한 영상을 표현할 수 있는 필터로서, 광각 렌즈 또는 어안 렌즈의 왜곡 보정을 위한 필터의 역 필터를 사용할 수도 있다. 예를 들면 광각 렌즈 또는 어안 렌즈로 인한 영상 왜곡, 즉 방사 왜곡을 보정하기 위해 워핑 방정식 또는 렌즈 왜곡 모델식을 통해 구한 왜곡 계수를 이용하여 어안 렌즈 필터로 사용한다.

얼굴 영역 선택부(77)는 얼굴 영역 검출부(73)가 입력 영상에서 복수의 얼굴 영역을 검출한 경우, 하나의 얼굴 영역을 선택한다. 여기서, 하나의 얼굴 영역의 선택은 사용자가 사용자 입력부(미도시)를 통해 선택할 수 있다. 또한, 얼굴 영역 선택부(77)는 얼굴 인식 기능을 이용하여, 특정 성별을 선택하는 방법, 특정 연령대를 선택하는 방법, 이미 등록된 특정 인물을 인식하여 선택하는 방법 등을 사용하여 특정 인물 또는 객체를 자동으로 선택할 수도 있다.

도 3a 및 3b는 도 2에 도시된 중심 판단부(75)의 왜곡 처리를 위한 중심 판단을 설명하기 위한 도면이다.

도 3a를 참조하면, 얼굴 영역 검출부(73)가 입력 영상에서 얼굴 영역(300)을 검출하면, 눈 검출부(74)가 얼굴 영역(300)에 존재하는 2개의 눈 영역들(310)을 검출한다. 중심 판단부(75)는 왜곡 처리를 위한 중심을 판단하는데, 2개의 눈(320)이 검출된 경우에는, 각각의 눈의 중심의 중간 위치(330)의 좌표를 왜곡 처리를 위한 중심 좌표로 판단한다.

도 3b를 참조하면, 얼굴 영역 검출부(73)가 입력 영상에서 얼굴 영역(340)을 검출하면, 눈 검출부(74)가 얼굴 영역(340)에 존재하는 1개의 눈 영역(350)을 검출한다. 눈 검출은 얼굴의 표정, 위치, 포즈에 따라 검출이 2개의 눈이 모두 검출되지 않을 수 있다. 따라서, 이 경우에는 검출된 1개의 눈 영역(350)을 기준으로 왜곡 처리를 위한 중심을 판단한다. 눈이 하나만 검출되었을 경우에는, 검출된 눈이 얼굴 영역의 어느 쪽에 위치하는지를 판별하여, 눈이 위치한 곳의 반대 방향으로 일정 거리만큼 떨어진 위치를 기준점으로 정한다. 왜곡 처리를 위한 중심점을 결 정하는 방법은 이에 한정되지 않고, 다양한 방법으로 결정할 수 있음은 물론이다.

도 4a 및 4b는 본 발명의 다른 실시 예에 따른 입력 영상과 왜곡 처리된 결과 영상을 도시한 도면이다.

도 4a는 입력 영상을 나타내고, 도 4b는 본 발명의 일 실시 예에 따른 자동으로 결정된 왜곡 중심점을 기준으로 왜곡 처리한 결과 영상을 나타낸다.

도 5a 내지 5c는 본 발명의 또 다른 실시 예에 따른 입력 영상과 왜곡 처리된 결과 영상을 도시한 도면이다.

도 5a 및 5b를 참조하면, 입력 영상에서 2개의 얼굴 영역이 존재하는 경우에, 2개의 얼굴 영역 중 주 피사체, 도 5a에 도시된 영상에서는 여자 얼굴을 중심으로 왜곡 처리를 한 결과 영상이 도 5b에 도시되어 있다. 여기서, 자동으로 주피사체인 얼굴을 선택하여 왜곡 처리를 할 수도 있고, 사용자의 선택에 따라 주피사체인 얼굴을 선택하여 왜곡 처리를 할 수도 있다. 전자의 경우에는, 각각의 검출한 얼굴 영역 중에 화면의 중심에 위치한 얼굴 영역을 자동으로 선택하여 왜곡 처리를 한다. 도 5c를 참조하면, 남자 얼굴을 선택하여 이를 중심으로 왜곡 처리를 한 경우이다. 따라서, 복수의 얼굴을 검출한 경우, 그 중 하나만을 중심으로 렌즈 왜곡 효과를 줌으로써 특정 피사체를 보다 돋보이게 연출할 수 있다.

도 6은 본 발명의 또 다른 실시 예에 따른 영상 처리 방법을 설명하기 위한 흐름도이다.

도 6을 참조하면, 단계 600에서, 입력 영상에서 얼굴을 검출한다. 입력 영 상은 라이브 뷰 영상 또는 재생 영상을 포함하며, 복수의 얼굴을 검출할 수도 있다. 단계 602에서, 검출한 얼굴에서 눈을 검출한다. 얼굴에 존재하는 1개 또는 2개를 검출한다. 단계 604에서, 검출한 눈의 위치로부터 왜곡 처리를 위한 중심점을 판단한다. 1개의 눈을 검출한 경우에는 검출한 눈의 얼굴 내의 위치로부터 반대 방향으로 소정의 거리만큼 이동한 지점을 중심점으로 판단하고, 개의 눈을 검출한 경우에는 2개의 눈의 위치의 중심을 왜곡 처리를 위한 중심점으로 판단한다. 단계 606에서, 단계 604에서 판단한 중심점을 기준으로 입력 영상을 왜곡 처리한다. 여기서 왜곡 처리는 디지털 어안렌즈 필터를 이용한 영상 워핑을 의미한다. 따라서, 영상 처리하고자 하는 얼굴에 대한 영역 지정 또는 좌표 지정 등을 하지 않고서도, 자동으로 설정된 중심점을 기초로 왜곡 처리를 함으로써 얼굴을 보다 재밌고, 귀엽게 표현할 수 있다. 또한, 이러한 왜곡 처리는 특정 이미지 촬영 모드로 설정함으로써 라이브 뷰 모드에서 바로 확인하면서 촬영하거나, 재생 모드에서 이미지 후 보정에서도 사용할 수 있다.

도 7은 본 발명의 또 다른 실시 예에 따른 영상 처리 방법을 설명하기 위한 흐름도이다.

도 7을 참조하면, 단계 700에서, 입력 영상에서 얼굴을 검출한다. 얼굴을 검출한 경우에는 단계 702에서, 검출한 얼굴이 하나인지 판단한다. 하나의 얼굴을 검출한 경우에는 단계 704에서, 검출한 얼굴에서 눈을 검출한다. 단계 702에서, 복수의 얼굴을 검출한 경우에는 단계 706으로 진행하여 복수의 얼굴 중 하나를 선택한다. 여기서, 선택은 사용자에 의해 또는 얼굴 인식 등의 방법을 이용하여 자 동으로 선택할 수도 있다.

단계 706에서, 검출한 또는 선택한 얼굴에서 눈을 검출한다. 눈을 검출한 경우에는 단계 708에서, 검출한 눈의 개수를 판단한다. 검출한 눈이 2개인 경우에는 단계 710에서, 두 눈 사이의 중심을 왜곡 처리를 위한 중심점으로 결정한다. 단계 708에서, 검출한 눈이 1개인 경우에는 단계 712로 진행하여 검출한 눈의 얼굴 내의 위치를 판단한다. 단계 714에서, 얼굴 내의 눈의 위치에 따라 중심점을 결정한다. 예를 들면 검출한 눈이 얼굴의 오른쪽에 있다면 왼쪽으로 일정 거리만큼 이동한 지점을 중심점으로 결정한다.

단계 716에서, 결정한 중심점을 기준으로 왜곡 처리를 한다. 여기서, 왜곡 처리는 디지털 어안 렌즈 필터를 이용한 이미지 워핑을 의미한다.

전술한 실시 예들은 본 발명이 적용될 수 있는 디지털 촬영 장치의 일예로서 디지털 카메라를 중심으로 기술하였으나, 이에 한정하는 것은 아니다. 당업자라면 본 발명이 카메라 기능이 부가된 카메라폰, PDA(personal digital assistant), PMP(portable multimedia player)에도 적용될 수 있음을 이해할 것이다.

한편, 본 발명은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터가 읽을 수 있는 코드로 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다.

컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인 터넷을 통한 전송)의 형태로 구현하는 것을 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술 분야의 프로그래머들에 의하여 용이하게 추론될 수 있다.

이제까지 본 발명에 대하여 바람직한 실시 예를 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 본 발명을 구현할 수 있음을 이해할 것이다. 그러므로 상기 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 한다.

도 1은 본 발명의 일 실시 예에 따른 디지털 촬영 장치(100)의 개략적인 블록도이다.

도 2는 도 1에 도시된 디지털 신호 처리부(70)의 개략적인 블록도이다.

도 3a 및 3b는 도 2에 도시된 중심 판단부(75)의 왜곡 처리를 위한 중심 판단을 설명하기 위한 도면이다.

도 4a 및 4b는 본 발명의 다른 실시 예에 따른 입력 영상과 왜곡 처리된 결과 영상을 도시한 도면이다.

도 5a 내지 5c는 본 발명의 또 다른 실시 예에 따른 입력 영상과 왜곡 처리된 결과 영상을 도시한 도면이다.

도 6은 본 발명의 또 다른 실시 예에 따른 영상 처리 방법을 설명하기 위한 흐름도이다.

도 7은 본 발명의 또 다른 실시 예에 따른 영상 처리 방법을 설명하기 위한 흐름도이다.

<도면의 주요 부분에 대한 부호의 설명>

100: 디지털 촬영 장치 70: 디지털 신호 처리부

71: 제어부 72: 영상 신호 처리부

73: 얼굴 영역 검출부 74: 눈 검출부

75: 중심 판단부 76: 왜곡 처리부

77: 얼굴 영역 선택부

Claims (19)

1. 입력 영상으로부터 얼굴 영역을 검출하는 단계;

   상기 검출한 얼굴 영역에서 눈을 검출하는 단계;

   상기 검출한 눈을 기초로 왜곡 처리를 위한 중심점을 판단하는 단계; 및

   상기 중심점을 기준으로 상기 입력 영상을 왜곡 처리하는 단계를 포함하고,

   상기 중심 판단부는,

   상기 검출한 눈의 위치 정보를 기초로 상기 왜곡 처리를 위한 중심점을 판단하고,

   2개의 눈을 검출한 경우, 각각의 눈의 중심으로부터 중간 위치에 해당하는 좌표를 중심점으로 판단하고,

   1개의 눈을 검출한 경우, 상기 검출한 눈의 위치가 상기 검출한 얼굴 영역의 좌우 영역 내에서 어느 위치에 있는지 판단하고, 상기 좌우 영역 중 어느 한 영역내의 위치와 반대 위치로 소정 거리만큼 떨어진 위치에 해당하는 좌표를 중심점으로 판단하고,

   상기 입력 영상에서 복수 개의 얼굴 영역이 검출된 경우, 화면의 중심에 위치한 얼굴 영역을 선택하고, 상기 선택된 얼굴 영역을 기준으로 왜곡 처리를 수행하는 것을 특징으로 하는 영상 처리 방법.
2. 제 1 항에 있어서,

   상기 왜곡 처리는,

   어안 렌즈 필터를 이용한 이미지 워핑(image warping)인 것을 특징으로 하는 영상 처리 방법.
3. 삭제
4. 삭제
5. 삭제
6. 삭제
7. 삭제
8. 삭제
9. 제 1 항에 있어서,

   상기 입력 영상은,

   라이브 뷰 영상 또는 재생 영상을 포함하는 것을 특징으로 하는 영상 처리 방법.
10. 제 1 항, 제 2 항 및 제 9 항 중 어느 한 항에 따른 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 기록매체.
11. 입력 영상으로부터 얼굴 영역을 검출하는 얼굴 영역 검출부;

    상기 검출한 얼굴 영역에서 눈을 검출하는 눈 검출부;

    상기 검출한 눈을 기초로 왜곡 처리를 위한 중심점을 판단하는 중심 판단부; 및

    상기 중심점을 기준으로 상기 입력 영상을 왜곡 처리하는 왜곡 처리부를 포함하고,

    상기 중심 판단부는,

    상기 검출한 눈의 위치 정보를 기초로 상기 왜곡 처리를 위한 중심점을 판단하고,

    2개의 눈을 검출한 경우, 각각의 눈의 중심으로부터 중간 위치에 해당하는 좌표를 중심점으로 판단하고,

    1개의 눈을 검출한 경우, 상기 검출한 눈의 위치가 상기 검출한 얼굴 영역의 좌우 영역 내에서 어느 위치에 있는지 판단하고, 상기 좌우 영역 중 어느 한 영역내의 위치와 반대 위치로 소정 거리만큼 떨어진 위치에 해당하는 좌표를 중심점으로 판단하고,

    상기 입력 영상에서 복수 개의 얼굴 영역이 검출된 경우, 화면의 중심에 위치한 얼굴 영역을 선택하고, 상기 선택된 얼굴 영역을 기준으로 왜곡 처리를 수행하는 것을 특징으로 하는 영상 처리 장치.
12. 제 11 항에 있어서,

    상기 왜곡 처리부는,

    어안 렌즈 필터를 이용한 이미지 워핑(image warping)을 수행함으로써 상기 입력 영상에 대해 왜곡 처리를 수행하는 것을 특징으로 하는 영상 처리 장치.
13. 삭제
14. 삭제
15. 삭제
16. 삭제
17. 삭제
18. 삭제
19. 제 11 항에 있어서,

    상기 입력 영상은,

    라이브 뷰 영상 또는 재생 영상을 포함하는 것을 특징으로 하는 영상 처리 장치.

Images