KR20150033877A - 얼굴 비율 보정 장치 및 그 방법 - Google Patents

얼굴 비율 보정 장치 및 그 방법 Download PDF

Info

Publication number
KR20150033877A
KR20150033877A KR20130113701A KR20130113701A KR20150033877A KR 20150033877 A KR20150033877 A KR 20150033877A KR 20130113701 A KR20130113701 A KR 20130113701A KR 20130113701 A KR20130113701 A KR 20130113701A KR 20150033877 A KR20150033877 A KR 20150033877A
Authority
KR
South Korea
Prior art keywords
ratio
face
distance
photographing angle
correcting
Prior art date
Application number
KR20130113701A
Other languages
English (en)
Inventor
김현
Original Assignee
삼성전기주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전기주식회사 filed Critical 삼성전기주식회사
Priority to KR20130113701A priority Critical patent/KR20150033877A/ko
Publication of KR20150033877A publication Critical patent/KR20150033877A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Geometry (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

본 발명은 얼굴 비율 보정 장치 및 그 방법에 관한 것으로, 본 발명의 일 구현예에 따른 상기 얼굴 비율 보정 장치는, 객체의 영상을 입력받아 이미지 신호를 생성하는 영상 취득부, 상기 생성된 이미지 신호로부터 얼굴을 검출하는 얼굴 검출부 및 상기 얼굴의 비율정보 및 촬영각도에 따라 상기 얼굴의 비율을 보정하는 얼굴 비율 보정부를 포함한다.

Description

얼굴 비율 보정 장치 및 그 방법{FACIAL RATIO CORRECTTING DEVICE AND METHOD THEREOF}
본 발명은 얼굴 비율 보정 장치 및 그 방법에 관한 것이다.
최근, 카메라 모듈에 대한 기술이 날로 발전함에 따라 카메라 모듈을 장착한 스마트 단말장치가 널리 보급되고 있다.
이러한 카메라 모듈을 장착한 스마트 단말장치는 영상 통화 품질의 향상에도 불구하고, 종래의 영상 통화가 대중화되지 않은 이유는 고가의 영상 통화료 부담이 가장 큰 이유이지만, 그 외에 종래의 영상 통화에서는 상대방에게 보여지는 본인의 얼굴이 왜곡되어 전달되는 문제가 있다.
이러한 얼굴의 왜곡은 주로 사용자의 통화 각도가 정면이 아니라 아래 방향 혹은 위 방향에 존재해서 카메라가 사용자의 얼굴을 아래에서 위로 쳐다보거나 혹은 반대로 위에서 아래로 쳐다 보기 때문에 발생한다.
종래에는, 얼굴의 기울어짐을 보정하거나, 얼굴을 화면의 중간에 위치하도록 보정하는 기술들이 공개되어 있으나, 촬영 각도에 따라 발생하는 얼굴의 왜곡을 보정 할 수 없는 문제점이 있다.
하기의 특허문헌 1은 통화자의 얼굴을 화면 가운데 위치시킬 수 있는 화상 통신용 통신단말기 및 방법에 관한 것이나, 상술한 문제에 대한 해결책을 제시하지 못하고 있다.
한국 공개특허공보 제10-2004-0079499호
본 발명은 상기한 종래 기술의 문제점을 해결하기 위한 것으로서, 얼굴의 비율정보 및 촬영 각도에 따라 얼굴의 비율을 보정함으로써, 사용자가 원하는 촬영 각도의 화면을 출력하도록 할 수 있는 얼굴 비율 보정 장치 및 그 방법을 제공한다.
본 발명의 제1 기술적인 측면은 얼굴 비율 보정 장치를 제안한다. 상기 얼굴 비율 보정 장치는, 객체의 영상을 입력받아 이미지 신호를 생성하는 영상 취득부, 상기 생성된 이미지 신호로부터 얼굴을 검출하는 얼굴 검출부 및 상기 얼굴의 비율정보 및 촬영각도에 따라 상기 얼굴의 비율을 보정하는 얼굴 비율 보정부를 포함한다.
여기서, 상기 얼굴 비율 보정부는, 상기 검출된 얼굴의 특징점 좌표를 추출하는 특징점 추출부, 상기 특징점으로부터 얼굴의 비율정보를 산출하는 비율정보 산출부 및 상기 비율정보로부터 촬영각도를 산출하며, 상기 비율정보 및 상기 촬영각도를 이용하여 상기 얼굴의 비율을 보정하는 보정부를 포함할 수 있다.
또한, 상기 특징점은, 안구 및 입꼬리 중 적어도 하나를 포함하며, 상기 비율정보 산출부는, 상기 특징점 사이의 거리정보를 이용하여 비율정보를 산출할 수 있다.
또한, 상기 거리정보는, 상기 안구 사이의 거리에 따른 제1 거리, 상기 입꼬리 사이의 거리에 따른 제2 거리 및 상기 안구를 연결하는 직선과 상기 입꼬리를 연결하는 직선 사이의 거리에 따른 제3 거리 중 적어도 하나를 포함할 수 있다.
여기서, 상기 비율정보는, 상기 제1 거리와 상기 제2 거리 사이의 비에 따른 가로 비율 및 상기 제3 거리와 상기 제2 거리 사이의 비에 따른 세로 비율을 포함할 수 있다.
또한, 상기 보정부는, 상기 가로 비율을 기 설정된 비율정보와 비교하여 촬영 각도를 판단하고, 상기 가로 비율 및 상기 촬영 각도를 이용하여 수평 스케일 보정을 수행하고, 상기 세로비율과 기 설정된 비율정보를 이용하여 수직 스케일 보정을 수행할 수 있다.
여기서, 상기 보정부는, 하기의 수학식 1에 의해 산출된 수평 스케일 상수를 적용하여 수평 스케일 보정을 수행할 수 있다.
[수학식 1]
Figure pat00001
(여기서, Sh : 수평 스케일 상수, α : 가로 비율, L : 얼굴 길이, y : 얼굴의 세로 좌표(0~L))
여기서, 상기 보정부는, 상기 촬영 각도가 하이 앵글인 경우, 상기 얼굴의 세로 좌표의 기준점은 얼굴의 상단이고, 상기 촬영 각도가 로우 앵글인 경우, 상기 얼굴의 세로 좌표의 기준점은 얼굴의 하단으로 할 수있다.
또한, 상기 보정부는, 하기의 수학식 2에 의해 산출된 수직 스케일 상수를 적용하여 수직 스케일 보정을 수행할 수 있다.
[수학식 2]
Figure pat00002
(여기서, Sw : 수직 스케일 상수, λ : 기 설정된 세로 비율, γ : 세로 비율 )
본 발명의 제2 기술적인 측면은 얼굴 비율 보정 방법을 제안한다. 상기 얼굴 비율 보정 방법은, 객체의 영상을 입력받아 이미지 신호를 생성하는 단계, 상기 생성된 이미지 신호로부터 얼굴을 검출하는 단계 및 상기 얼굴의 비율정보 및 촬영각도에 따라 상기 얼굴의 비율을 보정하는 단계를 포함한다.
여기서, 상기 얼굴의 비율을 보정하는 단계는, 상기 얼굴의 특징점을 추출하는 단계, 상기 특징점 사이의 거리에 따른 비율정보를 산출하는 단계, 상기 비율정보를 기 설정된 비율정보와 비교하여 촬영각도를 산출하는 단계, 상기 비율정보와 상기 촬영각도를 이용하여 얼굴의 비율을 보정하는 단계를 포함할 수 있다.
또한, 상기 비율정보는 가로 비율 및 세로 비율을 포함할 수 있으며, 상기 얼굴의 비율을 보정하는 단계는, 상기 가로 비율 및 촬영 각도를 이용한 수평 스케일 보정과 상기 세로 비율을 이용한 수직 스케일 보정을 각각 수행할 수 있다.
본 발명의 일 실시형태에 의하면, 얼굴의 비율정보 및 촬영 각도에 따라 얼굴의 비율을 보정함으로써, 현재 촬영되고 있는 각도와 무관하게 사용자가 원하는 촬영 각도의 화면을 출력하도록 할 수 있는 효과가 있다.
도 1은 본 발명에 따른 얼굴 비율 보정 장치의 일 실시예를 설명하기 위한 구성도이다.
도 2는 도 1에 도시된 얼굴 비율 보정부의 일 실시예를 설명하기 위한 구성도이다.
도 3은 본 발명에 따른 얼굴 비율 보정 장치의 특징점 및 비율정보를 설명하기 위한 도면이다.
도 4는 본 발명에 따른 얼굴 비율 보정 방법의 일 실시예를 설명하기 위한 흐름도이다.
도 5는 도 4에 도시된 얼굴 비율 보정 단계의 일 실시예를 설명하기 위한 흐름도이다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시 형태들을 설명한다.
그러나, 본 발명의 실시형태는 여러 가지 다른 형태로 변형될 수 있으며, 본 발명의 범위가 이하 설명하는 실시 형태로 한정되는 것은 아니다. 또한, 본 발명의 실시형태는 당해 기술분야에서 평균적인 지식을 가진 자에게 본 발명을 더욱 완전하게 설명하기 위해서 제공되는 것이다.
본 발명에 참조된 도면에서 실질적으로 동일한 구성과 기능을 가진 구성요소들은 동일한 부호가 사용될 것이며, 도면에서 요소들의 형상 및 크기 등은 보다 명확한 설명을 위해 과장될 수 있다.
도 1은 본 발명에 따른 얼굴 비율 보정 장치의 일 실시예를 설명하기 위한 구성도이다.
도 1을 참조하면, 본 발명의 일 실시예에 따른 얼굴 비율 보정 장치는, 객체의 영상을 입력받아 이미지 신호를 생성하는 영상 취득부(100), 얼굴을 검출하는 얼굴 검출부(200) 및 얼굴의 비율정보 및 촬영각도에 따라 얼굴의 비율을 보정하는 얼굴 비율 보정부(300)를 포함한다.
영상 취득부(100)는 객체의 영상을 입력받아 이미지 신호를 생성하고, 생성된 이미지 신호를 얼굴 검출부(200)로 전송할 수 있다.
얼굴 검출부(200)는 영상 취득부(100)에서 생성되어 전달받은 이미지 신호로부터 얼굴을 검출한다. 얼굴을 추출하는 기법은 얼굴 윤곽선 추출과 중심점 추적방법과 상관 추적기법 등이 다양하게 응용될 수 있다. 이러한 얼굴 영역을 추출하기 위한 기술은 일반적인 기술로서, 중심점 추적기법은 목표물을 배경과 분리하기 위해 문턱치를 이용해 배경과 물체를 이진화하여 이동 물체를 배경으로부터 분리한 후 추출된 이동 물체의 중심점을 추적하는 기법이다. 한편, 상관 추적기법은 이전 프레임의 이동 물체, 즉 목표물의 위치에 적당한 크기의 영역을 정의하고, 정의된 영역과 현재 프레임내의 검색영역과의 상관도를 계산하여 상관도가 가장 높은 영역으로 물체가 이동한 것으로 추정하는 방법이다.
얼굴 비율 보정부(300)는 얼굴의 비율정보 및 촬영각도에 따라 얼굴의 비율을 보정한다. 일 실시예에서, 얼굴의 비율정보는 얼굴의 특징점을 이용하여 산출할 수 있으며, 비율정보로부터 촬영각도를 산출할 수 있다. 여기서, 촬영각도는 얼굴 비율 보정 장치가 장착된 스마트 단말장치의 각종 센서에 의해 측정될 수도 있다.
이러한 얼굴 비율 보정부(300)에 대해서는 도 2 내지 도 3을 참조하여 이하에서 보다 상세히 설명한다.
도 2는 도 1에 도시된 얼굴 비율 보정부의 일 실시예를 설명하기 위한 구성도이며, 도 3은 본 발명에 따른 얼굴 비율 보정 장치의 특징점 및 비율정보를 설명하기 위한 도면이다.
도 2를 참조하면, 얼굴 비율 보정부(300)는, 검출된 얼굴의 특징점 좌표를 추출하는 특징점 추출부(310), 특징점으로부터 얼굴의 비율정보를 산출하는 비율정보 산출부(320) 및 비율정보로부터 촬영각도를 산출하며, 비율정보 및 상기 촬영각도를 이용하여 얼굴의 비율을 보정하는 보정부(330)를 포함할 수 있다.
특징점 추출부(310)는 얼굴 검출부(200)에서 검출된 얼굴의 특징점 좌표를 추출한다. 여기서, 얼굴의 특징점을 추출하는 방법은 커널 에지(Edge) 기반의 추출방법 내지는 Adaboost기반의 특징점 추출 방법 등 다양한 방법이 사용될 수 있다. 여기서, 특징점은 얼굴의 양쪽 안구 및 양쪽 입꼬리 등을 포함할 수 있다.
비율정보 산출부(320)는 특징점 추출부(310)에서 추출된 특징점으로부터 얼굴의 비율정보를 산출한다. 여기서, 비율정보 산출부(320)는 특징점 사이의 거리정보를 이용하여 비율정보를 산출할 수 있다.
일 실시예에서, 비율정보 산출부(320)는 거리정보로서, 도 3에서와 같이, 안구 사이의 거리에 따른 제1 거리(A), 입꼬리 사이의 거리에 따른 제2 거리(B) 및 양쪽의 안구를 연결하는 직선(A)과 양쪽의 입꼬리를 연결하는 직선(B) 사이의 거리에 따른 제3 거리(C)를 산출할 수 있다. 또한, 비율정보 산출부(320)는 비율정보로서, 제1 거리와 제 2거리 사이의 비에 따른 가로 비율(α=A/B)와 제3 거리와 제2거리 사이의 비에 따른 세로 비율(γ=C/B)을 산출할 수 있다.
보정부(330)는 촬영 각도에 따라 얼굴의 비율을 보정하는 역할을 수행한다. 보정부(330)는 먼저, 비율정보 산출부(320)에서 산출된 비율정보로부터 촬영 각도를 산출할 수 있다. 여기서, 보정부(330)는 미리 저장된 얼굴의 비율정보와 비율정보 산출부(320)에서 산출된 비율정보를 비교함으로써 촬영 각도를 산출할 수 있다. 여기서, 촬영 각도는 얼굴 비율 보정 장치가 설치된 스마트 단말장치의 각종 센서에 의해 측정될 수도 있다.
보정부(330)는 비율정보 및 상기 촬영 각도를 이용하여 얼굴의 비율을 보정 할 수 있다. 여기서, 보정부(330)는 영상 취득부(100)에 의해 소정의 촬영 각도로 촬영되는 얼굴을 미리 설정된 촬영 각도로 촬영된 것처럼 보이도록 보정 할 수 있다. 예를 들면, 보정부(330)는 출력될 영상의 촬영 각도를 정면으로 설정한 경우, 영상 취득부(100)에 의해 하이 앵글(high angle) 또는 로우 앵글(low angle)로 촬영된 얼굴을 정면 각도에서 촬영한 이미지로 보정 할 수 있다. 또는, 보정부(330)는 출력될 영상의 촬영 각도를 하이 앵글로 설정한 경우, 영상 취득부(100)에 의해 정면 또는 로우 앵글로 촬영된 얼굴을 하이 앵글에서 촬영한 이미지로 보정 할 수 있다.
일 실시예에서, 보정부(330)는 비율정보를 이용하여 촬영 각도를 산출할 수 있다. 구체적으로, 보정부(330)는 비율정보 산출부(320)에서 가로 비율(α) 및 세로 비율(γ)을 미리 저장된 정면에서의 가로 비율(β)과 세로 비율(λ)와 비교하여 촬영 각도를 산출할 수 있다. 이때, 보정부(330)는 비율정보 산출부(320)에서 산출된 가로 비율(α) 및 세로 비율(γ)이 미리 저장된 가로 비율(β) 및 세로 비율(λ)보다 큰 경우, 촬영 각도를 하이 앵글로 판단하고, 반대로 작은 경우에는 로우 앵글로 판단할 수 있다.
일 실시예에서, 보정부(330)는 비율정보 산출부(320)에서 산출된 가로 비율(α) 및 세로 비율(γ)과 미리 저장된 가로 비율(β) 및 세로 비율(λ)의 차가 미리 설정된 오차범위 이상인 경우에만 얼굴 비율 보정을 수행하도록 할 수 있다.
일 실시예에서, 보정부(330)는 영상 취득부(100)에 의해 촬영되는 촬영 각도가 하이 앵글 또는 로우 앵글로 판단되면, 가로 비율(α) 및 촬영 각도를 이용하여 수평 스케일 보정을 수행하고, 세로 비율(γ)과 기 설정된 세로 비율(λ)을 이용하여 수직 스케일 보정을 할 수 있다.
이때, 보정부(330)는 하기의 수학식 1에 의해 산출된 수평 스케일 상수를 적용하여 수평 스케일 보정을 수행할 수 있다.
Figure pat00003
(여기서, Sh : 수평 스케일 상수, α : 가로 비율, L : 얼굴 길이, y : 얼굴의 세로 좌표(0~L))
여기서, 얼굴의 세로 좌표는 턱에서 머리끝 부분 지점까지의 거리일 수 있으며, 보정부(330)는 촬영 각도가 하이 앵글로 판단되면, 머리끝 부분을 세로 좌표의 기준점으로 하여 턱 방향으로 갈수록 세로 좌표값(L)이 점차 증가하도록 할 수 있다. 이에 따라 머리끝 부분에서 턱으로 갈수록 세로 좌표값(L)이 점차 증가하므로 수평 스케일 상수(Sh)는 점차 증가하게 되고, 보정부(330)는 상기 스케일 상수(Sh)를 수평 라인 단위로 적용함으로써 얼굴의 수평 비율을 보정 할 수 있다.
반대로, 보정부(330)는 촬영 각도가 로우 앵글로 판단되는 경우, 턱 부분을 세로 좌표의 기준점으로 하여 턱 부분부터 머리끝 부분까지 수평 스케일 상수를 수평 라인 단위로 적용함으로써 얼굴의 수평 비율을 보정 할 수 있다.
또한, 보정부(330)는 하기의 수학식 2에 의해 산출된 수직 스케일 상수를 수직 라인 단위로 적용하여 수직 스케일 보정을 수행할 수 있다.
Figure pat00004
(여기서, Sw : 수직 스케일 상수, λ : 기 설정된 세로 비율, γ : 세로 비율 )
도 4는 본 발명에 따른 촬영 각도에 따른 얼굴 비율 보정 방법의 일 실시예를 설명하기 위한 흐름도이고, 도 5는 도 4에 도시된 얼굴 비율 보정 단계의 일 실시예를 설명하기 위한 흐름도이다.
도 4 및 도 5를 참조하면, 본 발명의 일 실시예에 따른 촬영 각도에 따른 얼굴 비율 보정 방법은, 객체의 영상을 입력받아 이미지 신호를 생성하는 단계(S100), 상기 생성된 이미지 신호로부터 얼굴을 검출하는 단계(S200) 및 상기 얼굴의 비율정보 및 촬영각도에 따라 상기 얼굴의 비율을 보정하는 단계(S300)를 포함한다.
여기서, 얼굴 비율 보정 방법은, 이미지 신호를 생성하는 단계(S100) 이전에 기준 비율정보를 설정하는 단계 및 출력될 얼굴의 촬영 각도를 입력받는 단계를 더 포함할 수 있다.
일 실시예에서, 상기 얼굴의 비율을 보정하는 단계(S300)는, 먼저 얼굴의 특징점을 추출하고(S310), 특징점 사이의 거리에 따른 비율정보를 산출한다(S320).
여기서, 특징점은 얼굴의 양쪽 안구 및 양쪽 입꼬리 등을 포함할 수 있다. 여기서, 상기 특징점 사이의 거리는 안구 사이의 거리에 따른 제1 거리(A), 입꼬리 사이의 거리에 따른 제2 거리(B) 및 양쪽의 안구를 연결하는 직선(A)과 양쪽의 입꼬리를 연결하는 직선(B) 사이의 거리에 따른 제3 거리(C)일 수 있으며, 비율정보는, 제1 거리와 제 2거리 사이의 비에 따른 가로 비율(α=A/B)와 제3 거리와 제2거리 사이의 비에 따른 세로 비율(γ=C/B)일 수 있다.
다음으로, 비율정보를 기 설정된 비율정보와 비교하여 촬영각도를 산출한다 (S330). 일 실시예에서, 촬영 각도는, 비율정보를 이용하여 촬영 각도를 산출할 수 있다. 구체적으로, 가로 비율(α) 및 세로 비율(γ)을 미리 저장된 정면에서의 가로 비율(β)과 세로 비율(λ)와 비교하여 촬영 각도를 산출 할 수 있다.
다음으로, 비율정보와 촬영각도를 이용하여 얼굴의 비율을 보정한다(S340).
일 실시예에서, 얼굴의 비율을 보정하는 단계(S340)는, 상기 산출된 가로 비율(α) 및 세로 비율(γ)과 미리 저장된 가로 비율(β) 및 세로 비율(λ)의 차가 미리 설정된 오차범위 이상인 경우에만 얼굴 비율 보정을 수행하도록 할 수 있다.
일 실시예에서, 얼굴의 비율을 보정하는 단계(S340)는 영상 취득부(100)에 의해 촬영되는 촬영 각도가 하이 앵글 또는 로우 앵글로 판단되면, 가로 비율(α) 및 촬영 각도를 이용하여 수평 스케일 보정을 수행하고, 비율 세로 비율(γ)과 기 설정된 세로 비율(λ)을 이용하여 수직 스케일 보정을 할 수 있다.
이때, 수평 스케일 보정은 하기의 수학식 1에 의해 산출된 수평 스케일 상수를 수평 라인 단위로 적용하여 수행할 수 있으며, 수직 스케일 보정은 하기의 수학식 2에 의해 산출된 수직 스케일 상수를 수직 라인 단위로 적용하여 수행할 수 있다.
[수학식 1]
Figure pat00005
(여기서, Sh : 수평 스케일 상수, α : 가로 비율, L : 얼굴 길이, y : 얼굴의 세로 좌표(0~L))
[수학식 2]
Figure pat00006
(여기서, Sw : 수직 스케일 상수, λ : 기 설정된 세로 비율, γ : 세로 비율 )
여기서, 얼굴의 세로 좌표는 턱에서 머리끝 부분 지점까지의 거리일 수 있으며, 촬영 각도가 하이 앵글로 판단되면, 머리끝 부분을 세로 좌표의 기준점으로 하여 턱 방향으로 갈수록 세로 좌표값(L)이 점차 증가하도록 할 수 있다. 이에 따라 머리끝 부분에서 턱으로 갈수록 세로 좌표값(L)이 점차 증가하므로 수평 스케일 상수(Sh)는 점차 증가하게 되고, 상기 스케일 상수(Sh)를 수평 라인 단위로 적용함으로써 얼굴의 수평 비율을 보정 할 수 있다.
반대로, 촬영 각도가 로우 앵글로 판단되는 경우, 턱 부분을 세로 좌표의 기준점으로 하여 턱 부분부터 머리끝까지 수평 스케일 상수를 수평 라인 단위로 적용함으로써 얼굴의 수평 비율을 보정 할 수 있다.
이상에서 설명한 본 발명은 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니고 후술하는 특허청구범위에 의해 한정되며, 본 발명의 구성은 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 그 구성을 다양하게 변경 및 개조할 수 있다는 것을 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 쉽게 알 수 있다.
100 : 영상 취득부
200 : 얼굴 검출부
300 : 얼굴 비율 보정부
310 : 특징점 추출부
320 : 비율 정보 산출부
330 : 보정부

Claims (12)

  1. 객체의 영상을 입력받아 이미지 신호를 생성하는 영상 취득부;
    상기 생성된 이미지 신호로부터 얼굴을 검출하는 얼굴 검출부; 및
    상기 얼굴의 비율정보 및 촬영각도에 따라 상기 얼굴의 비율을 보정하는 얼굴 비율 보정부; 를 포함하는 얼굴 비율 보정 장치.
  2. 제1항에 있어서,
    상기 얼굴 비율 보정부는,
    상기 검출된 얼굴의 특징점 좌표를 추출하는 특징점 추출부;
    상기 특징점으로부터 얼굴의 비율정보를 산출하는 비율정보 산출부; 및
    상기 비율정보로부터 촬영각도를 산출하며, 상기 비율정보 및 상기 촬영각도를 이용하여 상기 얼굴의 비율을 보정하는 보정부; 를 포함하는 얼굴 비율 보정 장치.
  3. 제2항에 있어서,
    상기 특징점은, 안구 및 입꼬리 중 적어도 하나를 포함하며,
    상기 비율정보 산출부는, 상기 특징점 사이의 거리정보를 이용하여 비율정보를 산출하는 얼굴 비율 보정 장치.
  4. 제3항에 있어서, 상기 거리정보는,
    상기 안구 사이의 거리에 따른 제1 거리, 상기 입꼬리 사이의 거리에 따른 제2 거리 및 상기 안구를 연결하는 직선과 상기 입꼬리를 연결하는 직선 사이의 거리에 따른 제3 거리 중 적어도 하나를 포함하는 얼굴 비율 보정 장치.
  5. 제4항에 있어서, 상기 비율정보는,
    상기 제1 거리와 상기 제2 거리 사이의 비에 따른 가로 비율 및 상기 제3 거리와 상기 제2 거리 사이의 비에 따른 세로 비율을 포함하는 얼굴 비율 보정 장치.
  6. 제5항에 있어서,
    상기 보정부는,
    상기 가로 비율을 기 설정된 비율정보와 비교하여 촬영 각도를 판단하고, 상기 가로 비율 및 상기 촬영 각도를 이용하여 수평 스케일 보정을 수행하고, 상기 세로비율과 기 설정된 비율정보를 이용하여 수직 스케일 보정을 수행하는 얼굴 비율 보정 장치.
  7. 제6항에 있어서, 상기 보정부는,
    하기의 수학식 1에 의해 산출된 수평 스케일 상수를 적용하여 수평 스케일 보정을 수행하는 얼굴 비율 보정 장치.

    [수학식 1]
    Figure pat00007

    여기서, Sh : 수평 스케일 상수
    α : 가로 비율
    L : 얼굴 길이
    y : 얼굴의 세로 좌표(0~L)
  8. 제7항에 있어서, 상기 보정부는,
    상기 촬영 각도가 하이 앵글인 경우, 상기 얼굴의 세로 좌표의 기준점은 얼굴의 상단이고, 상기 촬영 각도가 로우 앵글인 경우, 상기 얼굴의 세로 좌표의 기준점은 얼굴의 하단인 얼굴 비율 보정 장치.
  9. 제6항에 있어서, 상기 보정부는,
    하기의 수학식 2에 의해 산출된 수직 스케일 상수를 적용하여 수직 스케일 보정을 수행하는 얼굴 비율 보정 장치.

    [수학식 2]
    Figure pat00008

    여기서, Sw : 수직 스케일 상수
    λ : 기 설정된 세로 비율
    γ : 세로 비율
  10. 객체의 영상을 입력받아 이미지 신호를 생성하는 단계;
    상기 생성된 이미지 신호로부터 얼굴을 검출하는 단계; 및
    상기 얼굴의 비율정보 및 촬영각도에 따라 상기 얼굴의 비율을 보정하는 단계를 포함하는 촬영 각도에 따른 얼굴 비율 보정 방법.
  11. 제10항에 있어서,
    상기 얼굴의 비율을 보정하는 단계는,
    상기 얼굴의 특징점을 추출하는 단계;
    상기 특징점 사이의 거리에 따른 비율정보를 산출하는 단계;
    상기 비율정보를 기 설정된 비율정보와 비교하여 촬영각도를 산출하는 단계;
    상기 비율정보와 상기 촬영각도를 이용하여 얼굴의 비율을 보정하는 단계; 를 포함하는 촬영 각도에 따른 얼굴 비율 보정 방법.
  12. 제11항에 있어서,
    상기 비율정보는 가로 비율 및 세로 비율을 포함하며,
    상기 얼굴의 비율을 보정하는 단계는,
    상기 가로 비율 및 촬영 각도를 이용한 수평 스케일 보정과 상기 세로 비율을 이용한 수직 스케일 보정을 각각 수행하는 촬영 각도에 따른 얼굴 비율 보정 방법.
KR20130113701A 2013-09-25 2013-09-25 얼굴 비율 보정 장치 및 그 방법 KR20150033877A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR20130113701A KR20150033877A (ko) 2013-09-25 2013-09-25 얼굴 비율 보정 장치 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20130113701A KR20150033877A (ko) 2013-09-25 2013-09-25 얼굴 비율 보정 장치 및 그 방법

Publications (1)

Publication Number Publication Date
KR20150033877A true KR20150033877A (ko) 2015-04-02

Family

ID=53030963

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20130113701A KR20150033877A (ko) 2013-09-25 2013-09-25 얼굴 비율 보정 장치 및 그 방법

Country Status (1)

Country Link
KR (1) KR20150033877A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018194197A1 (ko) * 2017-04-20 2018-10-25 스노우 주식회사 보정패턴 분석을 통한 영상 보정 방법 및 시스템

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018194197A1 (ko) * 2017-04-20 2018-10-25 스노우 주식회사 보정패턴 분석을 통한 영상 보정 방법 및 시스템
US11281890B2 (en) 2017-04-20 2022-03-22 Snow Corporation Method, system, and computer-readable media for image correction via facial ratio

Similar Documents

Publication Publication Date Title
US7736000B2 (en) Method and apparatus for tracking eye movement
US9560266B2 (en) Information processing apparatus and method for extracting and categorizing postures of human figures
US9288388B2 (en) Method and portable terminal for correcting gaze direction of user in image
US20170213105A1 (en) Method and apparatus for event sampling of dynamic vision sensor on image formation
US20190028646A1 (en) Depth information obtaining method and apparatus, and image acquisition device
US11107246B2 (en) Method and device for capturing target object and video monitoring device
US9007481B2 (en) Information processing device and method for recognition of target objects within an image
CN105740778B (zh) 一种改进的三维人脸活体检测方法及其装置
CN107517344A (zh) 摄像装置识别范围的调整方法及装置
US9088709B2 (en) Image processing apparatus and method for controlling the same, and image pickup apparatus
CN104732191B (zh) 利用交比不变性实现虚拟显示屏视线追踪的装置及其方法
US20100253495A1 (en) In-vehicle image processing device, image processing method and memory medium
KR101202448B1 (ko) 홍채 인식 장치 및 홍채 인식 방법
US9454226B2 (en) Apparatus and method for tracking gaze of glasses wearer
KR20100064162A (ko) 디지털 영상 처리기에서 스포츠 자세 교정 장치 및 방법
CN113012407A (zh) 一种基于机器视觉的眼屏距离提示预防近视系统
CN111488775A (zh) 注视度判断装置及方法
CN104065949B (zh) 一种电视虚拟触控方法及系统
CN115240223A (zh) 一种用户拍摄姿态矫正提示方法、装置、设备和介质
CN108108024A (zh) 动态手势获取方法及装置、显示装置
CN108549845B (zh) 一种确定表面指针位置的方法
KR20150033877A (ko) 얼굴 비율 보정 장치 및 그 방법
CN115244360A (zh) 计算方法
EP3699865A1 (en) Three-dimensional face shape derivation device, three-dimensional face shape deriving method, and non-transitory computer readable medium
JP5958082B2 (ja) 画像処理装置、画像処理方法

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid