KR101609786B1 - 얼굴 비교 이미지 제공 방법 - Google Patents

얼굴 비교 이미지 제공 방법 Download PDF

Info

Publication number
KR101609786B1
KR101609786B1 KR1020140056387A KR20140056387A KR101609786B1 KR 101609786 B1 KR101609786 B1 KR 101609786B1 KR 1020140056387 A KR1020140056387 A KR 1020140056387A KR 20140056387 A KR20140056387 A KR 20140056387A KR 101609786 B1 KR101609786 B1 KR 101609786B1
Authority
KR
South Korea
Prior art keywords
image
face
pixel
distance
pixels
Prior art date
Application number
KR1020140056387A
Other languages
English (en)
Other versions
KR20150129895A (ko
Inventor
이중
나기현
강태이
변준석
정도준
Original Assignee
대한민국
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 대한민국 filed Critical 대한민국
Priority to KR1020140056387A priority Critical patent/KR101609786B1/ko
Publication of KR20150129895A publication Critical patent/KR20150129895A/ko
Application granted granted Critical
Publication of KR101609786B1 publication Critical patent/KR101609786B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/162—Detection; Localisation; Normalisation using pixel segmentation or colour matching
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

본 발명은 입력부와, 하나 이상의 표시부와, 저장부와, 상기 입력부, 표시부, 저장부에 연결된 제어부로 이루어지며 얼굴 이미지로부터 얼굴 자세 정보와 얼굴 특징부 정보가 연산되는 얼굴 이미지 표시 시스템에서 실행되는 2개의 얼굴 이미지로부터 얼굴 비교 이미지를 제공하는 방법에 있어서; 롤값이 보정된 얼굴 이미지가 획득되는 단계(롤값 보정 단계)와, 2개의 얼굴 이미지가 정규화되는 단계(정규화 단계)와, 정규화된 2개의 얼굴 이미지로부터 얼굴 특징부에 대한 픽셀 정보가 저장되는 단계(분리 단계)와, 얼굴 특징부 픽셀 정보를 가지는 픽셀이 비교 이미지에 표시되는 단계(표시 단계)로 이루어지는 얼굴 비교 이미지 제공 방법에 관한 것이다.

Description

얼굴 비교 이미지 제공 방법{A Method Providing Comparing Image Of Human Face}
본 발명은 얼굴 비교 이미지 제공 방법에 관한 것으로, 더욱 상세하게는 비교되는 2개의 얼굴 이미지가 보다 정밀하게 비교되도록 하는 얼굴 비교 이미지 제공 방법에 관한 것이다.
얼굴 방향이나 얼굴 자세를 추정하는 기술은 다양한 분야에서 응용이 가능하다. 여기서,「얼굴 방향」은 도 1에 도시된 바와 같이 요우(Yaw), 피치(Pitch), 롤(Roll)의 3방향을 나타내는 정보로 표시된다. 「얼굴 자세」는 적어도 얼굴 방향을 나타낸다. 「얼굴 자세」는 얼굴 방향에 더하여 3차원 공간에서의 위치 개념을 포함하는 경우도 있다. 따라서, 「얼굴 자세」는, 요우, 피치, 롤, x 좌표, y 좌표, z 좌표의 최대 6차원의 정보로 표시된다. 얼굴 방향이나 얼굴 자세를 추정하는 기술은, 특히 차량 운전자의 안전운전 지원의 분야에서 유용하다. 컴퓨터 비전에 의한 얼굴 방향 추정이나 얼굴 자세 추정에 이용되는 대표적인 방법으로서, 3차원 얼굴 형상 모델 베이스(이하 「3D 모델 베이스」라고 함)의 방법과, 어피어런스 베이스의 방법과, 얼굴 특징 베이스의 방법이 알려져 있다(예를 들어, 사토 요이치 : "컴퓨터 비전에 의한 얼굴의 트래킹", 영상 정보 미디어 학회지Vol.60, No.4, pp.516-519(2006)).
이하, 각 방식에 관해 설명한다. 얼굴 자세를 추정하기 위해, 3D 모델 베이스의 방법을 적용하는 경우에 관해 설명한다. 여기서는, 시계열 필터의 하나인 파티클 필터를 이용한 방법을 예로 든다. 파티클 필터는 베이지언 필터(bayesian filter)의 근사 계산법이며, 유한한 파티클에 의해 확률 밀도 함수를 표현하는 것이다. 파티클 필터에서는, 상태량과 우도(尤度)를 갖는 가설을 다수 이용함으로써 트래킹 대상을 이산적인 확률 밀도 함수로서 표현하고, 이 확률 밀도 함수를 상태 천이 모델에 의해 전파시키고 있다. 얼굴 자세에 관한 「상태」는 얼굴 위치나 얼굴 방향 등의 얼굴 자세 정보에 관한 상태를 의미한다. 얼굴 자세의 추정 과정에서는 얼굴 자세의 상태에 관한 가설을 다수 생성하고 그 각 가설에 관해 입력된 얼굴 화상과의 유사도를 산출하고, 이 유사도에 기초하여 가설의 집합을 갱신한다. 그리고 유사도가 가장 높은 가설의 상태량에 대응하는 얼굴 자세를 추정 결과로서 출력한다.
어피어런스 베이스의 방법에서는, 여러 방향을 향한 얼굴 이미지를 미리 준비해 두고, 새롭게 얼굴 이미지가 입력되었을 때 그것이 어떤 얼굴 이미지와 가장 유사한지를 추정하고 있다. 이미지 간의 유사도의 산출에는, 대응하는 화소간의 화소값의 차의 제곱합이 자주 이용된다. 얼굴 특징 베이스의 방법에서는, 입력 이미지 중에서의 눈이나 입 등의 상대적인 위치 관계에 기초하여 얼굴 특징을 구하여 얼굴 방향을 추정한다. 얼굴 특징 베이스의 방법으로서, 예를 들어, 일본 특허 공개 2005-196567호 공보(이하 「문헌 1」이라고 함) 및 일본 특허 공개 평 11-281661호 공보(이하 「문헌 2」라고 함)에서는, 운전자의 얼굴을 촬영한 화상을 분석하여 얼굴 방향을 추정하고 있다.
대한민국 특허 제1169533호 등록특허공보에는 얼굴 특징점(얼굴 기관)의 위치를 추정하고, 얼굴 자세를 추정하는 기술이 공지되어 있다. 도 2는 얼굴 특징부가 표시된 얼굴 이미지를 도시한 것으로, 얼굴 기관인 눈, 코, 입 부분이 얼굴 특징부로 표시되고, 특징부를 이루는 픽셀 정보와 픽셀 좌표는 저장부에 저장된다(대한민국 특허 제1169533호 등록특허공보 도 3 참조)
종래에는 2개의 얼굴 이미지를 비교할 때, 2개의 얼굴 이미지를 번갈아 보면서 유사성이 있는지 동일인지 여부를 판단하였으므로 판단이 부정확하게 이루어질 수 있으며, 판단에 소요되는 시간이 길어지고 인력 에너지 낭비가 커지는 문제점이 있었다.
대한민국 특허 제1169533호 등록특허공보
본 발명은 상기와 같은 문제점을 해결하기 위하여 제안된 것으로, 얼굴 이미지로부터 얼굴 특징부가 분리되고 비교 이미지가 마련되어 얼굴 동일성이 용이하게 판단될 수 있으며, 얼굴 특징이 2개의 이미지에서 직접 비교되도록 하는 얼굴 이미지 비교 방법을 제공하는 것을 목적으로 한다.
상기와 같은 목적을 위하여, 본 발명은 입력부와, 하나 이상의 표시부와, 저장부와, 상기 입력부, 표시부, 저장부에 연결된 제어부로 이루어지며 얼굴 이미지로부터 얼굴 자세 정보와 얼굴 특징부 정보가 연산되는 얼굴 이미지 표시 시스템에서 실행되는 2개의 얼굴 이미지로부터 얼굴 비교 이미지를 제공하는 방법으로서; 롤값이 보정된 얼굴 이미지가 획득되는 단계(롤값 보정 단계)와, 2개의 얼굴 이미지가 정규화되는 단계(정규화 단계)와, 정규화된 2개의 얼굴 이미지로부터 얼굴 특징부에 대한 픽셀 정보가 저장되는 단계(분리 단계)와, 얼굴 특징부 픽셀 정보를 가지는 픽셀이 비교 이미지에 표시되는 단계(표시 단계)로 이루어지는 얼굴 비교 이미지 제공 방법을 제공한다.
상기에서, 롤값 보정 단계는 비교되는 사진 이미지 중 제1 이미지를 이루는 픽셀이 정면 이미지를 이루는 각도로 회전 이동되는 단계(제1 회전 단계)와, 제2 이미지를 이루는 픽셀이 정면 이미지를 이루는 각도로 회전 이동되는 단계(제2 회전 단계)로 이루어지는 것을 특징으로 한다.
상기에서, 정규화 단계는 롤값이 보정된 제1 이미지의 얼굴 특징부로부터 제1 거리가 연산되는 단계(제1 거리 연산 단계)와, 제2 이미지의 얼굴 특징부로부터 제2 거리가 연산되는 단계(제2 거리 연산 단계)와, 제1 거리와 제2 거리로부터 거리비가 연산되는 단계(거리비 연산 단계)와, 픽셀들 사이에 거리비 개수의 픽셀이 생성되고 생성된 픽셀의 색상이 연산되는 단계(픽셀 생성 단계)로 이루어지는 것을 특징으로 한다.
상기에서, 픽셀 생성 단계는 제1 이미지 또는 제2 이미지를 이루는 픽셀들 중 기준 픽셀이 결정되는 단계(기준 픽셀 결정 단계)와, 거리비와 기준 픽셀로부터 나머지 픽셀 들 사이의 좌표 상대값으로부터 연산되어 나머지 픽셀이 확장되는 단계(픽셀 확장 단계)와, 픽셀과 픽셀 사이에 거리비 개수의 픽셀이 생성되고 이웃하는 픽셀의 색상값의 평균값이 색상값으로 설정되어 표시되는 단계(픽셀 표시 단계)로 이루어지는 것을 특징으로 한다.
상기에서, 정규화 단계는 롤값이 보정된 제1 이미지의 얼굴 특징부로부터 제1 거리가 연산되는 단계(제1 거리 연산 단계)와, 제2 이미지의 얼굴 특징부로부터 제2 거리가 연산되는 단계(제2 거리 연산 단계)와, 제1 거리와 제2 거리의 최소 공배수, 최소 공배수와 제1 거리의 비(제1 거리비), 최소 공배수와 제2 거리의 비(제2 거리비)가 연산되는 단계(거리 최소 공배수 비 연산 단계)와, 제2 이미지를 이루는 픽셀들 사이에 제1 거리비 개수의 픽셀이 생성되고 생성된 픽셀의 색상이 연산되며 제1 이미지를 이루는 픽셀들 사이에 제2 거리비 개수의 픽셀이 생성되고 색상이 연산되는 단계(픽셀 생성 단계)로 이루어지는 것을 특징으로 한다.
상기에서, 픽셀 생성 단계는 제1 이미지와 제2 이미지를 이루는 픽셀들 중 기준 픽셀이 결정되는 단계(기준 픽셀 결정 단계)와, 거리 최소 공배수 비와 기준 픽셀로부터 나머지 픽셀 들 사이의 좌표 상대값으로부터 연산되어 나머지 픽셀이 확장되는 단계(픽셀 확장 단계)와, 픽셀과 픽셀 사이에 거리 최소 공배수 비의 개수의 픽셀이 생성되고 이웃하는 픽셀의 색상값의 평균값이 색상값으로 설정되어 표시되는 단계(픽셀 표시 단계)로 이루어지는 것을 특징으로 한다.
상기에서, 표시 단계는 비교 이미지에서 얼굴 특징부가 표시될 위치와 크기가 설정되는 단계(위치 설정 단계)와, 얼굴 특징부에 위치하는 픽셀들에 대한 정보가 비교이미지의 위치에 표시되는 단계(표시되는 단계)로 이루어지는 것을 특징으로 한다.
상기에서, 상기 입력부를 통하여 제1 이미지 또는 제2 이미지의 하나 이상의 픽셀에 점이나 선이 표시되도록 입력되면, 제2 이미지 또는 제1 이미지에 같은 좌표를 가지는 픽셀에 점이나 선이 표시되어 표시부에 디스플레이되는 것을 특징으로 한다.
본 발명에 따르는 얼굴 이미지 비교 방법에 의하면, 비교되는 이미지의 얼굴 특징부가 비교 이미지에 포함되어 하나의 얼굴과 같이 디스플레이되므로 직접 관찰하여 비교하는 것이 가능하고, 동일성에 판단에 중요한 부분인 얼굴 특징부만 직접 비교되므로 판단의 정확성 향상될 수 있으며, 얼굴의 특징이 되는 부분의 2개의 얼굴 이미지에서 실시간으로 표시되므로 판단의 객관성이 향상될 수 있게 된다.
도 1은 얼굴 각도를 설명하기 위하여 도시한 것이며,
도 2는 종래 기술에 의하여 얼굴 이미지에 얼굴 기관의 위치인 얼굴 특징점이 표시된 이미지를 도시한 것이며,
도 3은 본 발명에 따르는 얼굴 비교 이미지 제공 방법을 이루는 개략적인 순서도이며,
도 4는 본 발명 얼굴 비교 이미지 제공 방법을 이루는 정규화 단계를 설명하기 위하여 도시한 순서도이며,
도 5는 본 발명 얼굴 비교 이미지 제공 방법을 이루는 분리 단계를 설명하기 위하여 도시한 순서도이며,
도 6은 본 발명 얼굴 비교 이미지 제공 방법을 이루는 표시 단계를 설명하기 위하여 도시한 순서도이며,
도 7은 본 발명 얼굴 비교 이미지 제공 방법에 따라 제공되는 비교 이미지의 생성을 설명하기 위하여 도시한 것이다.
이하에서 도면을 참조하여 본 발명에 따르는 얼굴 비교 이미지 제공 방법에 대하여 상세하게 설명한다.
도 3은 본 발명에 따르는 얼굴 비교 이미지 제공 방법을 이루는 개략적인 순서도이며, 도 4는 본 발명 얼굴 비교 이미지 제공 방법을 이루는 정규화 단계를 설명하기 위하여 도시한 순서도이며, 도 5는 본 발명 얼굴 비교 이미지 제공 방법을 이루는 분리 단계를 설명하기 위하여 도시한 순서도이며, 도 6은 본 발명 얼굴 비교 이미지 제공 방법을 이루는 표시 단계를 설명하기 위하여 도시한 순서도이며, 도 7은 본 발명 얼굴 비교 이미지 제공 방법에 따라 제공되는 비교 이미지의 생성을 설명하기 위하여 도시한 것이다.
본 발명 얼굴 이미지 제공 방법은 입력부와, 하나 이상의 표시부와, 저장부와, 상기 입력부, 표시부, 저장부에 연결된 제어부(마이컴)로 이루어지며, 종래 기술의 얼굴 정보가 연산되는 프로그램이 실행되는 얼굴 이미지 표시 시스템에서 실행된다. 얼굴 이미지 표시 시스템의 예로 노트북이나 PC를 들 수 있다.
동일인 여부를 확인하기 위하여 비교되는 이미지는 저장부에 저장되며, 입력부를 통한 사용자의 명령에 의하여 제어부에 의하여 표시부에서 디스플레이된다. 비교되는 이미지는 2개의 이미지로서 이하에서 제1 이미지와 제2 이미지로 기재한다. 제1 이미지와 제2 이미지는 복수의 픽셀로 이루어지며, 얼굴 특징부를 이루는 픽셀의 정보(좌표와 RGB값)와 얼굴 자세(피치, 요, 롤)는 저장부에 저장된다(ST-110, 얼굴 정보 획득 단계).
본 발명에 따르는 얼굴 비교 이미지 제공 방법은 롤값이 보정된 얼굴 이미지가 획득되는 단계(ST-120, 롤값 보정 단계)와, 2개의 얼굴 이미지가 정규화되는 단계(ST-130, 정규화 단계)와, 정규화된 2개의 얼굴 이미지로부터 얼굴 특징부에 대한 픽셀 정보가 저장되는 단계(ST-140, 분리 단계)와, 얼굴 특징부 픽셀 정보를 가지는 픽셀이 비교 이미지에 표시되는 단계(ST-150, 표시 단계)로 이루어진다.
상기에서 비교 이미지에는 얼굴 특징부가 디스플레이될 픽셀 좌표(위치)가 설정되어 저장된다. 왼쪽 눈 특징부의 위치, 오른쪽 눈 특징부의 위치, 왼쪽 코 특징부의 위치, 오른쪽 코 특징부의 위치, 왼쪽 입 특징부의 위치, 오른쪽 입 특징부의 위치가 미리 설정되어(ST-151) 비교이미지 값으로 저장될 수 있다.
얼굴 특징부의 픽셀 정보로부터 각 얼굴 특징부의 중심 위치(좌표)가 연산된다. 그리고 분리될 얼굴 특징부의 크기가 사용자에 의하여 입력부를 통하여 입력되어 저장부에 저장된다. 중심 좌표(Xc1, Yc1)와 크기(Lx, Ly)로부터 분리되어 저장될 얼굴 특징부의 범위가 설정된다(ST-141).
각 얼굴 특징부를 이루는 픽셀의 최대값과 최소값의 합을 2로 나눈값이 각 얼굴 특징부의 중심 좌표로 저장된다. 코 특징부와 입 특징부는 좌우 대칭이라 하면 그 특징부의 좌측 부분 또는 우측 부분의 픽셀 정보가 비교이미지의 픽셀 정보로 되어 디스플레이될 것이므로 코 특징부와 입 특징부의 중심 좌표 중 가로 좌표(Xc1)는 그 특징부를 이루는 픽셀의 좌표 중 제1 이미지에 대해서는 (최대 X 좌표값-최소 X좌표값)/4로 연산되고, 제2 이미지에 대해서는 3×(최대 X 좌표값-최소 X 좌표값)/4으로 연산된다(ST-145).
이미지를 이루는 픽셀의 좌표(Xi, Yi)에서 Xi가 Xc1-Lx보다 크고 Xc1+Lx보다 작으며, Yi가 Yc1-Ly보다 크고 Yc1+Ly보다 작은 픽셀의 정보는 분리될 얼굴 특징부로 되어 픽셀들의 RGB값, 픽셀 좌표, 중심 좌표가 함께 저장부에 저장된다(ST-143). 중심 좌표는 분리될 픽셀들의 중심 위치이며, 각 픽셀들의 좌표(위치)는 중심 위치로부터 연산된 상대 좌표(위치)로 저장부에 저장된다.
상기와 같이 중심 좌표를 가지는 얼굴 특징부는 비교이미지에 그 중심 좌표와 분리될 특징부 범위에 속하는 픽셀은 분리될 각 픽셀의 색상을 가지게 되어(ST-153) 도 7에서와 같이 비교이미지가 마련된다(ST-150).
본 발명에 따르는 얼굴 비교 이미지 제공 방법에서 제1 이미지 또는 제2 이미지의 롤값은 보정된다(ST-120). 예를 들면 제1 이미지의 롤값이 15°이고, 제2 이미지의 롤값이 10°라 하면, 제1 이미지의 롤값이 0°가 되도록 보정되어 롤값이 보정된 제1 이미지가 저장부에 저장되고, 제2 이미지의 롤값도 0°가 되도록 보정되어 롤값이 보정된 제2 이미지가 저장부에 저장된다.
롤값 보정은 롤값이 "0"이 되도록 변환되는 단계로 이루어진다.
아래 프로그램 코드는 롤값 변환 단계의 모듈의 예를 나타낸 것이다.
int point1.x, point1.y;
double cosX, sinX;
// rotation(롤값 변환 단계)
cosX = Cos(ROLL_DEGREE_1 * -1) // 역변환이므로 -1을 곱하여 연산함
sinX = Sin(ROLL_DEGREE_1 * -1)
point1.X = (point1.X - center1.X) * cosX - (point1.X - center1.Y) * sinX + center1.X
point1.Y = (point1.X - center1.X) * sinX - (point1.X - center1.Y) * cosX + center1.X
위 프로그램 코드에서 ROLL_DEGREE_1은 제1 이미지의 롤값(롤 각도)을 의미하며, center1은 제1 이미지의 중심점을 나타낸다. 상기와 같은 과정을 제2 이미지의 롤값과 중심점값으로 제2 이미지에도 연산하여 제1 이미지와 제2 이미지는 같은 롤값 0°을 가지는 이미지가 된다.
상기 정규화 단계(ST-130) 제1 이미지를 이루는 픽셀의 개수와 제2 이미지를 이루는 픽셀의 개수가 같게 되도록 하는 과정이다.
상기 정규화 단계(ST-130)는 롤값이 보정된 제1 이미지의 얼굴 특징부로부터 제1 거리가 연산되는 단계(제1 거리 연산 단계, ST-131)와, 제2 이미지의 얼굴 특징부로부터 제2 거리가 연산되는 단계(제2 거리 연산 단계, ST-133)와, 제1 거리와 제2 거리로부터 거리비가 연산되는 단계(거리비 연산 단계, ST-135)와, 픽셀들 사이에 거리비 개수의 픽셀이 생성되고 생성된 픽셀의 색상이 연산되는 단계(픽셀 생성 단계)로 이루어진다.
도 2는 얼굴 특징부로서 눈, 코, 입 부분이 연산되어 표시된 것으로, 제1 이미지의 얼굴 특징부인 눈을 나타내는 픽셀 사이의 거리, 코를 나타내는 픽셀 사이의 거리, 입을 나타내는 픽셀 사이의 거리가 제1 거리로 저장부에 저장될 수 있다. 그리고 제2 이미지의 얼굴 특징부인 눈을 나타내는 픽셀 사이의 거리, 코를 나타내는 픽셀 사이의 거리, 입을 나타내는 픽셀 사이의 거리가 제2 거리로 저장부에 저장될 수 있다. 저장부에 저장된 제1 거리와 제2 거리로부터 거리비(Dr)가 연산되어 저장부에 저장된다. 거리비(Dr)는 제1 거리와 제2 거리 중 큰 값을 작은 값으로 1보다 큰 정수값이 된다.
거리비(Dr)가 연산되면 얼굴 특징부의 거리가 짧은 이미지를 이루는 픽셀의 좌표 위치가 연산되고, 픽셀과 픽셀 사이에 새로운 픽셀이 생성되어 정규환 된 이미지가 생성된다. 정규화될 이미지의 중심 픽셀이 연산된다. 중심 픽셀은 이미지를 이루는 픽셀의 가로 세로 중심에 위치한 픽셀이 될 수도 있고, 이미지를 이루는 네 모퉁이 픽셀 들 중 어느 한 픽셀이 될 수도 있다.
네 모퉁이 중 좌측 하단의 픽셀의 중심 픽셀로 된다고 가정하여 설명한다. 중심 픽셀의 픽셀 좌표(Xc, Yc)에 대하여, 이미지를 이루는 임의의 픽셀의 좌표(Xi, Yi)의 차(Xi-Xc, Yi-Yc)가 연산되어 저장되고, 픽셀 좌표 차(Xi-Xc, Yi-Yc)에 거리비가 곱해지는 연산(Dr×(Xi-Xc), Dr×(Yi-Yc))이 실행되고 연산 결과는 저장부에 저장된다. 임의의 픽셀의 새로운 위치는 Xi+Dr×(Xi-Xc), Yi+Dr×(Yi-Yc)로 된다. 정규화될 이미지를 이루는 픽셀의 위치가 위와 같이 연산되어 새로운 위치에서 이미지를 이루어 디스플레이된다. 그리고 중심 픽셀과 새로운 좌표를 가지도록 연산된 픽셀 사이에 위치하는 픽셀은 그 픽셀을 둘러싸는 픽셀들의 RGB값의 평균값이 연산되어 그 픽셀의 RGB값이 된다. 위와 같은 과정의 연산되어 이미지를 이루는 기존 픽셀들의 위치가 새로운 위치로 되고, 픽셀 사이에 새로운 픽셀이 생성되어 이미지가 정규화된다.
상기와 같은 과정을 거쳐 제1 이미지와 제2 이미지는 같은 크기의 이미지로 된다.
상기 정규화 단계는 롤값이 보정된 제1 이미지의 얼굴 특징부로부터 제1 거리가 연산되는 단계(제1 거리 연산 단계)와, 제2 이미지의 얼굴 특징부로부터 제2 거리가 연산되는 단계(제2 거리 연산 단계)와, 제1 거리와 제2 거리의 최소 공배수, 최소 공배수와 제1 거리의 비(제1 거리비), 최소 공배수와 제2 거리의 비(제2 거리비)가 연산되는 단계(거리 최소 공배수 비 연산 단계)와, 제2 이미지를 이루는 픽셀들 사이에 제1 거리비 개수의 픽셀이 생성되고 생성된 픽셀의 색상이 연산되며 제1 이미지를 이루는 픽셀들 사이에 제2 거리비 개수의 픽셀이 생성되고 색상이 연산되는 단계(픽셀 생성 단계)로 이루어질 수 있다.
픽셀의 위치가 변환되고 새로운 픽셀이 생성되는 과정은 위와 같으므로 이에 대한 상세한 설명은 생략한다. 상기와 같이 연산되고 새로운 픽셀에 그 픽셀을 둘러싸는 픽셀들의 RGB 평균값이 그 픽셀의 RGB값으로 됨으로써 정규화된 제1 이미지와 제2 이미지가 마련된다.
제1 이미지와 제2 이미지가 정규화되면 같은 픽셀 크기를 가지는 2개의 얼굴 이미지가 마련된다.
정규화된 2개의 이미지에서 얼굴 특징부 부분의 픽셀 RGB값이 비교이미지의 얼굴 특징부 RGB값이 되어 도 7과 같은 비교이미지가 디스플레이된다. 따라서 사용자는 2개의 얼굴 이미지를 번갈아 볼 필요없이 얼굴 동일성 여부 판단에 중요한 요소가 되는 얼굴 특징부를 직접 대비하여 동일성 여부를 용이하게 판단할 수 있게 된다.
정규화된 2개의 제1 이미지나 제2 이미지 중 어느 한 이미지의 일부 픽셀을 지정하여 입력부를 통하여 색상이 변경되면, 나머지 이미지의 같은 픽셀도 색상이 변경되도록 하는 것이 가능하다. 상기와 같이 입력부를 통하여 양 이미지의 동일한 부분의 픽셀 색상이 변경됨으로써 얼굴의 특징이 되는 예를 들면 점의 위치가 동일한 위치에 있는지 여부를 직접 확인할 수 있게 된다.
ST-110: 얼굴 정보 획득 단계 ST-120: 롤값 보정 단계
ST-130: 정규화 단계 ST-140: 분리 단계
ST-150: 표시 단계

Claims (8)

  1. 입력부와, 하나 이상의 표시부와, 저장부와, 상기 입력부, 표시부, 저장부에 연결된 제어부로 이루어지며 얼굴 이미지로부터 얼굴 자세 정보와 얼굴 특징부 정보가 연산되는 얼굴 이미지 표시 시스템에서 실행되는 2개의 얼굴 이미지로부터 얼굴 비교 이미지를 제공하는 방법에 있어서; 롤값이 보정된 얼굴 이미지가 획득되는 단계(롤값 보정 단계)와, 2개의 얼굴 이미지가 정규화되는 단계(정규화 단계)와, 정규화된 2개의 얼굴 이미지로부터 얼굴 특징부에 대한 픽셀 정보가 저장되는 단계(분리 단계)와, 얼굴 특징부 픽셀 정보를 가지는 픽셀이 비교 이미지에 표시되는 단계(표시 단계)로 이루어지며; 상기 롤값 보정 단계는 비교되는 사진 이미지 중 제1 이미지를 이루는 픽셀이 정면 이미지를 이루는 각도로 회전 이동되는 단계(제1 회전 단계)와, 제2 이미지를 이루는 픽셀이 정면 이미지를 이루는 각도로 회전 이동되는 단계(제2 회전 단계)로 이루어지며; 상기 정규화 단계는 롤값이 보정된 제1 이미지의 얼굴 특징부로부터 제1 거리가 연산되는 단계(제1 거리 연산 단계)와, 제2 이미지의 얼굴 특징부로부터 제2 거리가 연산되는 단계(제2 거리 연산 단계)와, 제1 거리와 제2 거리의 최소 공배수, 최소 공배수와 제1 거리의 비(제1 거리비), 최소 공배수와 제2 거리의 비(제2 거리비)가 연산되는 단계(거리 최소 공배수 비 연산 단계)와, 제2 이미지를 이루는 픽셀들 사이에 제1 거리비 개수의 픽셀이 생성되고 생성된 픽셀의 색상이 연산되며 제1 이미지를 이루는 픽셀들 사이에 제2 거리비 개수의 픽셀이 생성되고 색상이 연산되는 단계(픽셀 생성 단계)로 이루어지는 것을 특징으로 하는 얼굴 비교 이미지 제공 방법.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 제1 항에 있어서, 상기 픽셀 생성 단계는 제1 이미지와 제2 이미지를 이루는 픽셀들 중 기준 픽셀이 결정되는 단계(기준 픽셀 결정 단계)와, 거리 최소 공배수 비와 기준 픽셀로부터 나머지 픽셀 들 사이의 좌표 상대값으로부터 연산되어 나머지 픽셀이 확장되는 단계(픽셀 확장 단계)와, 픽셀과 픽셀 사이에 거리 최소 공배수 비의 개수의 픽셀이 생성되고 이웃하는 픽셀의 색상값의 평균값이 색상값으로 설정되어 표시되는 단계(픽셀 표시 단계)로 이루어지는 것을 특징으로 하는 얼굴 비교 이미지 제공 방법.
  7. 제1 항에 있어서, 상기 표시 단계는 비교 이미지에서 얼굴 특징부가 표시될 위치와 크기가 설정되는 단계(위치 설정 단계)와, 얼굴 특징부에 위치하는 픽셀들에 대한 정보가 비교이미지의 위치에 표시되는 단계(표시되는 단계)로 이루어지는 것을 특징으로 하는 얼굴 비교 이미지 제공 방법.
  8. 제1 항에 있어서, 상기 입력부를 통하여 제1 이미지 또는 제2 이미지의 하나 이상의 픽셀에 점이나 선이 표시되도록 입력되면, 제2 이미지 또는 제1 이미지에 같은 좌표를 가지는 픽셀에 점이나 선이 표시되어 표시부에 디스플레이되는 것을 특징으로 하는 얼굴 비교 이미지 제공 방법.
KR1020140056387A 2014-05-12 2014-05-12 얼굴 비교 이미지 제공 방법 KR101609786B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140056387A KR101609786B1 (ko) 2014-05-12 2014-05-12 얼굴 비교 이미지 제공 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140056387A KR101609786B1 (ko) 2014-05-12 2014-05-12 얼굴 비교 이미지 제공 방법

Publications (2)

Publication Number Publication Date
KR20150129895A KR20150129895A (ko) 2015-11-23
KR101609786B1 true KR101609786B1 (ko) 2016-04-11

Family

ID=54844458

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140056387A KR101609786B1 (ko) 2014-05-12 2014-05-12 얼굴 비교 이미지 제공 방법

Country Status (1)

Country Link
KR (1) KR101609786B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102042334B1 (ko) * 2018-02-05 2019-11-07 주식회사 유어핏 얼굴 분석 장치 및 방법

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003248815A (ja) * 2002-02-26 2003-09-05 Casio Comput Co Ltd 顔画像の正規化方法及び装置、顔画像における目の位置の検出方法及び装置、並びにプログラム
JP2010122993A (ja) * 2008-11-20 2010-06-03 Panasonic Electric Works Co Ltd 顔認証システム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003248815A (ja) * 2002-02-26 2003-09-05 Casio Comput Co Ltd 顔画像の正規化方法及び装置、顔画像における目の位置の検出方法及び装置、並びにプログラム
JP2010122993A (ja) * 2008-11-20 2010-06-03 Panasonic Electric Works Co Ltd 顔認証システム

Also Published As

Publication number Publication date
KR20150129895A (ko) 2015-11-23

Similar Documents

Publication Publication Date Title
US10269092B2 (en) Image processing device, image processing method, and storage medium
US8630506B2 (en) Image correcting device, method for creating corrected image, correction table creating device, method for creating correction table, program for creating correction table, and program for creating corrected image
CN111750820B (zh) 影像定位方法及其系统
JP4966431B2 (ja) 画像処理装置
CN106447602B (zh) 一种图像拼接方法及装置
CN110363817B (zh) 目标位姿估计方法、电子设备和介质
US11216979B2 (en) Dual model for fisheye lens distortion and an algorithm for calibrating model parameters
CN102289803A (zh) 图像处理设备、图像处理方法及程序
CN109472820B (zh) 单目rgb-d相机实时人脸重建方法及装置
US11887336B2 (en) Method for estimating a relative position of an object in the surroundings of a vehicle and electronic control unit for a vehicle and vehicle
EP3300025B1 (en) Image processing device and image processing method
US8724922B2 (en) Image correcting device, method for creating corrected image, correction table creating device, method for creating correction table, program for creating correction table, and program for creating corrected image
US20200021727A1 (en) Camera parameter estimation device, method, and program
EP3185212B1 (en) Dynamic particle filter parameterization
CN107209930B (zh) 环视图像稳定方法和装置
JP4649559B2 (ja) ３次元物体認識装置、並びに３次元物体認識プログラム及びこれが記録されたコンピュータ読み取り可能な記録媒体
JP2017034400A (ja) 走行状況表示プログラム、走行状況表示装置、及び走行状況表示方法
WO2016146559A1 (en) Method for determining a position of an object in a three-dimensional world coordinate system, computer program product, camera system and motor vehicle
KR101609786B1 (ko) 얼굴 비교 이미지 제공 방법
Chew et al. Panorama stitching using overlap area weighted image plane projection and dynamic programming for visual localization
EP3193305A1 (en) Method and device for displaying a front-view of a vehicle's surrounding and respective vehicle
CN113313751A (zh) 图像数据目标检测倾斜框自动标注方法及系统
JP2004362128A (ja) モデル画像照合における３次元姿勢の補正手法
JP2021140262A (ja) カメラキャリブレーション装置、カメラキャリブレーション方法、およびプログラム
US20130343636A1 (en) Image processing apparatus, control method of the same and non-transitory computer-readable storage medium

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right