KR102384983B1 - 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치 및 그 동작 방법 - Google Patents

연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치 및 그 동작 방법 Download PDF

Info

Publication number
KR102384983B1
KR102384983B1 KR1020200125955A KR20200125955A KR102384983B1 KR 102384983 B1 KR102384983 B1 KR 102384983B1 KR 1020200125955 A KR1020200125955 A KR 1020200125955A KR 20200125955 A KR20200125955 A KR 20200125955A KR 102384983 B1 KR102384983 B1 KR 102384983B1
Authority
KR
South Korea
Prior art keywords
face image
user
image
face
pixels
Prior art date
Application number
KR1020200125955A
Other languages
English (en)
Other versions
KR20220043960A (ko
Inventor
김상철
Original Assignee
김상철
주식회사 한컴위드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 김상철, 주식회사 한컴위드 filed Critical 김상철
Priority to KR1020200125955A priority Critical patent/KR102384983B1/ko
Publication of KR20220043960A publication Critical patent/KR20220043960A/ko
Application granted granted Critical
Publication of KR102384983B1 publication Critical patent/KR102384983B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G06T7/0014—Biomedical image inspection using an image reference approach
    • G06T7/0016—Biomedical image inspection using an image reference approach involving temporal comparison
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Quality & Reliability (AREA)
  • Multimedia (AREA)
  • Image Processing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치 및 그 동작 방법이 개시된다. 본 발명은 사용자로부터 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성 명령이 인가되면, 사전 지정된 연예인의 얼굴 이미지와 전자 단말 장치에 탑재되어 있는 카메라를 통해 촬영된 사용자의 얼굴 이미지 간의 유사도를 연산하고, 연산된 유사도가 사전 설정된 기준치를 초과하는 경우, 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 각각에서 화소들을 추출하여, 추출된 화소들을 기초로 합성 이미지를 생성한 후, 생성된 합성 이미지를 화면 상에 표시하는 전자 단말 장치 및 그 동작 방법을 제시함으로써, 사용자가 보다 손쉽게 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성을 수행할 수 있도록 지원한다.

Description

연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치 및 그 동작 방법{ELECTRONIC TERMINAL DEVICE WHICH IS ABLE TO CREATE A COMPOSITE IMAGE WITH THE FACE IMAGE OF A CELEBRITY AND THE FACE IMAGE OF A USER AND THE OPERATING METHOD THEREOF}
본 발명은 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치 및 그 동작 방법에 대한 것이다.
최근, 카메라가 탑재된 전자 단말 장치가 널리 보급됨에 따라, 이러한 카메라를 활용하여 다양한 서비스를 제공하기 위한 애플리케이션들이 출시되고 있다.
다양한 애플리케이션들 중에서도, 카메라를 통해 촬영된 이미지를 활용하여 이미지 합성을 수행한 후, 합성된 이미지를 사용자에게 제공하는 이미지 합성 애플리케이션은 사용자가 손쉽게 두 이미지를 합성할 수 있도록 지원한다는 점에서, 이미지 합성 애플리케이션을 사용하는 사용자가 점점 증가하고 있다.
하지만, 이러한 기존의 이미지 합성 기술은 사용자가 하나의 이미지 상에서 잘라낼 일정 영역을 지정하면, 지정된 영역을 잘라내어 다른 이미지에 붙여넣는 방식으로 이미지 합성을 수행하기 때문에, 사용자가 하나의 이미지 상에서 잘라낼 부분의 영역을 정교하게 지정하지 못하는 경우, 생성되는 합성 이미지의 품질이 떨어지는 문제가 발생할 수 있다.
특히, 기존의 이미지 합성 기술을 통해 사용자가 연예인의 얼굴 이미지와 사용자의 얼굴 이미지를 합성하는 경우, 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 유사도가 상대적으로 낮아, 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 각각에 포함된 눈, 코, 입의 형태와 위치가 매우 다르다면, 사용자가 합성의 대상이 되는 부분의 영역을 정교하게 지정하기 어렵고, 따라서 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 합성 이미지의 품질도 떨어지는 문제가 발생하게 된다.
따라서, 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 유사도에 따라 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성을 수행함으로써, 사용자가 보다 손쉽게 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간 이미지 합성을 수행할 수 있도록 지원하는 기술에 대한 연구가 필요하다.
본 발명은 사용자로부터 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성 명령이 인가되면, 사전 지정된 연예인의 얼굴 이미지와 전자 단말 장치에 탑재되어 있는 카메라를 통해 촬영된 사용자의 얼굴 이미지 간의 유사도를 연산하고, 연산된 유사도가 사전 설정된 기준치를 초과하는 경우, 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 각각에서 화소들을 추출하여, 추출된 화소들을 기초로 합성 이미지를 생성한 후, 생성된 합성 이미지를 화면 상에 표시하는 전자 단말 장치 및 그 동작 방법을 제시함으로써, 사용자가 보다 손쉽게 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성을 수행할 수 있도록 지원하고자 한다.
본 발명의 일실시예에 따른 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치는 사전 지정된 연예인의 얼굴 이미지 - 상기 연예인의 얼굴 이미지는 세로 n(n은 2 이상의 자연수임) 개, 가로 k(k는 2 이상의 자연수임) 개의 n x k개의 화소들로 구성되어 있음 - 가 저장되어 있는 얼굴 이미지 저장부, 사용자로부터 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 이미지 합성 명령이 인가되면, 상기 전자 단말 장치에 탑재되어 있는 카메라를 통해 상기 사용자의 얼굴을 촬영할 수 있도록 상기 카메라를 활성화시키는 카메라 활성화부, 상기 카메라가 활성화된 이후, 상기 사용자로부터 상기 사용자의 얼굴 이미지에 대한 촬영 명령이 인가되면, 상기 카메라를 통해 상기 사용자의 얼굴을 촬영하여 n x k개의 화소로 구성된 상기 사용자의 얼굴 이미지를 획득하는 이미지 획득부, n x k개의 화소로 구성된 상기 사용자의 얼굴 이미지가 획득되면, 상기 얼굴 이미지 저장부로부터, 상기 연예인의 얼굴 이미지를 추출하는 이미지 추출부, 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 각각에 대해, 각 이미지를 구성하는 n x k개의 화소들 중 피부색으로 사전 지정된 제1 색상 또는 상기 제1 색상과의 사전 설정된 유사 범위 내의 색상으로 구성된 화소들에 각각 1의 성분을 할당하고, 1의 성분이 할당된 화소들을 제외한 나머지 화소들에 각각 0의 성분을 할당함으로써, 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 각각에 대한 n x k 크기의 이진 행렬을 생성하는 행렬 생성부, 상기 연예인의 얼굴 이미지에 대한 이진 행렬과 상기 사용자의 얼굴 이미지에 대한 이진 행렬을 서로 비교하여, 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 유사도를 연산하는 유사도 연산부, 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 유사도를 사전 설정된 기준치와 비교하여, 상기 유사도가 상기 기준치를 초과하는 경우, 상기 연예인의 얼굴 이미지에서, 상기 연예인의 얼굴 이미지를 구성하는 n x k개의 화소들 중
Figure 112020103259725-pat00001
개의 제1 화소들을 랜덤하게 추출하고, 상기 사용자의 얼굴 이미지에서, 상기 사용자의 얼굴 이미지를 구성하는 n x k개의 화소들 중 상기 제1 화소들 각각의 위치와 겹치지 않는 위치에 존재하는 제2 화소들을 추출한 후, 상기 제1 화소들과 상기 제2 화소들을 각 화소의 위치에 따라 배치함으로써,
Figure 112020103259725-pat00002
개의 화소들로 구성된 합성 이미지를 생성하는 이미지 생성부 및 상기 합성 이미지를 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 합성 얼굴 이미지인 것으로 화면 상에 표시하는 이미지 표시부를 포함한다.
또한, 본 발명의 일실시예에 따른 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치의 동작 방법은 사전 지정된 연예인의 얼굴 이미지 - 상기 연예인의 얼굴 이미지는 세로 n(n은 2 이상의 자연수임) 개, 가로 k(k는 2 이상의 자연수임) 개의 n x k개의 화소들로 구성되어 있음 - 가 저장되어 있는 얼굴 이미지 저장부를 유지하는 단계, 사용자로부터 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 이미지 합성 명령이 인가되면, 상기 전자 단말 장치에 탑재되어 있는 카메라를 통해 상기 사용자의 얼굴을 촬영할 수 있도록 상기 카메라를 활성화시키는 단계, 상기 카메라가 활성화된 이후, 상기 사용자로부터 상기 사용자의 얼굴 이미지에 대한 촬영 명령이 인가되면, 상기 카메라를 통해 상기 사용자의 얼굴을 촬영하여 n x k개의 화소로 구성된 상기 사용자의 얼굴 이미지를 획득하는 단계, n x k개의 화소로 구성된 상기 사용자의 얼굴 이미지가 획득되면, 상기 얼굴 이미지 저장부로부터, 상기 연예인의 얼굴 이미지를 추출하는 단계, 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 각각에 대해, 각 이미지를 구성하는 n x k개의 화소들 중 피부색으로 사전 지정된 제1 색상 또는 상기 제1 색상과의 사전 설정된 유사 범위 내의 색상으로 구성된 화소들에 각각 1의 성분을 할당하고, 1의 성분이 할당된 화소들을 제외한 나머지 화소들에 각각 0의 성분을 할당함으로써, 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 각각에 대한 n x k 크기의 이진 행렬을 생성하는 단계, 상기 연예인의 얼굴 이미지에 대한 이진 행렬과 상기 사용자의 얼굴 이미지에 대한 이진 행렬을 서로 비교하여, 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 유사도를 연산하는 단계, 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 유사도를 사전 설정된 기준치와 비교하여, 상기 유사도가 상기 기준치를 초과하는 경우, 상기 연예인의 얼굴 이미지에서, 상기 연예인의 얼굴 이미지를 구성하는 n x k개의 화소들 중
Figure 112020103259725-pat00003
개의 제1 화소들을 랜덤하게 추출하고, 상기 사용자의 얼굴 이미지에서, 상기 사용자의 얼굴 이미지를 구성하는 n x k개의 화소들 중 상기 제1 화소들 각각의 위치와 겹치지 않는 위치에 존재하는 제2 화소들을 추출한 후, 상기 제1 화소들과 상기 제2 화소들을 각 화소의 위치에 따라 배치함으로써, n x k개의 화소들로 구성된 합성 이미지를 생성하는 단계 및 상기 합성 이미지를 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 합성 얼굴 이미지인 것으로 화면 상에 표시하는 단계를 포함한다.
본 발명은 사용자로부터 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성 명령이 인가되면, 사전 지정된 연예인의 얼굴 이미지와 전자 단말 장치에 탑재되어 있는 카메라를 통해 촬영된 사용자의 얼굴 이미지 간의 유사도를 연산하고, 연산된 유사도가 사전 설정된 기준치를 초과하는 경우, 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 각각에서 화소들을 추출하여, 추출된 화소들을 기초로 합성 이미지를 생성한 후, 생성된 합성 이미지를 화면 상에 표시하는 전자 단말 장치 및 그 동작 방법을 제시함으로써, 사용자가 보다 손쉽게 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성을 수행할 수 있도록 지원한다.
도 1은 본 발명의 일실시예에 따른 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치의 구조를 도시한 도면이다.
도 2 내지 도 4는 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치의 동작을 설명하기 위한 도면이다.
도 5는 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치의 동작 방법을 도시한 순서도이다.
이하에서는 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명하기로 한다. 이러한 설명은 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였으며, 다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 본 명세서 상에서 사용되는 모든 용어들은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 사람에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다.
본 문서에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있다는 것을 의미한다. 또한, 본 발명의 다양한 실시예들에 있어서, 각 구성요소들, 기능 블록들 또는 수단들은 하나 또는 그 이상의 하부 구성요소로 구성될 수 있고, 각 구성요소들이 수행하는 전기, 전자, 기계적 기능들은 전자회로, 집적회로, ASIC(Application Specific Integrated Circuit) 등 공지된 다양한 소자들 또는 기계적 요소들로 구현될 수 있으며, 각각 별개로 구현되거나 2 이상이 하나로 통합되어 구현될 수도 있다.
한편, 첨부된 블록도의 블록들이나 흐름도의 단계들은 범용 컴퓨터, 특수용 컴퓨터, 휴대용 노트북 컴퓨터, 네트워크 컴퓨터 등 데이터 프로세싱이 가능한 장비의 프로세서나 메모리에 탑재되어 지정된 기능들을 수행하는 컴퓨터 프로그램 명령들(instructions)을 의미하는 것으로 해석될 수 있다. 이들 컴퓨터 프로그램 명령들은 컴퓨터 장치에 구비된 메모리 또는 컴퓨터에서 판독 가능한 메모리에 저장될 수 있기 때문에, 블록도의 블록들 또는 흐름도의 단계들에서 설명된 기능들은 이를 수행하는 명령 수단을 내포하는 제조물로 생산될 수도 있다. 아울러, 각 블록 또는 각 단계는 특정된 논리적 기능(들)을 실행하기 위한 하나 이상의 실행 가능한 명령들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 가능한 실시예들에서는 블록들 또는 단계들에서 언급된 기능들이 정해진 순서와 달리 실행되는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들 또는 단계들은 실질적으로 동시에 수행되거나, 역순으로 수행될 수 있으며, 경우에 따라 일부 블록들 또는 단계들이 생략된 채로 수행될 수도 있다.
도 1은 본 발명의 일실시예에 따른 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치의 구조를 도시한 도면이다.
도 1을 참조하면, 본 발명의 일실시예에 따른 전자 단말 장치(110)는 얼굴 이미지 저장부(111), 카메라 활성화부(112), 이미지 획득부(113), 이미지 추출부(114), 행렬 생성부(115), 유사도 연산부(116), 이미지 생성부(117) 및 이미지 표시부(118)를 포함한다.
먼저, 얼굴 이미지 저장부(111)에는 사전 지정된 연예인의 얼굴 이미지가 저장되어 있다.
여기서, 상기 연예인의 얼굴 이미지는 세로 n(n은 2 이상의 자연수임) 개, 가로 k(k는 2 이상의 자연수임) 개의 n x k개의 화소들로 구성되어 있다.
예컨대, n을 '13'이라고 하고, k를 '12'라고 하는 경우, 얼굴 이미지 저장부(111)에는 사전 지정된 연예인의 얼굴 이미지로, 세로 '13개', 가로 '12개'의 총 '156개'의 화소들로 구성된 '얼굴 이미지 1'이 저장되어 있을 수 있다.
카메라 활성화부(112)는 사용자(130)로부터 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 간의 이미지 합성 명령이 인가되면, 전자 단말 장치(110)에 탑재되어 있는 카메라(140)를 통해 사용자(130)의 얼굴을 촬영할 수 있도록 카메라(140)를 활성화시킨다.
이때, 본 발명의 일실시예에 따르면, 전자 단말 장치(110)는 사용자(130)의 눈, 코 및 입을 각각 사전 지정된 영역에 배치하여 사용자(130)의 얼굴 이미지를 획득하기 위한 구성으로, 안내 메시지 표시부(119)를 더 포함할 수 있다.
안내 메시지 표시부(119)는 카메라(140)가 활성화되면, 카메라(140)를 통해 표시되는 촬영 화면 상에, 사용자(130)의 얼굴을 배치시킬 영역을 가이드하기 위한 사전 지정된 얼굴 배치 가이드 영역을 표시함과 동시에, 사용자(130)에 대해, 상기 얼굴 배치 가이드 영역을 구성하는 제1 영역, 제2 영역 및 제3 영역 각각에 사용자(130)의 눈, 코 및 입을 배치하여 사용자(130)의 얼굴을 촬영할 것을 안내하는 안내 메시지를 표시한다.
여기서, 상기 얼굴 배치 가이드 영역은 n x k개의 화소로 구성된 사용자(130)의 얼굴 이미지를 획득하기 위한 사전 지정된 영역으로, 상기 얼굴 배치 가이드 영역은 사용자(130)의 눈이 배치될 영역으로 사전 지정된 제1 영역, 사용자(130)의 코가 배치될 영역으로 사전 지정된 제2 영역 및 사용자(130)의 입이 배치될 영역으로 사전 지정된 제3 영역으로 구성되어 있다.
관련해서, 도 2의 도면 부호 210에 도시된 그림과 같이, 상기 얼굴 배치 가이드 영역이 사용자(130)의 눈이 배치될 영역으로 사전 지정된 제1 영역(220), 사용자(130)의 코가 배치될 영역으로 사전 지정된 제2 영역(230) 및 사용자(130)의 입이 배치될 영역으로 사전 지정된 제3 영역(240)으로 구성되어 있다고 가정하자.
이때, 안내 메시지 표시부(119)는 도 2에 점선으로 도시된 그림과 같이, 카메라(140)를 통해 표시되는 촬영 화면(200)상에, 사용자(130)의 얼굴을 배치시킬 영역을 가이드하기 위한 사전 지정된 얼굴 배치 가이드 영역(210)을 표시함과 동시에, 사용자(130)에 대해, 얼굴 배치 가이드 영역(210)을 구성하는 제1 영역(220), 제2 영역(230) 및 제3 영역(240) 각각에 사용자(130)의 눈, 코 및 입을 배치하여 사용자(130)의 얼굴을 촬영할 것을 안내하는 안내 메시지를 표시할 수 있다.
이를 통해, 사용자(130)는 촬영 화면(200)상에 표시된 얼굴 배치 가이드 영역(210)과 상기 안내 메시지에 따라, 제1 영역(220), 제2 영역(230) 및 제3 영역(240) 각각에 사용자(130)의 눈, 코 및 입을 배치한 후, 사용자(130)의 얼굴 이미지를 촬영하기 위한 촬영 명령을 인가할 수 있다.
이렇게, 카메라 활성화부(112)에 의해 카메라(140)가 활성화된 이후, 사용자(130)로부터 사용자(130)의 얼굴 이미지에 대한 촬영 명령이 인가되면, 이미지 획득부(113)는 카메라(140)를 통해 사용자(130)의 얼굴을 촬영하여 n x k개의 화소로 구성된 사용자(130)의 얼굴 이미지를 획득한다.
이미지 추출부(114)는 이미지 획득부(113)에 의해 n x k개의 화소로 구성된 사용자(130)의 얼굴 이미지가 획득되면, 얼굴 이미지 저장부(111)로부터, 상기 연예인의 얼굴 이미지를 추출한다.
행렬 생성부(115)는 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 각각에 대해, 각 이미지를 구성하는 n x k개의 화소들 중 피부색으로 사전 지정된 제1 색상 또는 상기 제1 색상과의 사전 설정된 유사 범위 내의 색상으로 구성된 화소들에 각각 1의 성분을 할당하고, 1의 성분이 할당된 화소들을 제외한 나머지 화소들에 각각 0의 성분을 할당함으로써, 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 각각에 대한 n x k 크기의 이진 행렬을 생성한다.
이하에서는, 이미지 추출부(114) 및 행렬 생성부(115)의 동작을 도 3을 참조하여, 예를 들어 상세히 설명하기로 한다.
먼저, 전술한 예와 같이, n을 '13'이라고 하고, k를 '12'라고 하며, 얼굴 이미지 저장부(111)에 상기 연예인의 얼굴 이미지로, 도 3의 도면 부호 310에 도시된 그림과 같은 '얼굴 이미지 1'이 저장되어 있다고 가정하자. 이때, '얼굴 이미지 1'(310) 은 도면 부호 320에 도시된 그림과 같은 '156개'의 화소들로 구성되어 있다고 가정하자.
여기서, '얼굴 이미지 1'(310) 이 '156개'의 화소들로 구성되어 있다는 가정은 설명의 편의를 위해서 제시한 가정에 불과할 뿐, 실제 상기 연예인의 얼굴 이미지를 구성하는 화소들의 개수는 이보다 훨씬 많다.
이때, 이미지 획득부(113)에 의해 '156개'의 화소들로 구성된 사용자(130)의 얼굴 이미지가 획득되었다고 하는 경우, 이미지 추출부(114)는 얼굴 이미지 저장부(111)로부터, 상기 연예인의 얼굴 이미지인 '얼굴 이미지 1'(310) 을 추출할 수 있다.
이렇게, 이미지 추출부(114)에 의해 얼굴 이미지 저장부(111)로부터 '얼굴 이미지 1'(310) 이 추출되면, 행렬 생성부(115)는 '얼굴 이미지 1'(310) 을 구성하는 '156개'의 화소들 중 피부색으로 사전 지정된 제1 색상 또는 상기 제1 색상과의 사전 설정된 유사 범위 내의 색상으로 구성된 화소들에 각각 1의 성분을 할당하고, 1의 성분이 할당된 화소들을 제외한 나머지 화소들에 각각 0의 성분을 할당함으로써, 연예인의 얼굴 이미지(310)에 대한 '13 x 12' 크기의 이진 행렬을 도면 부호 330에 도시된 행렬과 같이 생성할 수 있다.
같은 방식으로, 행렬 생성부(115)는 사용자(130)의 얼굴 이미지에 대한 '13 x 12' 크기의 이진 행렬도 생성할 수 있다.
이렇게, 행렬 생성부(115)에 의해 상기 연예인의 얼굴 이미지에 대한 이진 행렬과 사용자(130)의 얼굴 이미지에 대한 이진 행렬이 생성되면, 유사도 연산부(116)는 상기 연예인의 얼굴 이미지에 대한 이진 행렬과 사용자(130)의 얼굴 이미지에 대한 이진 행렬을 서로 비교하여, 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 간의 유사도를 연산한다.
이때, 본 발명의 일실시예에 따르면, 유사도 연산부(116)는 상기 연예인의 얼굴 이미지에 대한 이진 행렬과 사용자(130)의 얼굴 이미지에 대한 이진 행렬 간의 아다마르 곱(Hadamard product)을 연산하였을 때 산출되는 연산 행렬에서, 상기 연산 행렬을 구성하는 n x k개의 성분들 중 1의 성분이 존재하는 비율을 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 간의 유사도로 연산할 수 있다.
여기서, 아다마르 곱이란, 같은 크기의 행렬에서 각 성분을 곱하는 연산을 의미한다. 예컨대, '[a b c]'와 '[x y z]'라는 행렬이 있을 때, 두 행렬 간의 아다마르 곱을 연산하면, '[ax by cz]'라는 행렬이 산출될 수 있다.
이때, 상기 연산 행렬을 구성하는 n x k개의 성분들 중 1의 성분의 개수가 많다는 것은, 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 각각에 포함된 눈, 코, 입의 형태와 위치가 서로 유사하다는 것을 의미한다. 따라서, 유사도 연산부(116)는 상기 연산 행렬을 구성하는
Figure 112020103259725-pat00004
개의 성분들 중 1의 성분이 존재하는 비율을 연산하여, 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 간의 유사도로 활용할 수 있다.
이렇게, 유사도 연산부(116)에 의해 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 간의 유사도가 연산되면, 이미지 생성부(117)는 상기 유사도를 사전 설정된 기준치와 비교하여, 상기 유사도가 상기 기준치를 초과하는 경우, 상기 연예인의 얼굴 이미지에서, 상기 연예인의 얼굴 이미지를 구성하는 n x k개의 화소들 중
Figure 112020103259725-pat00005
개의 제1 화소들을 랜덤하게 추출하고, 사용자(130)의 얼굴 이미지에서, 사용자(130)의 얼굴 이미지를 구성하는 n x k개의 화소들 중 상기 제1 화소들 각각의 위치와 겹치지 않는 위치에 존재하는 나머지 제2 화소들을 추출한 후, 상기 제1 화소들과 상기 제2 화소들을 각 화소의 위치에 따라 배치함으로써, n x k개의 화소들로 구성된 합성 이미지를 생성한다.
여기서,
Figure 112020103259725-pat00006
는 천장함수를 의미한다.
관련해서, n을 '3'이라고 하고, k를 '4'라고 하며, 사전 설정된 기준치를 '70%'라고 가정하자. 또한, 상기 연예인의 얼굴 이미지가 도 4의 도면 부호 410에 도시된 그림과 같은 '12개'의 화소들(441, 442, 443, 444, 445, 446, 447, 448, 449, 450, 451, 452)로 구성되어 있다고 하고, 사용자(130)의 얼굴 이미지가 도면 부호 420에 도시된 그림과 같은 '12개'의 화소들(461, 462, 463, 464, 465, 466, 467, 468, 469, 470, 471, 472)로 구성되어 있다고 가정하자.
이때, 유사도 연산부(116)에 의해 연산된 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 간의 유사도가 '80%'로 연산되었다고 하는 경우, 이미지 생성부(117)는 상기 유사도가 상기 기준치를 초과하는 것으로 확인할 수 있다.
그러고 나서, 이미지 생성부(117)는 상기 연예인의 얼굴 이미지에서, 상기 연예인의 얼굴 이미지를 구성하는 12개의 화소들(441, 442, 443, 444, 445, 446, 447, 448, 449, 450, 451, 452) 중 6개의 제1 화소들을 랜덤하게 추출할 수 있다.
이때, 상기 연예인의 얼굴 이미지에서, 상기 제1 화소들로 6개의 화소들(442, 443, 444, 446, 458, 452)이 추출되었다고 하는 경우, 이미지 생성부(117)는 사용자(130)의 얼굴 이미지에서, 사용자(130)의 얼굴 이미지를 구성하는 12개의 화소들(461, 462, 463, 464, 465, 466, 467, 468, 469, 470, 471, 472) 중, 제1 화소들(442, 443, 444, 446, 458, 452)과 겹치지 않는 위치에 존재하는 제2 화소들을 추출할 수 있다.
관련해서, 도면 부호 420에 도시된 그림에서, 사용자(130)의 얼굴 이미지를 구성하는 12개의 화소들(461, 462, 463, 464, 465, 466, 467, 468, 469, 470, 471, 472) 중에서, 제1 화소들(442, 443, 444, 446, 458, 452)과 겹치지 않는 위치에 존재하는 화소들은 6개의 화소들(461, 465, 467, 469, 470, 471)이다. 따라서, 이미지 생성부(117)는 사용자(130)의 얼굴 이미지에서, 6개의 화소들(461, 465, 467, 469, 470, 471)을 상기 제2 화소들로 추출할 수 있다.
이렇게, 상기 연예인의 얼굴 이미지에서 제1 화소들(442, 443, 444, 446, 458, 452)이 추출되고, 사용자(130)의 얼굴 이미지에서 제2 화소들(461, 465, 467, 469, 470, 471)이 추출되면, 이미지 생성부(117)는 도면 부호 430에 도시된 그림과 같이, 제1 화소들(441, 443, 446, 449, 451, 452)과 제2 화소들(462, 464, 465, 467, 468, 470)을 각 화소의 위치에 따라 배치함으로써, 12개의 화소들(461, 442, 443, 444, 465, 446, 467, 448, 469, 470, 471, 452)로 구성된 합성 이미지를 생성할 수 있다.
즉, 전자 단말 장치(110)는 사용자(130)로부터 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 간의 이미지 합성 명령이 인가되면, 사전 지정된 상기 연예인의 얼굴 이미지와 카메라(140)를 통해 촬영된 사용자(130)의 얼굴 이미지 간의 유사도를 연산하고, 상기 유사도가 사전 설정된 기준치를 초과하는 경우, 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 각각에서 화소들을 추출하여 추출된 화소들을 기초로 상기 합성 이미지를 생성할 수 있다.
본 발명의 일실시예에 따르면, 이미지 생성부(117)는 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 간의 유사도가 상기 기준치를 초과하지 않는 경우, 상기 연예인의 얼굴 이미지를 기초로 사전 제작된 더미(dummy) 합성 얼굴 이미지들 중 하나의 더미 합성 얼굴 이미지를 상기 합성 이미지로 선택하기 위한 구성으로, 합성 이미지 저장부(120) 및 이미지 선택부(121)를 포함할 수 있다.
이와 관련해서, 먼저, 이미지 저장부(120)에는 상기 연예인의 얼굴 이미지를 기초로 사전 제작된 복수의 더미 합성 얼굴 이미지들과 상기 복수의 더미 합성 얼굴 이미지들 각각에 대응되는 것으로 사전 설정된 유사도에 대한 범위 값이 저장되어 있다.
여기서, 상기 더미 합성 얼굴 이미지들은, 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 간의 유사도가 상대적으로 낮아서, 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 간의 이미지 합성을 수행하면, 낮은 품질의 합성 이미지가 생성될 것으로 예상되는 경우, 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 간의 이미지 합성을 수행하여 사용자(130)에게 제공하는 대신, 사전 제작된 더미 합성 얼굴 이미지들 중에서 상기 유사도에 따라 하나의 더미 합성 얼굴 이미지를 선택하여 사용자(130)에게 제공하기 위해서, 사전 제작된 이미지이다.
관련해서, 합성 이미지 저장부(120)에는 하기의 표 1과 같이, 상기 연예인의 얼굴 이미지를 기초로 사전 제작된 복수의 더미 합성 얼굴 이미지들과 상기 복수의 더미 합성 얼굴 이미지들 각각에 대응되는 것으로 사전 설정된 유사도에 대한 범위 값이 저장되어 있을 수 있다.
더미 합성 얼굴 이미지 유사도에 대한 범위 값
더미 합성 얼굴 이미지 1 0% 이상 10% 미만
더미 합성 얼굴 이미지 2 10% 이상 20% 미만
더미 합성 얼굴 이미지 3 20% 이상 30% 미만
더미 합성 얼굴 이미지 4 30% 이상 40% 미만
더미 합성 얼굴 이미지 5 40% 이상 50% 미만
더미 합성 얼굴 이미지 6 50% 이상 60% 미만
더미 합성 얼굴 이미지 7 60% 이상 70% 이하
이미지 선택부(121)는 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 간의 유사도를 상기 기준치와 비교한 결과, 상기 유사도가 상기 기준치를 초과하지 않는 경우, 합성 이미지 저장부(120)에 저장되어 있는 상기 복수의 더미 합성 얼굴 이미지들 각각에 대응되는 범위 값 중 상기 유사도가 포함된 제1 범위 값을 확인한 후, 상기 복수의 더미 합성 얼굴 이미지들 중 합성 이미지 저장부(120) 상에서 상기 제1 범위 값에 대응되어 저장되어 있는 제1 더미 합성 얼굴 이미지를 상기 합성 이미지로 선택한다.
예컨대, 전술한 예와 같이, 상기 기준치를 '70%'라고 하고, 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 간의 유사도가 '65%'로 연산되었다고 가정하자.
그러면, 이미지 선택부(121)는 상기 유사도가 상기 기준치를 초과하지 않는 것으로 확인한 후, 합성 이미지 저장부(120)에 저장되어 있는 상기 복수의 더미 합성 얼굴 이미지들 각각에 대응되는 범위 값 중 상기 유사도가 포함된 제1 범위 값을 확인할 수 있다.
관련해서, 상기 표 1과 같은 합성 이미지 저장부(120)에 저장되어 있는 상기 연예인에 대한 복수의 더미 합성 얼굴 이미지들 각각에 대응되는 범위 값 중에서, 상기 유사도인 '65%'가 포함되는 범위 값은 '60% 이상 70% 이하'이므로, 이미지 선택부(121)는 '60% 이상 70% 이하'를 제1 범위 값으로 확인할 수 있다.
그러고 나서, 이미지 선택부(121)는 상기 연예인에 대한 복수의 더미 합성 얼굴 이미지들 중 합성 이미지 저장부(120) 상에서 상기 제1 범위 값인 '60% 이상 70% 이하'에 대응되어 저장되어 있는 제1 더미 합성 얼굴 이미지를 상기 합성 이미지로 선택할 수 있다.
관련해서, 상기 표 1과 같은 합성 이미지 저장부(120)에서, 상기 연예인에 대한 복수의 더미 합성 얼굴 이미지들 중 '60% 이상 70% 이하'에 대응되어 저장되어 있는 합성 얼굴 이미지는 '더미 합성 얼굴 이미지 7'이므로, 이미지 선택부(121)는 '더미 합성 얼굴 이미지 7'을 상기 합성 이미지로 선택할 수 있다.
이렇게, 이미지 생성부(117)에 의해, 상기 연예인의 얼굴 이미지와 사용자(130)의 얼굴 이미지 각각에서 추출된 화소를 기초로 상기 합성 이미지가 생성되거나, 상기 복수의 더미 합성 얼굴 이미지들 중 하나의 더미 합성 얼굴 이미지가 상기 합성 이미지로 선택되면, 이미지 표시부(118)는 상기 합성 이미지를 상기 연예인의 얼굴 이미지와 상기 사용자(130)의 얼굴 이미지 간의 합성 얼굴 이미지인 것으로 화면 상에 표시할 수 있다.
도 5는 본 발명의 일실시예에 따른 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치의 동작 방법을 도시한 순서도이다.
단계(S510)에서는 사전 지정된 연예인의 얼굴 이미지(상기 연예인의 얼굴 이미지는 세로 n(n은 2 이상의 자연수임) 개, 가로 k(k는 2 이상의 자연수임) 개의 n x k개의 화소들로 구성되어 있음)가 저장되어 있는 얼굴 이미지 저장부를 유지한다.
단계(S520)에서는 사용자로부터 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 이미지 합성 명령이 인가되면, 상기 전자 단말 장치에 탑재되어 있는 카메라를 통해 상기 사용자의 얼굴을 촬영할 수 있도록 상기 카메라를 활성화시킨다.
단계(S530)에서는 상기 카메라가 활성화된 이후, 상기 사용자로부터 상기 사용자의 얼굴 이미지에 대한 촬영 명령이 인가되면, 상기 카메라를 통해 상기 사용자의 얼굴을 촬영하여 n x k개의 화소로 구성된 상기 사용자의 얼굴 이미지를 획득한다.
단계(S540)에서는 n x k개의 화소로 구성된 상기 사용자의 얼굴 이미지가 획득되면, 상기 얼굴 이미지 저장부로부터, 상기 연예인의 얼굴 이미지를 추출한다.
단계(S550)에서는 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 각각에 대해, 각 이미지를 구성하는 n x k개의 화소들 중 피부색으로 사전 지정된 제1 색상 또는 상기 제1 색상과의 사전 설정된 유사 범위 내의 색상으로 구성된 화소들에 각각 1의 성분을 할당하고, 1의 성분이 할당된 화소들을 제외한 나머지 화소들에 각각 0의 성분을 할당함으로써, 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 각각에 대한 n x k 크기의 이진 행렬을 생성한다.
단계(S560)에서는 상기 연예인의 얼굴 이미지에 대한 이진 행렬과 상기 사용자의 얼굴 이미지에 대한 이진 행렬을 서로 비교하여, 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 유사도를 연산한다.
단계(S570)에서는 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 유사도를 사전 설정된 기준치와 비교하여, 상기 유사도가 상기 기준치를 초과하는 경우, 상기 연예인의 얼굴 이미지에서, 상기 연예인의 얼굴 이미지를 구성하는
Figure 112020103259725-pat00007
개의 화소들 중
Figure 112020103259725-pat00008
개의 제1 화소들을 랜덤하게 추출하고, 상기 사용자의 얼굴 이미지에서, 상기 사용자의 얼굴 이미지를 구성하는 n x k개의 화소들 중 상기 제1 화소들 각각의 위치와 겹치지 않는 위치에 존재하는 나머지 제2 화소들을 추출한 후, 상기 제1 화소들과 상기 제2 화소들을 각 화소의 위치에 따라 배치함으로써, n x k개의 화소들로 구성된 합성 이미지를 생성한다.
단계(S580)에서는 상기 합성 이미지를 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 합성 얼굴 이미지인 것으로 화면 상에 표시한다.
이때, 본 발명의 일실시예에 따르면, 단계(S560)에서는 상기 연예인의 얼굴 이미지에 대한 이진 행렬과 상기 사용자의 얼굴 이미지에 대한 이진 행렬 간의 아다마르 곱을 연산하였을 때 산출되는 연산 행렬에서, 상기 연산 행렬을 구성하는 n x k개의 성분들 중 1의 성분이 존재하는 비율을 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 유사도로 연산할 수 있다.
또한, 본 발명의 일실시예에 따르면, 상기 전자 단말 장치의 동작 방법은 상기 카메라가 활성화되면, 상기 카메라를 통해 표시되는 촬영 화면 상에, 상기 사용자의 얼굴을 배치시킬 영역을 가이드하기 위한 사전 지정된 얼굴 배치 가이드 영역(상기 얼굴 배치 가이드 영역은 n x k개의 화소로 구성된 상기 사용자의 얼굴 이미지를 획득하기 위한 사전 지정된 영역으로, 상기 얼굴 배치 가이드 영역은 상기 사용자의 눈이 배치될 영역으로 사전 지정된 제1 영역, 상기 사용자의 코가 배치될 영역으로 사전 지정된 제2 영역 및 상기 사용자의 입이 배치될 영역으로 사전 지정된 제3 영역으로 구성되어 있음)을 표시함과 동시에, 상기 사용자에 대해, 상기 얼굴 배치 가이드 영역을 구성하는 상기 제1 영역, 상기 제2 영역 및 상기 제3 영역 각각에 상기 사용자의 눈, 코 및 입을 배치하여 상기 사용자의 얼굴을 촬영할 것을 안내하는 안내 메시지를 표시하는 단계를 더 포함할 수 있다.
또한, 본 발명의 일실시예에 따르면, 상기 전자 단말 장치의 동작 방법은 상기 연예인의 얼굴 이미지를 기초로 사전 제작된 복수의 더미 합성 얼굴 이미지들과 각 더미 합성 얼굴 이미지에 대응되는 것으로 사전 설정된 유사도에 대한 범위 값이 저장되어 있는 합성 이미지 저장부를 유지하는 단계 및 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 유사도를 상기 기준치와 비교한 결과, 상기 유사도가 상기 기준치를 초과하지 않는 경우, 상기 합성 이미지 저장부에 저장되어 있는 상기 연예인에 대한 복수의 더미 합성 얼굴 이미지들 각각에 대응되는 범위 값 중 상기 유사도가 포함된 제1 범위 값을 확인한 후 상기 연예인에 대한 복수의 더미 합성 얼굴 이미지들 중 상기 합성 이미지 저장부 상에서 상기 제1 범위 값에 대응되어 저장되어 있는 제1 더미 합성 얼굴 이미지를 상기 합성 이미지로 선택하는 단계를 더 포함할 수 있다.
이상, 도 5를 참조하여 본 발명의 일실시예에 따른 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치의 동작 방법에 대해 설명하였다. 여기서, 본 발명의 일실시예에 따른 상기 전자 단말 장치의 동작 방법은 도 1을 이용하여 설명한 전자 단말 장치(110)의 동작에 대한 구성과 대응될 수 있으므로, 이에 대한 보다 상세한 설명은 생략하기로 한다.
본 발명의 일실시예에 따른 상기 전자 단말 장치의 동작 방법은 컴퓨터와의 결합을 통해 실행시키기 위한 저장매체에 저장된 컴퓨터 프로그램으로 구현될 수 있다.
또한, 본 발명의 일실시예에 따른 상기 전자 단말 장치의 동작 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.
이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.
110: 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치
111: 얼굴 이미지 저장부 112: 카메라 활성화부
113: 이미지 획득부 114: 이미지 추출부
115: 행렬 생성부 116: 유사도 연산부
117: 이미지 생성부 118: 이미지 표시부
119: 안내 메시지 표시부 120: 합성 이미지 저장부
121: 이미지 선택부
130: 사용자
140: 카메라

Claims (10)

  1. 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치에 있어서,
    사전 지정된 연예인의 얼굴 이미지 - 상기 연예인의 얼굴 이미지는 세로 n(n은 2 이상의 자연수임) 개, 가로 k(k는 2 이상의 자연수임) 개의 n x k개의 화소들로 구성되어 있음 - 가 저장되어 있는 얼굴 이미지 저장부;
    사용자로부터 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 이미지 합성 명령이 인가되면, 상기 전자 단말 장치에 탑재되어 있는 카메라를 통해 상기 사용자의 얼굴을 촬영할 수 있도록 상기 카메라를 활성화시키는 카메라 활성화부;
    상기 카메라가 활성화된 이후, 상기 사용자로부터 상기 사용자의 얼굴 이미지에 대한 촬영 명령이 인가되면, 상기 카메라를 통해 상기 사용자의 얼굴을 촬영하여 n x k개의 화소로 구성된 상기 사용자의 얼굴 이미지를 획득하는 이미지 획득부;
    n x k개의 화소로 구성된 상기 사용자의 얼굴 이미지가 획득되면, 상기 얼굴 이미지 저장부로부터, 상기 연예인의 얼굴 이미지를 추출하는 이미지 추출부;
    상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 각각에 대해, 각 이미지를 구성하는 n x k개의 화소들 중 피부색으로 사전 지정된 제1 색상 또는 상기 제1 색상과의 사전 설정된 유사 범위 내의 색상으로 구성된 화소들에 각각 1의 성분을 할당하고, 1의 성분이 할당된 화소들을 제외한 나머지 화소들에 각각 0의 성분을 할당함으로써, 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 각각에 대한 n x k 크기의 이진 행렬을 생성하는 행렬 생성부;
    상기 연예인의 얼굴 이미지에 대한 이진 행렬과 상기 사용자의 얼굴 이미지에 대한 이진 행렬을 서로 비교하여, 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 유사도를 연산하는 유사도 연산부;
    상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 유사도를 사전 설정된 기준치와 비교하여, 상기 유사도가 상기 기준치를 초과하는 경우, 상기 연예인의 얼굴 이미지에서, 상기 연예인의 얼굴 이미지를 구성하는 n x k개의 화소들 중
    Figure 112020103259725-pat00009
    개의 제1 화소들을 랜덤하게 추출하고, 상기 사용자의 얼굴 이미지에서, 상기 사용자의 얼굴 이미지를 구성하는 n x k개의 화소들 중 상기 제1 화소들 각각의 위치와 겹치지 않는 위치에 존재하는 나머지 제2 화소들을 추출한 후, 상기 제1 화소들과 상기 제2 화소들을 각 화소의 위치에 따라 배치함으로써, n x k개의 화소들로 구성된 합성 이미지를 생성하는 이미지 생성부; 및
    상기 합성 이미지를 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 합성 얼굴 이미지인 것으로 화면 상에 표시하는 이미지 표시부
    를 포함하는 전자 단말 장치.
  2. 제1항에 있어서,
    상기 유사도 연산부는
    상기 연예인의 얼굴 이미지에 대한 이진 행렬과 상기 사용자의 얼굴 이미지에 대한 이진 행렬 간의 아다마르 곱(Hadamard product)을 연산하였을 때 산출되는 연산 행렬에서, 상기 연산 행렬을 구성하는 n x k개의 성분들 중 1의 성분이 존재하는 비율을 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 유사도로 연산하는 전자 단말 장치.
  3. 제1항에 있어서,
    상기 카메라가 활성화되면, 상기 카메라를 통해 표시되는 촬영 화면 상에, 상기 사용자의 얼굴을 배치시킬 영역을 가이드하기 위한 사전 지정된 얼굴 배치 가이드 영역 - 상기 얼굴 배치 가이드 영역은 n x k개의 화소로 구성된 상기 사용자의 얼굴 이미지를 획득하기 위한 사전 지정된 영역으로, 상기 얼굴 배치 가이드 영역은 상기 사용자의 눈이 배치될 영역으로 사전 지정된 제1 영역, 상기 사용자의 코가 배치될 영역으로 사전 지정된 제2 영역 및 상기 사용자의 입이 배치될 영역으로 사전 지정된 제3 영역으로 구성되어 있음 - 을 표시함과 동시에, 상기 사용자에 대해, 상기 얼굴 배치 가이드 영역을 구성하는 상기 제1 영역, 상기 제2 영역 및 상기 제3 영역 각각에 상기 사용자의 눈, 코 및 입을 배치하여 상기 사용자의 얼굴을 촬영할 것을 안내하는 안내 메시지를 표시하는 안내 메시지 표시부
    를 더 포함하는 전자 단말 장치.
  4. 삭제
  5. 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치의 동작 방법에 있어서,
    사전 지정된 연예인들의 얼굴 이미지 - 상기 연예인의 얼굴 이미지는 세로 n(n은 2 이상의 자연수임) 개, 가로 k(k는 2 이상의 자연수임) 개의 n x k개의 화소들로 구성되어 있음 - 가 저장되어 있는 얼굴 이미지 저장부를 유지하는 단계;
    사용자로부터 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 이미지 합성 명령이 인가되면, 상기 전자 단말 장치에 탑재되어 있는 카메라를 통해 상기 사용자의 얼굴을 촬영할 수 있도록 상기 카메라를 활성화시키는 단계;
    상기 카메라가 활성화된 이후, 상기 사용자로부터 상기 사용자의 얼굴 이미지에 대한 촬영 명령이 인가되면, 상기 카메라를 통해 상기 사용자의 얼굴을 촬영하여 n x k개의 화소로 구성된 상기 사용자의 얼굴 이미지를 획득하는 단계;
    n x k개의 화소로 구성된 상기 사용자의 얼굴 이미지가 획득되면, 상기 연예인의 얼굴 이미지를 추출하는 단계;
    상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 각각에 대해, 각 이미지를 구성하는 n x k개의 화소들 중 피부색으로 사전 지정된 제1 색상 또는 상기 제1 색상과의 사전 설정된 유사 범위 내의 색상으로 구성된 화소들에 각각 1의 성분을 할당하고, 1의 성분이 할당된 화소들을 제외한 나머지 화소들에 각각 0의 성분을 할당함으로써, 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 각각에 대한 n x k 크기의 이진 행렬을 생성하는 단계;
    상기 연예인의 얼굴 이미지에 대한 이진 행렬과 상기 사용자의 얼굴 이미지에 대한 이진 행렬을 서로 비교하여, 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 유사도를 연산하는 단계;
    상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 유사도를 사전 설정된 기준치와 비교하여, 상기 유사도가 상기 기준치를 초과하는 경우, 상기 연예인의 얼굴 이미지에서, 상기 연예인의 얼굴 이미지를 구성하는 n x k개의 화소들 중
    Figure 112020103259725-pat00010
    개의 제1 화소들을 랜덤하게 추출하고, 상기 사용자의 얼굴 이미지에서, 상기 사용자의 얼굴 이미지를 구성하는 n x k개의 화소들 중 상기 제1 화소들 각각의 위치와 겹치지 않는 위치에 존재하는 나머지 제2 화소들을 추출한 후, 상기 제1 화소들과 상기 제2 화소들을 각 화소의 위치에 따라 배치함으로써, n x k개의 화소들로 구성된 합성 이미지를 생성하는 단계; 및
    상기 합성 이미지를 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 합성 얼굴 이미지인 것으로 화면 상에 표시하는 단계
    를 포함하는 전자 단말 장치의 동작 방법.
  6. 제5항에 있어서,
    상기 유사도를 연산하는 단계는
    상기 연예인의 얼굴 이미지에 대한 이진 행렬과 상기 사용자의 얼굴 이미지에 대한 이진 행렬 간의 아다마르 곱(Hadamard product)을 연산하였을 때 산출되는 연산 행렬에서, 상기 연산 행렬을 구성하는 n x k개의 성분들 중 1의 성분이 존재하는 비율을 상기 연예인의 얼굴 이미지와 상기 사용자의 얼굴 이미지 간의 유사도로 연산하는 전자 단말 장치의 동작 방법.
  7. 제5항에 있어서,
    상기 카메라가 활성화되면, 상기 카메라를 통해 표시되는 촬영 화면 상에, 상기 사용자의 얼굴을 배치시킬 영역을 가이드하기 위한 사전 지정된 얼굴 배치 가이드 영역 - 상기 얼굴 배치 가이드 영역은 n x k개의 화소로 구성된 상기 사용자의 얼굴 이미지를 획득하기 위한 사전 지정된 영역으로, 상기 얼굴 배치 가이드 영역은 상기 사용자의 눈이 배치될 영역으로 사전 지정된 제1 영역, 상기 사용자의 코가 배치될 영역으로 사전 지정된 제2 영역 및 상기 사용자의 입이 배치될 영역으로 사전 지정된 제3 영역으로 구성되어 있음 - 을 표시함과 동시에, 상기 사용자에 대해, 상기 얼굴 배치 가이드 영역을 구성하는 상기 제1 영역, 상기 제2 영역 및 상기 제3 영역 각각에 상기 사용자의 눈, 코 및 입을 배치하여 상기 사용자의 얼굴을 촬영할 것을 안내하는 안내 메시지를 표시하는 단계
    를 더 포함하는 전자 단말 장치의 동작 방법.
  8. 삭제
  9. 제5항, 제6항 또는 제7항 중 어느 한 항의 방법을 컴퓨터와의 결합을 통해 실행시키기 위한 컴퓨터 프로그램을 기록한 컴퓨터 판독 가능 기록 매체.
  10. 제5항, 제6항 또는 제7항 중 어느 한 항의 방법을 컴퓨터와의 결합을 통해 실행시키기 위한 저장매체에 저장된 컴퓨터 프로그램.
KR1020200125955A 2020-09-28 2020-09-28 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치 및 그 동작 방법 KR102384983B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200125955A KR102384983B1 (ko) 2020-09-28 2020-09-28 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치 및 그 동작 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200125955A KR102384983B1 (ko) 2020-09-28 2020-09-28 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치 및 그 동작 방법

Publications (2)

Publication Number Publication Date
KR20220043960A KR20220043960A (ko) 2022-04-06
KR102384983B1 true KR102384983B1 (ko) 2022-04-29

Family

ID=81211744

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200125955A KR102384983B1 (ko) 2020-09-28 2020-09-28 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치 및 그 동작 방법

Country Status (1)

Country Link
KR (1) KR102384983B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102579683B1 (ko) * 2022-05-10 2023-09-18 주식회사 비브스튜디오스 인공지능 기반의 대역 배우 평가 방법

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009521065A (ja) 2007-04-12 2009-05-28 ジェイディエフ グループ カリカチュア生成システムとその方法およびその記録媒体
JP2010097449A (ja) 2008-10-17 2010-04-30 Casio Computer Co Ltd 画像合成装置、及び画像合成方法、画像合成プログラム

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101141643B1 (ko) * 2005-03-07 2012-05-04 엘지전자 주식회사 캐리커쳐 생성 기능을 갖는 이동통신 단말기 및 이를 이용한 생성 방법
KR20170077366A (ko) * 2015-12-28 2017-07-06 삼성에스디에스 주식회사 얼굴 인식 시스템 및 방법
CN109325988B (zh) * 2017-07-31 2022-11-11 腾讯科技（深圳）有限公司 一种面部表情合成方法、装置及电子设备

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009521065A (ja) 2007-04-12 2009-05-28 ジェイディエフ グループ カリカチュア生成システムとその方法およびその記録媒体
JP2010097449A (ja) 2008-10-17 2010-04-30 Casio Computer Co Ltd 画像合成装置、及び画像合成方法、画像合成プログラム

Also Published As

Publication number Publication date
KR20220043960A (ko) 2022-04-06

Similar Documents

Publication Publication Date Title
CN108377334B (zh) 短视频拍摄方法、装置及电子终端
CN111612873B (zh) Gif图片生成方法、装置及电子设备
CN104135611A (zh) 利用分屏功能实现拍照的方法及装置
JP2006261711A (ja) 画像生成装置
CN106485653B (zh) 用户终端及全景图片动态缩略图的生成方法
JP2011119974A (ja) パノラマ画像合成装置、パノラマ画像合成方法、及びプログラム
JP2015504220A5 (ko)
KR102384983B1 (ko) 연예인의 얼굴 이미지와 사용자의 얼굴 이미지 간의 이미지 합성이 가능한 전자 단말 장치 및 그 동작 방법
CN105744144A (zh) 图像生成方法以及图像生成装置
CN105981366A (zh) 用于呈现图像的方法
CN109120851B (zh) 一种图像处理方法、装置及电子设备
JP2012044358A (ja) 画像処理装置および画像処理プログラム
US20150348301A1 (en) Image processing apparatus, image processing method, and program
JP2005175839A (ja) 画像表示装置、画像表示方法、プログラムおよび記憶媒体
JP2010097449A (ja) 画像合成装置、及び画像合成方法、画像合成プログラム
KR102243928B1 (ko) 디스플레이 장치의 화면을 최적의 상태로 조정 가능하도록 하는 전자 단말 장치 및 그 동작 방법
JP2011172103A (ja) 画像生成装置
CN113012040A (zh) 图像处理方法、装置、电子设备及存储介质
KR102045753B1 (ko) 이미지의 배경 영역에 대한 투명화 처리를 지원하는 이미지 편집 처리 장치 및 그 동작 방법
JP4317003B2 (ja) ハイライト静止画生成・配信装置
JP6625598B2 (ja) 画像生成装置、画像生成方法、画像生成プログラム及び画像生成システム
JP2006318352A (ja) 画像処理装置
EP3869778A1 (en) Augmented paper photo album
CN110913121B (zh) 一种拍摄方法、电子设备及计算机存储介质
CN114222069B (zh) 拍摄方法、拍摄装置及电子设备

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right