KR20110006878A - 복수의 인물에 대한 이미지 생성 장치 및 방법 - Google Patents

복수의 인물에 대한 이미지 생성 장치 및 방법 Download PDF

Info

Publication number
KR20110006878A
KR20110006878A KR1020090064488A KR20090064488A KR20110006878A KR 20110006878 A KR20110006878 A KR 20110006878A KR 1020090064488 A KR1020090064488 A KR 1020090064488A KR 20090064488 A KR20090064488 A KR 20090064488A KR 20110006878 A KR20110006878 A KR 20110006878A
Authority
KR
South Korea
Prior art keywords
face
image
images
score
threshold value
Prior art date
Application number
KR1020090064488A
Other languages
English (en)
Other versions
KR101665130B1 (ko
Inventor
김창한
홍태화
김정훈
조성대
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020090064488A priority Critical patent/KR101665130B1/ko
Priority to US12/833,481 priority patent/US8411171B2/en
Publication of KR20110006878A publication Critical patent/KR20110006878A/ko
Priority to US13/854,460 priority patent/US8964066B2/en
Application granted granted Critical
Publication of KR101665130B1 publication Critical patent/KR101665130B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/98—Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing

Abstract

본 발명은 복수의 인물에 대한 이미지 생성 장치 및 방법에 관한 것이다.
이를 위해 복수의 이미지를 촬영하고, 촬영된 복수의 이미지 각각에 대한 복수의 얼굴 이미지를 검출하며, 촬영된 복수의 이미지 각각에서 검출된 복수의 얼굴 이미지별로 얼굴 이미지에 대한 사용자의 만족도를 수치화한 얼굴 점수를 산출한 후 복수의 얼굴 이미지별로 산출된 얼굴 점수 각각이 미리 설정된 임계값 이상인지 판단하고, 판단 결과에 따라 복수의 얼굴 이미지별로 최대 얼굴 점수를 가지는 얼굴 이미지 각각을 합성하여 최종 이미지로 출력함으로써 사용자가 가장 만족하는 촬영 이미지를 생성할 수 있게 된다.
이미지 합성, 단체사진, 얼굴 점수

Description

복수의 인물에 대한 이미지 생성 장치 및 방법{APPARATUS AND METHOD FOR GENERATING IMAGE INCLUDING A PLURALITY OF PERSONS}
본 발명은 이미지 생성 장치 및 방법에 관한 것으로, 특히 복수의 인물을 촬영한 이미지를 생성하기 위한 장치 및 방법에 관한 것이다.
일반적으로 단체 사진과 같이 여러 사람을 촬영할 경우 각각의 사람마다 눈을 감거나 어색한 표정을 지을 수 있으며, 이러한 이미지가 촬영되면 사용자는 이러한 부분이 촬영되지 않도록 계속적으로 단체 사진을 촬영해야 한다. 뿐만 아니라 눈을 감거나 어색한 표정, 시선을 다르게 하는 사람이 촬영되지 않더라도 촬영된 사진을 마음에 들지 않을 수도 있기 때문에 이러한 경우에도 다시 단체 사진을 촬영해야 한다. 이와 같이 단체 사진을 찍을 때는 촬영되는 사람 모두가 만족할만한 사진을 촬영하는 것이 쉽지 않다.
이에 따라 만족할 만한 단체 사진을 위해 사용자는 여러 장의 이미지를 촬영한 후 임의적으로 이미지 합성이 가능한 장치 또는 프로그램을 이용하여 촬영된 이미지를 합성하는 방법을 이용할 수 있다.
또한, 단체 사진을 촬영할 시 촬영된 이미지 내의 인물들이 눈을 깜박이거나 어색한 표정을 짓는 것이 감지되면 다시 연속으로 이미지를 촬영하여 눈 깜박임을 최소한으로 할 수도 있다.
이와 같이 종래에는 단체 사진과 같이 복수의 인물을 촬영하는 경우 임의적으로 복수의 이미지를 촬영하여 이미지 합성 프로그램을 이용하여 이미지를 합성하거나 눈 깜박임 또는 미소를 감지하여 이미지를 연속으로 촬영하였다.
그러나 이미지 합성 프로그램을 이용하여 이미지를 합성할 경우 이미지 합성 프로그램이 설치된 장치에 이미지를 이동시키고, 사용자가 직접 이미지 합성 프로그램을 구동하여 여러 장의 이미지를 하나의 이미지로 합성해야 하는 번거로움이 있었다.
또한 눈 깜박임 또는 미소를 감지하여 이미지를 연속으로 촬영할 경우에도 눈 깜박임이나 어색한 표정이 제외된 이미지를 촬영할 수 있어도 사용자가 만족할만한 이미지를 촬영하기 어렵다는 문제점이 있었다.
따라서, 본 발명은 복수의 인물을 촬영할 시 사용자가 만족할만한 이미지를 생성하기 위한 장치 및 방법을 제공한다.
상술한 바를 달성하기 위한 본 발명은 복수의 인물이 촬영된 이미지를 생성하기 위한 장치에 있어서, 복수의 이미지를 촬영하는 이미지 촬영부와, 상기 촬영된 복수의 이미지 각각에 대한 복수의 얼굴 이미지를 검출하는 얼굴 이미지 검출부와, 상기 촬영된 복수의 이미지 각각에서 검출된 복수의 얼굴 이미지별로 얼굴 이미지에 대한 사용자의 만족도를 수치화한 얼굴 점수를 산출하는 얼굴 점수 산출부 와, 상기 복수의 얼굴 이미지별로 산출된 얼굴 점수 각각이 미리 설정된 임계값 이상인지 판단하는 이미지 판단부와, 상기 판단 결과에 따라 상기 복수의 얼굴 이미지별로 최대 얼굴 점수를 가지는 얼굴 이미지 각각을 합성하여 최종 이미지로 출력하는 이미지 합성부를 포함하는 것을 특징으로 한다.
또한, 본 발명은 복수의 인물이 촬영된 이미지를 생성하기 위한 방법에 있어서, 복수의 이미지를 촬영하는 과정과, 상기 촬영된 복수의 이미지 각각에 대한 복수의 얼굴 이미지를 검출하는 과정과, 상기 촬영된 복수의 이미지 각각에서 검출된 복수의 얼굴 이미지별로 얼굴 이미지에 대한 사용자의 만족도를 수치화한 얼굴 점수를 산출하는 과정과, 상기 복수의 얼굴 이미지별로 산출된 얼굴 점수 각각이 미리 설정된 임계값 이상인지 판단하는 과정과, 상기 판단 결과에 따라 상기 복수의 얼굴 이미지별로 최대 얼굴 점수를 가지는 얼굴 이미지 각각을 합성하는 과정과, 상기 합성된 이미지를 최종 이미지로 출력하는 과정을 포함함을 특징으로 한다.
본 발명은 연속으로 촬영된 복수의 이미지에서 복수의 얼굴에 대한 얼굴 점수를 산출하고, 산출된 얼굴 점수를 기준으로 복수의 이미지 내에서 인물별로 가장 잘 촬영된 얼굴 이미지를 판별하여 하나의 이미지로 합성함으로써 촬영된 사람들이 가장 만족할만한 이미지를 촬영할 수 있다는 이점이 있다.
이하 본 발명의 바람직한 실시 예를 첨부한 도면을 참조하여 상세히 설명한다. 하기 설명 및 첨부 도면에서 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략한다.
도 1은 본 발명의 실시 예에 따른 이미지 촬영 장치의 구성도를 나타내는 도면이다.
먼저, 본 발명의 이미지 촬영 장치는 이미지 촬영부(10), 이미지 저장부(20), 얼굴 이미지 검출부(30), 얼굴 점수 산출부(40), 이미지 판단부(50), 이미지 합성부(60), 최종 이미지 출력부(70)를 포함한다.
이미지 촬영부(10)는 카메라를 포함하고, 카메라를 통해서 입력된 광신호를 이미지 데이터로 출력한다.
이미지 저장부(20)는 이미지 촬영부(10)로부터 입력된 이미지 데이터를 저장하고, 도면에 개시되지 않았지만 본 발명의 실시 예에 따라 생성된 최종 이미지를 저장한다.
얼굴 이미지 검출부(30)는 이미지 촬영부(10)로부터 입력된 이미지 내에서 복수의 얼굴 이미지를 검출한다. 여기서, 얼굴 이미지는 검출하는 방법은 일반적으로 사용되는 얼굴 이미지 검출 방법을 이용하여 검출할 수 있으므로 자세한 설명은 생략한다.
얼굴 점수 산출부(40)는 얼굴 이미지 검출부(30)를 통해서 검출된 복수의 얼굴 이미지 각각에 대한 얼굴 점수(Face Score)를 산출한다. 여기서, 얼굴 점수는 이미지 상에서 얼굴 이미지가 잘 촬영된 정도를 수치화 시킨 점수이며, 즉, 이는 촬영된 이미지에서 얼굴 이미지에 대한 사용자의 만족도를 나타낸 것이다.
구체적으로 얼굴 점수 산출부(40)는 얼굴 점수를 산출할 시 복수의 얼굴 이 미지를 바탕으로 얼굴 이미지가 잘 촬영된 정도를 점수화한 값들을 입력 값으로 하여 선형합, 임계값 적용, 고차원 함수 값 적용과 같은 함수를 적용한 후 하나의 결과값으로 산출하는 것이다. 여기서, 얼굴 이미지가 잘 촬영된 정도는 눈 깜박임 감지(blink detection), 표정 검출(Expression detection), 시선 추정(Eye gaze estimation)과 같은 방법을 이용하여 판단할 수 있다.
이러한 얼굴 점수는 필터링 얼굴 점수와 선택 얼굴 점수로 구분되어 산출될 수 있는데, 필터링 얼굴 점수(Filtering Face Score)는 이미지를 재촬영할 것인지를 판단하기 위한 얼굴 점수를 나타내고, 선택 얼굴 점수(Selection Face Score)는 사용자가 만족할만한 이미지라는 것을 판단하기 위한 얼굴 점수를 나타낸다.
이에 따라 얼굴 점수 산출부(40)는 각 얼굴 이미지마다 얼굴 점수를 산출하고, 산출된 얼굴 점수를 이미지 판단부(50)로 출력한다.
이미지 판단부(50)는 얼굴 점수 산출부(40)로부터 입력된 복수의 얼굴 점수 각각이 미리 설정된 임계값 이상인지 여부를 판단한다. 여기서 미리 설정된 임계값은 이미지를 재 촬영하기 위한 판단하기 위해 미리 설정된 값을 의미한다.
이에 따라 산출된 복수의 얼굴 점수 각각이 모두 미리 설정된 임계값 이상이면 이미지 판단부(50)는 촬영 이미지를 바로 최종 이미지 출력부(70)로 출력한다.
또한 산출된 복수의 얼굴 점수 중 어느 하나라도 미리 설정된 임계값 미만이면 이미지 판단부(50)는 이미지 촬영부(10)로 이미지를 재촬영하라는 이미지 재촬영 신호를 출력한다. 이러한 이미지 판단부(50)는 재촬영에 의해서 생성된 복수의 촬영 이미지 내에서 복수의 얼굴 이미지별로 산출된 얼굴 점수가 임계값 이상인 얼 굴 점수를 최소 하나 가지는 촬영 이미지가 촬영될 때까지 이미지 촬영부(10)로 이미지 재 촬영 신호를 계속적으로 출력할 수 있다.
이미지 판단부(50)는 복수의 얼굴 이미지별로 산출된 얼굴 점수가 임계값 이상인 얼굴 점수를 최소 하나 가지는 촬영 이미지가 존재하면 검출된 얼굴 이미지 각각에 대해서 가장 높은 얼굴 점수를 가지는 얼굴 이미지를 판단한다.
또한 이미지 판단부(50)는 촬영 이미지들 중에서 촬영 이미지 내에 미리 설정된 임계값 이상인 얼굴 이미지를 가장 많이 가지고 있는 이미지를 기준 이미지로 설정한다.
이미지 합성부(60)는 설정된 기준 이미지에 이미지 판단부(50)를 통해서 판단된 얼굴 이미지들을 합성한다. 즉, 합성된 이미지는 가장 큰 얼굴 점수를 가지는 N개의 얼굴 이미지를 가지게 된다.
최종 이미지 출력부(70)는 상기와 같이 합성된 이미지를 출력한다. 이때, 본 발명의 실시 예에서는 도면에 도시하지 않았지만 합성된 이미지를 표시부를 통해서 화면에 표시할 수 있다.
이와 같이 본 발명에서는 복수의 촬영 이미지 중 얼굴 점수가 가장 높은 얼굴 이미지들을 서로 합성함으로써 사용자가 만족할만한 이미지를 편리하게 생성할 수 있다는 이점이 있다.
상기에서 설명한 바와 같이 얼굴 점수는 필터링 얼굴 점수와 선택 얼굴 점수로 구분되어 산출할 수도 있는데, 이와 같이 산출된 필터링 얼굴 점수와 선택 얼굴 점수를 이용하여 이미지를 생성하는 4가지의 방법에 대해서 도 2 내지 도 7을 참조 하여 하기에서 살펴보도록 한다.
먼저, 본 발명의 제1 실시 예로 필터링 얼굴 점수에 따라 이미지를 연속으로 촬영하고, 촬영된 이미지들 중에서 선택 얼굴 점수에 따라 이미지를 합성하는 방법에 대해서 도 2를 참조하여 설명하도록 한다.
도 2는 본 발명의 제1 실시 예에 따라 필터링 얼굴 점수 및 선택 얼굴 점수를 이용하여 이미지를 생성하기 위한 과정을 나타내는 흐름도이다.
200단계에서 이미지 촬영부(10)는 M번째 이미지를 촬영하고, 촬영된 이미지를 얼굴 이미지 검출부(30)로 출력한다. 여기서, M은 정수가 될 수 있고, 첫번째 이미지를 촬영하는 경우 M은 1이 된다.
201단계에서 얼굴 이미지 검출부(30)는 촬영된 이미지에서 N개의 얼굴 이미지를 검출한다. 이때, N은 정수가 될 수 있다.
202단계에서 얼굴 점수 산출부(40)는 검출된 N개의 얼굴 이미지 각각에 대한 필터링 얼굴 점수를 산출한다. 여기서, 필터링 얼굴 점수는 이미지를 재촬영하기 위한 판단 기준이 되는 점수이다.
203단계에서 이미지 판단부(50)는 촬영된 M장의 이미지에서 검출된 N개의 얼굴 이미지별로 산출된 필터링 얼굴 점수가 미리 설정된 임계값 이상인 필터링 얼굴 점수를 최소 하나 가지는 촬영 이미지가 존재하는지 판단한다. 여기서 미리 설정된 임계값은 이미지를 재촬영할 것인지를 판단하기 위한 기준값이 된다.
만약 미리 설정된 임계값 이상인 필터링 얼굴 점수를 최소 하나 가지는 촬영 이미지가 존재하지 않으면 이미지 판단부(50)는 204단계로 진행하여 해당 촬영 이 미지를 저장하고, 205단계에서 M+1번째 이미지를 촬영하도록 이미지 촬영부(10)로 이미지 재촬영 신호를 출력한 후 200단계~203단계를 다시 진행한다.
만약 미리 설정된 임계값 이상인 필터링 얼굴 점수를 최소 하나 가지는 촬영 이미지가 존재하면 이미지 판단부(50)는 206단계로 진행하여 현재 촬영된 이미지가 첫번째 촬영된 이미지인지를 판단한다.
판단 결과 첫번째 촬영된 이미지이면 이미지 판단부(50)는 209단계로 진행하여 촬영된 이미지를 최종 이미지 출력부(70)로 출력한다.
판단 결과, 첫번째 촬영된 이미지가 아니면 이미지 판단부(50)는 207단계에서 M장의 촬영 이미지 중에서 필터링 얼굴 점수가 임계값 이상인 얼굴을 최대 개수로 가지는 촬영 이미지를 기준 이미지로 설정한다. 여기서 기준 이미지는 이미지 합성 시 기준이 되는 사진을 의미한다.
208단계에서 이미지 합성부(60)는 설정된 기준 이미지에 M-1장의 촬영 이미지 중 N개의 얼굴 이미지별로 최대 선택 얼굴 점수를 가지는 얼굴 이미지를 합성한다. 여기서, 최대 선택 얼굴 점수는 산출된 필터링 얼굴 점수 중 가장 큰 점수를 의미하며, 사용자가 만족할만한 얼굴 이미지라는 것을 나타내는 점수이다. 또한 이미지 합성부(60)는 이미지들을 합성할 때 이미지 촬영 시 위치가 변화된 것을 보정하기 위해 기준 이미지를 바탕으로 나머지 얼굴 이미지의 위치를 정합시킨다.
209단계에서 최종 이미지 출력부(70)는 이미지 합성부(60)에서 합성된 이미지를 최종 이미지로써 출력한다.
예를 들어, 이미지 촬영부(10)가 도 3의 (a)와 같은 이미지를 촬영했다고 가 정한다. 이때, 얼굴 이미지 검출부(30)는 (a)의 이미지 내에서 4개의 얼굴 이미지를 검출하고, 얼굴 점수 산출부(40)는 4개의 얼굴 이미지 각각에 대한 필터링 얼굴 점수를 산출한다. 만약 300과 같이 3번째 사람이 눈을 감은 경우 산출된 필터링 얼굴 점수는 임계값 미만인 점수로 산출될 것이다. 그러면 얼굴 점수 산출부(40)는 이미지 촬영부(10)로 이미지 재촬영 신호를 출력하고, 이미지 촬영부(10)는 도 3의 (b)와 같은 이미지를 촬영한다. 또한 (b)의 이미지 내에서 301, 302와 같이 두번째, 세번째 사람이 눈을 감은 경우에도 얼굴 점수 산출부(40)는 이미지 재촬영 신호를 출력할 것이다.
이후에 도 3의 (c)와 같은 이미지를 더 촬영했다면 얼굴 이미지 검출부(30)는 도 (c)와 같은 이미지에 대해서 얼굴 이미지를 검출하고, 얼굴 점수 산출부(40)는 검출된 4개의 얼굴 이미지 각각에 대한 필터링 얼굴 점수를 산출한다.
이미지 판단부(50)는 도 3의 (a), (b), (c)에 대한 얼굴 이미지 별로 산출된 필터링 얼굴 점수 각각에 대해서 이미 설정된 임계값 이상인 얼굴 점수가 최소 하나 존재하는지 판단한다.
다시 말해서, (a)의 이미지에서는 세번째 인물이 눈을 감아서 (b)의 이미지가 촬영되고, (b)의 이미지에서는 두번째, 세번째 인물이 눈을 감아서 다시 (c)의 이미지가 촬영된다. 특히, 세번째 인물은 2장의 이미지 촬영 시 계속적으로 눈을 감았기 때문에 세번째 인물의 필터링 얼굴 점수는 임계값 이하를 가질 것이다.
그러므로 이미지 판단부(50)는 세번째 인물의 필터링 얼굴 점수가 임계값 이상을 가질 때까지 계속적으로 이미지를 재촬영하도록 이미지 재촬영 신호를 이미지 촬영부(10)로 출력한다.
만약 (c)의 이미지와 같이 세번째 인물의 필터링 얼굴 점수가 임계값 이상을 가지게 된다면 이미지 판단부(50)는 더 이상 이미지 촬영부(10)로 이미지 재촬영 신호를 출력하지 않을 것이다.
이후 이미지 판단부(50)는 (a)의 이미지를 기준 이미지인 (d)로 설정하고, 이미지 합성부(60)는 (c)의 이미지에서 303과 304의 얼굴 이미지와 (d)의 이미지를 정합시킨 후 합성한다. 이때, 합성된 최종 이미지는 (e)와 같이 도시될 수 있다.
이와 같이 본 발명의 제1 실시 예에서는 필터링 얼굴 점수에 따라 복수의 이미지를 촬영하고, 촬영된 이미지 중에서 최대 선택 얼굴 점수를 가지는 얼굴 이미지로 이루어진 최종 이미지를 출력함으로써 사용자가 가장 만족할만한 단체 사진을 촬영할 수 있게 된다.
두 번째로, 본 발명의 제2 실시 예로 미리 설정된 촬영 횟수에 따라 이미지를 연속적으로 촬영하고, 촬영된 이미지들 각각에서 선택 얼굴 점수를 산출한 후 산출된 선택 얼굴 점수에 따라 이미지를 합성하는 방법에 대해서 도 4를 참조하여 설명하도록 한다.
도 4는 본 발명의 제2 실시 예에 따른 미리 설정된 촬영 횟수에 따라 연속적으로 촬영한 후 선택 얼굴 점수를 이용하여 이미지를 생성하기 위한 과정을 나타내는 흐름도이다.
400단계에서 이미지 촬영부(10)는 미리 설정된 촬영 횟수에 따라 M장의 이미지를 연속으로 촬영한다. 이때, M은 정수가 될 수 있다.
401단계에서 얼굴 이미지 검출부(30)는 촬영된 M장의 이미지 각각에서 N개의 얼굴 이미지를 검출한다. 이때, N은 정수가 될 수 있다.
402단계에서 얼굴 점수 산출부(40)는 M장의 이미지 각각에서 검출된 N개의 얼굴 이미지에 대한 선택 얼굴 점수를 산출한다. 여기서, 선택 얼굴 점수는 촬영된 이미지가 사용자가 만족할만한 얼굴 이미지인 것을 판단할 수 있는 기준이 되는 점수이다.
403단계에서 이미지 판단부(50)는 첫번째로 촬영된 이미지를 기준 이미지로 설정한다.
404단계에서 이미지 합성부(60)는 M장의 이미지 각각에서 검출된 N개의 얼굴 이미지에 대해 산출된 선택 얼굴 점수 중 최대 선택 얼굴 점수를 가지는 얼굴 이미지를 선택하여 기준 이미지에 합성한다.
405단계에서 최종 이미지 출력부(70)는 이미지 합성부(60)에서 합성된 이미지를 최종 이미지로써 출력한다.
이와 같이 이미 설정된 촬영 횟수 내에서 적은 연산량을 통해서 사용자가 가장 만족할만한 이미지를 생성할 수 있게 된다.
세 번째로, 본 발명의 제3 실시 예로 선택 얼굴 점수에 이미지를 연속으로 촬영하고, 촬영된 이미지들 중에서 최대 선택 얼굴 점수에 따라 이미지를 합성하는 방법에 대해서 도 5를 참조하여 설명하도록 한다.
도 5는 본 발명의 제3 실시 예에 따라 선택 얼굴 점수에 이미지를 연속으로 촬영하고, 촬영된 이미지들 중에서 최대 선택 얼굴 점수에 따라 이미지를 합성하는 과정을 나타내는 흐름도이다.
500단계에서 이미지 촬영부(10)는 M번째 이미지를 촬영하고, 촬영된 이미지를 얼굴 이미지 검출부(30)로 출력한다. 여기서, M은 정수가 될 수 있고, 첫번째 이미지를 촬영하는 경우 M은 1이 된다.
501단계에서 얼굴 이미지 검출부(30)는 촬영된 이미지에서 N개의 얼굴 이미지를 검출한다. 이때, N은 정수가 될 수 있다.
502단계에서 얼굴 점수 산출부(40)는 검출된 N개의 얼굴 이미지 각각에 대한 선택 얼굴 점수를 산출한다. 여기서, 선택 얼굴 점수는 촬영된 이미지가 사용자가 만족할만한 얼굴 이미지인 것을 판단하기 위한 얼굴 점수이다.
503단계에서 이미지 판단부(50)는 촬영된 M장의 이미지 각각에서 검출된 N개의 얼굴 이미지별로 산출된 선택 얼굴 점수가 미리 설정된 최대 선택 임계값 이상인 필터링 얼굴 점수를 최소 하나 가지는 촬영 이미지가 존재하는지 판단한다. 여기서 미리 설정된 최대 선택 임계값은 사용자가 가장 만족할만한 얼굴 이미지인 것을 판단하기 위한 기준값이 된다. 또한, 최대 선택 임계값은 상기에서 설명한 제1 실시 예의 미리 설정된 임계값 보다 더 높게 설정될 것이다.
만약 미리 설정된 최대 선택 임계값 이상인 필터링 얼굴 점수를 최소 하나 가지는 촬영 이미지가 존재하지 않으면 이미지 판단부(50)는 504단계로 진행하여 해당 촬영 이미지를 저장하고, 505단계에서 M+1번째 이미지를 촬영하도록 이미지 촬영부(10)로 이미지 재촬영 신호를 출력한 후 500단계~503단계를 다시 진행한다.
만약 미리 설정된 최대 선택 임계값 이상인 선택 얼굴 점수를 최소 하나 가 지는 촬영 이미지가 존재하면 이미지 판단부(50)는 206단계로 진행하여 현재 촬영된 이미지가 첫번째 촬영된 이미지인지를 판단한다.
판단 결과 첫번째 촬영된 이미지이면 이미지 판단부(50)는 509단계로 진행하여 촬영된 이미지를 최종 이미지 출력부(70)로 출력한다.
판단 결과, 첫번째 촬영된 이미지가 아니면 이미지 판단부(50)는 507단계에서 M장의 촬영 이미지 중에서 선택 얼굴 점수가 최대 선택 임계값 이상인 얼굴을 최대 개수로 가지는 촬영 이미지를 기준 이미지로 설정한다.
508단계에서 이미지 합성부(60)는 M-1장의 촬영 이미지 중 N개의 얼굴 이미지별로 최대 선택 얼굴 점수를 가지는 얼굴 이미지를 선택하여 설정된 기준 이미지에 합성한다. 여기서, 최대 선택 얼굴 점수는 산출된 선택 얼굴 점수 중 가장 큰 점수를 의미하며, 사용자가 가장 만족할만한 얼굴 이미지라는 것을 나타내는 점수이다. 또한 이미지 합성부(60)는 이미지들을 합성할 때 이미지 촬영 시 위치가 변화된 것을 보정하기 위해 기준 이미지를 바탕으로 나머지 얼굴 이미지의 위치를 정합시킨다.
509단계에서 최종 이미지 출력부(70)는 이미지 합성부(60)에서 합성된 이미지를 최종 이미지로써 출력한다.
이와 같이 선택 얼굴 점수를 이용하여 사용자가 가장 만족할만한 얼굴 이미지를 선택하고, 선택된 얼굴 이미지에서 최대 선택 얼굴 점수를 가지는 얼굴 이미지를 이용하여 최종 이미지를 출력함으로써 사용자가 최고로 만족할만한 이미지를 촬영할 수 있게 된다.
마지막으로, 본 발명의 제 4실시 예에 따라 촬영된 이미지에서 재촬영이 필요한 얼굴 이미지만을 재촬영하고, 재촬영된 얼굴 이미지를 합성하는 방법에 대해서 도 6를 참조하여 설명하도록 한다.
도 6은 본 발명의 제 4실시 예에 따라 촬영된 이미지에서 재촬영이 필요한 얼굴 이미지만을 재촬영하고, 재촬영된 얼굴 이미지를 합성하는 과정을 나타내는 흐름도이다.
600단계에서 이미지 촬영부(10)는 이미지를 촬영하고, 촬영된 이미지를 얼굴 이미지 검출부(30)로 출력한다.
601단계에서 얼굴 이미지 검출부(30)는 촬영된 이미지에서 N개의 얼굴 이미지를 검출한다. 이때, N은 정수가 될 수 있다.
602단계에서 얼굴 점수 산출부(40)는 검출된 N개의 얼굴 이미지 각각에 대한 필터링 얼굴 점수를 산출한다.
603단계에서 이미지 판단부(50)는 촬영된 이미지에서 검출된 N개의 얼굴 이미지의 필터링 얼굴 점수가 미리 설정된 임계값 미만인 얼굴 점수를 가지는 얼굴 이미지가 존재하는지 판단한다.
그리하여 임계값 미만인 얼굴 점수를 가지는 얼굴 이미지가 존재하면 이미지 판단부(50)는 604단계를 진행하고, 그렇지 않으면 608단계를 진행하여 촬영 이미지를 최종 이미지 출력부(70)로 전달하여 최종 이미지를 출력하도록 한다.
604단계에서 이미지 판단부(50)는 필터링 얼굴 점수가 미리 설정된 임계값 미만인 얼굴 점수를 가지는 얼굴 이미지를 재촬영 영역으로 설정한다. 이때, 재촬 영 영역은 도 7의 701과 같이 얼굴 이미지 영역에서 미리 설정된 크기의 영역 만큼을 추가하여 설정될 수 있다.
605단계에서 이미지 판단부(50)는 설정된 재촬영 영역만을 다시 촬영하기 위한 신호를 이미지 촬영부(10)로 출력하고, 이미지 촬영부(10)는 재촬영 영역만을 다시 촬영한다. 이후 얼굴 이미지 검출부(30)는 재촬영된 영역에서 얼굴 이미지를 검출하고, 얼굴 점수 산출부(40)는 검출된 얼굴 이미지에서 필터링 얼굴 점수를 산출한다.
606단계에서 이미지 판단부(50)는 산출된 필터링 얼굴 점수가 미리 설정된 임계값 이상인지 판단하여 임계값 이상이면 607단계로 진행하고, 그렇지 않으면 605단계로 진행하여 재촬영 영역을 다시 촬영한다. 이후 이미지 판단부(50)는 촬영된 이미지를 기준 이미지로 설정한다.
예를 들어, 이미지 촬영부(10)가 도 7의 (a)와 같은 이미지를 촬영한 경우 얼굴 이미지 검출부(30)는 (a)의 이미지에서 4개의 얼굴을 검출한다. 이후 얼굴 점수 산출부(40)는 4개의 얼굴 각각에 대한 필터링 얼굴 점수를 산출하는데, 세번째 인물이 눈을 감았기 때문에 700의 얼굴 이미지에 대한 필터링 얼굴 점수는 미리 설정된 임계값 미만의 얼굴 점수를 가질 것이다.
이미지 판단부(50)는 700과 같은 얼굴 이미지를 재촬영을 위한 얼굴 이미지로 선택하고, 선택된 얼굴 이미지를 재촬영 영역으로 설정한다. 이때, 재촬영 영역은 도 7의 701과 같이 얼굴 이미지 영역에서 미리 설정된 크기의 영역 만큼을 추가하여 설정될 수 있다.
그리하여 이미지 촬영부(10)는 도 7의 (b)와 같은 재촬영 영역에 해당하는 얼굴 이미지만을 다시 촬영한다. 이때, 본 발명에서는 이미지를 재촬영한 후 재촬영된 이미지에서 재촬영 영역에 해당하는 얼굴 이미지를 제외한 나머지를 삭제할 수도 있다.
607단계에서 이미지 합성부(60)는 기준 이미지에 재촬영 영역에 해당하는 얼굴 이미지를 정합시킨 후 합성한다.
이와 같이 본 발명은 촬영된 이미지 상에서 얼굴 이미지가 잘 촬영된 정도를 수치화 시킨 얼굴 점수를 이용하여 잘 촬영된 얼굴 이미지들로 구성된 이미지를 생성함으로써 사용자가 가장 만족할만한 이미지를 제공할 수 있다는 이점이 있다.
도 1은 본 발명의 실시 예에 따른 이미지 촬영 장치의 구성도,
도 2는 본 발명의 제1 실시 예에 따라 필터링 얼굴 점수 및 선택 얼굴 점수를 이용하여 이미지를 생성하기 위한 과정을 나타내는 흐름도,
도 3은 본 발명의 제1 실시 예에 따라 필터링 얼굴 점수 및 선택 얼굴 점수를 이용하여 이미지를 생성하기 위한 과정을 설명하기 위한 예시도,
도 4는 본 발명의 제2 실시 예에 따른 미리 설정된 촬영 횟수에 따라 연속적으로 촬영한 후 선택 얼굴 점수를 이용하여 이미지를 생성하기 위한 과정을 나타내는 흐름도,
도 5는 본 발명의 제3 실시 예에 따라 선택 얼굴 점수에 이미지를 연속으로 촬영하고, 촬영된 이미지들 중에서 최대 선택 얼굴 점수에 따라 이미지를 합성하는 과정을 나타내는 흐름도,
도 6은 본 발명의 제 4실시 예에 따라 촬영된 이미지에서 재촬영이 필요한 얼굴 이미지만을 재촬영하고, 재촬영된 얼굴 이미지를 합성하는 과정을 나타내는 흐름도,
도 7은 본 발명의 제 4실시 예에 따라 촬영된 이미지에서 재촬영이 필요한 얼굴 이미지만을 재촬영하고, 재촬영된 얼굴 이미지를 합성하는 과정을 설명하기 위한 예시도.

Claims (23)

  1. 복수의 인물이 촬영된 이미지를 생성하기 위한 장치에 있어서,
    복수의 이미지를 촬영하는 이미지 촬영부와,
    상기 촬영된 복수의 이미지 각각에 대한 복수의 얼굴 이미지를 검출하는 얼굴 이미지 검출부와,
    상기 촬영된 복수의 이미지 각각에서 검출된 복수의 얼굴 이미지별로 얼굴 이미지에 대한 사용자의 만족도를 수치화한 얼굴 점수를 산출하는 얼굴 점수 산출부와,
    상기 복수의 얼굴 이미지별로 산출된 얼굴 점수 각각이 미리 설정된 임계값 이상인지 판단하는 이미지 판단부와,
    상기 판단 결과에 따라 상기 복수의 얼굴 이미지별로 최대 얼굴 점수를 가지는 얼굴 이미지 각각을 합성하여 최종 이미지로 출력하는 이미지 합성부를 포함하는 것을 특징으로 하는 이미지 생성 장치.
  2. 제1항에 있어서, 상기 얼굴 점수 산출부는,
    상기 얼굴 점수를 산출할 시 이미지를 재촬영할 것인지를 판단하기 위해 사용되는 필터링 얼굴 점수 또는, 상기 사용자가 만족할만한 이미지라는 것을 판단하기 위해 사용되는 선택 얼굴 점수를 산출하는 것을 특징으로 하는 이미지 생성 장치.
  3. 제2항에 있어서,
    상기 얼굴 점수 산출부는 상기 복수의 이미지 각각에서 검출된 복수의 얼굴 이미지별로 상기 필터링 얼굴 점수를 산출하고,
    상기 이미지 판단부는 상기 복수의 얼굴 이미지별로 산출된 필터링 얼굴 점수 중 미리 설정된 임계값 이상인 필터링 얼굴 점수를 가지는 얼굴 이미지가 존재하는지 판단하는 것을 특징으로 하는 이미지 생성 장치.
  4. 제3항에 있어서,
    상기 이미지 판단부는 상기 판단 결과, 상기 임계값 이상인 필터링 얼굴 점수를 가지는 얼굴 이미지가 존재하면 상기 복수의 이미지 중에서 상기 필터링 얼굴 점수가 상기 임계값 이상인 얼굴 이미지를 최대 개수로 가지는 이미지를 이미지 합성을 위한 기준 이미지로 설정하고,
    상기 이미지 합성부는 상기 복수의 얼굴 이미지별로 산출된 필터링 얼굴 점수 중에서 최대 선택 얼굴 점수를 가지는 얼굴 이미지들을 선택하여 상기 기준 이미지에 합성하는 것을 특징으로 하는 이미지 생성 장치.
  5. 제3항에 있어서,
    상기 이미지 판단부는 상기 판단 결과, 상기 임계값 이상인 필터링 얼굴 점수를 가지는 얼굴 이미지가 존재하지 않으면 상기 이미지 촬영부로 이미지를 재촬 영하기 위한 재촬영 신호를 전달하는 것을 특징으로 하는 이미지 생성 장치.
  6. 제2항에 있어서,
    상기 이미지 촬영부가 미리 설정된 촬영 횟수만큼 이미지를 연속적으로 촬영하고,
    상기 얼굴 점수 산출부가 상기 촬영된 복수의 이미지 각각에서 검출된 복수의 얼굴 이미지별로 상기 선택 얼굴 점수를 산출하고,
    상기 이미지 합성부가 상기 복수의 얼굴 이미지별로 산출된 선택 얼굴 점수 중 최대 선택 얼굴 점수를 가지는 얼굴 이미지를 선택하여 첫번째로 촬영된 이미지와 합성하는 것을 특징으로 하는 이미지 생성 장치.
  7. 제2항에 있어서,
    상기 얼굴 점수 산출부는 상기 복수의 이미지 각각에서 검출된 복수의 얼굴 이미지별로 상기 선택 얼굴 점수를 산출하고,
    상기 이미지 판단부는 상기 복수의 얼굴 이미지별로 산출된 선택 얼굴 점수 중 미리 설정된 최대 선택 임계값 이상인 필터링 얼굴 점수를 가지는 얼굴 이미지가 존재하는지 판단하는 것을 특징으로 하는 이미지 생성 장치.
  8. 제7항에 있어서,
    상기 이미지 판단부는 상기 판단 결과, 상기 최대 선택 임계값 이상인 선택 얼굴 점수를 가지는 얼굴 이미지가 존재하면 상기 복수의 이미지 중에서 상기 선택 얼굴 점수가 상기 최대 선택 임계값 이상인 얼굴 이미지를 최대 개수로 가지는 이미지를 상기 기준 이미지로 설정하고,
    상기 이미지 합성부는 상기 복수의 얼굴 이미지별로 산출된 선택 얼굴 점수 중에서 최대 선택 얼굴 점수를 가지는 얼굴 이미지들을 선택하여 상기 기준 이미지에 합성하는 것을 특징으로 하는 이미지 생성 장치.
  9. 제8항에 있어서,
    상기 이미지 판단부는 상기 판단 결과, 상기 최대 선택 임계값 이상인 선택 얼굴 점수를 가지는 얼굴 이미지가 존재하지 않으면 상기 이미지 촬영부로 이미지를 재촬영하기 위한 신호를 전달하는 것을 특징으로 하는 이미지 생성 장치.
  10. 제1항에 있어서,
    상기 얼굴 이미지 검출부는 상기 이미지 촬영부가 하나의 이미지를 촬영하면 상기 촬영된 이미지에서 복수의 얼굴 이미지를 검출하고,
    상기 얼굴 점수 산출부는 상기 검출된 복수의 얼굴 이미지 각각에 대한 필터링 얼굴 점수를 산출하고,
    상기 이미지 판단부는 상기 복수의 얼굴 이미지 각각에 따라 산출된 필터링 얼굴 점수 중에서 미리 설정된 임계값 미만인 얼굴 점수를 가지는 얼굴 이미지가 존재하는지 판단하는 것을 특징으로 하는 이미지 생성 장치.
  11. 제10항에 있어서,
    상기 이미지 판단부는 상기 판단 결과, 상기 산출된 필터링 얼굴 점수 중에서 미리 설정된 임계값 미만인 얼굴 점수를 가지는 얼굴 이미지가 존재하면 상기 임계값 미만인 얼굴 점수를 가지는 얼굴 이미지를 재촬영을 위한 재촬영 영역으로 설정하고, 상기 설정된 재촬영 영역만을 촬영하기 위한 신호를 상기 이미지 촬영부로 전달하는 것을 특징으로 하는 이미지 생성 장치.
  12. 제11항에 있어서,
    상기 얼굴 점수 산출부는 상기 이미지 촬영부에 의해 상기 재촬영 영역에 해당하는 얼굴 이미지가 촬영되면 상기 재촬영된 얼굴 이미지의 필터링 얼굴 점수를 산출하고,
    상기 이미지 판단부는 상기 산출된 필터링 얼굴 점수가 미리 설정된 임계값 이상인지 판단하고,
    상기 이미지 합성부는 상기 판단 결과, 상기 산출된 필터링 얼굴 점수가 미리 설정된 임계값 이상이면 상기 하나의 이미지에 상기 재촬영된 얼굴 이미지를 합성하는 것을 특징으로 하는 이미지 생성 장치.
  13. 복수의 인물이 촬영된 이미지를 생성하기 위한 방법에 있어서,
    복수의 이미지를 촬영하는 과정과,
    상기 촬영된 복수의 이미지 각각에 대한 복수의 얼굴 이미지를 검출하는 과정과,
    상기 촬영된 복수의 이미지 각각에서 검출된 복수의 얼굴 이미지별로 얼굴 이미지에 대한 사용자의 만족도를 수치화한 얼굴 점수를 산출하는 과정과,
    상기 복수의 얼굴 이미지별로 산출된 얼굴 점수 각각이 미리 설정된 임계값 이상인지 판단하는 과정과,
    상기 판단 결과에 따라 상기 복수의 얼굴 이미지별로 최대 얼굴 점수를 가지는 얼굴 이미지 각각을 합성하는 과정과,
    상기 합성된 이미지를 최종 이미지로 출력하는 과정을 포함함을 특징으로 하는 이미지 생성 방법.
  14. 제13항에 있어서,
    상기 복수의 이미지 각각에서 검출된 복수의 얼굴 이미지별로 상기 이미지를 재촬영할 것인지를 판단하기 위해 사용되는 필터링 얼굴 점수를 산출하는 과정과,
    상기 복수의 얼굴 이미지별로 산출된 필터링 얼굴 점수 중 미리 설정된 임계값 이상인 필터링 얼굴 점수를 가지는 얼굴 이미지가 존재하는지 판단하는 과정을 더 포함함을 특징으로 하는 이미지 생성 방법.
  15. 제14항에 있어서,
    상기 판단 결과, 상기 임계값 이상인 필터링 얼굴 점수를 가지는 얼굴 이미 지가 존재하면 상기 복수의 이미지 중에서 상기 필터링 얼굴 점수가 상기 임계값 이상인 얼굴 이미지를 최대 개수로 가지는 이미지를 이미지 합성을 위한 기준 이미지로 설정하는 과정과,
    상기 복수의 얼굴 이미지별로 산출된 필터링 얼굴 점수 중에서 최대 필터링 얼굴 점수를 가지는 얼굴 이미지들을 선택하여 상기 기준 이미지에 합성하는 과정을 더 포함함을 특징으로 하는 이미지 생성 방법.
  16. 제15항에 있어서,
    상기 판단 결과, 상기 임계값 이상인 필터링 얼굴 점수를 가지는 얼굴 이미지가 존재하지 않으면 이미지를 재촬영하는 과정을 더 포함함을 특징으로 하는 이미지 생성 방법.
  17. 제13항에 있어서,
    미리 설정된 촬영 횟수만큼 이미지를 연속적으로 촬영하는 과정과,
    상기 촬영된 복수의 이미지 각각에서 검출된 복수의 얼굴 이미지별로 상기 사용자가 만족할만한 이미지라는 것을 판단하기 위해 사용되는 선택 얼굴 점수를 산출하는 과정과,
    상기 복수의 얼굴 이미지별로 산출된 선택 얼굴 점수 중 최대 선택 얼굴 점수를 가지는 얼굴 이미지를 선택하여 첫번째로 촬영된 이미지와 합성하는 과정을 더 포함함을 특징으로 하는 이미지 생성 방법.
  18. 제13항에 있어서,
    상기 복수의 이미지 각각에서 검출된 복수의 얼굴 이미지별로 상기 선택 얼굴 점수를 산출하는 과정과,
    상기 복수의 얼굴 이미지별로 산출된 선택 얼굴 점수 중 미리 설정된 최대 선택 임계값 이상인 필터링 얼굴 점수를 가지는 얼굴 이미지가 존재하는지 판단하는 과정을 더 포함함을 특징으로 하는 이미지 생성 방법.
  19. 제18항에 있어서,
    상기 판단 결과, 상기 최대 선택 임계값 이상인 선택 얼굴 점수를 가지는 얼굴 이미지가 존재하면 상기 복수의 이미지 중에서 상기 선택 얼굴 점수가 상기 최대 선택 임계값 이상인 얼굴 이미지를 최대 개수로 가지는 이미지를 상기 기준 이미지로 설정하는 과정과,
    상기 복수의 얼굴 이미지별로 산출된 선택 얼굴 점수 중에서 최대 선택 얼굴 점수를 가지는 얼굴 이미지들을 선택하여 상기 기준 이미지에 합성하는 과정을 더 포함함을 특징으로 하는 이미지 생성 방법.
  20. 제19항에 있어서,
    상기 판단 결과, 상기 최대 선택 임계값 이상인 선택 얼굴 점수를 가지는 얼굴 이미지가 존재하지 않으면 이미지를 재촬영하는 과정을 더 포함함을 특징으로 하는 이미지 생성 방법.
  21. 제13항에 있어서,
    하나의 이미지를 촬영하면 상기 촬영된 이미지에서 복수의 얼굴 이미지를 검출하는 과정과,
    상기 검출된 복수의 얼굴 이미지 각각에 대한 필터링 얼굴 점수를 산출하는 과정과,
    상기 복수의 얼굴 이미지 각각에 따라 산출된 필터링 얼굴 점수 중에서 미리 설정된 임계값 미만인 얼굴 점수를 가지는 얼굴 이미지가 존재하는지 판단하는 과정을 더 포함함을 특징으로 하는 이미지 생성 방법.
  22. 제21항에 있어서,
    상기 판단 결과, 상기 산출된 필터링 얼굴 점수 중에서 미리 설정된 임계값 미만인 얼굴 점수를 가지는 얼굴 이미지가 존재하면 상기 임계값 미만인 얼굴 점수를 가지는 얼굴 이미지를 재촬영을 위한 재촬영 영역으로 설정하는 과정과,
    상기 설정된 재촬영 영역만을 촬영하는 과정을 더 포함함을 특징으로 하는 이미지 생성 방법.
  23. 제22항에 있어서,
    상기 재촬영 영역에 해당하는 얼굴 이미지가 촬영되면 상기 재촬영된 얼굴 이미지의 필터링 얼굴 점수를 산출하는 과정과,
    상기 산출된 필터링 얼굴 점수가 미리 설정된 임계값 이상인지 판단하는 과정과,
    상기 판단 결과, 상기 산출된 필터링 얼굴 점수가 미리 설정된 임계값 이상이면 상기 하나의 이미지에 상기 재촬영된 얼굴 이미지를 합성하는 과정을 더 포함함을 특징으로 하는 이미지 생성 방법.
KR1020090064488A 2009-07-15 2009-07-15 복수의 인물에 대한 이미지 생성 장치 및 방법 KR101665130B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020090064488A KR101665130B1 (ko) 2009-07-15 2009-07-15 복수의 인물에 대한 이미지 생성 장치 및 방법
US12/833,481 US8411171B2 (en) 2009-07-15 2010-07-09 Apparatus and method for generating image including multiple people
US13/854,460 US8964066B2 (en) 2009-07-15 2013-04-01 Apparatus and method for generating image including multiple people

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090064488A KR101665130B1 (ko) 2009-07-15 2009-07-15 복수의 인물에 대한 이미지 생성 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20110006878A true KR20110006878A (ko) 2011-01-21
KR101665130B1 KR101665130B1 (ko) 2016-10-25

Family

ID=43465010

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090064488A KR101665130B1 (ko) 2009-07-15 2009-07-15 복수의 인물에 대한 이미지 생성 장치 및 방법

Country Status (2)

Country Link
US (2) US8411171B2 (ko)
KR (1) KR101665130B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130114893A (ko) * 2012-04-10 2013-10-21 삼성전자주식회사 연속 사진 촬영 장치 및 방법
KR101325002B1 (ko) * 2011-09-29 2013-11-08 가시오게산키 가부시키가이샤 화상 처리 장치, 화상 처리 방법 및 기록 매체
KR20180133897A (ko) * 2016-11-29 2018-12-17 베이징 시아오미 모바일 소프트웨어 컴퍼니 리미티드 사진 합성 방법, 장치, 프로그램 및 기록매체

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011234002A (ja) * 2010-04-26 2011-11-17 Kyocera Corp 撮像装置及び端末装置
JP5631106B2 (ja) 2010-08-18 2014-11-26 キヤノン株式会社 画像処理装置、その制御方法、及びプログラム、並びに撮像装置
US9203539B2 (en) 2010-12-07 2015-12-01 Verizon Patent And Licensing Inc. Broadcasting content
US8982220B2 (en) * 2010-12-07 2015-03-17 Verizon Patent And Licensing Inc. Broadcasting content
US8928760B2 (en) 2010-12-07 2015-01-06 Verizon Patent And Licensing Inc. Receiving content and approving content for transmission
US20120300092A1 (en) * 2011-05-23 2012-11-29 Microsoft Corporation Automatically optimizing capture of images of one or more subjects
KR101231469B1 (ko) 2012-02-23 2013-02-07 인텔 코오퍼레이션 이미지 처리 지원 방법, 장치, 및 이 방법을 실행하기 위한 컴퓨터 판독 가능한 기록 매체
WO2013131536A1 (en) * 2012-03-09 2013-09-12 Sony Mobile Communications Ab Image recording method and corresponding camera device
KR101948692B1 (ko) * 2012-10-09 2019-04-25 삼성전자주식회사 촬영 장치 및 이미지 합성 방법
US9275269B1 (en) 2012-11-09 2016-03-01 Orbeus, Inc. System, method and apparatus for facial recognition
US9336583B2 (en) * 2013-06-17 2016-05-10 Cyberlink Corp. Systems and methods for image editing
KR102090105B1 (ko) * 2013-07-16 2020-03-17 삼성전자 주식회사 카메라를 구비하는 장치의 이미지 처리장치 및 방법
US20150317511A1 (en) * 2013-11-07 2015-11-05 Orbeus, Inc. System, method and apparatus for performing facial recognition
CN103747180A (zh) * 2014-01-07 2014-04-23 宇龙计算机通信科技(深圳)有限公司 照片拍摄方法及拍照终端
CN104899544B (zh) * 2014-03-04 2019-04-12 佳能株式会社 图像处理装置和图像处理方法
CN104243818B (zh) * 2014-08-29 2018-02-23 小米科技有限责任公司 图像处理方法、装置及设备
US9996749B2 (en) 2015-05-29 2018-06-12 Accenture Global Solutions Limited Detecting contextual trends in digital video content
US9830727B2 (en) * 2015-07-30 2017-11-28 Google Inc. Personalizing image capture
CN105827969A (zh) * 2016-03-29 2016-08-03 乐视控股（北京）有限公司 一种智能拍照的方法、装置及移动设备
CN105812672B (zh) * 2016-05-27 2019-06-14 Oppo广东移动通信有限公司 拍照处理方法及装置
CN107454305A (zh) * 2016-05-31 2017-12-08 宇龙计算机通信科技(深圳)有限公司 一种自动拍照方法和电子设备
US10257414B2 (en) * 2016-07-15 2019-04-09 Qualcomm Incorporated Method and system for smart group portrait
CN106355549A (zh) * 2016-09-30 2017-01-25 北京小米移动软件有限公司 拍照方法及设备
CN106780296A (zh) * 2016-11-29 2017-05-31 北京小米移动软件有限公司 照片合成方法及装置
US10176616B2 (en) * 2017-01-19 2019-01-08 Adobe Inc. Automatic capture and refinement of a digital image of a group of people without user intervention
WO2019044608A1 (ja) * 2017-08-29 2019-03-07 日本電気株式会社 情報処理装置、情報処理方法、及び、記録媒体
US10475222B2 (en) * 2017-09-05 2019-11-12 Adobe Inc. Automatic creation of a group shot image from a short video clip using intelligent select and merge
US11068141B1 (en) * 2018-02-02 2021-07-20 Snap Inc. Device-based image modification of depicted objects
CN108492266B (zh) * 2018-03-18 2020-10-09 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN108495038B (zh) * 2018-03-30 2021-09-07 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN108259767B (zh) * 2018-03-30 2020-07-07 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN108491822B (zh) * 2018-04-02 2020-09-08 杭州高创电子科技有限公司 一种基于嵌入式设备有限缓存的人脸检测去重方法
CN108965697A (zh) * 2018-06-28 2018-12-07 努比亚技术有限公司 一种拍摄控制方法、终端及计算机可读存储介质
CN109151308A (zh) * 2018-08-30 2019-01-04 上海与德科技有限公司 一种自动拍照方法、装置、服务器和存储介质
CN109005357B (zh) * 2018-10-15 2020-07-03 Oppo广东移动通信有限公司 一种拍照方法、拍照装置及终端设备
KR20210047025A (ko) * 2019-10-21 2021-04-29 엘지전자 주식회사 지능형 디바이스 및 그의 사용자 선택 방법
CN111401206A (zh) * 2020-03-11 2020-07-10 恒睿(重庆)人工智能技术研究院有限公司 一种全景图共享方法、系统、设备和介质
CN112036311A (zh) * 2020-08-31 2020-12-04 北京字节跳动网络技术有限公司 基于眼部状态检测的图像处理方法、装置及存储介质
CN114520890B (zh) * 2020-11-19 2023-07-11 华为技术有限公司 图像处理方法及装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040223649A1 (en) * 2003-05-07 2004-11-11 Eastman Kodak Company Composite imaging method and system
US20050129324A1 (en) * 2003-12-02 2005-06-16 Lemke Alan P. Digital camera and method providing selective removal and addition of an imaged object
US7634106B2 (en) * 2004-09-22 2009-12-15 Fujifilm Corporation Synthesized image generation method, synthesized image generation apparatus, and synthesized image generation program
JP4197019B2 (ja) * 2006-08-02 2008-12-17 ソニー株式会社 撮像装置および表情評価装置
JP4853320B2 (ja) * 2007-02-15 2012-01-11 ソニー株式会社 画像処理装置、画像処理方法
JP2009124644A (ja) 2007-11-19 2009-06-04 Sanyo Electric Co Ltd 画像処理装置、撮像装置及び画像再生装置
JP2009141811A (ja) 2007-12-07 2009-06-25 Nec Corp 画像処理装置、方法、プログラム、記録媒体、撮像装置及び携帯端末装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101325002B1 (ko) * 2011-09-29 2013-11-08 가시오게산키 가부시키가이샤 화상 처리 장치, 화상 처리 방법 및 기록 매체
KR20130114893A (ko) * 2012-04-10 2013-10-21 삼성전자주식회사 연속 사진 촬영 장치 및 방법
KR20180133897A (ko) * 2016-11-29 2018-12-17 베이징 시아오미 모바일 소프트웨어 컴퍼니 리미티드 사진 합성 방법, 장치, 프로그램 및 기록매체

Also Published As

Publication number Publication date
KR101665130B1 (ko) 2016-10-25
US8411171B2 (en) 2013-04-02
US20110013038A1 (en) 2011-01-20
US8964066B2 (en) 2015-02-24
US20130215293A1 (en) 2013-08-22

Similar Documents

Publication Publication Date Title
KR101665130B1 (ko) 복수의 인물에 대한 이미지 생성 장치 및 방법
CN103081455B (zh) 从手持设备所捕获的多个图像进行肖像图像合成
JP4898532B2 (ja) 画像処理装置および撮影システム並びに瞬き状態検出方法、瞬き状態検出プログラムおよびそのプログラムが記録された記録媒体
US20170213385A1 (en) Apparatus and method for generating 3d face model using mobile device
US7046924B2 (en) Method and computer program product for determining an area of importance in an image using eye monitoring information
JP2005318554A (ja) 撮影装置及びその制御方法及びプログラム及び記憶媒体
JP2016516369A (ja) 写真出力方法および装置
JP6583660B2 (ja) 画像合成装置及び画像合成方法
JP2004180298A (ja) アイモニタリング機能を備えるカメラシステム
JP5467993B2 (ja) 画像処理装置、複眼デジタルカメラ、及びプログラム
CN108111768B (zh) 控制对焦的方法、装置、电子设备及计算机可读存储介质
JP5941736B2 (ja) 撮影機器
US20050251741A1 (en) Methods and apparatus for capturing images
JP2011135527A (ja) デジタルカメラ
JP2011048295A (ja) 複眼撮影装置及びその姿勢検出方法
US20150178589A1 (en) Apparatus for processing digital image and method of controlling the same
US10075631B2 (en) Imaging apparatus, imaging method and recording medium having program for performing self-timer shooting
JP5272797B2 (ja) デジタルカメラ
JP2014143595A (ja) 画像記録装置
JP2008197889A (ja) 静止画生成方法、静止画生成装置および静止画生成プログラム
JP2011040860A (ja) 画像処理装置及び画像処理プログラム
JP2008167028A (ja) 撮像装置
JP4922066B2 (ja) カメラ
JP5967422B2 (ja) 撮像装置及び撮像処理方法並びにプログラム
JP2004104426A (ja) 撮像装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190927

Year of fee payment: 4