KR20140035541A - 사진 관리 시스템 및 방법 - Google Patents

사진 관리 시스템 및 방법 Download PDF

Info

Publication number
KR20140035541A
KR20140035541A KR1020120101281A KR20120101281A KR20140035541A KR 20140035541 A KR20140035541 A KR 20140035541A KR 1020120101281 A KR1020120101281 A KR 1020120101281A KR 20120101281 A KR20120101281 A KR 20120101281A KR 20140035541 A KR20140035541 A KR 20140035541A
Authority
KR
South Korea
Prior art keywords
pictures
image
photo
terminal device
face image
Prior art date
Application number
KR1020120101281A
Other languages
English (en)
Inventor
김광철
Original Assignee
에스케이플래닛 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이플래닛 주식회사 filed Critical 에스케이플래닛 주식회사
Priority to KR1020120101281A priority Critical patent/KR20140035541A/ko
Publication of KR20140035541A publication Critical patent/KR20140035541A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/162—Detection; Localisation; Normalisation using pixel segmentation or colour matching

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • General Health & Medical Sciences (AREA)
  • Tourism & Hospitality (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 사진 관리 시스템 및 방법에 관한 것으로, 복수의 사진을 사진 관리 장치에 전송하는 단말 장치; 및 상기 단말 장치로부터 복수의 사진을 수신하고, 상기 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하며, 상기 복수의 사진들 중 특정 얼굴 이미지 또는 의상 이미지를 포함하고 있는 사진들을 추출하는 사진 관리 장치를 포함할 수 있다.

Description

사진 관리 시스템 및 방법{System and Method for photo management}
본 발명은 사진 관리 시스템 및 방법에 관한 것으로, 더욱 상세하게는 사진에 포함된 인물의 얼굴 이미지와 의상 이미지를 분석하여 사진을 추출하고 관리할 수 있는 사진 관리 시스템 및 방법에 관한 것이다.
디지털 카메라의 보급 확대되고, 스마트 폰, 태블릿 PC 등의 모바일 기기에 고화질의 촬영 기능이 탑재됨에 따라, 더욱 많은 사진들이 디지털화되어서 저장/관리되고 있으며, 통신망을 통해 빠르게 공유되고 있다.
또한, 일반적으로 하나의 촬영장치를 사용하여 많은 사람을 촬영하게 되므로, 나중에 촬영자가 특정 인물별로 해당 인물이 포함되어 있는 사진을 추출하여 정리할 필요가 생기는데, 종래에는 이러한 추출 작업을 수작업으로 일일이 하는 경우가 많았다. 예를 들어, 여행이나 특정 모임에서 촬영한 사진들을 나중에 정리하거나 공유하고자 때, 특정 인물이 나온 사진만을 추출할 필요성이 생기는데, 종래에는 촬영자가 많은 사진들을 일일이 확인해가면서 특정 인물이 나온 사진을 추출하였다.
따라서, 이러한 불편함을 해결하기 위해 한국등록특허 제10-0650683호의 기술이 개발되었는데, 한국등록특허 제10-0650683호 기술은 사진의 촬영 또는 저장 시마다 해당 사진과 연계될 수 있는 추가 정보(사진에 포함되어 있는 인물 정보 등)를 텍스트의 형태로 저장하여, 후에 사진들을 분류하거나 추출할 때 저장된 추가정보를 활용하여 작업을 용이하게 할 수 있는 기술이었다.
하지만, 이러한 종래기술은 사진 촬영 시에 관련 정보를 일일이 텍스트화하여 정리해야 하므로 불편하고, 사전에 추가정보를 입력하지 않은 사진들은 분류하거나 추출할 수 없다는 문제점이 있었다.
따라서, 이러한 종래 기술의 문제점을 해결할 수 있으며, 다수의 사진 중에서 특정 인물이 포함된 사진만을 자동을 추출하여 관리 또는 공유할 수 있게 하는 새로운 기술의 개발이 요구되고 있다.
KR 10-0650683 B1
본 발명에 따른 사진 관리 시스템 및 방법은, 사전에 각 사진들과 연계하여 추가적인 정보들을 입력하거나 태킹(tagging)하지 않더라도, 다수의 사진 중에서 특정 인물이 포함된 사진만을 자동을 추출하여 관리할 수 있게 하는 것을 해결과제로 한다.
상기와 같은 과제를 해결하기 위한 본 발명의 일 실시예에 따른 단말 장치는, 복수의 사진이 저장된 저장부; 상기 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하고, 특정 얼굴 이미지 또는 특정 의상 이미지를 포함하고 있는 사진들을 추출하는 사진 관리부; 및 상기 사진 관리부에 의해 추출된 사진들을 표시하는 표시부를 포함하는 것을 특징으로 한다.
또한, 본 발명의 일 실시예에 따른 단말 장치는, 상기 사진 관리부가 2이상의 얼굴 이미지를 특정하여 사진들을 추출하는 것을 특징으로 한다.
또한, 본 발명의 일 실시예에 따른 단말 장치는, 상기 사진 관리부가 상기 의상 이미지를 분석할 때, 상의 이미지와 하의 이미지를 분리하여 분석하되, 색상을 기준으로 분석하는 것을 특징으로 한다.
또한, 본 발명의 일 실시예에 따른 단말 장치는, 상기 사진 관리부가, 상기 복수의 사진들의 메타 데이터를 분석하고, 사진이 촬영된 위치 정보 또는 시간 정보를 함께 고려하여 사진들을 추출하는 것을 특징으로 한다.
또한, 본 발명의 일 실시예에 따른 단말 장치는, 상기 사진 관리부가, 상기 복수의 사진에서 얼굴 이미지를 분석하는 얼굴 이미지 분석 모듈; 상기 복수의 사진에서 의상 이미지를 분석하는 의상 이미지 분석 모듈; 상기 복수의 사진들의 메타 정보를 분석하는 메타 정보 분석 모듈; 및 상기 얼굴 이미지 분석 모듈, 상기 의상 이미지 분석 모듈 또는 상기 메타 정보 분석모듈에 의해 분석된 정보들을 바탕으로 사진을 추출하는 사진 추출 모듈을 포함하는 것을 특징으로 한다.
또한, 본 발명의 일 실시예에 따른 단말 장치는, 사진을 전송 받거나, 추출된 사진을 전송하여 공유하기 위한 통신부를 더 포함하는 것을 특징으로 한다.
다음으로, 상기와 같은 과제를 해결하기 위한 본 발명의 일 실시예에 따른 사진 관리 장치는, 단말 장치와 데이터를 송수신하기 위한 통신부; 상기 통신부를 통해 단말 장치로부터 수신한 복수의 사진이 저장되는 데이터베이스부; 및 상기 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하고, 특정 얼굴 이미지 또는 특정 의상 이미지를 포함하고 있는 사진들을 추출하는 통합 사진 관리부를 포함하는 것을 특징으로 한다.
또한, 본 발명의 일 실시예에 따른 사진 관리 장치는, 상기 통합 사진 관리부가, 상기 특정 얼굴 이미지와 매칭되는 인물 정보를 식별하고, 식별된 인물 정보와 매칭되는 단말 장치에 추출된 사진들을 전송하는 것을 특징으로 한다.
또한, 본 발명의 일 실시예에 따른 사진 관리 장치는, 상기 통합 사진 관리부가, 2이상의 얼굴 이미지와 매칭되는 인물 정보를 식별하며, 식별된 인물 정보와 매칭되는 2개 이상의 단말 장치에 추출된 사진들을 전송하는 것을 특징으로 한다.
또한, 본 발명의 일 실시예에 따른 사진 관리 장치는, 상기 통합 사진 관리부가, 상기 의상 이미지를 분석할 때, 상의 이미지와 하의 이미지를 분리하여 분석하되, 색상을 기준으로 분석하는 것을 특징으로 한다.
또한, 본 발명의 일 실시예에 따른 사진 관리 장치는, 상기 통합 사진 관리부가, 상기 복수의 사진들의 메타 데이터를 분석하고, 사진이 촬영된 위치 정보 또는 시간 정보를 함께 고려하여 사진들을 추출하는 것을 특징으로 한다.
또한, 본 발명의 일 실시예에 따른 사진 관리 장치는, 상기 통합 사진 관리부가, 상기 복수의 사진에서 얼굴 이미지를 분석하는 얼굴 이미지 분석 모듈; 상기 복수의 사진에서 의상 이미지를 분석하는 의상 이미지 분석 모듈; 상기 복수의 사진들의 메타 정보를 분석하는 메타 정보 분석 모듈; 및 상기 얼굴 이미지 분석 모듈, 상기 의상 이미지 분석 모듈 또는 상기 메타 정보 분석모듈에 의해 분석된 정보들을 바탕으로 사진을 추출하는 사진 추출 모듈을 포함하는 것을 특징으로 한다.
다음으로, 상기와 같은 과제를 해결하기 위한 본 발명의 일 실시예에 따른 사진 관리 시스템은, 복수의 사진을 사진 관리 장치에 전송하는 단말 장치; 및 상기 단말 장치로부터 복수의 사진을 수신하고, 상기 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하며, 상기 복수의 사진들 중 특정 얼굴 이미지 또는 특정 의상 이미지를 포함하고 있는 사진들을 추출하는 사진 관리 장치를 포함하는 것을 특징으로 한다.
다음으로, 상기와 같은 과제를 해결하기 위한 본 발명의 일 실시예에 따른 단말 장치의 사진 관리 방법은, (a) 단말 장치가 얼굴 이미지 및 의상 이미지를 특정하는 단계; (b) 상기 단말 장치가 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하고, 특정된 얼굴 이미지 또는 특정된 의상 이미지를 포함하고 있는 사진들을 추출하는 단계; 및 (c) 상기 단말 장치가 추출된 사진들을 표시하는 단계를 포함하는 것을 특징으로 한다.
다음으로, 상기와 같은 과제를 해결하기 위한 본 발명의 일 실시예에 따른 사진 관리 방법은, (a) 통합 사진 관리 장치가 단말 장치로부터 복수의 사진을 전송 받는 단계; (b) 상기 통합 사진 관리 장치가 상기 단말 장치로부터 전송되는 데이터를 바탕으로 얼굴 이미지 및 의상 이미지를 특정하는 단계; 및 (c) 상기 통합 사진 관리 장치가 상기 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하고, 특정된 얼굴 이미지 또는 특정된 의상 이미지를 포함하고 있는 사진들을 추출하는 단계를 포함하는 것을 특징으로 한다.
본 발명은, 복수의 사진에 포함된 얼굴 이미지와 의상 이미지를 분석하여, 특정 인물이 포함된 사진들을 자동으로 추출하고 관리할 수 있게 한다.
또한, 본 발명은 얼굴 이미지뿐 아니라 의상 이미지도 함께 고려하여 사진을 추출하기 때문에, 인물 분석의 정확성을 더욱 높일 수 있다. 또한, 얼굴 이미지가 정확히 매칭되지 않는 경우에도, 의상 이미지 분석을 통해 해당 인물이 포함되어 있을 가능성이 높은 사진을 함께 추출할 수 있다.
또한, 본 발명은 2이상의 인물들의 얼굴 이미지 및 의상 이미지를 동시에 고려하여, 해당 인물들이 모두 포함된 사진을 추출할 수도 있다. 따라서, 2인 이상으로 이루어지는 특정 그룹 사람들의 사진도 자동으로 추출하고 정리할 수 있다.
또한, 본 발명은 인물 정보와 상황 정보(특정 모임, 행사)를 동시에 고려한 사진 추출을 가능하게 한다. 구체적으로 본 발명은 의상 이미지(일반적으로 특정 모임 또는 행사에서는 의상이 동일함)를 고려하고, 메타 정보에 포함된 위치 정보 또는 시간 정보를 고려하여 사진을 추출할 수 있기 때문에, 인물 정보와 상황 정보(특정 모임, 행사)를 동시에 만족시키는 사진들을 추출할 수도 있다.
또한, 본 발명은 특정 인물이 포함된 사진들이 추출되면, 추출된 사진들이 특정 인물과 매칭되는 단말 장치에 자동으로 전송되도록 할 수 있다. 따라서, 자동화된 사진 공유 시스템을 구현할 수 있다.
도 1은 본 발명의 일 실시예에 따른 단말 장치의 구성을 개략적으로 나타내는 블럭도이다.
도 2는 본 발명의 일 실시예에 따른 단말 장치에 포함될 수 있는 사진 관리부의 구성을 개략적으로 나타내는 블럭도이다.
도 3은 본 발명의 일 실시예에 따른 사진 관리 시스템의 구성을 개략적으로 나타내는 블록도이다.
도 4는 본 발명의 일 실시예에 따른 사진 관리 장치에 포함될 수 있는 통합 사진 관리부의 구성을 개략적으로 나타내는 블록도이다.
도 5는 본 발명의 일 실시예에 따른 단말 장치의 사진 관리 방법을 개략적으로 나타내는 순서도이다.
도 6은 본 발명의 일 실시예에 따른 사진 관리 방법을 개략적으로 나타내는 도면이다.
본 발명의 전술한 목적과 기술적 구성 및 그에 따른 작용 효과에 관한 자세한 사항은 본 발명의 명세서에 첨부된 도면에 의거한 이하 상세한 설명에 의해 보다 명확하게 이해될 것이다.
이하, 도 1 내지 도 2를 참조하여 본 발명의 일 실시예에 따른 단말 장치를 살펴본다.
도 1은 본 발명의 일 실시예에 따른 단말 장치(100)를 나타낸 도면이다.
도 1을 참조하면, 본 발명의 일 실시예에 따른 단말 장치(100)는, 복수의 사진이 저장되는 저장부(110), 상기 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하고, 특정 얼굴 이미지 또는 특정 의상 이미지를 포함하고 있는 사진들을 추출하는 사진 관리부(120), 상기 사진 관리부에 의해 추출된 사진들을 표시하는 표시부(130)를 포함할 수 있다.
또한, 상기 단말 장치(100)는, 서버 등의 관리장치 또는 다른 단말 장치들과 데이터를 송수신하기 위한 통신부(140), 사진 이미지를 획득하기 위한 촬영부(150), 사용자 입력을 위한 입력부(160), 단말 장치(100)의 전체 동작을 제어하기 위한 제어부의 구성을 포함할 수 있으며, 이 외에도 다양한 구성들이 포함될 수 있다.
한편, 상기 단말 장치(100)는 다양한 전자 장치로 구현될 수 있는데, 예를 들어 사진 촬영 기능이 구비된 스마트 폰, 태블릿 PC, PDA, 디지털 카메라 등의 장치로 구현될 수 있다. 또한, 사진 촬영 기능이 구비되지 않더라도 사진 이미지를 관리할 수 있는 데스크탑 PC, 노트북 등의 다양한 전자장치로도 구현될 수 있다.
상기 저장부(110)는 복수의 사진을 저장하는 구성으로서, 복수의 사진 이외에도 상기 단말 장치(100)의 구동을 구한 다양한 데이터들이 저장될 수 있는 구성이다. 이러한 상기 저장부(110)에 저장되는 복수의 사진은 단말 장치(100) 자체의 촬영부(150)에 의해 촬영된 사진 이미지이거나, 외부의 전자 장치로부터 전송된 사진 이미지일 수 있다. 또한, 상기 저장부(110)는 상기 사진 관리부(120)에 의한 사진 추출이 완료된 경우에는 추출된 사진들을 구분하여 저장할 수도 있다.
상기 통신부(140)는 상기 단말 장치(100)가 다른 단말 장치 또는 서버 등의 관리장치와 데이터를 송수신하기 위한 구성이다. 이러한 상기 통신부(140)는 유선 통신망 또는 무선 통신망 등의 다양한 종류의 통신망을 통해 구성될 수 있으며, 사진 추출의 대상이 되는 복수의 사진을 전송 받거나, 추출된 사진을 전송하는 통로 역할을 할 수 있다.
상기 촬영부(150)는 대상물을 촬영하여 사진 이미지를 생성하는 구성으로서, 상기 단말 장치(100)가 추출의 대상이 되는 복수의 사진을 직접 획득할 수 있게 하는 구성이다. 이러한 상기 촬영부(150)는 바람직하게는 카메라 모듈에 의해 구현될 수 있으며, 이 외에도 다양한 장치로 구현될 수 있다.
상기 입력부(160)는 사용자로부터 추출 사진 선택 정보 등의 데이터를 입력 받기 위한 구성으로서, 사용자와 단말 장치 사이의 인터페이스 역할을 하는 구성이다. 이러한 상기 입력부(160)는, 키패드, 터치 스크린, 마우스, 키보드 등 다양한 입력 장치에 의해 구현될 수 있다.
상기 표시부(130)는, 추출의 대상이 되는 다수의 전체 사진들을 디스플레이 하거나, 상기 사진 관리부(120)에 의해 추출된 사진들을 디스플레이하는 구성을 의미한다. 이러한 상기 표시부(130)는, 이러한 사진들 이외에도 상기 단말 장치(100)의 동작과 관련된 다양한 정보를 디스플레이할 수 있으며, 다양한 디스플레이 장치에 의해 구현될 수 있다.
상기 사진 관리부(120)는, 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하고, 특정 얼굴 이미지 또는 특정 의상 이미지를 포함하고 있는 사진들을 추출한다.
여기서 상기 복수의 사진은 바람직하게는 상기 저장부(110)에 일시적 또는 영구적으로 저장된 사진 이미지로서, 상기 단말 장치(100)에 의해 직접 촬영되거나 외부의 장치로부터 전송된 이미지일 수 있다.
또한, 상기 특정 얼굴 이미지 및 상기 특정 의상 이미지는, 사진 추출의 기준이 되는 특정 인물의 얼굴 이미지와 의상 이미지로서, 바람직하게는 상기 입력부(160)를 통한 사용자의 선택에 의해 특정될 수 있다. 예를 들어, 사용자의 입력에 의해 특정 사진 속 특정 인물이 선택되면, 상기 사진 관리부(120)가 선택된 인물의 얼굴 이미지와 의상 이미지를 추출할 수 있으며, 이렇게 추출된 얼굴 이미지 및 의상 이미지가 추출의 기준이 되는 기준 이미지로 특정될 수 있다. 한편, 특정된 얼굴 이미지 및 의상 이미지는, 2이상의 인물의 얼굴 이미지 및 의상 이미지일 수 있는데, 이 경우 상기 사진 관리부(120)는 2이상의 인물 각각의 얼굴 이미지 및 의상 이미지를 모두 추출하여 기준 이미지로 설정하며, 2이상의 인물이 모두 포함되어 있는 사진을 추출하게 된다.
상기 사진 관리부(120)는, 추출의 기준이 되는 얼굴 이미지 및 의상 이미지의 특정이 완료되면, 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하여, 특정된 이미지들과 매칭(matching)되는 이미지를 포함하고 있는 사진들을 추출하게 된다. 이 경우 상기 사진 관리부(120)는, 1) 특정된 얼굴 이미지와 특정된 의상 이미지를 모두 포함하는 사진 2) 특정된 얼굴 이미지만을 포함하는 사진 3) 특정된 의상 이미지만을 포함하는 사진을 추출하여 제공할 수 있으며, 상기 2) 3)의 경우는 추출 후보 사진들로 처리하여 사용자의 입력에 의한 선별 단계를 더 거치게 할 수도 있다. 따라서, 얼굴 이미지 및 의상 이미지라는 2가지 변수를 체크하여 사진을 추출하기 때문에 보다 정확한 인물 추출이 가능하며, 얼굴 이미지가 인식되지 않는 경우에도 특정 인물이 포함될 확률이 높은 사진을 추출할 수 있게 된다. 한편, 상기 사진 관리부(120)가 2이상의 인물에 대하여 사진을 추출(그룹 추출)하는 경우에는, 각 개인에 대해 특정된 얼굴 이미지 또는 의상 이미지가 적어도 1개 이상씩은 포함되어 있는 사진들만을 추출하는 것이 바람직하다. 예를 들어, 특정 사진에서 A, B, C라는 3명의 인물을 이미지를 특정하고 사진을 추출할 때, A의 얼굴 또는 의상 이미지가 전혀 포함되어 있지 않은 사진, B의 얼굴 또는 의상 이미지가 전혀 포함되어 있지 않은 사진, C의 얼굴 또는 의상 의미지가 전혀 포함되어 있지 않은 사진들은 추출에서 제외하는 것이 바람직하다.
상기 사진 관리부(120)가 얼굴 이미지를 분석하는 기술은 현재 본 기술 분야에서 존재하고 있는 다양한 얼굴 이미지 인식 기술이 적용될 수 있다. 예를 들어, 눈 코 입의 이미지를 인식하고 상대적인 비율을 분석하며, 피부 톤이나 헤어스타일, 안경 등의 이미지를 인식하여 특정인의 얼굴 이미지를 분석하는 기술 등의 다양한 기술이 적용될 수 있다. 또한, 상기 사진 관리부(120)가 의상 이미지를 분석하는 기술 역시 다양한 기술이 적용될 수 있으나, 바람직하게는 색상 중심으로 색도나 채도를 분석하는 방식으로 이루어질 수 있다. 예를 들어, 상기 얼굴 이미지와 연결되어 있는 신체의 외형을 추출하고 각 위치 별 색도와 채도를 분석하여 의상 이미지 분석하거나, 의상의 상의와 하의를 개략적으로 특정하고, 상의와 하의의 색도 및 채도를 분석하는 방식으로 의상 이미지를 분석할 수 있다. 또한, 얼굴 이미지를 기준으로 특정(눈의 배치 방향과 수직이며 코와 입의 배치 방향과 수평인 방향) 방향의 색도 및 채도의 변화 량을 분석하여 의상 이미지를 분석할 수 있으며, 이 외에도 다양한 방식에 의해 의상 이미지를 분석 할 수 있다.
상기 사진 관리부(120)는, 다수의 사진에서 특정 얼굴 이미지 또는 특정 의상 이미지를 포함하는 사진들을 추출할 때, 각 사진들에 포함되어 있는 메타 정보를 추가적으로 활용하여 사진을 추출할 수 있다. 예를 들어, 각 사진에 포함되어 있는 메타 정보에서 사진이 촬영된 위치 정보 또는 시간 정보를 함께 분석하여 사진을 추출할 수 있는데, 이에 따라 특정 이벤트(모임, 행사, 여행)와 관련된 사진들만을 추출하는 것이 가능해진다. 예를 들어, 상기 사진 관리부(120)가 사용자에 의해 선택된 사진에서 얼굴 이미지 및 의상 이미지를 추출하여 특정할 때, 메타 정보에 포함된 위치 정보 또는 시간 정보를 함께 특정하여 사진 추출에 활용하게 된다. 이 경우, 상기 사진 관리부(120)는 특정된 얼굴 이미지 또는 의상 이미지가 포함되는 사진들을 1차적으로 추출하고, 1차적으로 추출된 사진들 중에서 특정된 사진과 유사한 위치에서 촬영되거나 비슷한 시기에 촬영된 사진들을 2차적으로 추출할 수 있는데, 이에 따라 특정 이벤트(모임, 행사 등)와 관련된 사진 중에서 특정 인물이 포함된 사진을 추출하는 것이 가능해진다.
상기 제어부는, 상기 저장부(11), 상기 사진 관리부(120), 상기 표시부(130), 상기 통신부(140), 상기 촬영부(150), 상기 입력부(160)의 동작을 포함하는 전제 단말 장치의 동작을 제어하는 구성을 의미한다. 이러한 상기 제어부는, 다양한 연산 장치들에 의해 구현될 수 있다.
한편, 상기 단말 장치(100)는 상기 통신부(140)를 통해 다른 단말 장치에 추출이 완료된 사진을 전송할 수 있는데, 여기서 상기 다른 단말 장치는 특정된 인물 정보와 매칭되는 단말 장치일 수 있다.
또한, 상기 단말 장치(100)는 통신 망을 통해 SNS 관리 서버 등과 연결되어서 추출된 사진을 전송할 수 있으며, 특히, 사진 추출 과정에서 특정된 인물 정보와 매칭되는 사용자 계정에 추출된 사진을 전송할 수 있다.
도 2는 상기 사진 관리부(120)가 포함할 수 있는 구성들의 일 실시예를 나타내는 블록도이다.
도 2를 참조하면, 상기 사진 관리부(120)는, 복수의 사진에서 얼굴 이미지를 분석하는 얼굴 이미지 분석 모듈(122), 복수의 사진에서 의상 정보를 분석하는 의상 이미지 분석 모듈(124), 복수의 사진에서 메타 정보를 분석하는 메타 정보 분석 모듈(126), 상기 얼굴 이미지 분석 모듈, 상기 의상 이미지 분석 모듈, 상기 메타 정보 분석 모듈에 의해 분석된 정보를 바탕으로 사진을 추출하는 사진 추출 모듈(128)을 포함할 수 있다.
상기 얼굴 이미지 분석 모듈(122)은, 다수 사진에 포함된 얼굴 이미지를 분석하여 특정된 얼굴 이미지를 포함하고 있는 사진을 추출한다. 여기서 상기 얼굴 이미지 분석 모듈(122)이 얼굴 이미지를 분석하는 기술은 현재 본 기술 분야에서 존재하고 있는 다양한 얼굴 이미지 인식 기술이 적용될 수 있다. 예를 들어, 상기 얼굴 이미지 분석 모듈이 눈, 코, 입 등의 특정 이미지를 인식하고 인식된 눈, 코, 입 등의 상대적인 비율을 분석하여, 얼굴 이미지를 인식할 수 있으며, 피부 톤이나 헤어스타일, 안경 등의 부가적인 이미지도 함께 인식하여 특정인의 얼굴 이미지를 분석할 수 있다. 또한, 이러한 방식 이외에도 통상의 기술자에게 용이한 다양한 기술이 적용될 수 있다.
상기 의상 이미지 분석 모듈(124)은, 다수 사진에 포함된 의상 이미지를 분석하여 특정된 의상 이미지를 포함하고 있는 사진을 추출한다. 이러한 상기 의상 이미지 분석 모듈(124)은 바람직하게는 색상 중심으로 색도나 채도를 분석하는 방식으로 의상 이미지를 분석한다. 예를 들어, 상기 얼굴 이미지와 연결되어 있는 신체의 외형을 추출하고 각 위치 별 색도와 채도를 분석하여 의상 이미지 분석하거나, 의상의 상의와 하의를 개략적으로 특정하고, 상의와 하의의 색도 및 채도를 분석하는 방식으로 의상 이미지를 분석할 수 있다. 또한, 얼굴 이미지를 기준으로 특정(눈의 배치 방향과 수직이며 코와 입의 배치 방향과 수평인 방향) 방향의 색도 및 채도의 변화 량을 분석하여 의상 이미지를 분석할 수 있으며, 이 외에도 다양한 방식에 의해 의상 이미지를 분석 할 수 있다.
상기 메타 정보 분석 모듈(126)은, 다수에 사진에 포함된 메타 정보를 분석하여 특정된 사진의 메타 정보와 유사한 정보를 포함하고 있는 사진들을 추출한다. 예를 들어, 다수의 사진에 포함되어 있는 메타 정보에서 각 사진이 촬영된 위치 정보 또는 시간 정보를 분석한 뒤에, 특정된 사진이 촬영된 위치와 인접한 위치에서 촬영된 사진들 또는 특정된 사진이 촬영된 시간과 비슷한 시간에 촬영된 사진들을 추출하게 된다. 여기서 추출의 기준이 되는 위치 정보의 유사성(ex: 몇 m 또는 몇 km 이내)이나 시간 정보의 유사성(ex: 몇 시간 이내, 몇 일 이내)은 사용자의 입력에 의해 선택될 수 있다.
상기 사진 추출 모듈(128)은, 상기 얼굴 이미지 분석 모듈(122), 상기 의상 이미지 분석 모듈(124), 상기 메타 정보 분석 모듈(126)에 의해 분석된 정보 정보를 바탕으로 사진을 추출한다. 이러한 상기 사진 추출 모듈(128)은, 분석된 정보들을 바탕으로, 위에서 설명한 사진 관리 모듈의 사진 추출 동작을 실질적으로 수행하는 구성이며, 중복 설명을 방지하기 위해 자세한 설명은 생략한다.
이하, 도 3 내지 도 4를 참조하여, 본 발명의 일 실시예에 따른 사진 관리 장치 및 시스템을 설명한다.
이하에서 살펴볼 실시예는, 위에서 살펴본 실시예와 달리, 사진 추출을 위한 구체적인 프로세스가 사진 관리 장치(ex: 서버 장치 등)에 의해 통합적으로 수행되는 실시예이다. 따라서, 이하에서 살펴볼 실시예에서는, 각 단말 장치가 사진 추출을 위한 프로그램을 따로 구비할 필요가 없으며, 시스템 차원(각 단말 장치와 상기 사진 관리 장치가 연동된 상태)에서 사진 추출 프로세스가 수행된다.
도 3을 참조하면, 본 발명의 일 실시예에 따른 사진 관리 시스템은, 단말 장치(300)와 사진 관리 장치(200)를 포함할 수 있다.
상기 단말 장치(300)는, 복수의 사진을 상기 사진 관리 장치에 전송하고, 사진 추출 과정에서 필요한 선택 정보 등의 관련 정보들을 전송하며, 상기 사진 관리 장치가 추출한 사진들을 전송 받는다. 이러한 상기 단말 장치(300)는, 다양한 전자 장치로 구현될 수 있는데, 예를 들어 사진 촬영 기능이 구비된 스마트 폰, 태블릿 PC, PDA, 디지털 카메라 등의 장치로 구현될 수 있다. 또한, 사진 촬영 기능이 구비되지 않더라도 사진 이미지를 관리할 수 있는 데스크탑 PC, 노트북 등의 다양한 전자장치로도 구현될 수 있다.
상기 사진 관리 장치(200)는, 연결된 단말 장치(300)로부터 복수의 사진을 수신하고, 상기 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하며, 상기 복수의 사진 중 특정 얼굴 이미지 또는 특정 의상 이미지를 포함하고 있는 사진들을 추출한다.
이러한 상기 사진 관리 장치(200)는, 단말 장치와 데이터를 송수신하기 위한 통신부(210), 상기 통신부를 통해 단말 장치로부터 수신한 복수의 사진이 저장되는 데이터베이스부(230), 상기 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하고, 특정 얼굴 이미지 또는 특정 의상 이미지를 포함하고 있는 사진들을 추출하는 통합 사진 관리부(250)를 포함할 수 있다. 또한, 상기 사진 관리 장치는 상기 통신부, 상기 데이터베이스부, 상기 통합 사진 관리부의 동작을 제어하는 제어부를 더 포함할 수 있다.
상기 통신부(210)는, 단말 장치와 데이터를 송수신하기 위한 구성으로서, 유선 통신망 또는 무선 통신망을 통해 데이터를 송수신 할 수 있으며, 다양한 장치에 의해 구현될 수 있다. 또한, 상기 통신부(210)는, 복수 개의 단말 장치(300)와 연결될 수 있으며, 상기 복수 개의 단말 장치(300)와 병렬적으로 데이터를 송수신할 수 있다. 한편, 상기 통신부(210)는 각 단말 장치로부터 복수의 사진을 전송 받을 수 있으며, 상기 통합 사진 관리부(250)에 의해 추출된 사진들을 여러 단말기에 전송할 수도 있다.
상기 데이터베이스부(230)는, 상기 통신부(210)를 통해 수신한 사진 이미지들과 상기 사진 관리부(250)에 의해 추출된 사진 이미지들을 저장하며, 이러한 사진 이미지 뿐 아니라 상기 사진 관리 장치(200)의 동작에 필요한 다양한 데이터들이 일시적 또는 영구적으로 저장될 수 있다.
상기 통합 사진 관리부(250)는, 단말 장치(300)로부터 전송된 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하고, 특정 얼굴 이미지 또는 특정 의상 이미지를 포함하고 있는 사진들을 추출한다. 이러한 사진 추출 작업은 상기 사진 관리 장치(200)와 연결된 복수 개의 단말 장치(300)와의 관계에서 병렬적으로 수행될 수 있다.
여기서, 상기 특정 얼굴 이미지 및 상기 특정 의상 이미지는, 사진 추출의 기준이 되는 특정 인물의 얼굴 이미지와 의상 이미지로서, 바람직하게는 상기 단말 장치(300)로부터 전송된 선택 정보를 바탕으로 특정될 수 있다. 예를 들어, 상기 단말 장치(300)에 의해 특정 사진 속 특정 인물이 선택되고 해당 선택 정보가 전송되면, 상기 통합 사진 관리부(250)가 선택된 인물의 얼굴 이미지와 의상 이미지를 추출할 수 있으며, 이렇게 추출된 얼굴 이미지 및 의상 이미지가 추출의 기준이 되는 기준 이미지로 특정될 수 있다. 한편, 상기 특정 얼굴 이미지 및 상기 특정 의상 이미지는, 2이상의 인물의 얼굴 이미지 및 의상 이미지일 수 있는데, 이 경우 상기 사진 관리 장치(200)는 2이상의 인물 각각의 얼굴 이미지 및 의상 이미지를 모두 추출하여 기준 이미지로 설정하며, 2이상의 인물이 모두 포함되어 있는 사진을 추출하게 된다.
상기 통합 사진 관리부(250)는, 추출의 기준이 되는 얼굴 이미지 및 의상 이미지의 특정이 완료되면, 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하여, 특정된 이미지들과 매칭되는 이미지를 포함하고 있는 사진들을 추출하게 된다. 이 경우 상기 통합 사진 관리부(250)는, 1) 특정된 얼굴 이미지와 특정된 의상 이미지를 모두 포함하는 사진 2) 특정된 얼굴 이미지만을 포함하는 사진 3) 특정된 의상 이미지만을 포함하는 사진을 추출하여 제공할 수 있으며, 상기 2) 3)의 경우는 추출 후보 사진들로 처리하여 단말 장치의 입력에 의한 선별 단계를 더 거치게 할 수도 있다. 따라서, 얼굴 이미지 및 의상 이미지라는 2가지 변수를 체크하여 사진을 추출하기 때문에 보다 정확한 인물 추출이 가능하며, 얼굴 이미지가 인식되지 않는 경우에도 특정 인물이 포함될 확률이 높은 사진을 추출할 수 있게 된다. 한편, 상기 통합 사진 관리부(250)가 2이상의 인물에 대하여 사진을 추출(그룹 추출)하는 경우에는, 각 개인에 대해 특정된 얼굴 이미지 또는 의상 이미지가 적어도 1개 이상씩은 포함되어 있는 사진들만을 추출하는 것이 바람직하다. 예를 들어, 특정 사진에서 A, B, C라는 3명의 인물을 이미지를 특정하고 사진을 추출할 때, A의 얼굴 또는 의상 이미지가 전혀 포함되어 있지 않은 사진, B의 얼굴 또는 의상 이미지가 전혀 포함되어 있지 않은 사진, C의 얼굴 또는 의상 의미지가 전혀 포함되어 있지 않은 사진들은 추출에서 제외하는 것이 바람직하다.
상기 통합 사진 관리부(250)가 얼굴 이미지를 분석하는 기술은 현재 본 기술 분야에서 존재하고 있는 다양한 얼굴 이미지 인식 기술이 적용될 수 있다. 예를 들어, 눈 코 입의 이미지를 인식하고 상대적인 비율을 분석하며, 피부 톤이나 헤어스타일, 안경 등의 이미지를 인식하여 특정인의 얼굴 이미지를 분석하는 기술 등의 다양한 기술이 적용될 수 있다. 또한, 상기 통합 사진 관리부(250)가 의상 이미지를 분석하는 기술 역시 다양한 기술이 적용될 수 있으나, 바람직하게는 색상 중심으로 색도나 채도를 분석하는 방식으로 이루어질 수 있다. 예를 들어, 상기 얼굴 이미지와 연결되어 있는 신체의 외형을 추출하고 각 위치 별 색도와 채도를 분석하여 의상 이미지 분석하거나, 의상의 상의와 하의를 개략적으로 특정하고, 상의와 하의의 색도 및 채도를 분석하는 방식으로 의상 이미지를 분석할 수 있다. 또한, 얼굴 이미지를 기준으로 특정(눈의 배치 방향과 수직이며 코와 입의 배치 방향과 수평인 방향) 방향의 색도 및 채도의 변화 량을 분석하여 의상 이미지를 분석할 수 있으며, 이 외에도 다양한 방식에 의해 의상 이미지를 분석 할 수 있다.
상기 통합 사진 관리부(250)는, 다수의 사진에서 특정 얼굴 이미지 또는 특정 의상 이미지를 포함하는 사진들을 추출할 때, 각 사진들에 포함되어 있는 메타 정보를 추가적으로 활용하여 사진을 추출할 수 있다. 예를 들어, 각 사진에 포함되어 있는 메타 정보에서 사진이 촬영된 위치 정보 또는 시간 정보를 함께 분석하여 사진을 추출할 수 있는데, 이에 따라 특정 이벤트(모임, 행사, 여행)와 관련된 사진들만을 추출하는 것이 가능해진다. 예를 들어, 상기 통합 사진 관리부(250)가 사용자에 의해 특정된 사진에서 얼굴 이미지 및 의상 이미지를 추출하여 특정할 때, 메타 정보에 포함된 위치 정보 또는 시간 정보를 함께 특정하여 사진 추출에 활용한다. 이 경우, 상기 통합 사진 관리부(250)는 특정된 얼굴 이미지 또는 의상 이미지가 포함되는 사진들을 1차적으로 추출하고, 1차적으로 추출된 사진들 중에서 특정된 사진과 유사한 위치에서 촬영되거나 비슷한 시기에 촬영된 사진들을 2차적으로 추출할 수 있는데, 이에 따라 특정 이벤트(모임, 행사 등)와 관련된 사진 중에서 특정 인물이 포함된 사진을 추출하는 것이 가능해진다.
상기 통합 사진 관리부(250)는, 상기 다수의 사진에서 특정 인물이 포함된 사진을 추출한 이후에는, 특정된 인물의 얼굴 이미지와 매칭되는 인물 정보를 식별하고, 식별된 인물 정보와 매칭되는 단말 장치(또는 사용자 계정)에 추출된 사진들을 전송할 수 있다. 여기서 상기 통합 사진 관리부(250)는, 사전에 상기 데이터베이스부(230)에 저장되어 있는 매칭 정보(얼굴 이미지-단말 매칭 정보)를 이용하여, 특정 인물과 매칭되는 단말 장치(또는 사용자 계정)를 자동으로 식별한 뒤에 추출된 사진을 전송할 수 있다. 또한, 상기 통합 사진 관리부(250)는, 사전에 상기 데이터베이스부(230)에 매칭 정보가 구비되어 있지 않거나, 특정된 얼굴 이미지와 매칭되는 단말 장치(300)를 식별할 수 없는 경우에는, 상기 복수의 사진을 전송한 단말 장치(300)로부터 특정 인물의 단말 장치 정보(또는 사용자 계정 정보)를 추가적으로 입력 받은 후에 추출된 사진을 전송할 수 있다. 한편, 상기 통합 사진 관리부(250)는, 2명 이상의 인물 특정하여 사진을 추출하는 경우에는, 2개 이상의 얼굴 이미지와 매칭되는 2명 이상의 인물 정보를 식별하며, 식별된 인물 정보와 매칭되는 2개 이상의 단말 장치(또는 사용자 계정)에 추출된 사진들을 전송한다.
상기 제어부는 상기 통신부(210), 상기 데이터베이스부(230), 상기 통합 사진 관리부(250)의 동작을 포함한 상기 사진 관리 장치(200)의 동작을 제어하는 구성이다. 이러한 상기 제어부는 다양한 연산 장치에 의해 구현될 수 있다.
도 4는 상기 통합 사진 관리부가 포함할 수 있는 구성들의 일 실시예를 나타내는 블록도이다.
도 4를 참조하면, 상기 사진 관리부는, 복수의 사진에서 얼굴 이미지를 분석하는 얼굴 이미지 분석 모듈, 복수의 사진에서 의상 정보를 분석하는 의상 이미지 분석 모듈, 복수의 사진에서 메타 정보를 분석하는 메타 정보 분석 모듈, 상기 얼굴 이미지 분석 모듈, 상기 의상 이미지 분석 모듈, 상기 메타 정보 분석 모듈에 의해 분석된 정보를 바탕으로 사진을 추출하는 사진 추출 모듈을 포함할 수 있다.
상기 얼굴 이미지 분석 모듈, 상기 의상 이미지 분석 모듈, 상기 메타 정보 분석 모듈, 상기 메타 정보 분석 모듈, 상기 사진 추출 모듈이 수행하는 각각의 동작은 상기 통신부를 통해 연결된 복수의 단말 장치들과의 사이에서 병렬적으로 수행될 수 있다.
또한, 이러한 상기 얼굴 이미지 분석 모듈, 상기 의상 이미지 분석 모듈, 상기 메타 정보 분석 모듈, 상기 사진 추출 모듈은, 위에서 설명한 상기 통합 사진 관리부의 각 기능을 모듈화하여 구분한 것으로, 중복 설명을 방지하기 위하여 자세한 설명은 생략한다.
이하, 도 5를 참조하여, 본 발명의 일 실시예에 따른 단말 장치의 사진 관리 방법을 살펴본다.
도 5를 참조하면, 본 발명의 일 실시예에 따른 단말 장치의 사진 관리 방법은, 단말 장치에 입력된 데이터를 바탕으로 특정 사진에서 특정 인물이 선택되는 단계(S10)를 포함할 수 있다.
다음으로, 상기 단말 장치의 사진 관리 방법은, 상기 S10 단계 이후에, 단말 장치가 상기 인물의 얼굴 이미지 및 의상 이미지를 추출하여 특정하는 단계(S11)를 포함할 수 있다.
상기 S11 단계 이후에는, 상기 단말 장치가 단말 장치 내부에 저장된 복수의 사진을 분석하는데, 구체적으로 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하고, 상기 S11단계에서 특정된 얼굴 이미지 또는 의상 이미지를 포함하고 있는 사진들을 추출(S12)하게 된다.
한편, 상기 단말 장치는, 상기 S11 단계에서 2이상의 인물에 대한 얼굴 이미지 및 의상 이미지를 추출하여 특정할 수 있으며, 특정된 정보를 바탕으로 상기 S12 단계에서 2이상의 인물이 포함된 사진만을 추출할 수도 있다. 또한, 상기 단말 장치는, 상기 S11 단계에서 특정된 사진의 메타 정보(위치정보 또는 시간정보 등)을 추출할 수 있으며, 추출된 메타 정보를 상기 S12 단계에서 활용할 수 있다. 예를 들어, 상기 단말 장치는, 상기 S12 단계에서 특정된 얼굴 이미지 또는 의상 이미지를 포함하는 사진을 1차적으로 추출한 뒤에, 1차적으로 추출된 사진 중에서 메타 정보가 유사한 사진을 2차적으로 추출할 수 있다.
상기 S12 단계 이후에는, 상기 단말 장치가 추출된 사진들을 표시(S13)할 수 있으며, 다양한 통신 망을 통해 추출된 사진이 공유(S14)될 수 있게 한다.
한편, 상기 단말 장치의 사진 관리 방법은, 프로그램의 형태로 구현된 뒤에, 전자 장치에서 판독 가능한 기록매체에 저장되거나, 프로그램 공급 서버를 통하여 공급될 수 있다. 또한, 프로그램의 형태로 구현된 뒤에 다양한 전자 장치 내부에서 일시적 또는 영구적으로 저장될 수 있다.
또한, 이상에서 살핀 본 발명에 따른 단말 장치의 사진 관리 방법은, 카테고리는 상이하지만, 본 발명에 따른 단말 장치(100)와 실질적으로 동일한 특징을 포함할 수 있다. 따라서, 본 발명에 따른 단말 장치(100)와 관련하여 상술한 특징들은, 상기 단말 장치의 사진 관리 방법 발명에도 쉽게 유추되어서 적용될 수 있다.
이하, 도 6을 참조하여, 본 발명의 일 실시예에 따른 사진 관리 방법을 살펴본다.
도 6을 참조하면, 본 발명의 일 실시예에 따른 사진 관리 방법은, 단말 장치가 사진 관리 장치에게 복수의 사진을 전송하는 단계(S20)를 포함할 수 있다.
상기 S20 단계 이후에는, 상기 사진 관리 장치가 인물 정보를 특정하라는 요청을 상기 단말 장치에 전송(S21)한다.
상기 S21 단계 이후에는, 상기 단말 장치가 인물 정보를 특정한 뒤에 특정된 인물 정보를 상기 사진 관리 장치에 전송(S22) 한다. 여기서 상기 특정된 인물 정보는, 바람직하게는 특정 사진 속에 포함되어 있는 특정 인물의 이미지 정보일 수 있으며, 상기 이미지 정보는 얼굴 이미지 정보 및 의상 이미지 정보를 포함할 수 있다.
상기 S22단계 이후에는, 상기 사진 관리 장치가 특정된 인물 정보를 바탕으로, 특정 사진에 포함된 얼굴 이미지와 의상 이미지를 추출하여, 사진 추출을 위한 기본 정보로 결정(S23)하게 된다.
상기 S23 단계 이후에는, 상기 사진 관리 장치가 상기 복수의 사진을 분석하는데, 구체적으로 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하고, 상기 S23단계에서 특정된 얼굴 이미지 또는 의상 이미지를 포함하고 있는 사진들을 추출(S24)하게 된다.
한편, 상기 사진 관리 장치는, 상기 S23 단계에서 2이상의 인물에 대한 얼굴 이미지 및 의상 이미지를 추출하여 특정(이 경우 상기 S22단계에서 상기 단말 장치로부터 2이상의 인물에 대한 특정 정보가 전송된다)할 수 있으며, 특정된 정보를 바탕으로 상기 S24 단계에서 2이상의 인물이 포함된 사진만을 추출할 수도 있다. 또한, 상기 사진 관리 장치는, 상기 S23 단계에서 특정된 사진의 메타 정보(위치정보 또는 시간정보 등)을 추출할 수 있으며, 추출된 메타 정보를 상기 S24 단계에서 활용할 수 있다. 예를 들어, 상기 사진 관리 장치는, 상기 S23 단계에서 특정된 얼굴 이미지 또는 의상 이미지를 포함하는 사진을 1차적으로 추출한 뒤에, 1차적으로 추출된 사진 중에서 메타 정보가 유사한 사진을 2차적으로 추출할 수 있다.
상기 S24 단계 이후에는, 상기 사진 관리 장치가 추출된 사진들을 상기 단말 장치(S25)에 전송한다. 또한, 상기 사진 관리 장치는 추출된 사진들을 다른 단말 장치에도 전송(S26)할 수 있는데, 여기서 추출된 사진들을 전송 받는 단말 장치는 사진 추출을 위해 특정된 인물 정보와 매칭되는 단말 장치일 수 있다.
한편, 상기 사진 관리 장치는 복수의 단말 장치와 연결되어서 각 복수 단말 장치에 병렬적으로 사진 관리 서비스를 제공할 수 있다. 따라서, 상기 S20 내지 S26의 단계들은 복수의 단말 장치 각각에 대하여, 병렬적으로 진행될 수 있다.
또한, 상기 사진 관리 방법은, 프로그램의 형태로 구현된 뒤에, 전자 장치에서 판독 가능한 기록매체에 저장되거나, 프로그램 공급 서버를 통하여 공급될 수 있다. 또한, 프로그램의 형태로 구현된 뒤에 다양한 전자 장치 내부에서 일시적 또는 영구적으로 저장될 수 있다.
또한, 이상에서 살핀 본 발명에 따른 사진 관리 방법은, 카테고리는 상이하지만, 본 발명에 따른 사진 관리 장치 및 시스템과 실질적으로 동일한 특징을 포함할 수 있다. 따라서, 본 발명에 따른 사진 관리 장치 및 시스템과 관련하여 상술한 특징들은, 상기 사진 관리 방법 발명에도 쉽게 유추되어서 적용될 수 있다.
이와 같이, 본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
본 발명은 사진 파일의 관리 가능한 PC, 스마트 폰, 디지털 카메라, 태블릿 등의 다양한 단말 장치에 적용되어서, 특정 인물 정보(얼굴 이미지) 또는 상황 정보(의상 이미지, 위치정보, 시간정보 등)를 고려하여 사진을 추출/관리할 수 있는 새로운 단말 장치를 구현할 수 있다. 또한, 다양한 단말 장치와 연결될 수 있는 서버 등의 관리 장치에도 적용되어서, 새로운 사진 관리 기능을 탑재한 시스템을 구현할 수 있다.
100 : 단말 장치 110 : 저장부
120 : 사진 관리부 122 : 얼굴 이미지 분석 모듈
124 : 의상 이미지 분석 모듈 126 : 메타 정보 분석 모듈
128 : 사진 추출 모듈 130 : 표시부
140 : 통신부 150 : 촬영부
160 : 입력부 200 : 사진 관리 장치
210 : 통신부 230 : 데이터베이스부
250 : 통합 사진 관리부 252 : 얼굴 이미지 분석 모듈
254 : 의상 이미지 분석 모듈 256 : 메타 정보 분석 모듈
258 : 사진 추출 모듈 300 : 단말 장치

Claims (17)

  1. 복수의 사진이 저장된 저장부;
    상기 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하고, 특정 얼굴 이미지 또는 특정 의상 이미지를 포함하고 있는 사진들을 추출하는 사진 관리부; 및
    상기 사진 관리부에 의해 추출된 사진들을 표시하는 표시부;
    를 포함하는 단말 장치.
  2. 제 1 항에 있어서,
    상기 사진 관리부는, 2이상의 얼굴 이미지를 특정하여 사진을 추출하는 것을 특징으로 하는 단말 장치.
  3. 제 1 항에 있어서,
    상기 사진 관리부는,
    상기 의상 이미지를 분석할 때, 상의 이미지와 하의 이미지를 분리하여 분석하되, 색상을 기준으로 분석하는 것을 특징으로 하는 단말 장치.
  4. 제 1 항에 있어서,
    상기 사진 관리부는,
    상기 복수의 사진들의 메타 데이터를 분석하고, 사진이 촬영된 위치 정보 또는 시간 정보를 함께 고려하여 사진들을 추출하는 것을 특징으로 하는 단말 장치.
  5. 제4항에 있어서,
    상기 사진 관리부는,
    상기 복수의 사진에서 얼굴 이미지를 분석하는 얼굴 이미지 분석 모듈;
    상기 복수의 사진에서 의상 이미지를 분석하는 의상 이미지 분석 모듈;
    상기 복수의 사진들의 메타 정보를 분석하는 메타 정보 분석 모듈; 및
    상기 얼굴 이미지 분석 모듈, 상기 의상 이미지 분석 모듈 또는 상기 메타 정보 분석모듈에 의해 분석된 정보들을 바탕으로 사진을 추출하는 사진 추출 모듈;
    을 포함하는 것을 특징으로 하는 단말 장치.
  6. 제 1 항에 있어서,
    사진을 전송받거나, 추출된 사진을 전송하여 공유하기 위한 통신부;를 더 포함하는 것을 특징으로 하는 단말 장치.
  7. 단말 장치와 데이터를 송수신하기 위한 통신부;
    상기 통신부를 통해 단말 장치로부터 수신한 복수의 사진이 저장되는 데이터베이스부; 및
    상기 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하고, 특정 얼굴 이미지 또는 특정 의상 이미지를 포함하고 있는 사진들을 추출하는 통합 사진 관리부;
    를 포함하는 사진 관리 장치.
  8. 제 7 항에 있어서,
    상기 통합 사진 관리부는,
    상기 특정 얼굴 이미지와 매칭되는 인물 정보를 식별하고, 식별된 인물 정보와 매칭되는 단말 장치에 추출된 사진들을 전송하는 것을 특징으로 하는 사진 관리 장치.
  9. 제 8 항에 있어서,
    상기 통합 사진 관리부는, 2 이상의 얼굴 이미지와 매칭되는 인물 정보를 식별하며, 식별된 인물 정보와 매칭되는 2개 이상의 단말 장치에 추출된 사진들을 전송하는 것을 특징으로 하는 사진 관리 장치.
  10. 제 7 항에 있어서,
    상기 통합 사진 관리부는,
    상기 의상 이미지를 분석할 때, 상의 이미지와 하의 이미지를 분리하여 분석하되, 색상을 기준으로 분석하는 것을 특징으로 하는 사진 관리 장치.
  11. 제 7 항에 있어서,
    상기 통합 사진 관리부는,
    상기 복수의 사진들의 메타 데이터를 분석하고, 사진이 촬영된 위치 정보 또는 시간 정보를 함께 고려하여 사진들을 추출하는 것을 특징으로 하는 사진 관리 장치.
  12. 제 7 항에 있어서,
    상기 통합 사진 관리부는,
    상기 복수의 사진에서 얼굴 이미지를 분석하는 얼굴 이미지 분석 모듈;
    상기 복수의 사진에서 의상 이미지를 분석하는 의상 이미지 분석 모듈;
    상기 복수의 사진들의 메타 정보를 분석하는 메타 정보 분석 모듈; 및
    상기 얼굴 이미지 분석 모듈, 상기 의상 이미지 분석 모듈 또는 상기 메타 정보 분석모듈에 의해 분석된 정보들을 바탕으로 사진을 추출하는 사진 추출 모듈;
    을 포함하는 것을 특징으로 하는 사진 관리 장치.
  13. 복수의 사진을 사진 관리 장치에 전송하는 단말 장치; 및
    상기 단말 장치로부터 복수의 사진을 수신하고, 상기 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하며, 상기 복수의 사진들 중 특정 얼굴 이미지 또는 특정 의상 이미지를 포함하고 있는 사진들을 추출하는 사진 관리 장치;
    를 포함하는 사진 관리 시스템.
  14. (a) 단말 장치가 얼굴 이미지 및 의상 이미지를 특정하는 단계;
    (b) 상기 단말 장치가 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하고, 특정된 얼굴 이미지 또는 특정된 의상 이미지를 포함하고 있는 사진들을 추출하는 단계; 및
    (c) 상기 단말 장치가 추출된 사진들을 표시하는 단계;
    를 포함하는 단말 장치의 사진 관리 방법.
  15. (a) 단말 장치가 얼굴 이미지 및 의상 이미지를 특정하는 단계;
    (b) 상기 단말 장치가 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하고, 특정된 얼굴 이미지 또는 특정된 의상 이미지를 포함하고 있는 사진들을 추출하는 단계; 및
    (c) 상기 단말 장치가 추출된 사진들을 표시하는 단계;
    를 포함하는 단말 장치의 사진 관리 방법이 프로그램으로 기록된 전자장치에서 판독 가능한 기록매체.
  16. (a) 통합 사진 관리 장치가 단말 장치로부터 복수의 사진을 전송 받는 단계;
    (b) 상기 통합 사진 관리 장치가 상기 단말 장치로부터 전송되는 데이터를 바탕으로 얼굴 이미지 및 의상 이미지를 특정하는 단계; 및
    (c) 상기 통합 사진 관리 장치가 상기 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하고, 특정된 얼굴 이미지 또는 특정된 의상 이미지를 포함하고 있는 사진들을 추출하는 단계;
    를 포함하는 사진 관리 방법.
  17. (a) 통합 사진 관리 장치가 단말 장치로부터 복수의 사진을 전송 받는 단계;
    (b) 상기 통합 사진 관리 장치가 상기 단말 장치로부터 전송되는 데이터를 바탕으로 얼굴 이미지 및 의상 이미지를 특정하는 단계; 및
    (c) 상기 통합 사진 관리 장치가 상기 복수의 사진에 포함되어 있는 얼굴 이미지 및 의상 이미지를 분석하고, 특정된 얼굴 이미지 또는 특정된 의상 이미지를 포함하고 있는 사진들을 추출하는 단계;
    를 포함하는 사진 관리 방법이 프로그램으로 기록된 전자장치에서 판독 가능한 기록매체.
KR1020120101281A 2012-09-13 2012-09-13 사진 관리 시스템 및 방법 KR20140035541A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120101281A KR20140035541A (ko) 2012-09-13 2012-09-13 사진 관리 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120101281A KR20140035541A (ko) 2012-09-13 2012-09-13 사진 관리 시스템 및 방법

Publications (1)

Publication Number Publication Date
KR20140035541A true KR20140035541A (ko) 2014-03-24

Family

ID=50645339

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120101281A KR20140035541A (ko) 2012-09-13 2012-09-13 사진 관리 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR20140035541A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101647691B1 (ko) * 2016-02-12 2016-08-16 데이터킹주식회사 하이브리드 기반의 영상 클러스터링 방법 및 이를 운용하는 서버
KR102005379B1 (ko) * 2019-03-29 2019-07-30 주식회사 루나사이드 앨범 제공 장치 및 방법
KR102668980B1 (ko) * 2023-01-11 2024-05-24 주식회사 올댓모델 직무교육 및 사후관리결과의 학습에 기초한 인공지능 기반 구인구직 추천 시스템

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101647691B1 (ko) * 2016-02-12 2016-08-16 데이터킹주식회사 하이브리드 기반의 영상 클러스터링 방법 및 이를 운용하는 서버
WO2017138766A1 (ko) * 2016-02-12 2017-08-17 데이터킹주식회사 하이브리드 기반의 영상 클러스터링 방법 및 이를 운용하는 서버
US10803348B2 (en) 2016-02-12 2020-10-13 Dataking. Inc Hybrid-based image clustering method and server for operating the same
KR102005379B1 (ko) * 2019-03-29 2019-07-30 주식회사 루나사이드 앨범 제공 장치 및 방법
KR102668980B1 (ko) * 2023-01-11 2024-05-24 주식회사 올댓모델 직무교육 및 사후관리결과의 학습에 기초한 인공지능 기반 구인구직 추천 시스템

Similar Documents

Publication Publication Date Title
US11321583B2 (en) Image annotating method and electronic device
CN105144156B (zh) 将元数据与个人图像集合中的图像相关联
EP3179408B1 (en) Picture processing method and apparatus, computer program and recording medium
US20150356345A1 (en) Systems and methods for detecting, identifying and tracking objects and events over time
CN111083364A (zh) 一种控制方法、电子设备、计算机可读存储介质、芯片
EP2890088A1 (en) Method for displaying schedule reminding information, terminal device and cloud server
CN108228114A (zh) 控制方法和存储介质
CN105303161A (zh) 一种多人拍照的方法及装置
CN108234814A (zh) 控制方法和存储介质
KR101534808B1 (ko) 얼굴 인식 기술을 이용한 전자 앨범 관리 방법 및 시스템
RU2643464C2 (ru) Способ и устройство для классификации изображений
US9953221B2 (en) Multimedia presentation method and apparatus
CN104750737A (zh) 一种相册管理方法及装置
CN104239336A (zh) 一种图像筛选方法、装置及终端
EP3437015B1 (en) Image action based on automatic feature extraction
EP3159808A1 (en) Address book based picture matching method and terminal
CN105740379A (zh) 一种照片分类管理方法和装置
JP2015114828A (ja) 情報処理装置及び情報処理プログラム
US20210144197A1 (en) Method for Presenting Schedule Reminder Information, Terminal Device, and Cloud Server
JP2016157439A (ja) 情報処理システムと、その処理方法及びプログラム
KR20150007403A (ko) 인물 인식 방법, 그리고 인물 정보 데이터 운용 방법 및 장치
CN105894042A (zh) 检测证件图像遮挡的方法和装置
CN110929063A (zh) 相册生成方法、终端设备及计算机可读存储介质
CN105335714A (zh) 照片处理方法、装置和设备
CN103609098B (zh) 用于在远程呈现系统中注册的方法和装置

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E601 Decision to refuse application