KR101319544B1 - 인물의 등장 장면을 검출하는 촬영장치 및 이를 이용한검출 방법 - Google Patents

인물의 등장 장면을 검출하는 촬영장치 및 이를 이용한검출 방법 Download PDF

Info

Publication number
KR101319544B1
KR101319544B1 KR1020070107980A KR20070107980A KR101319544B1 KR 101319544 B1 KR101319544 B1 KR 101319544B1 KR 1020070107980 A KR1020070107980 A KR 1020070107980A KR 20070107980 A KR20070107980 A KR 20070107980A KR 101319544 B1 KR101319544 B1 KR 101319544B1
Authority
KR
South Korea
Prior art keywords
image
person
scene
captured image
representative
Prior art date
Application number
KR1020070107980A
Other languages
English (en)
Other versions
KR20090042079A (ko
Inventor
김명보
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020070107980A priority Critical patent/KR101319544B1/ko
Priority to EP08153382.0A priority patent/EP2053540B1/en
Priority to US12/060,310 priority patent/US8422735B2/en
Publication of KR20090042079A publication Critical patent/KR20090042079A/ko
Application granted granted Critical
Publication of KR101319544B1 publication Critical patent/KR101319544B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8233—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being a character code signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은, 인물의 등장 장면을 검출하는 촬영장치 및 이를 이용한 검출 방법에 관한 것으로서, 본 촬영장치에 따르면, 인물의 대표 영상과 촬영 영상을 비교하여 인물이 등장하는 장면을 검출하고, 검출된 장면에 대한 정보를 촬영 영상과 함께 저장한다. 이에 의해, 영상에서 사용자가 찾고자 하는 인물이 등장하는 장면에 대해 빠르게 검색할 수 있고, 손쉽게 영상을 편집할 수 있다.
대표 영상, 등장인물 리스트

Description

인물의 등장 장면을 검출하는 촬영장치 및 이를 이용한 검출 방법{PHOTOGRAPHING APPARATUS FOR DETECTING APPEARANCE OF PERSON AND METHOD THEREOF}
본 발명은 촬영장치에 관한 것으로서, 더욱 상세하게는 촬영을 통해 생성한 영상을 저장하고 저장된 영상을 재생할 수 있는 촬영장치에 관한 것이다.
다양한 컨텐츠가 사용자에게 제공되고, 괄목할 만한 발전을 이룬 디지털 기술이 각종 데이터 저장용 전자기기에 접목되어 구현됨에 따라, 전자기기는 사용자가 사용하기에 충분한 양의 저장공간을 제공하는 것이 가능해졌다.
특히, 근래에는 디지털 카메라 또는 디지털 캠코더의 보급이 확산되면서, 방대한 양의 영상 컨텐츠를 저장매체에 저장할 수 있게 되었다. 그러나, 사용자의 기록에 대한 공간적 측면에서의 편의성이 증대할수록, 편집 및 관리에 대한 시간적 측면에서의 곤란성도 함께 증대되고 있다. 즉, 사용자가 전체 영상에서 원하는 영상에 대해 편집을 할 경우, 저장매체에 저장된 영상의 양이 많기 때문에 검색 및 편집에 있어서의 시간적 노력이 배가 된다.
따라서, 사용자의 입장에서는 많은 양의 영상 중에서 자신이 원하는 영상만 을 재생시키고 싶을 경우, 변속 재생 등의 기능을 이용하여 검색해야 하는 번거로움이 존재한다.
이와 같이, 특정 인물이 등장하는 장면에 대해 별도로 저장하거나 삭제하기를 원하는 경우, 또는 특정 인물이 등장하는 장면에 대해서만 재생시키기를 원하는 경우에는, 영상에 사용자가 찾는 인물이 존재하는지 여부를 수동조작을 통해 일일이 검색하는 방식을 이용해야 하는 문제가 발생하며, 이러한 방식은 사용자에게 여러가지로 큰 불편함이 아닐 수 없다. 따라서, 전자기기에 저장되어 있는 방대한 양의 데이터들을 사용자의 기호에 맞춰 간편하게 편집할 수 있는 편집방법의 필요성이 중요시되고 있다.
본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 본 발명의 목적은, 신속하게 파일을 편집할 수 있도록, 기저장된 대표 영상과 촬영 영상을 비교하여 인물의 등장 장면을 검출하는 촬영장치 및 이를 이용한 검출 방법을 제공함에 있다.
상기 목적을 달성하기 위한 본 발명에 따른 촬영장치는, 얼굴의 대표 영상이 인물별로 분류되어 저장되어 있는 제1 저장부; 피사체를 촬영하여 촬영 영상을 생성하는 촬영부; 상기 촬영 영상이 장면 단위로 저장되는 제2 저장부; 및 상기 대표 영상과 촬영 영상을 비교하여 상기 촬영 영상 내에서 상기 대표 영상의 인물 중 적 어도 하나와 동일한 인물이 등장하는 장면을 검출하고, 상기 검출된 장면에 대한 정보를 상기 촬영 영상과 함께 제2 저장부에 저장하도록 제어하는 제어부;를 포함한다.
여기서, 상기 제어부는, 상기 촬영 영상에 등장하는 인물의 얼굴이 상기 대표 영상에 존재하지 않으면, 상기 촬영 영상에 등장하는 인물의 얼굴에 대한 영상 중 적어도 한 장면을 상기 제1 저장부에 저장하여 상기 대표 영상으로 추가하는 것이 바람직하다.
또한, 상기 제어부는, 상기 추가된 대표 영상의 인물이 등장하는 장면을 검출하고, 상기 검출된 장면에 대한 정보를 상기 촬영 영상과 함께 제2 저장부에 저장하도록 제어하는 것이 바람직하다.
그리고, 상기 제어부는, 상기 촬영 영상을 인물별로 선택하여 편집할 수 있도록 등장인물 리스트를 제공하고, 상기 리스트에서 적어도 하나의 인물이 선택되면, 상기 검출된 장면에 대한 정보를 이용하여 상기 촬영 영상에서 상기 선택된 인물이 등장하는 장면을 편집하는 것이 바람직하다.
또한, 상기 제어부는, 상기 촬영 영상에 존재하는 각 인물의 얼굴에 대한 첫 화면들을 상기 등장인물 리스트로 제공하는 것이 바람직하다.
그리고, 상기 편집은, 상기 촬영 영상에 대한 인물별 저장, 재생, 삭제 및 스킵 중 적어도 하나의 동작을 포함할 수 있다.
그리고, 상기 제1 저장부는, 메모리 및 HDD 중 적어도 하나를 포함하고, 상기 제2 저장부는, DVD, 메모리 및 HDD 중 적어도 하나를 포함할 수 있다.
또한, 상기 대표 영상은 정지영상이고, 상기 촬영 영상은 동영상 및 정지영상 중 적어도 하나를 포함할 수 있다.
한편, 본 발명에 따른 검출방법은, 피사체를 촬영하여 촬영 영상을 생성하는 단계; 상기 촬영 영상을 장면 단위로 저장하는 단계; 인물별로 분류되어 저장되어 있는 얼굴의 대표 영상과 상기 촬영 영상을 비교하는 단계; 상기 비교 결과를 이용하여 상기 촬영 영상 내에서 상기 대표 영상의 인물 중 적어도 하나와 동일한 인물이 등장하는 장면을 검출하는 단계; 및 상기 검출된 장면에 대한 정보를 상기 촬영 영상과 함께 저장하는 단계;를 포함한다.
여기서, 본 검출방법은, 상기 촬영 영상에 등장하는 인물의 얼굴이 상기 대표 영상에 존재하지 않으면, 상기 촬영 영상에 등장하는 인물의 얼굴에 대한 영상 중 적어도 한 장면을 상기 대표 영상으로 추가하는 단계;를 더 포함할 수 있다.
또한, 본 검출방법은, 상기 추가된 대표 영상의 인물이 등장하는 장면을 검출하고, 상기 검출된 장면에 대한 정보를 상기 촬영 영상과 함께 저장하는 단계;를 더 포함할 수 있다.
그리고, 본 검출방법은, 상기 촬영 영상을 인물별로 선택하여 편집할 수 있도록 등장인물 리스트를 제공하는 단계; 및 상기 리스트에서 적어도 하나의 인물이 선택되면, 상기 검출된 장면에 대한 정보를 이용하여 상기 촬영 영상에서 상기 선택된 인물이 등장하는 장면을 편집하는 단계;를 더 포함할 수 있다.
또한, 상기 등장인물 리스트는, 상기 촬영 영상에 존재하는 각 인물의 얼굴에 대한 첫 화면들인 것이 바람직하다.
그리고, 상기 편집은, 상기 촬영 영상에 대한 인물별 저장, 재생, 삭제 및 스킵 중 적어도 하나의 동작을 포함하는 것이 바람직하다.
또한, 상기 대표 영상은, 메모리 및 HDD 중 적어도 하나에 저장되어 있고, 상기 촬영 영상은, DVD, 메모리 및 HDD 중 적어도 하나에 저장되는 것이 바람직하다.
그리고, 상기 대표 영상은 정지영상이고, 상기 촬영 영상은 동영상 및 정지영상 중 적어도 하나를 포함하는 것이 바람직하다.
이상 설명한 바와 같이, 본 발명에 의하면, 사용자가 원하는 인물에 대해 빠르게 검색할 수 있어 검색 시간을 단축할 수 있으며, 변속 재생 등의 기능을 번거롭게 일일이 사용하지 않으면서도 영상의 특정 장면에 대해 손쉽게 편집할 수 있다.
이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다.
도 1은 본 발명의 일 실시예에 따른 디지털 캠코더(100)의 내부 블럭도이다. 도 1에 도시된 바와 같이, 본 실시예에 따른 디지털 캠코더(100)는 촬영부(110), 신호처리부(120), 디스플레이(130), CODEC(140), 저장부(150), 제어부(160) 및 사용자 입력부(170)를 구비한다.
촬영부(110)는 렌즈를 통해 입사되는 광학상을 촬영하여 광신호를 전기신호로 광전 변환하여 영상신호를 생성한다.
신호처리부(120)는 촬영부(110)에서 생성된 영상신호에 대한 색신호 처리, 감마 보정, 손떨림 보정 및 디지털 줌잉 등의 신호처리를 수행한다.
디스플레이(130)는 신호처리부(120)에서 출력되는 영상신호를 표시하여, 촬영된 영상을 사용자가 볼 수 있도록 제공한다.
CODEC(140)은 신호처리부(120)에서 출력되는 영상신호를 소정 압축포맷으로 압축한다. 적용가능한 대표적인 압축포맷으로서 MPEG 포맷과 H.264 포맷을 들 수 있다. 하지만, 본 발명은 이에 국한되는 것은 아니며, 이외의 압축포맷이 적용되는 경우에도 적용될 수 있다.
저장부(150)는 CODEC(140)에서 압축된 영상신호와 인물별로 분류된 얼굴에 대한 대표 영상을 기록하는 기록매체이다. 이와 같은 저장부(150)는 기록매체로서 DVD(Digital Versatile Disk), HD-DVD(High Definition-DVD), BD(Blue-lay Disk)와 같은 광기록매체, HDD(Hard Disk Drive)와 같은 자기기록매체, 메모리카드와 플래시 메모리 같은 반도체 기록매체를 들 수 있다.
하지만, 본 발명은 이에 국한되는 것은 아니며, 이외에 영상신호를 기록할 있는 매체라면 이들과 다른 것이라도 기록매체로 적용할 수 있다. 또한, CODEC(140)에서 압축된 영상신호와 인물별로 분류된 얼굴에 대한 대표 영상은 각각 별도의 기록매체에 저장될 수 있다. 본 실시예에서는, CODEC(140)에서 압축된 영상인 촬영 영상은 DVD에 저장되고, 인물별로 분류된 얼굴에 대한 대표 영상은 플래시 메모리에 저장된다.
사용자 입력부(170)는 사용자의 명령을 입력받기 위한 다양한 버튼들이 마련 된다.
제어부(160)는 CODEC(140)에서 압축된 영상인 촬영 영상이 기록되도록, 저장부(150)를 제어한다. 구체적으로 제어부(160)는, CODEC(140)에서 압축된 영상인 촬영 영상이 장면 단위로 DVD에 저장되고, 얼굴의 대표 영상이 인물별로 분류되어 플래시 메모리에 저장되도록 저장부(150)를 제어한다.
또한, 제어부(160)는 저장부(150)에 내장/장착되는 기록매체들 간의 파일복사, 영상비교 및 편집을 제어한다.
특히, 제어부(160)는 CODEC(140)에서 압축된 영상인 촬영 영상과 저장부(150)에 저장된 대표 영상을 비교하여, 촬영 영상 중에서 저장부(150)에 저장된 대표 영상의 인물과 동일한 인물이 등장하는 장면을 검출해낸다.
인물의 등장 장면을 검출하는 방법으로는 얼굴 검출 방법에 의하며, 구체적으로 제어부(160)는 촬영 영상에서 얼굴 검출 방법에 의해 검출된 얼굴과 저장부(150)에 저장된 대표 영상들을 비교하여 일치 여부를 판별한다. 또한, 제어부(160)는 판별된 결과에 따라 촬영 영상의 얼굴이 누구의 얼굴인지 판단하여 해당 얼굴의 인물을 검출하며, 그 인물이 등장하는 장면을 검출하게 되는 것이다.
검출이 완료되면, 제어부(160)는 검출된 장면에 대한 정보를 데이터베이스화하여 촬영 영상과 함께 저장부(150)에 저장한다.
그리고, 제어부(160)는 CODEC(140)에서 압축된 촬영 영상과 저장부(150)에 저장된 대표 영상을 비교하여, 촬영 영상 중에서 저장부(150)에 저장된 대표 영상의 인물과 동일한 인물이 발견되지 않으면, 촬영 영상에 등장하는 인물의 얼굴 영 상 중 한 장면을 대표 영상으로 하여 저장부(150)에 저장하여 대표 영상에 추가한다.
또한, 제어부(160)는 대표 영상의 추가가 완료되면, 촬영 영상과 저장부(150)에 추가되어 저장된 대표 영상을 비교하여, 촬영 영상 중에서 저장부(150)에 저장된 대표 영상의 인물과 동일한 인물이 등장하는 장면을 검출해내며, 검출된 장면에 대한 정보를 데이터베이스화하여 촬영 영상과 함께 저장부(150)에 저장한다.
구체적으로, 제어부(160)는 촬영 영상에 대한 파일과 별도로 인물이 등장하는 장면에 대한 정보를 인물별로 데이터베이스화한 정보 파일을 생성하고 촬영 영상에 대한 파일이 저장되는 DVD에 함께 저장한다. 이와 같이 촬영 영상에 대한 파일과 정보 파일이 함께 저장됨으로써, 추후 DVD에 기록된 영상이 재생될 때에도 정보 파일에서 인물이 등장하는 장면에 대한 정보를 참고할 수 있다.
그리고, 제어부(160)는 사용자 입력부(170)에 마련된 버튼에 의해 사용자로부터 인물별 편집을 위한 명령을 입력받으면, 촬영된 영상을 인물별로 선택하여 편집할 수 있도록 등장인물에 대한 리스트를 디스플레이(130)에 제공한다. 이때, 등장인물 리스트에 표시되는 영상은, 사용자로 하여금 쉽게 알아볼 수 있게 하기 위해, 촬영 영상에 존재하는 각 인물의 얼굴에 대한 첫 화면으로 구성된다.
제어부(160)는 사용자에 의해 등장인물 리스트 중 특정 등장인물이 선택되면 선택된 인물의 등장 장면에 대해 저장, 삭제, 스킵 또는 재생 등의 동작을 선택할 수 있기 위한 화면을 제공한다. 편집 과정에 대한 구체적인 설명은 도 3a 내지 도 3c를 참조하여 후술하기로 한다.
도 2는 본 발명의 일 실시예에 따른 검출 방법의 설명에 제공되는 흐름도이다.
우선, 제어부(160)는 디지털 캠코더(100)가 현재 촬영 모드인지 여부를 판단한다(S210).
디지털 캠코더(100)가 촬영 모드로 판단되면(S210-Y), 제어부(160)는 촬영된 영상과 저장부(150)에 기저장된 대표 영상을 비교한다. 여기서, 대표 영상은 각 인물의 얼굴에 대한 대표적인 영상들의 집합을 의미한다.
제어부(160)는 촬영된 영상과 저장부(150)에 기저장된 대표 영상을 비교하여 촬영된 영상에 존재하는 특정 인물이 새로운 인물인지 여부를 판단한다(S230).
촬영된 영상의 인물이 기저장된 대표 영상에 존재하지 않는 인물인 경우, 즉, 촬영된 영상에 존재하는 특정 인물이 새로운 인물인 경우에는(S230-Y). 촬영된 영상에 존재하는 특정 인물에 대한 영상 중 하나의 영상을 저장부(150)에 저장하여 그 인물의 대표 영상으로 추가한다(S240).
반대로, 촬영된 영상의 인물이 기저장된 대표 영상에 존재하는 인물인 경우, 즉, 촬영된 영상에 존재하는 특정 인물이 새로운 인물이 아닌 경우에는(S230-N). 특정 인물에 대한 영상을 저장부(150)에 저장하지 않는다.
이후 제어부(160)는 촬영 영상에서 인물이 등장하는 장면을 검출한다(S250).
또한, 제어부(160)는 인물이 등장하는 장면을 검출한 결과에 대한 정보를 데이터베이스화하여 촬영 영상과 함께 저장부(150)에 저장한다(S260).
여기서, 사용자 입력부(170)를 통해 사용자에 의해 편집 명령이 수신되면(S265-Y), 제어부(160)는 촬영 영상과 함께 저장부(150)에 저장되어 있는 촬영 영상의 장면에 대한 정보를 추출하여, 디스플레이(130)에 촬영 영상의 등장인물 리스트를 제공한다(S270).
디스플레이(130)에 제공된 등장인물 리스트에서 특정 인물이 선택되면(S280-Y), 제어부(160)는 촬영 영상에서 선택된 인물이 등장하는 장면에 대한 편집 동작을 수행한다.
도 3a 내지 도 3b는 촬영 영상을 인물별로 편집하는 과정의 설명에 제공되는 도면이다.
도 3a는 디지털 카메라(100)의 촬영부(110)에 의해 촬영되어 디스플레이(130)에 출력되는 촬영 영상(300)을 도시한 도면이다. 도 3a에 도시된 바와 같이, 촬영 영상(300)에는 2명의 인물이 촬영되고 있으며, 촬영을 의미하는 아이콘(310)이 표시되고 있다.
이때, 제어부(160)는 촬영부(110)에 의해 촬영되어 생성된 영상과 저장부(150)에 저장된 대표 영상을 비교하게 되고, 촬영 영상 중에서 저장부(150)에 저장된 대표 영상의 인물과 동일한 인물이 등장하는 장면을 검출한다.
검출이 완료되면, 제어부(160)는 검출된 장면에 대한 정보를 데이터베이스화하여 촬영 영상과 함께 저장부(150)에 저장한다. 반면, 촬영 영상 중에서 저장부(150)에 저장된 대표 영상의 인물과 동일한 인물이 검출되지 않으면, 촬영 영상에 등장하는 인물의 얼굴 영상 중 한 장면을 대표 영상으로 하여 저장부(150)에 저 장하여 대표 영상에 대한 업데이트를 한다.
또한, 제어부(160)는 대표 영상의 추가가 완료되면, 촬영부(110)에 의해 촬영되어 생성된 영상과 저장부(150)에 추가되어 저장된 대표 영상을 비교하여, 촬영 영상 중에서 저장부(150)에 저장된 대표 영상의 인물과 동일한 인물이 등장하는 장면을 검출해내며, 검출된 장면에 대한 정보를 데이터베이스화하여 촬영 영상과 함께 저장부(150)에 저장한다.
도 3b는 디지털 카메라(100)의 디스플레이(130)에 표시되는 등장인물 리스트를 도시한 도면이다. 사용자 입력부(170)에 의해 촬영 영상의 편집 명령이 입력되면, 제어부(160)는 디스플레이(130)에 등장인물 리스트가 표시되도록 제어한다.
등장인물 리스트의 화면은 식별명칭을 표시하는 부분(330), 대표 영상이 표시되는 부분(340) 및 식별명칭을 회전시키는 부분(320-1, 320-2)을 구비한다.
식별명칭을 표시하는 부분(330)에는 촬영 영상에 등장하는 인물들에 대한 식별명칭이 표시된다.
대표 영상이 표시되는 부분(340)에는 각 식별명칭에 대한 대표 영상이 표시된다. 일 예로, 도 3b에는 '아버지'라는 식별명칭에 대한 대표영상이 표시되고 있다.
식별명칭을 회전시키는 부분(320-1, 320-2)은 디스플레이되지 않은 식별명칭을 확인하고 디스플레이시키기 위해 식별명칭 리스트를 회전시키기 위해 선택될 수 있는 아이콘으로 표시된다.
상기 설명한 바와 같이 제어부(160)는 촬영된 영상과 저장부(150)에 기저장 된 대표 영상을 비교하여 촬영된 영상에 존재하는 특정 인물이 새로운 인물인지 여부를 판단한다.
여기서, 영상이 표시되는 부분(340)에 디스플레이된 '아버지'의 영상은 촬영 영상에서 추출된 영상이 아니고 이미 식별명칭이 부여된 저장부(150)에 기저장되어 있던 영상이기 때문에, 저장부(160)는 '아버지'에 대한 영상을 저장부(150)에 저장하지 않는다. 이는 '어머니', '나' 및 '동생'의 경우도 마찬가지이다.
한편, 'NAME 1' 및 'NAME 2'의 대표 영상은 저장부(150)에 기저장된 영상이 아니고, 새로운 인물에 대한 촬영 영상의 한 장면에 대한 영상이기 때문에 식별명칭이 부여되지 않았다. 이와 같이 촬영된 영상에 존재하는 특정 인물이 새로운 인물인 경우에는 촬영된 영상에 존재하는 특정 인물에 대한 영상 중 하나의 영상을 저장부(150)에 저장하여 그 인물의 대표 영상으로 추가한다.
또한, 추가된 대표 영상에 대해서는, 사용자 입력부(170)를 통해 새로운 식별명칭을 부여하는 것이 가능하다.
도 3c는 도 3b에 도시된 등장인물 리스트 중 특정 인물의 등장 장면을 편집하기 위한 화면을 도시한 도면이다. 예를 들어, 도 3b에서 사용자가 '아버지'를 선택하면, 도 3c와 같이 편집 종류를 선택할 수 있는 화면이 표시된다.
편집 종류를 선택할 수 있는 화면은, 저장을 선택할 수 있는 부분(350), 재생을 선택할 수 있는 부분(360), 삭제를 선택할 수 있는 부분(370) 및 스킵을 선택할 수 있는 부분(380)으로 구성된다.
저장을 선택할 수 있는 부분(350)이 선택되면, 제어부(160)는 촬영 영상 중 에서 '아버지'가 촬영된 장면에 대해서만 저장이 되도록 제어한다.
재생을 선택할 수 있는 부분(360)이 선택되면, 제어부(160)는 촬영 영상 중에서 '아버지'가 촬영된 장면에 대해서만 재생이 되도록 제어한다.
삭제를 선택할 수 있는 부분(370)이 선택되면, 제어부(160)는 촬영 영상 중에서 '아버지'가 촬영된 장면에 대해서만 삭제가 되도록 제어한다.
스킵을 선택할 수 있는 부분(380)이 선택되면, 제어부(160)는 촬영 영상 중에서 '아버지'가 촬영된 장면에 대해서만 스킵하며 재생이 되도록 제어한다.
이와 같이 촬영 영상과 대표 영상을 비교하여 손쉽게 원하는 인물의 등장 장면에 대한 영상을 편집할 수 있다.
이상에서는, CODEC(140)에서 압축된 영상인 촬영 영상은 DVD에 저장되고, 인물별로 분류된 얼굴에 대한 대표 영상은 플래시 메모리에 저장되는 것을 상정하였으나, 이는 설명의 편의를 위한 일 실시예에 불과한 것으로서, 영상신호를 기록할 수 있는 매체라면, 상기 언급한 DVD, HD-DVD, BD와 같은 광기록매체, HDD와 같은 자기기록매체, 메모리카드와 플래시 메모리 같은 반도체 기록매체 등에 저장되는 것으로 구현하는 것도 가능하다.
또한, 이상에서는 디지털 캠코더(100)를 이용하여 촬영한 영상에 대해 편집하는 방법에 대해 설명하였으나, 이 역시 설명의 편의를 위한 것으로서, 디지털 캠코더가 아닌 다른 촬영장치에 의해서 촬영한 영상에 대해 편집할 수 있는 것으로 구현하는 것도 가능하다.
또한, 촬영장치로 촬영된 영상이 동영상이 아닌 정지영상의 경우에도 편집하 는 것으로 구현하는 것도 가능함은 물론이다.
그리고, 이상에서는 촬영 영상과 대표 영상을 비교하여, 촬영 영상 중에서 대표 영상의 인물과 동일한 인물이 발견되지 않으면, 촬영 영상에 등장하는 인물의 얼굴 영상 중 한 장면을 대표 영상 추가하는 방법에 관해서만 설명되고 있으나, 이 역시 대표 영상을 추가하기 위한 일 예에 불과한 것으로서, 특정 인물의 얼굴 영상에 관한 데이터를 직접 디지털 캠코더로 입력하여 대표 영상을 생성하는 것으로 구현하는 것도 가능하다.
또한, 이상에서는 촬영 영상과 대표 영상을 비교하여, 촬영 영상에 존재하는 각 인물의 얼굴에 대한 첫 화면들을 상기 등장인물 리스트로 제공하는 것으로 예를 들었으나, 인물의 얼굴에 대한 첫 화면이 아닌 다른 화면을 리스트로 제공하는 것으로도 가능하며, 대표 영상에 저장되어 있는 영상을 리스트로 제공하는 것으로 구현하는 것도 가능하다.
그리고, 이상에서는 편집 기능으로서, 재생, 삭제, 스킵 및 저장의 네 가지 기능만을 열거하고 있으나, 이 역시 설명의 편의를 위한 것이며, 선택된 영상에 대한 속도 조절 등 기타 다른 편집 기능이 추가되는 것으로 구현하는 것도 가능하다.
또한, 이상에서는 얼굴 인식을 이용한 인물의 등장 장면 검출 방법에 대해 설명하고 있으나, 이 역시 일 실시예에 불과하며, 걸음걸이 모양, 손모양 등 다른 생체 인식 방법을 이용한 검출 방법으로 구현하는 것도 가능하며, 동영상에서의 검출 방법은 음성을 이용한 생체 인식 방법으로 구현하는 것도 가능하다.
그리고, 이상에서는, 대표 영상에 존재하지 않는 인물의 얼굴에 대해서, 촬 영시에 대표 영상을 저장하는 것으로 구현하였지만, 이와는 다르게 구현하는 것도 가능하며, 특히, 촬영시 대표 영상의 저장이 불가능할 경우, 촬영 영상이 저장된 후, 추후 촬영 영상을 재생시에 다시 검색하여 대표 영상에 존재하지 않는 인물의 얼굴을 대표 영상에 추가하는 것으로 구현하는 것도 가능하다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능한 것은 물론이고, 그와 같은 변경은 청구범위 기재의 범위 내에 있게 된다.
도 1은 본 발명의 일 실시예에 따른 디지털 캠코더의 내부 블럭도,
도 2는 본 발명의 일 실시예에 따른 검출 방법의 설명에 제공되는 흐름도, 그리고,
도 3a 내지 도3b는 촬영 영상을 인물별로 편집하는 과정의 설명에 제공되는 도면이다.

Claims (12)

  1. 얼굴의 대표 영상이 인물별로 분류되어 저장되어 있는 제1 저장부;
    피사체를 촬영하여 촬영 영상을 생성하는 촬영부;
    상기 촬영 영상이 장면 단위로 저장되는 제2 저장부; 및
    상기 대표 영상과 상기 촬영 영상을 비교하여 상기 촬영 영상 내에서 상기 대표 영상의 인물과 동일한 인물이 등장하는 장면을 검출하고, 상기 검출된 장면에 대한 정보를 상기 촬영 영상과 함께 제2 저장부에 저장하도록 제어하는 제어부;를 포함하는 촬영장치.
  2. 제 1항에 있어서,
    상기 제어부는,
    상기 촬영 영상에 등장하는 인물의 얼굴이 상기 대표 영상에 존재하지 않으면, 상기 촬영 영상에 등장하는 인물의 얼굴에 대한 영상 중 적어도 한 장면을 상기 제1 저장부에 저장하여 상기 대표 영상으로 추가하는 것을 특징으로 하는 촬영장치.
  3. 제 2항에 있어서,
    상기 제어부는,
    상기 추가된 대표 영상의 인물이 등장하는 장면을 검출하고, 상기 검출된 장 면에 대한 정보를 상기 촬영 영상과 함께 제2 저장부에 저장하도록 제어하는 것을 특징으로 하는 촬영장치.
  4. 제 1항에 있어서,
    상기 제어부는,
    상기 촬영 영상을 인물별로 선택하여 편집할 수 있도록 등장인물 리스트를 제공하고,
    상기 리스트에서 적어도 하나의 인물이 선택되면, 상기 검출된 장면에 대한 정보를 이용하여 상기 촬영 영상에서 상기 선택된 인물이 등장하는 장면을 편집하는 것을 특징으로 하는 촬영장치.
  5. 제 4항에 있어서,
    상기 제어부는,
    상기 촬영 영상에 존재하는 각 인물의 얼굴에 대한 첫 화면들을 상기 등장인물 리스트로 제공하는 것을 특징으로 하는 촬영장치.
  6. 제 4항에 있어서,
    상기 편집은,
    상기 촬영 영상에 대한 인물별 저장, 재생, 삭제 및 스킵 중 적어도 하나의 동작을 포함하는 것을 특징으로 하는 촬영장치.
  7. 피사체를 촬영하여 촬영 영상을 생성하는 단계;
    상기 촬영 영상을 장면 단위로 저장하는 단계;
    인물별로 분류되어 저장되어 있는 얼굴의 대표 영상과 상기 촬영 영상을 비교하는 단계;
    상기 비교 결과를 이용하여 상기 촬영 영상 내에서 상기 대표 영상의 인물 중 적어도 하나와 동일한 인물이 등장하는 장면을 검출하는 단계; 및
    상기 검출된 장면에 대한 정보를 상기 촬영 영상과 함께 저장하는 단계;를 포함하는 검출방법.
  8. 제 7항에 있어서,
    상기 촬영 영상에 등장하는 인물의 얼굴이 상기 대표 영상에 존재하지 않으면, 상기 촬영 영상에 등장하는 인물의 얼굴에 대한 영상 중 적어도 한 장면을 상기 대표 영상으로 추가하는 단계;를 더 포함하는 것을 특징으로 하는 검출방법.
  9. 제 8항에 있어서,
    상기 추가된 대표 영상의 인물이 등장하는 장면을 검출하고, 상기 검출된 장면에 대한 정보를 상기 촬영 영상과 함께 저장하는 단계;를 더 포함하는 것을 특징으로 하는 검출방법.
  10. 제 7항에 있어서,
    상기 촬영 영상을 인물별로 선택하여 편집할 수 있도록 등장인물 리스트를 제공하는 단계; 및
    상기 리스트에서 적어도 하나의 인물이 선택되면, 상기 검출된 장면에 대한 정보를 이용하여 상기 촬영 영상에서 상기 선택된 인물이 등장하는 장면을 편집하는 단계;를 더 포함하는 것을 특징으로 하는 검출방법.
  11. 제 10항에 있어서,
    상기 등장인물 리스트는,
    상기 촬영 영상에 존재하는 각 인물의 얼굴에 대한 첫 화면들인 것을 특징으로 하는 검출방법.
  12. 제 10항에 있어서,
    상기 편집은,
    상기 촬영 영상에 대한 인물별 저장, 재생, 삭제 및 스킵 중 적어도 하나의 동작을 포함하는 것을 특징으로 하는 검출방법.
KR1020070107980A 2007-10-25 2007-10-25 인물의 등장 장면을 검출하는 촬영장치 및 이를 이용한검출 방법 KR101319544B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020070107980A KR101319544B1 (ko) 2007-10-25 2007-10-25 인물의 등장 장면을 검출하는 촬영장치 및 이를 이용한검출 방법
EP08153382.0A EP2053540B1 (en) 2007-10-25 2008-03-27 Imaging apparatus for detecting a scene where a person appears and a detecting method thereof
US12/060,310 US8422735B2 (en) 2007-10-25 2008-04-01 Imaging apparatus for detecting a scene where a person appears and a detecting method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070107980A KR101319544B1 (ko) 2007-10-25 2007-10-25 인물의 등장 장면을 검출하는 촬영장치 및 이를 이용한검출 방법

Publications (2)

Publication Number Publication Date
KR20090042079A KR20090042079A (ko) 2009-04-29
KR101319544B1 true KR101319544B1 (ko) 2013-10-21

Family

ID=40262670

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070107980A KR101319544B1 (ko) 2007-10-25 2007-10-25 인물의 등장 장면을 검출하는 촬영장치 및 이를 이용한검출 방법

Country Status (3)

Country Link
US (1) US8422735B2 (ko)
EP (1) EP2053540B1 (ko)
KR (1) KR101319544B1 (ko)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8682145B2 (en) * 2009-12-04 2014-03-25 Tivo Inc. Recording system based on multimedia content fingerprints
US8649573B1 (en) * 2010-06-14 2014-02-11 Adobe Systems Incorporated Method and apparatus for summarizing video data
US20120023201A1 (en) * 2010-07-26 2012-01-26 Atlas Advisory Partners, Llc Unified Content Delivery Platform
US9179201B2 (en) 2011-08-26 2015-11-03 Cyberlink Corp. Systems and methods of detecting significant faces in video streams
US20140181668A1 (en) 2012-12-20 2014-06-26 International Business Machines Corporation Visual summarization of video for quick understanding
US9569697B1 (en) * 2015-02-19 2017-02-14 Google Inc. Object oriented image editing
KR101938667B1 (ko) * 2017-05-29 2019-01-16 엘지전자 주식회사 휴대 전자장치 및 그 제어 방법
US20190294886A1 (en) * 2018-03-23 2019-09-26 Hcl Technologies Limited System and method for segregating multimedia frames associated with a character

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000055811A1 (fr) 1999-03-12 2000-09-21 Sony Corporation Processeur de donnees, procede de traitement de donnees, et support d'enregistrement
KR20070082562A (ko) * 2006-02-15 2007-08-21 소니 가부시끼 가이샤 조회 시스템, 촬상 장치, 조회 장치, 정보 처리 방법,프로그램

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7634662B2 (en) * 2002-11-21 2009-12-15 Monroe David A Method for incorporating facial recognition technology in a multimedia surveillance system
JP2001167110A (ja) 1999-12-08 2001-06-22 Matsushita Electric Ind Co Ltd 画像検索方法及びその装置
JP3955170B2 (ja) * 2000-07-03 2007-08-08 富士フイルム株式会社 画像検索システム
US7376276B2 (en) * 2000-08-29 2008-05-20 Imageid Ltd Indexing, storage and retrieval of digital images
US20020136433A1 (en) * 2001-03-26 2002-09-26 Koninklijke Philips Electronics N.V. Adaptive facial recognition system and method
US20050064926A1 (en) * 2001-06-21 2005-03-24 Walker Jay S. Methods and systems for replaying a player's experience in a casino environment
WO2003001787A2 (en) * 2001-06-21 2003-01-03 Walker Digital, Llc Methods and systems for documenting a player's experience in a casino environment
US20040093349A1 (en) * 2001-11-27 2004-05-13 Sonic Foundry, Inc. System for and method of capture, analysis, management, and access of disparate types and sources of media, biometric, and database information
US20030108334A1 (en) * 2001-12-06 2003-06-12 Koninklijke Philips Elecronics N.V. Adaptive environment system and method of providing an adaptive environment
US6975346B2 (en) * 2002-06-27 2005-12-13 International Business Machines Corporation Method for suspect identification using scanning of surveillance media
US7340079B2 (en) * 2002-09-13 2008-03-04 Sony Corporation Image recognition apparatus, image recognition processing method, and image recognition program
WO2004034236A2 (en) * 2002-10-11 2004-04-22 Digimarc Corporation Systems and methods for recognition of individuals using multiple biometric searches
US20040126038A1 (en) * 2002-12-31 2004-07-01 France Telecom Research And Development Llc Method and system for automated annotation and retrieval of remote digital content
KR100601957B1 (ko) 2004-07-07 2006-07-14 삼성전자주식회사 얼굴 인식을 위한 영상간 대응 결정 방법 및 장치, 이를이루기위한 영상 보정 방법 및 장치
US20060056667A1 (en) * 2004-09-16 2006-03-16 Waters Richard C Identifying faces from multiple images acquired from widely separated viewpoints
US20060190419A1 (en) * 2005-02-22 2006-08-24 Bunn Frank E Video surveillance data analysis algorithms, with local and network-shared communications for facial, physical condition, and intoxication recognition, fuzzy logic intelligent camera system
US20070098303A1 (en) * 2005-10-31 2007-05-03 Eastman Kodak Company Determining a particular person from a collection

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000055811A1 (fr) 1999-03-12 2000-09-21 Sony Corporation Processeur de donnees, procede de traitement de donnees, et support d'enregistrement
KR20070082562A (ko) * 2006-02-15 2007-08-21 소니 가부시끼 가이샤 조회 시스템, 촬상 장치, 조회 장치, 정보 처리 방법,프로그램

Also Published As

Publication number Publication date
EP2053540A1 (en) 2009-04-29
US8422735B2 (en) 2013-04-16
US20090110247A1 (en) 2009-04-30
EP2053540B1 (en) 2013-12-11
KR20090042079A (ko) 2009-04-29

Similar Documents

Publication Publication Date Title
KR101532294B1 (ko) 자동 태깅 장치 및 방법
KR101319544B1 (ko) 인물의 등장 장면을 검출하는 촬영장치 및 이를 이용한검출 방법
EP3185539B1 (en) Information processing apparatus, imaging apparatus, image display control method and computer program
US20110085059A1 (en) Apparatus and method of photographing moving image
JP5677011B2 (ja) 動画再生装置及びその制御方法
US8531575B2 (en) Image production device, image production method, and program for driving computer to execute image production method
JP2008199330A (ja) 動画像管理装置
JP5207943B2 (ja) 撮像装置
JP5087477B2 (ja) 情報記録再生装置および情報記録方法
JP2006101076A (ja) 動画編集方法、動画編集装置及びプログラム
JP2010263374A (ja) 記録再生装置及び記録再生方法
JP2007200409A (ja) 撮像装置、記録装置及び記録方法
JP3780252B2 (ja) 記録再生装置および記録再生方法
JP2006086801A (ja) デジタルカメラ及び記録プログラム
JP2011234180A (ja) 撮像装置、再生装置、および再生プログラム
JP2007166501A (ja) 画像記録装置、画像記録再生方法、プログラム及びコンピュータ読み取り可能な記憶媒体
KR101748576B1 (ko) 이동통신 단말기에서 동영상 데이터를 세그먼팅하기 위한 장치 및 방법
JP2010200056A (ja) 記録再生装置
US7868941B2 (en) Data transfer apparatus, image capturing apparatus, and data transfer system
US10410674B2 (en) Imaging apparatus and control method for combining related video images with different frame rates
JP6263002B2 (ja) 撮像装置およびその制御方法、プログラム
JP4464012B2 (ja) 記録装置及びその方法
JP4673916B2 (ja) 情報処理装置、情報処理方法及び情報処理用プログラム
US20100007767A1 (en) Data transfer apparatus and data transfer method
JP4719498B2 (ja) 再生装置

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20071025

PG1501 Laying open of application
A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20121025

Comment text: Request for Examination of Application

Patent event code: PA02011R01I

Patent event date: 20071025

Comment text: Patent Application

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20130928

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20131011

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20131014

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
FPAY Annual fee payment

Payment date: 20160929

Year of fee payment: 4

PR1001 Payment of annual fee

Payment date: 20160929

Start annual number: 4

End annual number: 4

FPAY Annual fee payment

Payment date: 20170927

Year of fee payment: 5

PR1001 Payment of annual fee

Payment date: 20170927

Start annual number: 5

End annual number: 5

FPAY Annual fee payment

Payment date: 20180921

Year of fee payment: 6

PR1001 Payment of annual fee

Payment date: 20180921

Start annual number: 6

End annual number: 6

PR1001 Payment of annual fee

Payment date: 20200928

Start annual number: 8

End annual number: 8

PR1001 Payment of annual fee

Payment date: 20210929

Start annual number: 9

End annual number: 9

PR1001 Payment of annual fee

Payment date: 20220929

Start annual number: 10

End annual number: 10