KR101710624B1 - 객체의 모션 벡터를 이용하여 자동 촬영 기능을 수행하는 디지털 영상 촬영 방법, 디지털 영상 촬영 장치 및 상기 방법을 기록한 기록 매체 - Google Patents

객체의 모션 벡터를 이용하여 자동 촬영 기능을 수행하는 디지털 영상 촬영 방법, 디지털 영상 촬영 장치 및 상기 방법을 기록한 기록 매체 Download PDF

Info

Publication number
KR101710624B1
KR101710624B1 KR1020100072480A KR20100072480A KR101710624B1 KR 101710624 B1 KR101710624 B1 KR 101710624B1 KR 1020100072480 A KR1020100072480 A KR 1020100072480A KR 20100072480 A KR20100072480 A KR 20100072480A KR 101710624 B1 KR101710624 B1 KR 101710624B1
Authority
KR
South Korea
Prior art keywords
frame image
object
motion vectors
plurality
motion vector
Prior art date
Application number
KR1020100072480A
Other languages
English (en)
Other versions
KR20120011919A (ko
Inventor
이승윤
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020100072480A priority Critical patent/KR101710624B1/ko
Publication of KR20120011919A publication Critical patent/KR20120011919A/ko
Priority claimed from US14/883,128 external-priority patent/US10681275B2/en
Application granted granted Critical
Publication of KR101710624B1 publication Critical patent/KR101710624B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment ; Cameras comprising an electronic image sensor, e.g. digital cameras, video cameras, TV cameras, video cameras, camcorders, webcams, camera modules for embedding in other devices, e.g. mobile phones, computers or vehicles
    • H04N5/225Television cameras ; Cameras comprising an electronic image sensor, e.g. digital cameras, video cameras, camcorders, webcams, camera modules specially adapted for being embedded in other devices, e.g. mobile phones, computers or vehicles
    • H04N5/232Devices for controlling television cameras, e.g. remote control ; Control of cameras comprising an electronic image sensor
    • H04N5/23248Devices for controlling television cameras, e.g. remote control ; Control of cameras comprising an electronic image sensor for stable pick-up of the scene in spite of camera body vibration
    • H04N5/23251Motion detection
    • H04N5/23254Motion detection based on the image signal
    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment ; Cameras comprising an electronic image sensor, e.g. digital cameras, video cameras, TV cameras, video cameras, camcorders, webcams, camera modules for embedding in other devices, e.g. mobile phones, computers or vehicles
    • H04N5/225Television cameras ; Cameras comprising an electronic image sensor, e.g. digital cameras, video cameras, camcorders, webcams, camera modules specially adapted for being embedded in other devices, e.g. mobile phones, computers or vehicles
    • H04N5/232Devices for controlling television cameras, e.g. remote control ; Control of cameras comprising an electronic image sensor
    • H04N5/23222Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment ; Cameras comprising an electronic image sensor, e.g. digital cameras, video cameras, TV cameras, video cameras, camcorders, webcams, camera modules for embedding in other devices, e.g. mobile phones, computers or vehicles
    • H04N5/225Television cameras ; Cameras comprising an electronic image sensor, e.g. digital cameras, video cameras, camcorders, webcams, camera modules specially adapted for being embedded in other devices, e.g. mobile phones, computers or vehicles
    • H04N5/232Devices for controlling television cameras, e.g. remote control ; Control of cameras comprising an electronic image sensor
    • H04N5/23293Electronic viewfinders

Abstract

본 발명은 객체를 포함하는 프레임 영상으로부터 상기 객체의 모션 벡터를 도출하고, 상기 모션 벡터를 판단함으로써 촬영 신호를 생성하도록 제어하는 디지털 영상 촬영 방법 및 장치에 관한 것이다. 본 발명에 따르면 사용자가 원하는 장면을 효과적으로 촬영할 수 있다.

Description

객체의 모션 벡터를 이용하여 자동 촬영 기능을 수행하는 디지털 영상 촬영 방법, 디지털 영상 촬영 장치 및 상기 방법을 기록한 기록 매체{Digital photographing method, Digital photographing apparatus and medium for recording the method}

본 발명은 디지털 영상 촬영 방법, 디지털 영상 촬영 장치 및 상기 방법을 기록한 기록 매체에 관한 것이다.

종래 원하는 장면을 촬영하기 위하여 연사 촬영을 많이 이용한다. 그러나, 연사 촬영이라 할지라도 소정의 촬영 간격이 존재하는바, 촬영자가 원하는 장면을 촬영하는 것이 어려운 문제가 있었다.

본 발명은 상기 문제 및 그 밖의 여러 가지 문제를 해결하고자, 사용자가 원하는 장면을 효과적으로 촬영할 수 있는 디지털 영상 촬영 방법 및 장치를 제공하고자 한다.

본 발명은 객체를 포함하는 프레임 영상을 생성하는 단계와, 상기 프레임 영상으로부터 객체를 특정하는 단계와, 상기 객체의 모션 벡터를 도출하는 단계와, 상기 모션 벡터가 소정의 조건에 해당하는지 판단하는 단계와, 해당하는 경우 촬영 신호를 생성하는 단계를 포함하는 디지털 영상 촬영 방법을 제공한다.

본 발명에 관한 디지털 영상 촬영 방법에 있어서, 상기 객체의 모션 벡터는 상기 객체의 적어도 일부를 포함하는 객체 영역 내의 모션 벡터들의 합 벡터일 수 있다.

본 발명에 관한 디지털 영상 촬영 방법에 있어서, 상기 객체는 복수의 객체들로서, 상기 복수의 객체들을 포함하는 프레임 영상을 생성하고, 상기 복수의 객체들 각각을 특정하며, 상기 복수의 객체들 각각의 모션 벡터를 도출할 수 있다.

본 발명에 관한 디지털 영상 촬영 방법은 상기 복수의 객체들의 모션 벡터들 간의 거리를 도출하는 단계를 더 구비할 수 있다. 이때, 상기 거리가 기준 거리 범위에 해당하는지 판단하며, 해당하는 경우 촬영 신호를 생성할 수 있다.

본 발명에 관한 디지털 영상 촬영 방법에 있어서, 상기 복수의 객체들의 모션 벡터들이 서로 접하는지 판단하고, 접하는 경우 촬영 신호를 생성할 수 있다.

본 발명에 관한 디지털 영상 촬영 방법은 상기 복수의 객체들의 모션 벡터들의 방향을 판단하는 단계를 더 구비할 수 있다.

본 발명에 관하 디지털 영상 촬영 방법에 있어서, 상기 복수의 객체들의 모션 벡터들의 방향이 상이하고, 상기 모션 벡터들이 상기 소정의 조건에 해당하는 경우 촬영 신호를 생성할 수 있다.

본 발명에 관한 디지털 영상 촬영 방법에 있어서, 상기 복수의 객체들의 모션 벡터들의 방향이 동일하고, 상기 모션 벡터들이 상기 소정의 조건에 해당하는 경우 촬영 신호를 생성할 수 있다.

본 발명에 관한 디지털 영상 촬영 방법은 상기 프레임 영상을 복수의 블럭들로 구분하는 단계를 더 구비하고, 상기 블럭들 각각에서 상기 객체의 모션 벡터들을 도출할 수 있다.

본 발명에 관한 디지털 영상 촬영 방법에 있어서, 상기 블럭 각각의 모션 벡터는 상기 블럭 내에서 상기 객체의 모션 벡터들의 합 벡터일 수 있다.

본 발명에 관한 디지털 영상 촬영 방법에 있어서, 상기 객체를 포함하는 제1 프레임 영상과 제2 프레임 영상을 생성하고, 상기 제1 프레임 영상과 상기 제2 프레임 영상 각각을 복수의 블럭들로 구분하며, 상기 블럭들 각각에 대하여 상기 객체의 모션 벡터를 도출하며, 상기 제1 프레임 영상과 상기 제2 프레임 영상 간에 상기 모션 벡터들이 수렴하는지 판단하며, 수렴하는 경우 촬영 신호를 생성할 수 있다.

본 발명에 관한 디지털 영상 촬영 방법에 있어서, 상기 객체를 포함하는 제1 프레임 영상과 제2 프레임 영상을 생성하고, 상기 제1 프레임 영상과 상기 제2 프레임 영상 각각을 복수의 블럭들로 구분하며, 상기 블럭들 각각에 대하여 상기 객체의 모션 벡터를 도출하며, 상기 제1 프레임 영상과 상기 제2 프레임 영상 간에 상기 모션 벡터들이 발산하는지 판단하며, 발산하는 경우 촬영 신호를 생성할 수 있다.

본 발명에 관한 디지털 영상 촬영 방법에 있어서, 상기 객체를 포함하는 제1 프레임 영상과 제2 프레임 영상을 생성하고, 상기 제1 프레임 영상과 상기 제2 프레임 영상 각각을 복수의 블럭들로 구분하며, 상기 블럭들 각각에 대하여 상기 객체의 모션 벡터를 도출하며, 상기 제1 프레임 영상과 상기 제2 프레임 영상 간에, 상기 모션 벡터들이 합쳐지는지 판단하며, 합쳐지는 경우 촬영 신호를 생성할 수 있다.

본 발명에 관한 디지털 영상 촬영 방법에 있어서, 상기 객체를 포함하는 제1 프레임 영상과 제2 프레임 영상을 생성하고, 상기 제1 프레임 영상과 상기 제2 프레임 영상 각각을 복수의 블럭들로 구분하며, 상기 블럭들 각각에 대하여 상기 객체의 모션 벡터를 도출하며, 상기 제1 프레임 영상과 상기 제2 프레임 영상 간에, 상기 모션 벡터가 분리하는지 판단하며, 분리하는 경우 촬영 신호를 생성할 수 있다.

또한, 본 발명은 상술한 디지털 영상 촬영 방법을 컴퓨터가 읽을 수 있는 프로그램으로 기록한 기록 매체를 제공한다.

아울러, 본 발명은 객체를 포함하는 프레임 영상을 생성하는 프레임 영상 생성부와, 상기 프레임 영상에서 객체를 특정하는 객체 특정부와, 상기 객체의 모션 벡터를 도출하는 모션 벡터 도출부와, 상기 모션 벡터가 소정의 조건에 해당하는지 판단하는 조건 판단부와, 해당하는 경우 촬영 신호를 생성하는 촬영 제어부를 구비하는 디지털 영상 촬영 장치를 제공한다.

본 발명에 관한 디지털 영상 촬영 장치에 있어서, 상기 모션 벡터 도출부는 상기 객체의 적어도 일부를 포함하는 객체 영역 내의 모션 벡터들의 합 벡터를 도출할 수 있다.

본 발명에 관한 디지털 영상 촬영 장치에 있어서, 상기 객체는 복수의 객체들로서, 상기 프레임 영상 생성부는 상기 복수의 객체들을 포함하는 프레임 영상을 생성하고, 상기 객체 특정부는 상기 복수의 객체들 각각을 특정하며, 상기 모션 벡터 도출부는 상기 복수의 객체들 각각의 모션 벡터를 도출할 수 있다.

본 발명에 관한 디지털 영상 촬영 장치는 상기 복수의 객체들의 모션 벡터들 간의 거리를 도출하는 거리 도출부를 더 구비하고, 상기 조건 판단부는 상기 거리가 기준 거리 범위에 해당하는지 판단하며, 상기 촬영 제어부는 상기 거리가 상기 기준 거리 범위에 해당하는 경우 촬영 신호를 생성할 수 있다.

본 발명에 관한 디지털 영상 촬영 장치에 있어서, 상기 조건 판단부는 상기 복수의 객체들의 모션 벡터들이 서로 접하는지 판단하고, 상기 촬영 제어부는 접하는 경우 촬영 신호를 생성할 수 있다.

본 발명에 관한 디지털 영상 촬영 장치는 상기 복수의 객체들의 모션 벡터들의 방향을 판단하는 방향 판단부를 더 구비할 수 있다.

본 발명에 관한 디지털 영상 촬영 장치에 있어서, 상기 촬영 제어부는 상기 복수의 객체들의 모션 벡터들의 방향이 상이하고, 상기 모션 벡터들이 상기 소정의 조건에 해당하는 경우, 촬영 신호를 생성할 수 있다.

본 발명에 관한 디지털 영상 촬영 장치에 있어서, 상기 촬영 제어부는 상기 복수의 객체들의 모션 벡터들의 방향이 동일하고, 상기 모션 벡터들이 상기 소정의 조건에 해당하는 경우, 촬영 신호를 생성할 수 있다.

본 발명에 관한 디지털 영상 촬영 장치는 상기 프레임 영상을 복수의 블럭들로 구분하는 영상 분할부를 더 구비하고, 상기 모션 벡터 도출부는 상기 블럭들 각각에서 상기 객체의 모션 벡터들을 도출할 수 있다.

본 발명에 관한 디지털 영상 촬영 장치에 있어서, 상기 모션 벡터 도출부는 상기 블럭 내에서 상기 객체의 모션 벡터들의 합 벡터를 도출할 수 있다.

본 발명에 관한 디지털 영상 촬영 장치에 있어서, 상기 영상 생성부는 상기 객체를 포함하는 제1 프레임 영상과 제2 프레임 영상을 생성하고, 상기 영상 분할부는 상기 제1 프레임 영상과 상기 제2 프레임 영상 각각을 복수의 블럭들로 구분하며, 상기 모션 벡터 도출부는 상기 블럭들 각각에 대하여 상기 객체의 모션 벡터를 도출하고, 상기 조건 판단부는 상기 제1 프레임 영상과 상기 제2 프레임 영상 간에 상기 모션 벡터들이 수렴하는지 판단하며, 상기 촬영 제어부는 수렴하는 경우, 촬영 신호를 생성할 수 있다.

본 발명에 관한 디지털 영상 촬영 장치에 있어서, 상기 영상 생성부는 상기 객체를 포함하는 제1 프레임 영상과 제2 프레임 영상을 생성하고, 상기 영상 분할부는 상기 제1 프레임 영상과 상기 제2 프레임 영상 각각을 복수의 블럭들로 구분하며, 상기 모션 벡터 도출부는 상기 블럭들 각각에 대하여 상기 객체의 모션 벡터를 도출하고, 상기 조건 판단부는 상기 제1 프레임 영상과 상기 제2 프레임 영상 간에 상기 모션 벡터들이 발산하는지 판단하며, 상기 촬영 제어부는 발산하는 경우 촬영 신호를 생성할 수 있다.

본 발명에 관한 디지털 영상 촬영 장치에 있어서, 상기 영상 생성부는 상기 객체를 포함하는 제1 프레임 영상과 제2 프레임 영상을 생성하고, 상기 영상 분할부는 상기 제1 프레임 영상과 상기 제2 프레임 영상 각각을 복수의 블럭들로 구분하며, 상기 모션 벡터 도출부는 상기 블럭들 각각에 대하여 상기 객체의 모션 벡터를 도출하고, 상기 조건 판단부는 상기 제1 프레임 영상과 상기 제2 프레임 영상 간에, 상기 모션 벡터들이 합쳐지는지 판단하며, 상기 촬영 제어부는 합쳐지는 경우, 촬영 신호를 생성할 수 있다.

본 발명에 관한 디지털 영상 촬영 장치에 있어서, 상기 영상 생성부는 상기 객체를 포함하는 제1 프레임 영상과 제2 프레임 영상을 생성하고, 상기 영상 분할부는 상기 제1 프레임 영상과 상기 제2 프레임 영상 각각을 복수의 블럭들로 구분하며, 상기 모션 벡터 도출부는 상기 블럭들 각각에 대하여 상기 객체의 모션 벡터를 도출하고, 상기 조건 판단부는 상기 제1 프레임 영상과 상기 제2 프레임 영상 간에 상기 모션 벡터가 분리하는지 판단하며, 상기 촬영 제어부는 분리하는 경우 촬영 신호를 생성할 수 있다.

본 발명에 따르면, 객체 추적을 이용하여 사용자가 원하는 장면을 효과적으로 촬영할 수 있다.

도 1은 본 발명에 관한 디지털 영상 촬영 장치의 일 실시 예를 설명하기 위한 블럭도이다.
도 2는 도 1에 도시된 객체 추적부 및 CPU의 일 실시 예를 설명하기 위한 블럭도이다.
도 3은 도 1에 도시된 객체 추적부 및 CPU의 다른 실시 예를 설명하기 위한 블럭도이다.
도 4는 도 1에 도시된 객체 추적부 및 CPU의 또 다른 실시 예를 설명하기 위한 블럭도이다.
도 5는 도 1에 도시된 객체 추적부 및 CPU의 또 다른 실시 예를 설명하기 위한 블럭도이다.
도 6은 본 발명에 관한 영상 신호 처리 방법의 일 실시 예를 설명하기 위한 순서도이다.
도 7은 본 발명에 관한 영상 신호 처리 방법의 다른 실시 예를 설명하기 위한 순서도이다.
도 8과 9는 도 7에 도시된 영상 신호 처리 방법의 예들로서, 객체들이 수렴 및 발산하는 경우 촬영 신호를 생성하는 예들을 나타낸 도면들이다.
도 10은 본 발명에 관한 영상 신호 처리 방법의 또 다른 실시 예를 설명하기 위한 순서도이다.
도 11과 12는 도 10에 도시된 영상 신호 처리 방법의 예들로서, 객체들이 접하는 경우의 촬영하는 신호를 생성하는 예들을 나타낸 도면들이다.
도 13은 본 발명에 관한 영상 신호 처리 방법의 또 다른 실시 예를 설명하기 위한 순서도이다.
도 14는 본 발명에 관한 영상 선호 처리 방법의 또 다른 실시 예를 설명하기 위한 순서도이다.
도 15 내지 도 22은 도 14에 도시된 본 발명에 관한 영상 신호 처리 방법에 있어서, 이전 프레임 영상과 현재 프레임 영상 간의 모션 벡터의 관계의 예들을 설명하기 위한 도면들이다.

본 발명에 관한 디지털 영상 촬영 장치를 첨부한 도면을 참조하여 설명한다. 본 발명에 관한 디지털 영상 촬영 장치 및 방법은 디지털 카메라, 비디오 카메라, PDA(personal digital assistant), TV, 디지털 액자, 휴대폰, PMP(portable multimedia player) 등의 디지털 기기에 적용가능하다.

도 1은 본 발명의 일 실시 예에 관한 디지털 영상 촬영 장치를 설명하기 위한 블럭도이다.

도 1을 참조하면, 상기 디지털 영상 촬영 장치는 광학부(10), 상기 광학부(10)를 구동하는 광학 구동부(11), 촬상 소자(20), 촬상 제어부(21), 디지털 신호 처리부(DSP, 30), 표시부(40), 조작부(50), 메모리(60), 메모리 카드(70)를 구비한다.

상기 광학부(10)는 광학 신호를 집광하는 렌즈, 상기 광학 신호의 양을 조절하는 조리개, 광학 신호의 입력을 제어하는 셔터 등을 포함할 수 있다. 상기 렌즈는 초점 거리(focal length)에 따라 화각이 좁아지거나 또는 넓어지도록 제어하는 줌 렌즈 및 피사체의 초점을 맞추는 포커스 렌즈 등을 포함하며, 이들 렌즈들은 각각 하나의 렌즈로 구성될 수도 있지만, 복수 렌즈들의 군집으로 이루어질 수도 있다. 셔터로 가리개가 위아래로 움직이는 기계식 셔터를 구비할 수 있다. 또는 별도의 셔터 장치 대신 촬상부(20)에 전기 신호의 공급을 제어하여 셔터 역할을 행할 수도 있다.

상기 광학부(10)를 구동하는 광학 구동부(11)는 자동 초점 조절(auto-focusing), 자동 노출 조정, 조리개 조정, 줌, 초점 변경 등의 동작을 실행하기 위하여 렌즈의 위치, 조리개의 개폐, 셔터의 동작 등을 구동할 수 있다. 상기 광학 구동부(11)는 DSP(30)로부터의 제어 신호를 제공받아, 이에 따라 상기 광학부(10)를 구동할 수 있다.

촬상부(20)는 광학부(10)를 통해 입력된 광학 신호를 수광하여 전기 신호로 변환하는 광전 변환 소자를 구비한다. 상기 광전 변환 소자로 CCD(Charge coupled device) 센서 어레이, CMOS(Complementary Metal Oxide Semiconductor) 센서 어레이 등을 사용할 수 있다. 그리고 촬상부(20)는 촬상 소자(13)에서 출력된 전기 신호에 포함된 저주파 노이즈를 제거함과 동시에 전기 신호를 임의의 레벨까지 증폭하는 CDS/AMP(상관 이중 샘플링 회로(correlated double sampling)/증폭기(amplifier))를 구비할 수 있다. 또한, CDS/AMP에서 출력된 전기 신호를 디지털 변환하여 디지털 신호를 생성하는 AD컨버터를 더 구비할 수 있다. 본 실시 예에서는 A/D컨버터 등은 촬상소자와 함께 촬상부(20)로 일 블럭에 포함시켰으나, 이에 한정하는 것은 아니며, 별도의 블럭으로 구분하여 설계하거나 DSP(30)에 포함시켜 설계할 수도 있다.

광학 구동부(11), 촬상 소자 제어부(21) 등은 타이밍 제너레이터(TG)로부터 공급되는 타이밍 신호에 의해 제어될 수 있다. 상기 TG는 도시하지는 않았지만, DSP(30)에 포함될 수 있다. 그러나, 이 또한 한정하는 것은 아니며, 예를 들어 DSLR의 경우 바디에 장착하는 렌즈부에 TG를 구비하고, 상기 TG로부터 타이밍 신호를 공급받을 수 있다.

TG는 촬상부(20)에 타이밍 신호를 출력하고 광전 변환 소자 각 화소의 노광 기간을 제어하거나 전하의 독출을 제어한다. 따라서 촬상부(20)는 TG로부터 제공되는 타이밍 신호에 따라 일 프레임의 영상에 대응하는 영상 데이터를 제공할 수 있다.

촬상부(20)로부터 제공된 영상 신호는 DSP(30)의 사전 처리부(31)에 입력된다. 사전 처리부(31)에서 자동 백색 균형(AWB, Automatic White Balance), 자동 백색 균형(AWB, Automatic White Balance), 자동 포커싱(AF, Automatic Focusing)의 연산을 수행한다. 상기 AWB 및 AE 연산의 결과는 촬상 소자 제어부(21)에 피드백되어 상기 촬상부(20)로부터 적절한 색출력 및 적절한 노출의 영상 신호를 얻도록 한다. 또한, 상기 AWB 및 AE 연산의 결과는 광학 구동부(11)의 조리개 구동 모터, 셔터r구동 모터 등을 구동하여 조리개의 개폐 또는 셔터 스피드 등을 제어할 수 있다. 또한, 상기 AF 연산의 결과는 광학 구동부(11)에 출력되어 포커스 렌즈를 광축 방향으로 이동시킬 수 있다. 상기 AWB, AE, AF 등은 입력된 영상 신호에 대해 촬영자의 선택에 따라 적용할 수 있다.

신호 처리부(32)는 영상 신호에 대하여 표시를 위한 또는 기록을 위한 소정의 영상 신호 처리를 수행한다. 예를 들어, 사람의 시각에 맞게 영상 신호를 변환하도록 감마 컬렉션(Gamma Correction), 색필터 배열보간(color filter array interpolation), 색 매트릭스(color matrix), 색보정(color correction), 색 향상(color enhancement) 등의 영상 신호 처리를 수행한다. 또한, 상기 영상 신호 처리부(32)는 영상의 크기를 조절하는 리사이징 처리도 행한다.

또한, 상기 신호 처리부(32)는 특정 기능 수행을 위한 신호 처리를 수행한다. 예를 들어, 상기 영상 신호에 대하여 원하는 장면, 객체 등을 인식하는 신호 처리를 수행할 수 있다. 상기 영상 신호의 색성분, 에지 성분, 특징점 정보 등을 이용하여 원하는 장면, 객체 등을 인식할 수 있다. 상기 영상 신호로부터 피사체의 얼굴을 인식하며, 인식한 얼굴을 포함하는 얼굴 영역을 도출할 수도 있다. 또한, 영상 신호 처리가 수행된 영상 신호의 압축과 신장을 수행한다. 압축의 경우, 예를 들면 JPEG 압축 형식 또는 H.264 압축 형식등의 압축 형식에서 영상 신호를 압축한다. 상기 압축 처리에 의해서 생성한 영상 데이터를 포함한 영상 파일은 카드 제어부(38)를 통해 메모리 카드(70)에 송신되어 기록된다.

본 발명에서 프레임 영상부는 일 프레임 영상을 생성하는 촬상부(20)를 구비할 수 있다. 또는, 상기 프레임 영상부는 사전 처리부(31) 및/또는 신호 처리부(32) 중 적어도 어느 하나를 구비할 수 있다. 본 발명에서 일 프레임 영상은 사전 처리부(31) 또는/및 신호 처리부(32)를 통해 적어도 하나의 영상 신호 처리가 행해진 영상 데이터에 기초한 것일 수 있다. 따라서, 본 발명은 일 프레임 영상에 대하여 객체 추적을 행하고, 이에 따라 촬영을 제어하는 동작에 대하여, 상기 일 프레임 영상은 촬상부(20)로부터 제공된 것일 수 있으며, 또는 사전 처리부(31)로부터 제공되거나 또는 신호 처리부(32)로부터 제공된 것일 수 있다. 즉, 객체 추적부(35) 및/또는 CPU(36)의 처리 속도, 또는 메모리(60)의 용량, 칩(chip) 배치의 효율성 등을 이유로 상기 프레임 영상부는 촬상부(20), 사전 처리부(31) 및 신호 처리부(32) 중 적어도 어느 하나를 구비할 수 있다.

한편, 상기 DSP(30)는 표시 제어부(34)를 구비한다. 상기 표시 제어부(34)는 표시부(40)에 영상 또는/및 각 정보를 디스플레이하도록 제어한다. 상기 표시부(40)로 LCD, LED, OLED, 등을 장착할 수 있다.

상기 DSP(30)는 움직이는 물체의 운동을 추적하는 객체 추적부(35)를 구비한다. 또한, 각 부분의 동작을 전체적으로 제어하는 CPU(36)를 구비한다. CPU(36)는 DSP(30)와 별개의 칩으로 설계할 수도 있다. 상기 객체 추적부(35)와 CPU(36)는 이후의 도면들을 참조하여 더욱 상세히 설명한다.

상기 DSP(30)는 촬영된 영상이나 연상 정보 등의 데이터를 일시적으로 기록하는 메모리(60)를 제어하는 메모리 제어부(37)를 구비한다. 아울러, 촬영한 영상을 메모리 카드(80)에 기록하거나 또는 도출하는 카드 제어부(38)를 구비한다. 카드 제어부(38)는 메모리 카드(70)로 영상 데이터의 기입, 또는 메모리 제어부(36)에 기록된 영상 데이터나 설정 정보 등의 독출을 제어한다.

한편, 상기 디지털 영상 촬영 장치는 사용자의 조작 신호를 입력하는 조작부(50)를 구비한다. 상기 조작부(50)는 사용자가 상기 디지털 영상 신호 처리장치를 조작하거나 촬영시 각종의 설정을 행하기 위한 부재를 포함할 수 있다. 예를 들어, 버튼, 키, 터치 패널, 터치 스크린, 다이얼 등의 형태로 구현될 수 있으며, 전원 온/오프, 촬영 개시/정지, 재생 개시/정지/서치, 광학계의 구동, 모드 변환, 메뉴 조작, 선택 조작 등의 촬영자 조작 신호를 입력할 수 있다. 일 예로서, 셔터 버튼은 촬영자에 의한 반누름, 완전누름, 해제가 가능하다. 셔터 버튼은 반누름(S1조작)되었을 때 포커스 제어 개시 조작 신호를 출력하고 반 누름 해제로 포커스 제어가 종료된다. 상기 셔터 버튼은 완전누름(S2조작)되었을 때 촬영 개시 조작 신호를 출력할 수 있다. 상기 조작 신호는 DSP(30)의 CPU(36) 등에 전송되어, 이에 따라 해당 구성 요소를 구동시킬 수 있다.

상기 메모리(60)는 상기 디지털 영상 촬영 장치를 작동하는 필요한 OS, 응용 프로그램 등을 저장하는 프로그램 저장부를 구비할 수 있다. 프로그램 저장부로서 E2PROM, 플래쉬 메모리, ROM 등을 사용할 수 있다. 또한, 상기 메모리(60)는 촬영한 영상의 영상 데이터를 일시적으로 저장하는 버퍼 메모리를 구비할 수 있다. 버퍼 메모리로 SDRAM< DRAM 등을 사용할 수 있다. 여러 개 영상들의 영상 데이터를 기억할 수 있으며, 포커스 제어시의 영상 신호를 차례대로 유지하여 영상 신호를 출력할 수 있다. 또한, 상기 메모리(60)는 적어도 상기 제1 표시 영상, 또는 상기 제2 표시 영상을 표시하기 위한 적어도 하나의 채널을 갖는 표시용 메모리를 구비할 수 있다. 상기 표시용 메모리는 표시부(40)에 포함된 표시 구동부로 영상 데이터의 입력과 출력을 동시에 실행할 수 있다. 표시부(40)의 크기나 최대 발색수는 표시용 메모리의 용량에 의존한다.

상기 메모리 카드(80)는 상기 디지털 영상 촬영 장치에 착탈 가능한 것으로서, 예를 들면 광디스크(CD, DVD, 블루레이디스크 등), 광자기 디스크, 자기 디스크, 반도체 기억매체 등을 사용할 수 있다.

이하에서는 도 1에 도시된 객체 추적부(35)와 CP(36)를 보다 구체적으로 설명한다. 이하의 설명들은 도 1과 함께 참조하면서 설명한다.

도 2는 도 1에 도시된 객체 추적부 및 CPU의 일 실시 예를 설명하기 위한 블럭도이다.

도 2를 참조하면, 본 실시 예에 따른 객체 추적부(35a)는 도 1에서 설명한 상기 프레임 영상부로부터 제공된 프레임 영상에서 객체를 특정하는 객체 특정부(35a-1)를 구비한다. 또한, 상기 객체 추적부(35a)는 특정한 객체의 모션 벡터를 도출하는 모션 벡터 도출부(35a-2)를 구비한다. 객체의 특정과 모션 벡터의 도출은 순차적으로 행해질 수 있다. 예를 들어, 조작부(50)에 의해 사용자가 객체를 선택하면, 객체 특정부(35a-1)는 상기 선택에 대응하여 객체를 특정할 수 있다. 더욱 구체적으로, 얼굴 인식 알고리즘을 통해 인식한 얼굴 영역들 중에서 사용자가 원하는 얼굴 영역을 선택하고, 선택한 얼굴에 대응하는 사람을 객체로 특정할 수 있다. 그러나 이에 한정하는 것은 아니며 움직이는 객체를 특정하면서 상기 움직임에 대한 모션 벡터를 도출함으로써 실질적으로 동일한 알고리즘에 의해 객체의 특징 및 모션 벡터 도출을 행할 수도 있다. 모션 벡터는 블록 정합 알고리즘, 2차원 로그 탐색, 직교 탐색, 교차 탐색, 3-단계 탐색, 일차원 전역 탐색, 변형된 3-단계 탐색 등의 방법에 의해 도출할 수 있다.

상기 모션 벡터 도출부(35a-2)는 특정한 상기 객체의 적어도 일부를 포함하는 객체 영역 내의 모션 벡터들의 합 벡터를 도출할 수 있다. 그리고 이후 상기 합 벡터에 대하여 소정의 판단을 행할 수 있다.

또한, 본 실시 예에 따른 CPU(36a)는 조건 판단부(36a-1)와, 촬영 제어부(36a-2)를 구비할 수 있다. 상기 조건 판단부(36a-1)는 상기 모션 벡터 또는 상기 합 벡터가 소정의 조건에 해당하는지 여부를 판단할 수 있다. 상기 조건은 복수 개로 설정할 수도 있다.

상기 소정의 조건에 부합하는 경우, 촬영 제어부(36a-2)는 촬영 신호를 생성한다. 상기 촬영 신호에 동기하여 입력된 프레임 영상을 캡쳐하고 영상 파일에 저장한다. 즉, 상기 촬영 신호는 기록 및 보존을 위한 영상 파일에 저장하도록 프레임 영상을 촬영함을 제어하는 신호이다.

도 3은 도 1에 도시된 객체 추적부 및 CPU의 다른 실시 예를 설명하기 위한 블럭도이다. 도 2에 도시된 객체 추적부 및 CPU와 상이한 점을 위주로 설명한다.

도 3에 따른 객체 추적부(35b)는 상기 프레임 영상부로부터 제공된 프레임 영상으로부터 객체를 특정하는 객체 특정부(35b-1)를 구비한다. 본 실시 예에서는 상기 프레임 영상부에서 복수의 객체들을 포함하는 프레임 영상을 생성한 경우, 복수의 객체들 각각을 특정할 수 있다.

또한, 상기 객체 추적부(35b)는 복수의 상기 객체들 각각의 모션 벡터를 도출하는 모션 벡터 도출부(35b-2)를 구비한다. 물론, 상기 객체의 적어도 일부를 포함하는 객체 영역에서의 상기 객체의 모션 벡터들의 합 벡터를 도출할 수 있다. 즉, 상기 객체들 각각의 합 벡터들을 도출할 수 있다.

또한, 상기 객체 추적부(35b)는 상기 션 벡터들 또는 합 벡터들 간의 거리를 도출하는 거리 도출부(35b-3)를 구비한다.

그리고 본 실시 예에 따른 CPU(36b)는 조건 판단부(36b-1)를 구비한다. 상기 조건 판단부(36b-1)는 일 실시 예로서 상기 거리 도출부(35b-3)에 의해 도출한 거리가 기준 거리 범위에 해당하는지 판단할 수 있다. 상기 거리가 상기 기준 거리 범위에 해당하는 경우, 촬영 제어부(36b-2)는 촬영 신호를 생성한다. 상기 촬영 신호에 동기하여 프레임 영상을 캡쳐하고, 영상 파일에 저장한다.

다른 실시 예로서, 상기 조건 판단부(36b-1)는 상기 모션 벡터 또는 상기 합 벡터가 접하는지 판단할 수 있다. 이때, 상기 객체 추적부(35b)는 상기 거리 도출부(35b-3)를 구비하지 않을 수 있다. 접하는 경우, 촬영 제어부(36b-2)는 촬영 신호를 생성할 수 있다.

상기 조건은 사용자에 의해 설정할 수 있다.

도 4는 도 1에 도시된 객체 추적부 및 CPU의 또 다른 실시 예를 설명하기 위한 블럭도이다. 본 실시 예에서는 촬영 신호를 생성하기 위하여 모션 벡터의 판단 조건을 복수로 설정한 경우를 예시한 것으로서, 도 2에 도시된 객체 추적부 및 CPU와 상이한 점을 위주로 설명한다.

도 4를 참조하면, 본 실시 예에서의 객체 추적부(35c)는 상기 프레임 영상부로부터 제공된 프레임 영상으로부터 객체를 특정하는 객체 특정부(35c-1)를 구비한다. 본 실시 예에서도 상기 프레임 영상부에서 복수의 객체들을 포함하는 프레임 영상을 생성한 경우, 복수의 객체들 각각을 특정할 수 있다.

또한, 상기 객체 추적부(35c)는 복수의 상기 객체들 각각의 모션 벡터를 도출하는 모션 벡터 도출부(35c-2)를 구비한다. 물론, 상기 객체의 적어도 일부를 포함하는 객체 영역에서의 상기 객체의 모션 벡터들의 합 벡터를 도출할 수 있다. 즉, 상기 객체들 각각의 합 벡터들을 도출할 수 있다.

그리고 CPU(36c)는 복수의 객체들 각각의 모션 벡터들 간 또는 합 벡터들 간의 방향을 판단하는 방향 판단부(36c-1)를 구비한다. 상기 방향 판단부는 상기 모션 벡터들 간 또는 합 벡터들 간의 방향이 상이한 방향인지, 또는 동일한 방향인지를 판단한다. 여기서 상이한 방향 또는 동일한 방향은 정확하게 방향이 반대이거나 동일한 것을 포함하는 것 뿐만 아니라 실질적으로 반대인 방향 또는 실질적으로 동일한 방향인 경우도 포함할 수 있다. 또한, 여기서 실질적으로란 의미는 물리적으로 정확하게 반대 또는 동일한 방향으로부터 소정 각도로 빗나간 방향까지를 포함할 수 있다는 의미이다. 상기 소정의 각도는 실험 또는 경험치에 의해 설정할 수 있으며, 또는 소정의 신뢰성을 확보하기 위하여 설정할 수도 있다. 또는 사용자의 편의를 위하여 설정할 수도 있다.

그리고 상기 복수의 객체들 각각의 모션 벡터들 간 또는 합 벡터들 간에 제2 조건에 해당하는지 판단하는 조건 판단부(36c-2)를 구비한다. 일 실시 예로서, 상기 조건 판단부(36c-2)는 상기 모션 벡터들 간 또는 합 벡터들이 서로 접하는지 판단할 수 있다.

또한, 상기 CPU(36c)는 상기 방향 판단부(36c-1)의 판단 및 상기 조건 판단부(36c-2)의 판단에 따라 촬영 신호를 생성하는 촬영 제어부(36c-2)를 구비한다.

일 실시 예로서, 상기 방향이 서로 동일한 방향이면서, 서로 접하는 경우 촬영 신호를 생성할 수 있다. 예를 들어, 달리는 사람이 달리는 방향으로 움직이는 공을 차는 경우, 공을 차는 제1 순간을 촬영하기 위하여 사람의 모션 벡터와 움직이는 공의 모션 벡터가 실질적으로 동일한 방향이며, 서로 접하는 경우로서 이때 촬영 신호를 생성한다면 상기 제1 순간을 효과적으로 촬영할 수 있다.

다른 실시 예로서, 상기 방향이 상이한 방향이면서, 서로 접하는 경우 촬영 신호를 생성할 수 있다. 예를 들어, 달리는 사람이 사람을 향하여 오는 공을 차는 경우, 공을 차는 제2 순간을 촬영할 수 있다. 즉, 달리는 사람과 사람을 향하여 오는 공 간의 모션 벡터들은 그 방향이 상이하며 차는 순간은 사람과 공이 접하므로, 상기 두 가지의 조건을 만족하는 경우 촬영 신호를 생성함으로써 상기 제2 순간의 장면을 효과적으로 촬영할 수 있다.

도 5는 도 1에 도시된 객체 추적부 및 CPU의 또 다른 실시 예를 설명하기 위한 블럭도이다. 본 실시 예에서는 상기 프레임 영상을 복수의 영역들로 분할하고, 각 분할 영역에 대한 모션 벡터들을 이용하여 촬영 신호를 생성함을 예시한다. 본 실시 예에서도 도 2에 도시된 객체 추적부 및 CPU와 상이한 점을 위주로 설명한다.

도 5를 참조하면, 본 실시 예에 따른 객체 추적부(35d)는 프레임 영상부로부터 생성한 프레임 영상으로부터 객체를 특정하는 객체 특정부(35d-1)를 구비한다.

또한, 상기 객체 추적부(35d)는 상기 프레임 영상을 복수의 블럭들 구분하는 영상 분할부(35d-2)를 구비한다.

또한, 상기 객체 추적부(35d)는 상기 복수의 블럭들 각각에 대하여 상기 객체의 모션 벡터 또는 합 벡터를 도출하는 모션 벡터 도출부(35d-3)를 구비한다.

본 실시 예에 따른 CPU(36d)는 상기 모션 벡터 또는 합 벡터가 소정의 조건을 만족하는지 판단하는 조건 판단부(36d-1)를 구비한다. 이하 모션 벡터로 설명하나, 상기 모션 벡터 대신 합 벡터도 이용될 수 있다. 이는 본 실시 예에 한정하는 것은 아니며, 본 발명의 전체에 적용될 수 있다.

상기 소정의 조건으로서, 상기 모션 벡터가 수렴하는지, 발산하는지, 합쳐지는지 또는 분리하는지 판단할 수 있다.

예를 들어, 제공된 복수의 프레임 영상들 각각에 대하여 복수의 블럭들로 구분하고, 각 블럭에서의 상기 객체의 모션 벡터를 도출한다. 그리고 이전 프레임 영상과 현재 프레임 영상 간의 모션 벡터가 서로 접근하는 형태인지, 즉 수렴하는지를 상기 조건으로 판단할 수 있다. 또는 이전 프레임 영상과 현재 프레임 영상 간의 모션 벡터가 서로 멀어지는 형태인지, 즉 발산하는지를 판단할 수 있다. 또 다른 실시 예로서, 이전 프레임 영상과 현재 프레임 영상의 모션 벡터들이 합쳐지는지 판단할 수 있다. 반대로, 상기 모션 벡터들이 분리되는지도 판단할 수 있다. 더욱 구체적인 예들은 이후 첨부되는 도면을 참조하여 설명한다.

이하에서는 본 발명에 관한 디지털 영상 촬영 방법의 실시 예들을 첨부한 도면들을 참조하여 설명한다.

도 6은 본 발명에 관한 영상 촬영 방법의 일 실시 예를 설명하기 위한 순서도이다.

도 6을 참조하면, 우선 적어도 하나의 객체를 포함하는 프레임 영상을 생성한다(S11). 일 예로서, 라이브뷰 모드에서 실시간으로 입력되는 프레임 영상을 생성할 수 있다.

상기 프레임 영상으로부터 적어도 하나의 객체를 특정한다(S12). 상기 특정은 사용자의 조작 신호에 의해 행해질 수도 있으며, 또는 객체 추적 알고리즘을 통해 특정할 수 있다. 이후 모션 벡터 도출과 실질적으로 동시에 객체의 특정을 행할 수 있다. 따라서 모션 벡터 전에 반드시 객체 특정 단계가 선행되지 않을 수 있다.

상기 객체에 대항 모션 벡터를 도출한다(S13). 이때, 상기 객체에서 도출하는 복수의 모션 벡터들 중 적어도 2개 이상의 모션 벡터들을 합한 합 벡터를 도출할 수 있다. 본 발명에서 모션 벡터는 상기 합 벡터를 포함할 수 있다.

도출한 상기 모션 벡터가 소정의 조건에 해당하는지 판단한다(S14). 상기 조건은 사용자에 의해 설정할 수 있다.

상기 조건에 해당하지 않는 경우, 계속하여 상기 프레임 영상을 생성한다(S11).

상기 조건에 해당하는 경우, 촬영 신호를 생성한다(S15). 상기 촬영 신호에 의해, 입력된 프레임 영상을 영상 파일에 저장된다.

도 7은 본 발명에 관한 영상 신호 처리 방법의 다른 실시 예로서, 도 6에 도시된 본 발명에 관한 영상 신호 처리 방법의 일 실시 예에서 소정의 조건에 해당하는지에 관한 판단을 모션 벡터들 간의 거리로 판단함을 예시한다. 본 실시 예에서는 도 6에 도시된 실시 예와 상이한 점을 위주로 설명한다.

구체적으로, 도 7을 참조하면 복수의 객체들을 포함하는 프레임 영상을 생성한다(S21).

상기 프레임 영상으로부터 복수의 객체들을 특정한다(S22).

상기 복수의 객체들 각각의 모션 벡터들을 도출한다(S23). 상기 객체로부터 도출되는 적어도 2개 이상의 모션 벡터들을 합한 합 벡터를 도출할 수 있다.

상기 복수의 객체들 각각의 모션 벡터들 사이의 거리가 기준 거리 범위에 해당하는지 판단한다(S24).

상기 거리가 상기 기준 거리 범위에 속하는 경우, 촬영 신호를 생성한다(S25). 그렇지 않은 경우, 계속항 프레임 영상을 생성하고(S21), 상기 과정을 순환한다.

도 8과 9는 도 7에 도시된 영상 신호 처리 방법의 예들로서, 객체들 간의 거리에 따라 촬영 신호를 생성하는 예들을 나타낸 도면들이다. 도 7과 함께 도 8과 9를 참조하여 설명한다.

우선 도 8에서는 공을 차려는 사람(P1)과 사람(P1)을 향해 진행하는 공(P2)을 포함하는 제1 프레임 영상(I1)을 나타낸다. 상기 사람(P1)과 공(P2) 각각의 모션 벡터를 도출한다. 우선 일 객체로서 사람(P1)의 경우 6개의 모션 벡터들(V11, V12, V13, V14, V15, V16)을 도출할 수 있으며, 이들의 합인 제1 합 벡터(SV1)을 도출한다. 다른 객체로서 공(P2)은 3개의 모션 벡터들(V21, V22, V23)을 도출하고, 이들의 합인 제2 합 벡터(SV2)를 도출할 수 있다. 그리고 상기 제1 합 벡터(SV1)와 상기 제2 합 벡터(SV2) 간의 거리(d1)를 도출하고, 상기 거리(d1)가 기준 거리 범위에 해당하는 경우 촬영 신호를 생성할 수 있다. 따라서, 공을 차려는 순간의 장면의 영상을 획득할 수 있다.

다른 예로서, 도 9에서는 공을 찬 사람(P3)과 상기 사람(P3)에 의해 날아가는 공(P4)을 포함하는 제2 프레임 영상(I2)을 나타낸다. 본 실시 예에서도 상기 사람(P3)의 6개의 모션 벡터들(V31, V32, V33, V34, V35, V36)을 도출하고, 이들을 합한 합 벡터(SV3)를 도출한다. 또한, 상기 공(P4)에 대해서도 3개의 모션 벡터들(V41, V42, V43)을 도출하고, 이들을 합한 합 벡터(SV4)를 도출한다. 그리고 상기 제3 합 벡터(SV3)와 상기 제4 합 벡터(SV4) 간의 거리(d2)를 도출하고, 상기 거리(d2)가 기준 거리 범위에 해당하는 경우 촬영 신호를 생성할 수 있다. 따라서 공을 찬 순간의 영상을 얻을 수 있다.

본 실시 예에서, 상기 거리(d1)은 상기 제1 합 벡터(SV1)와 상기 제2 합 벡터(SV2) 사이의 수평 거리 또는 상기 제3 합 벡터(SV3)와 상기 제4 합 벡터(SV4) 사이의 수평 거리를 예시하였으나, 이에 한정하는 것은 아니며 수직 거리 또는 수평과 수직 성분을 모두 고려한 거리일 수 있다.

도 10은 본 발명에 관한 영상 신호 처리 방법의 또 다른 실시 예를 설명하기 위한 순서도이다. 본 실시 예에서는 도 6에 도시된 본 발명에 관한 영상 신호 처리 방법 중 소정의 조건에 해당하는지에 관한 판단을 모션 벡터들이 서로 접하는지 여부에 대해 판단함을 예시한다. 본 실시 예에서도 도 6에 도시된 실시 예와 상이한 점을 위주로 설명한다.

도 10을 참조하면, 우선 복수의 객체들을 포함하는 프레임 영상을 생성한다(S31).

그리고 상기 프레임 영상에서 복수의 객체들을 특정한다(S32).

복수의 객체들 각각의 모션 벡터들을 도출한다(S33).

상기 복수의 객체들 각각의 모션 벡터들이 접하는지 판단한다(S34).

접하는 경우, 촬영 신호를 생성한다(S36). 접하지 않는 경우 상기 프레임 영상 생성 단계(S31)로 되돌아갈 수 있다.

도 10에 도시된 영상 신호 처리 방법의 예들로서, 도 11과 도 12를 참조하여 더욱 구체적으로 설명한다. 도 11과 도 12는 객체들이 접하는 경우의 촬영하는 신호를 생성하는 예들을 나타낸 도면들이다.

우선, 도 11에서는 공을 차려는 사람(P5)과 사람(P5)을 향해 진행하는 공(P6)을 포함하는 제1 프레임 영상(I3)을 나타낸다. 상기 사람(P5)과 공(P6) 각각의 모션 벡터를 도출한다. 우선 일 객체로서 사람(P5)의 경우 6개의 모션 벡터들(V51, V52, V53, V54, V55, V56)을 도출할 수 있으며, 이들의 합인 제5 합 벡터(SV5)을 도출한다. 다른 객체로서 공(P6)은 3개의 모션 벡터들(V61, V62, V63)을 도출하고, 이들의 합인 제6 합 벡터(SV6)를 도출할 수 있다. 그리고 상기 제5 합 벡터(SV5)와 상기 제6 합 벡터(SV6)가 접하는 경우, 촬영 신호를 생성할 수 있다. 따라서, 공을 차려는 순간, 더욱 구체적으로 공과 사람이 접촉한 장면의 영상을 획득할 수 있다.

다른 예로서, 도 12에서는 공을 찬 사람(P7)과 상기 사람(P7)에 의해 날아가는 공(P8)을 포함하는 제2 프레임 영상(I4)을 나타낸다. 본 실시 예에서도 상기 사람(P7)의 6개의 모션 벡터들(V71, V72, V73, V74, V75, V76)을 도출하고, 이들을 합한 제7 합 벡터(SV7)를 도출한다. 또한, 상기 공(P8)에 대해서도 3개의 모션 벡터들(V81, V82, V83)을 도출하고, 이들을 합한 제8 합 벡터(SV8)를 도출한다. 그리고 상기 제7 합 벡터(SV7)와 상기 제8 합 벡터(SV8)가 서로 접하는 경우, 촬영 신호를 생성할 수 있다. 따라서 사람과 공이 분리되기 직전의 공을 찬 순간의 영상을 얻을 수 있다.

도 13은 본 발명에 관한 영상 신호 처리 방법의 또 다른 실시 예를 설명하기 위한 순서도이다. 본 실시 예에서는 도 6에 도시된 본 발명에 관한 영상 신호 처리 방법 중 소정의 조건을 복수 개 판단함을 예시한다. 본 실시 예에서도 도 6에 도시된 실시 예와 상이한 점을 위주로 설명한다.

도 13을 참조하면, 우선 복수의 객체들을 포함하는 프레임 영상을 생성한다(S31).

상기 프레임 영상으로부터 복수의 객체들을 특정한다(S32).

복수의 객체들 각각의 모션 벡터들을 도출한다(S33).

상기 복수의 객체들 각각의 모션 벡터들의 방향이 상이한지 판단한다(S34).

상이하다면, 상기 복수의 객체들 각각의 모션 벡터들이 소정의 조건에 해당하는지 판단한다(S35).

상기 복수의 객체들 각각의 모션 벡터들의 방향이 상이하고, 상기 복수의 객체들 각각의 모션 벡터들이 소정의 조건에 해당한다면 촬영 신호를 생성할 수 있다(S36). 상기 소정의 조건으로 상기 모션 벡터들이 접하는지 여부 또는 상기 모션 벡터들 간의 거리가 기준 거리 범위에 해당하는지 등을 판단할 수 있다.

촬영자가 돌진하는 사람이 날아오는 공을 차려는 순간을 촬영하고자 하는 경우, 상기 사람과 상기 공의 모션 벡터들이 서로 접하는지 여부만 판단하는 것에 더하여 상기 사람의 모션 벡터와 상기 공의 모션 벡터의 방향이 상이한지 여부를 더 판단함으로써 원하는 장면을 촬영할 수 있는지에 관한 신뢰도를 향상시킬 수 있다.

상기 복수의 객체들 각각의 모션 벡터들의 방향이 상이하지 않거나, 상기 모션 벡터들이 소정의 조건에 해당하지 않는다면, 계속하여 프레임 영상을 생성하는 단계(S31)로 되돌아갈 수 있다.

또는 다른 실시 예로서 상기 모션 벡터들의 방향이 동일한지 판단할 수 있다(S34).

상기 상이하다면, 상기 복수의 객체들 각각의 모션 벡터들이 소정의 조건에 해당하는지 판단한다(S35).

상기 복수의 객체들 각각의 모션 벡터들의 방향이 동일하고, 상기 복수의 객체들 각각의 모션 벡터들이 소정의 조건에 해당한다면 촬영 신호를 생성할 수 있다(S36). 상기 소정의 조건으로 상술한 바와 같이 접하는지 여부 또는 모션 벡터들 간의 거리가 기준 거리 범위에 해당하는지 등을 판단할 수 있다.

촬영자가 공을 차버리는 순간을 촬영하고자 하는 경우, 상기 사람과 상기 공의 모션 벡터들이 서로 접하는지 여부만 판단하는 것에 더하여 상기 사람의 모션 벡터와 상기 공의 모션 벡터의 방향이 동일한지 여부를 더 판단함으로써, 원하는 장면을 촬영할 수 있는지에 관한 신뢰도를 향상시킬 수 있다.

도 14는 본 발명에 관한 영상 선호 처리 방법의 또 다른 실시 예를 설명하기 위한 순서도이다. 본 실시 예에서는 도 6에 도시된 본 발명에 관한 영상 신호 처리 방법 중 이전 프레임 영상과 현재 프레임 영상 간의 모션 벡터의 추이를 판단하여, 촬영 신호를 생성하는 방법을 예시한다. 본 실시 예에서도 도 6에 도시된 실시 예와 상이한 점을 위주로 설명한다.

도 14를 참조하면, n은 1부터 시작하며(S41), 따라서 제1 프레임 영상을 생성한다(S42). 상기 제1 프레임 영상은 적어도 하나의 객체를 포함할 수 있다.

상기 제1 프레임 영상에서 객체를 특정한다(S43).

상기 제1 프레임 영상을 분할하여 복수의 블럭들로 구분한다(S44).

상기 복수의 블럭들 각각의 모션 벡터를 도출한다. 그리고 도출한 모션 벡터를 저장한다(S45). 여기서 모션 벡터는 상기 블럭들 각각에서 검출한 적어도 둘 이상의 모션 벡터들을 합한 합 벡터일 수 있다.

상기 객체 특정, 영상 분할 및 모션 벡터 도출의 순서는 변경될 수 있으며, 모션 벡터를 도출하면서 객체를 특정하는 등과 같이 동일한 알고리즘에 의해 상기 단계들이 동시에 수행될 수 있다.

그리고 n이 2 이상인지 판단한다(S46).

n이 2 이상이 아니라면 현재의 n에 1을 더하여 새로운 n 값을 생성한다(S47). 현재 n은 1이므로 새로운 n을 생성할 수 있다. 그리고 제2 프레임 영상을 생성한다(S42). 본 실시 예에서는 현재의 프레임 영상 및 직전의 프레임 영상을 비교하였으나, 이에 한정하는 것은 아니며 직전의 프레임 영상 보다 더 전의 프레임 영상과 현재 프레임 영상을 비교할 수도 있다.

현재의 n이 2이상인 경우라면, 예를 들어 제2 프레임 영상에 대하여 분할하여 복수의 블럭들로 구분하고, 상기 블럭들 각각에서 상기 객체의 모션 벡터를 도출 및 저장되어 있다.

따라서 제1 프레임 영상의 블럭별 상기 객체의 모션 벡터를 추출한다(S48).

그리고 제2 프레임 영상의 블럭별 상기 객체의 모션 벡터와 상기 제1 프레임 영상의 블럭별 상기 객체의 모션 벡터의 관계가 소정의 조건에 해당하는지 판단한다(S49).

해당하는 경우, 촬영 신호를 생성한다(S50). 해당하지 않는 경우, 현재의 n에 1을 더하여 새로운 n 값을 생성하며(S47), 새로운 프레임 영상에 대하여 상기 과정을 되폴이 할 수 있다.

상기 소정의 조건에 대하여, 이전 프레임 영상과 현재 프레임 영상 간의 모션 벡터들의 관계가 서로 수렴하는지, 발산하는지 또는 분리 또는 합쳐지는 등을 판단하여, 해당하는 경우 촬영 신호를 생성할 수 있다. 상기 조건들에 대하여 이하에서 도 15 내지 도 20을 참조하여 더욱 상세히 설명한다.

도 15와 도 16은 하나의 객체로부터 두 개의 객체들로 분리되는 장면을 촬영하기 위한 방법을 설명하기 위한 도면들이다.

우선 도 15를 참조하면, 제5 프레임 영상(I5)는 신발을 신은 여자(P9)가 발야구를 하는 장면을 촬영한 것이다. 상기 제5 프레임 영상(I5)을 6*8의 행렬로 분할하여 B11, B12, B13....및 B21, B21, ,,,B86의 블럭들로 구분할 수 있다. 상기 제5 프레임 영상(I5)에서 상기 여자(P9)의 다리(P9')와 신발(P9'')을 객체로 특정하고, 각 블럭에 따른 상기 객체의 모션 벡터를 도출한다. 제5 프레임 영상(I5)에서 B53 블럭, B63 블럭, B54 블럭, B64 블럭에 대해 객체의 모션 벡터들 Va, Vb, Vc, Vd를 도출한다.

도 16을 참조하면, 제5 프레임 영상(I5)의 다음 영상인 제6 프레임 영상(I6)에서는 상기 여자(P9)의 다리(P9')로부터 신발(P9'')이 벗겨지는 장면을 촬영한 것이다. 상기 제6 프레임 영상(I6)에서도 각 블럭에 따른 객체의 모션 벡터를 도출한다. 제6 프레임 영상(I6)에서는 B53 블럭, B54 블럭, B64 블럭, B56 블럭에 대해 객체의 모션 벡터들 Va', Vc', Vd, Ve를 도출한다.

따라서 상기 제5 프레임 영상(I5)과 상기 제6 프레임 영상(I6)을 비교하면, 상기 제5 프레임 영상(I5)에서는 B63 블럭의 모션 벡터 Vb이 존재하였는데, 상기 제6 프레임 영상(I6)에서는 상기 Vb가 없어졌으며, B56 블럭의 모션 벡터 Ve가 생성되었다. 제5 프레임 영상(I5)은 서로 인접한 블럭들(B53 블럭, B63 블럭, B54 블럭, B64 블럭) 각각에 대하여 모션 벡터들이 존재하였는데, 제6 프레임 영상(I6)은 인접한 블럭들(B53 블럭, B54 블럭, B64 블럭)과 적어도 한 블럭 이상 떨어진 다른 블럭(B64 블럭)에 객체의 모션 벡터가 도출되므로 이는 객체가 분리된 경우로 판단할 수 있다. 제6 프레임 영상(I6)에서 객체의 모션 벡터가 도출된 블럭들이 적어도 한 블럭 이상 떨어져 있는 경우 객체가 분리하는 경우로 판단할 수 있다.

상기 판단에 더하여, 상기 모션 벡터들의 방향을 더 판단하여 제6 프레임 영상(I)에서 인접한 블럭들(B53 블럭, B64 블럭, B54 블럭) 중 적어도 어느 하나의 블럭에서의 모션 벡터와 떨어진 다른 블럭(B56 블럭)에서의 모션 벡터의 방향이 동일한 경우, 객체의 분리를 더 확신할 수 있다. 더욱 구체적으로, 상기 인접한 블럭들(B53 블럭, B54 블럭, B64 블럭) 중 상기 다른 블럭(B56 블럭)과 가장 근접한 블럭(B54 블럭)의 모션 벡터Vc'와 상기 다른 블럭(B56 블럭)의 모션 벡터 Ve가 서로 동일한 방향이면서, 상기 다른 블럭(B56)에서 객체의 모션 벡터 Ve가 도출된 경우 객체가 분리된 것으로 판단할 수 있다.

방향 판단은 이전 프레임 영상 및 현재 프레임 영상 중 적어도 어느 하나의 프레임 영상 또는 모든 프레임 영상들에 대해서 모두 가능하다. 이하의 실시 예들에서도 동일하게 적용할 수 있다.

복수의 객체들이 수렴하는 경우의 예로서, 도 17과 18을 참조하여 설명한다. 설명의 편의를 위하여 객체는 도시하지 않았으며 객체의 모션 벡터만을 도시하여 설명한다. 이하 설명 또한 동일하게 적용한다.

도 17을 참조하면, 제7 프레임 영상(I7)으로부터 B31 블럭의 제1 객체에 대한 모션 벡터 Vf와 B44 블럭의 제2 객체에 대한 모션 벡터 Vg를 도출한다. 상기 모션 벡터 Vf와 모션 벡터 Vg 사이에 2개의 블럭들 B32, B33이 존재한다. 도 18을 참조하면 B32 블럭의 제1 객체에 대한 모션 벡터 Vf'와 B43 블럭의 제2 객체에 대한 모션 벡터 Vg'를 도출한다. 상기 모션 벡터 Vf'와 모션 벡터 Vg' 사이의 블럭들 개수가 줄어들었으므로, 상기 제1 객체와 상기 제2 객체가 수렴하는 것으로 판단하고, 촬영 신호를 생성할 수 있다.

본 실시 예에서도 상기 모션 벡터 Vf'와 모션 벡터 Vg' 사이의 블럭들 사이의 간격이 줄었나 여부의 판단에 더하여 상기 모션 벡터 Vf'와 모션 벡터 Vg' 의 방향이 반대인지 더 판단하여, 반대라면 상기 제1 객체와 상기 제2 객체가 수렴하는 것으로 판단할 수 있다. 따라서, 수렴하는 판단에 대한 신뢰성을 향상시킬 수 있다.

복수의 객체들이 발산하는 경우는 도 19와 20을 참조하여 설명한다. 도 19를 참조하면, 제9 프레임 영상(I9)으로부터 B32 블럭에서의 제1 객체에 대한 모션 벡터 Vh와 B33 블럭에서의 제2 객체에 대한 모션 벡터 Vi를 도출한다. 그리고 상기 제9 프레임 영상(I9) 이후의 제10 프레임 영상(I10)에 대하여 모션 벡터를 도출한 결과, B31 블럭에서의 제1 객체에 대한 모션 벡터 Vh'와 B34블럭에서의 제2 객체에 대한 모션 벡터 Vi'를 도출한다. 상기 모션 벡터 Vh와 모션 벡터 Vi 사이의 블럭 개수 보다 상기 모션 벡터 Vh'와 상기 모션 벡터 Vi' 사이는 블럭 개수가 더 많으므로, 상기 객체들은 발산하는 것으로 판단할 수 있으며, 상기 판단에 따라 촬영 신호를 생성할 수 있다.

또한, 상기 모션 벡터 Vh'와 상기 모션 벡터 Vi' 의 방향이 반대인지 여부를 더 판단하여, 반대라면 상기 제1 객체와 상기 제2 객체는 발산하는 것임을 더욱 확신할 수 있다.

도 21과 도 22는 객체들이 합쳐지는 경우의 실시 예로서, 제10 프레임 영상(I10)에서는 B32 블럭에서 제1 객체에 대한 모션 벡터 Vj와 B43 블럭에서 제2 객체에 대한 모션 벡터 Vk가 도출된다. 상기 제10 프레임 영상(I10) 이후의 제11 프레임 영상(I11)에서는 B32 블럭에서 객체의 모션 벡터 Vj'만이 도출된다. 제11 프레임 영상(I11)에서는 모션 벡터 Vj와 모션 벡터 Vk 사이의 블럭이 없어져버렸는 바, 이는 객체가 합쳐진 경우로 판단할 수 있다.

본 실시 예에서도 신뢰성 향상을 위하여, 상기 제10 프레임 영상에서 제1 객체에 대한 모션 벡터 Vj와 B제2 객체에 대한 모션 벡터 Vk의 방향을 더 판단하여, 반대라면 상기 객체들이 합쳐지는 것으로 더욱 정확하게 판단할 수 있다.

본 발명에 따른 장치는 프로세서, 프로그램 데이터를 저장하고 실행하는 메모리, 디스크 드라이브와 같은 영구 저장부(permanent storage), 외부 장치와 통신하는 통신 포트, 터치 패널, 키(key), 버튼 등과 같은 사용자 인터페이스 장치 등을 포함할 수 있다. 소프트웨어 모듈 또는 알고리즘으로 구현되는 방법들은 상기 프로세서 상에서 실행 가능한 컴퓨터가 읽을 수 있는 코드들 또는 프로그램 명령들로서 컴퓨터가 읽을 수 있는 기록 매체 상에 저장될 수 있다. 여기서 컴퓨터가 읽을 수 있는 기록 매체로 마그네틱 저장 매체(예컨데, ROM(read-only memory), RAM(random-access memory), 플로피 디스크, 하드 디스크 등) 및 광학적 판독 매체(예컨데, 시디롬(CD-ROM), 디브이디(DVD: Digital Versatile Disc)) 등이 있다. 상기 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템들에 분산되어, 분산 방식으로 컴퓨터가 판독 가능한 코드가 저장되고 실행될 수 있다. 상기 매체는 컴퓨터에 의해 판독가능하며, 상기 메모리에 저장되고, 상기 프로세서에서 실행될 수 있다.

본 발명에서 인용하는 공개 문헌, 특허 출원, 특허 등을 포함하는 모든 문헌들은 각 인용 문헌이 개별적으로 및 구체적으로 병합하여 나타내는 것 또는 본 발명에서 전체적으로 병합하여 나타낸 것과 동일하게 본 발명에 병합될 수 있다.

본 발명의 이해를 위하여, 도면에 도시된 바람직한 실시 예들에서 참조 부호를 기재하였으며, 상기 실시 예들을 설명하기 위하여 특정 용어들을 사용하였으나, 상기 특정 용어에 의해 본 발명이 한정되는 것은 아니며, 본 발명은 당업자에 있어서 통상적으로 생각할 수 있는 모든 구성 요소들을 포함할 수 있다.

본 발명은 기능적인 블록 구성들 및 다양한 처리 단계들로 나타내어질 수 있다. 이러한 기능 블록들은 특정 기능들을 실행하는 다양한 개수의 하드웨어 또는/및 소프트웨어 구성들로 구현될 수 있다. 예를 들어, 본 발명은 하나 이상의 마이크로프로세서들의 제어 또는 다른 제어 장치들에 의해서 다양한 기능들을 실행할 수 있는, 메모리, 프로세싱, 로직(logic), 룩업 테이블(look-up table) 등과 같은 직접 회로 구성들을 채용할 수 있다. 본 발명에의 구성 요소들이 소프트웨어 프로그래밍 또는 소프트웨어 요소들로 실행될 수 잇는 것과 유사하게, 본 발명은 데이터 구조, 프로세스들, 루틴들 또는 다른 프로그래밍 구성들의 조합으로 구현되는 다양한 알고리즘을 포함하여, C, C++, 자바(Java), 어셈블러(assembler) 등과 같은 프로그래밍 또는 스크립팅 언어로 구현될 수 있다. 기능적인 측면들은 하나 이상의 프로세서들에서 실행되는 알고리즘으로 구현될 수 있다. 또한, 본 발명은 전자적인 환경 설정, 신호 처리, 및/또는 데이터 처리 등을 위하여 종래 기술을 채용할 수 있다. "매커니즘", "요소", "수단", "구성" 등과 같은 용어는 넓게 사용될 수 있으며, 기계적이고 물리적인 구성들로서 한정되는 것은 아니다. 상기 용어는 프로세서 등과 연계하여 소프트웨어의 일련의 처리들(routines)의 의미를 포함할 수 있다.

본 발명에서 설명하는 특정 실행들은 일 실시 예들로서, 어떠한 방법으로도 본 발명의 범위를 한정하는 것은 아니다. 명세서의 간결함을 위하여, 종래 전자적인 구성들, 제어 시스템들, 소프트웨어, 상기 시스템들의 다른 기능적인 측면들의 기재는 생략될 수 있다. 또한, 도면에 도시된 구성 요소들 간의 선들의 연결 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것으로서, 실제 장치에서는 대체 가능하거나 추가의 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들로서 나타내어질 수 있다. 또한, "필수적인", "중요하게" 등과 같이 구체적인 언급이 없다면 본 발명의 적용을 위하여 반드시 필요한 구성 요소가 아닐 수 있다.

본 발명의 명세서(특히 특허청구범위에서)에서 "상기"의 용어 및 이와 유사한 지시 용어의 사용은 단수 및 복수 모두에 해당하는 것일 수 있다. 또한, 본 발명에서 범위(range)를 기재한 경우 상기 범위에 속하는 개별적인 값을 적용한 발명을 포함하는 것으로서(이에 반하는 기재가 없다면), 발명의 상세한 설명에 상기 범위를 구성하는 각 개별적인 값을 기재한 것과 같다. 마지막으로, 본 발명에 따른 방법을 구성하는 단계들에 대하여 명백하게 순서를 기재하거나 반하는 기재가 없다면, 상기 단계들은 적당한 순서로 행해질 수 있다. 반드시 상기 단계들의 기재 순선에 따라 본 발명이 한정되는 것은 아니다. 본 발명에서 모든 예들 또는 예시적인 용어(예들 들어, 등등)의 사용은 단순히 본 발명을 상세히 설명하기 위한 것으로서 특허청구범위에 의해 한정되지 않는 이상 상기 예들 또는 예시적인 용어로 인해 본 발명의 범위가 한정되는 것은 아니다. 또한, 당업자는 다양한 수정, 조합 및 변경이 부가된 특허청구범위 또는 그 균등물의 범주 내에서 설계 조건 및 팩터에 따라 구성될 수 있음을 알 수 있다.

10: 광학부, 11: 광학 구동부, 20: 촬상부, 21: 촬상 제어부, 30: DSP,
40: 표시부, 50: 조작부, 60: 메모리, 70: 메모리 카드

Claims (29)

  1. 복수의 객체를 포함하는 프레임 영상을 생성하는 단계;
    상기 프레임 영상으로부터 상기 복수의 객체를 특정하는 단계;
    상기 복수의 객체의 모션 벡터들을 도출하는 단계;
    상기 모션 벡터들 사이의 거리를 검출하는 단계;
    상기 검출된 거리가 기준 거리 범위 내에 있는지를 판단하는 단계; 및
    상기 검출된 거리가 기준 거리 범위 내에 있는 경우, 상기 거리가 기준 거리 범위 내에 있는 타이밍에 원하는 타이밍의 이미지가 캡쳐될 수 있도록 촬영 신호를 생성하는 단계;를 구비하는 디지털 영상 촬영 방법.
  2. 제1항에 있어서, 상기 객체의 모션 벡터는 상기 객체의 적어도 일부를 포함하는 객체 영역 내의 모션 벡터들의 합 벡터인 것을 특징으로 하는 디지털 영상 촬영 방법.
  3. 삭제
  4. 삭제
  5. 제1항에 있어서, 상기 복수의 객체들의 모션 벡터들이 서로 접하는지 판단하고,
    접하는 경우, 촬영 신호를 생성하는 것을 특징으로 하는 디지털 영상 촬영 방법.
  6. 제1항에 있어서, 상기 복수의 객체들의 모션 벡터들의 방향을 판단하는 단계;를 더 구비하는 디지털 영상 촬영 방법.
  7. 제6항에 있어서, 상기 복수의 객체들의 모션 벡터들의 방향이 상이하고, 상기 검출된 거리가 기준 거리 범위 내에 있는 경우, 촬영 신호를 생성하는 것을 특징으로 하는 디지털 영상 촬영 방법.
  8. 제6항에 있어서, 상기 복수의 객체들의 모션 벡터들의 방향이 동일하고, 상기 검출된 거리가 기준 거리 범위 내에 있는 경우, 촬영 신호를 생성하는 것을 특징으로 하는 디지털 영상 촬영 방법.
  9. 제1항에 있어서, 상기 프레임 영상을 복수의 블럭들로 구분하는 단계를 더 구비하고,
    상기 블럭들 각각에서 상기 객체의 모션 벡터들을 도출하는 것을 특징으로 하는 디지털 영상 촬영 방법.
  10. 제9항에 있어서, 상기 블럭 각각의 모션 벡터는 상기 블럭 내에서 상기 객체의 모션 벡터들의 합 벡터인 것을 특징으로 하는 디지털 영상 촬영 방법.
  11. 제9항에 있어서, 상기 객체를 포함하는 제1 프레임 영상과 제2 프레임 영상을 생성하고;
    상기 제1 프레임 영상과 상기 제2 프레임 영상 각각을 복수의 블럭들로 구분하며,
    상기 블럭들 각각에 대하여 상기 객체의 모션 벡터를 도출하며;
    상기 제1 프레임 영상과 상기 제2 프레임 영상 간에, 상기 모션 벡터들이 수렴하는지 판단하며,
    수렴하는 경우, 촬영 신호를 생성하는 것을 특징으로 하는 디지털 영상 촬영 방법.
  12. 제9항에 있어서, 상기 객체를 포함하는 제1 프레임 영상과 제2 프레임 영상을 생성하고;
    상기 제1 프레임 영상과 상기 제2 프레임 영상 각각을 복수의 블럭들로 구분하며,
    상기 블럭들 각각에 대하여 상기 객체의 모션 벡터를 도출하며;
    상기 제1 프레임 영상과 상기 제2 프레임 영상 간에, 상기 모션 벡터들이 발산하는지 판단하며,
    발산하는 경우, 촬영 신호를 생성하는 것을 특징으로 하는 디지털 영상 촬영 방법.
  13. 제9항에 있어서, 상기 객체를 포함하는 제1 프레임 영상과 제2 프레임 영상을 생성하고;
    상기 제1 프레임 영상과 상기 제2 프레임 영상 각각을 복수의 블럭들로 구분하며,
    상기 블럭들 각각에 대하여 상기 객체의 모션 벡터를 도출하며;
    상기 제1 프레임 영상과 상기 제2 프레임 영상 간에, 상기 모션 벡터들이 합쳐지는지 판단하며,
    합쳐지는 경우, 촬영 신호를 생성하는 것을 특징으로 하는 디지털 영상 촬영 방법.
  14. 제9항에 있어서, 상기 객체를 포함하는 제1 프레임 영상과 제2 프레임 영상을 생성하고;
    상기 제1 프레임 영상과 상기 제2 프레임 영상 각각을 복수의 블럭들로 구분하며,
    상기 블럭들 각각에 대하여 상기 객체의 모션 벡터를 도출하며;
    상기 제1 프레임 영상과 상기 제2 프레임 영상 간에, 상기 모션 벡터가 분리하는지 판단하며,
    분리하는 경우, 촬영 신호를 생성하는 것을 특징으로 하는 디지털 영상 촬영 방법.
  15. 제1항, 제2항, 제5항 내지 제14항 중 어느 한 항의 디지털 영상 촬영 방법을 컴퓨터가 읽을 수 있는 프로그램으로 기록한 기록 매체.
  16. 복수의 객체를 포함하는 프레임 영상을 생성하는 프레임 영상 생성부;
    상기 프레임 영상으로부터 상기 복수의 객체를 특정하는 객체 특정부;
    상기 복수의 객체의 모션 벡터들을 도출하는 모션 벡터 도출부;
    상기 모션 벡터들 사이의 거리를 검출하는 거리 도출부;
    상기 검출된 거리가 기준 거리 범위 내에 있는지를 판단하는 조건 판단부;
    상기 검출된 거리가 기준 거리 범위 내에 있는 경우, 상기 거리가 기준 거리 범위 내에 있는 타이밍에 원하는 타이밍의 이미지가 캡쳐될 수 있도록 촬영 신호를 생성하는 촬영 제어부;를 구비하는 디지털 영상 촬영 장치.
  17. 제16항에 있어서, 상기 모션 벡터 도출부는 상기 객체의 적어도 일부를 포함하는 객체 영역 내의 모션 벡터들의 합 벡터를 도출하는 것을 특징으로 하는 디지털 영상 촬영 장치.
  18. 삭제
  19. 삭제
  20. 제16항에 있어서, 상기 조건 판단부는 상기 복수의 객체들의 모션 벡터들이 서로 접하는지 판단하고,
    상기 촬영 제어부는 접하는 경우 촬영 신호를 생성하는 것을 특징으로 하는 디지털 영상 촬영 장치.
  21. 제16항에 있어서, 상기 복수의 객체들의 모션 벡터들의 방향을 판단하는 방향 판단부;를 더 구비하는 디지털 영상 촬영 장치.
  22. 제21항에 있어서, 상기 촬영 제어부는 상기 복수의 객체들의 모션 벡터들의 방향이 상이하고, 상기 검출된 거리가 기준 거리 범위 내에 있는 경우, 촬영 신호를 생성하는 것을 특징으로 하는 디지털 영상 촬영 장치.
  23. 제21항에 있어서, 상기 촬영 제어부는 상기 복수의 객체들의 모션 벡터들의 방향이 동일하고, 상기 검출된 거리가 기준 거리 범위 내에 있는 경우, 촬영 신호를 생성하는 것을 특징으로 하는 디지털 영상 촬영 장치.
  24. 제16항에 있어서, 상기 프레임 영상을 복수의 블럭들로 구분하는 영상 분할부를 더 구비하고,
    상기 모션 벡터 도출부는 상기 블럭들 각각에서 상기 객체의 모션 벡터들을 도출하는 것을 특징으로 하는 디지털 영상 촬영 장치.
  25. 제24항에 있어서, 상기 모션 벡터 도출부는 상기 블럭 내에서 상기 객체의 모션 벡터들의 합 벡터를 도출하는 것을 특징으로 하는 디지털 영상 촬영 장치.
  26. 제24항에 있어서, 상기 영상 생성부는 상기 객체를 포함하는 제1 프레임 영상과 제2 프레임 영상을 생성하고;
    상기 영상 분할부는 상기 제1 프레임 영상과 상기 제2 프레임 영상 각각을 복수의 블럭들로 구분하며;
    상기 모션 벡터 도출부는 상기 블럭들 각각에 대하여 상기 객체의 모션 벡터를 도출하고;
    상기 조건 판단부는 상기 제1 프레임 영상과 상기 제2 프레임 영상 간에, 상기 모션 벡터들이 수렴하는지 판단하며;
    상기 촬영 제어부는 수렴하는 경우, 촬영 신호를 생성하는 것을 특징으로 하는 디지털 영상 촬영 장치.
  27. 제24항에 있어서, 상기 영상 생성부는 상기 객체를 포함하는 제1 프레임 영상과 제2 프레임 영상을 생성하고;
    상기 영상 분할부는 상기 제1 프레임 영상과 상기 제2 프레임 영상 각각을 복수의 블럭들로 구분하며;
    상기 모션 벡터 도출부는 상기 블럭들 각각에 대하여 상기 객체의 모션 벡터를 도출하고;
    상기 조건 판단부는 상기 제1 프레임 영상과 상기 제2 프레임 영상 간에, 상기 모션 벡터들이 발산하는지 판단하며;
    상기 촬영 제어부는 발산하는 경우, 촬영 신호를 생성하는 것을 특징으로 하는 디지털 영상 촬영 장치.
  28. 제24항에 있어서, 상기 영상 생성부는 상기 객체를 포함하는 제1 프레임 영상과 제2 프레임 영상을 생성하고;
    상기 영상 분할부는 상기 제1 프레임 영상과 상기 제2 프레임 영상 각각을 복수의 블럭들로 구분하며;
    상기 모션 벡터 도출부는 상기 블럭들 각각에 대하여 상기 객체의 모션 벡터를 도출하고;
    상기 조건 판단부는 상기 제1 프레임 영상과 상기 제2 프레임 영상 간에, 상기 모션 벡터들이 합쳐지는지 판단하며;
    상기 촬영 제어부는 합쳐지는 경우, 촬영 신호를 생성하는 것을 특징으로 하는 디지털 영상 촬영 장치.
  29. 제24항에 있어서, 상기 영상 생성부는 상기 객체를 포함하는 제1 프레임 영상과 제2 프레임 영상을 생성하고;
    상기 영상 분할부는 상기 제1 프레임 영상과 상기 제2 프레임 영상 각각을 복수의 블럭들로 구분하며;
    상기 모션 벡터 도출부는 상기 블럭들 각각에 대하여 상기 객체의 모션 벡터를 도출하고;
    상기 조건 판단부는 상기 제1 프레임 영상과 상기 제2 프레임 영상 간에, 상기 모션 벡터가 분리하는지 판단하며;
    상기 촬영 제어부는 분리하는 경우, 촬영 신호를 생성하는 것을 특징으로 하는 디지털 영상 촬영 장치.
KR1020100072480A 2010-07-27 2010-07-27 객체의 모션 벡터를 이용하여 자동 촬영 기능을 수행하는 디지털 영상 촬영 방법, 디지털 영상 촬영 장치 및 상기 방법을 기록한 기록 매체 KR101710624B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100072480A KR101710624B1 (ko) 2010-07-27 2010-07-27 객체의 모션 벡터를 이용하여 자동 촬영 기능을 수행하는 디지털 영상 촬영 방법, 디지털 영상 촬영 장치 및 상기 방법을 기록한 기록 매체

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020100072480A KR101710624B1 (ko) 2010-07-27 2010-07-27 객체의 모션 벡터를 이용하여 자동 촬영 기능을 수행하는 디지털 영상 촬영 방법, 디지털 영상 촬영 장치 및 상기 방법을 기록한 기록 매체
US13/162,959 US9185293B2 (en) 2010-07-27 2011-06-17 Method and apparatus for capturing images based on detected motion vectors
US14/883,128 US10681275B2 (en) 2010-07-27 2015-10-14 Digital photographing method and apparatus for capturing images based on detected motion vectors

Publications (2)

Publication Number Publication Date
KR20120011919A KR20120011919A (ko) 2012-02-09
KR101710624B1 true KR101710624B1 (ko) 2017-02-27

Family

ID=45526349

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100072480A KR101710624B1 (ko) 2010-07-27 2010-07-27 객체의 모션 벡터를 이용하여 자동 촬영 기능을 수행하는 디지털 영상 촬영 방법, 디지털 영상 촬영 장치 및 상기 방법을 기록한 기록 매체

Country Status (2)

Country Link
US (1) US9185293B2 (ko)
KR (1) KR101710624B1 (ko)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0710016A3 (en) 1994-10-31 1997-06-11 Texas Instruments Inc Television receiver for broadcast systems with a multiple of display formats
JP5736796B2 (ja) * 2011-01-24 2015-06-17 株式会社ニコン 電子カメラ、プログラム及び記録媒体
EP2608529B1 (en) * 2011-12-22 2015-06-03 Axis AB Camera and method for optimizing the exposure of an image frame in a sequence of image frames capturing a scene based on level of motion in the scene
CA2871668A1 (en) * 2012-04-24 2013-10-31 Lyrical Labs Video Compression Technology, LLC Macroblock partitioning and motion estimation using object analysis for video compression
KR101382367B1 (ko) * 2013-11-13 2014-04-09 주식회사 아나패스 움직임 추정 방법 및 이를 이용한 영상 처리 장치
KR20150110168A (ko) * 2014-03-24 2015-10-02 삼성전자주식회사 홍채 인식 장치 및 이를 포함하는 모바일 장치
JP6234333B2 (ja) * 2014-06-25 2017-11-22 オリンパス株式会社 撮像システム及び撮像方法
JP2019075607A (ja) * 2017-10-12 2019-05-16 キヤノン株式会社 撮像装置およびその制御方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008294737A (ja) 2007-05-24 2008-12-04 Casio Comput Co Ltd 画像処理装置及びプログラム

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE68921840T2 (de) * 1988-10-27 1995-09-07 Canon Kk Bildaufnahme- und Verarbeitungseinrichtung.
JP4564634B2 (ja) * 2000-08-14 2010-10-20 キヤノン株式会社 画像処理方法及び装置並びに記憶媒体
JP4198608B2 (ja) * 2004-01-15 2008-12-17 株式会社東芝 補間画像生成方法および装置
US7880769B2 (en) * 2004-02-13 2011-02-01 Qualcomm Incorporated Adaptive image stabilization
JP4340968B2 (ja) * 2004-05-07 2009-10-07 ソニー株式会社 画像処理装置および方法、記録媒体、並びにプログラム
US9215363B2 (en) * 2004-09-29 2015-12-15 Hewlett-Packard Development Company, L.P. Implementing autofocus in an image capture device while compensating for movement
EP2479990A3 (en) * 2005-06-23 2013-01-23 Israel Aerospace Industries Ltd. A system and method for tracking moving objects
US8154604B2 (en) * 2006-08-11 2012-04-10 Mavs Lab. Inc. Camera motion parameter retrieving system and solving process
JP4762089B2 (ja) * 2006-08-31 2011-08-31 三洋電機株式会社 画像合成装置及び方法並びに撮像装置
JP2008252591A (ja) * 2007-03-30 2008-10-16 Toshiba Corp 補間フレーム生成装置、補間フレーム生成方法及び放送受信装置
JP4268220B2 (ja) * 2007-08-03 2009-05-27 パナソニック株式会社 撮影装置、撮影方法、およびプログラム
KR101392732B1 (ko) * 2007-08-20 2014-05-08 삼성전자주식회사 손떨림에 의한 움직임 추정 장치 및 방법, 그를 이용한영상 촬상 장치
JP5333440B2 (ja) * 2008-03-28 2013-11-06 日本電気株式会社 処理システム、画像処理方法および画像処理用プログラム
JP4623122B2 (ja) * 2008-04-03 2011-02-02 ソニー株式会社 画像信号処理装置、画像信号処理方法、およびプログラム
JP4561919B2 (ja) * 2008-04-21 2010-10-13 ソニー株式会社 撮像装置、画像処理装置及び画像処理方法
JP2009290827A (ja) * 2008-06-02 2009-12-10 Sony Corp 画像処理装置および画像処理方法
TWI491258B (zh) * 2008-06-20 2015-07-01 Mstar Semiconductor Inc 決定移動向量的方法及其相關裝置
US8848974B2 (en) * 2008-09-29 2014-09-30 Restoration Robotics, Inc. Object-tracking systems and methods
US8421906B2 (en) * 2008-10-31 2013-04-16 Hewlett-Packard Development Company, L.P. Method and digital imaging appliance adapted for selecting a focus setting
CN102282603A (zh) * 2009-01-20 2011-12-14 松下电器产业株式会社 显示装置及显示控制方法
US8605942B2 (en) * 2009-02-26 2013-12-10 Nikon Corporation Subject tracking apparatus, imaging apparatus and subject tracking method
US8830339B2 (en) * 2009-04-15 2014-09-09 Qualcomm Incorporated Auto-triggered fast frame rate digital video recording
JP5374220B2 (ja) * 2009-04-23 2013-12-25 キヤノン株式会社 動きベクトル検出装置およびその制御方法、ならびに撮像装置
GB2469679B (en) * 2009-04-23 2012-05-02 Imagination Tech Ltd Object tracking using momentum and acceleration vectors in a motion estimation system
JP5300591B2 (ja) * 2009-05-21 2013-09-25 キヤノン株式会社 画像処理装置およびその方法
TWI390970B (zh) * 2009-07-22 2013-03-21 Altek Corp Use motion detection to adjust the digital camera's shooting settings
EP2489180A1 (en) * 2009-10-14 2012-08-22 CSR Technology Inc. Method and apparatus for image stabilization
KR101630285B1 (ko) * 2009-10-28 2016-07-21 한화테크윈 주식회사 색 유동성 억제 장치 및 방법
TWI475882B (zh) * 2009-12-30 2015-03-01 Altek Corp Motion detection method using the adjusted digital camera of the shooting conditions

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008294737A (ja) 2007-05-24 2008-12-04 Casio Comput Co Ltd 画像処理装置及びプログラム

Also Published As

Publication number Publication date
US9185293B2 (en) 2015-11-10
KR20120011919A (ko) 2012-02-09
US20120026346A1 (en) 2012-02-02
US20160037072A1 (en) 2016-02-04

Similar Documents

Publication Publication Date Title
EP2710594B1 (en) Video summary including a feature of interest
KR101342477B1 (ko) 동영상을 촬영하는 촬상 장치, 및 촬상 처리 방법
JP5394296B2 (ja) 撮像装置及び画像処理方法
US20140168429A1 (en) Image Processing Apparatus, Image Processing Method and Program
US20130176458A1 (en) Flexible Burst Image Capture System
US7515820B2 (en) Image capture device with automatic focusing function
US8988529B2 (en) Target tracking apparatus, image tracking apparatus, methods of controlling operation of same, and digital camera
KR101421716B1 (ko) 얼굴 검출 장치, 촬상 장치 및 얼굴 검출 방법
JP4429241B2 (ja) 画像処理装置及び方法
JP4720810B2 (ja) 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム
US9172858B2 (en) Apparatus and method for controlling settings of an imaging operation
US8558944B2 (en) Image capture apparatus and method for generating combined-image data
US8285075B2 (en) Image processing apparatus, image processing method, and program
JP4819001B2 (ja) 撮影装置および方法並びにプログラム、画像処理装置および方法並びにプログラム
US8144207B2 (en) Computer program product for photographic subject tracking, photographic subject tracking device, and camera
US8363121B2 (en) Digital photographing device, method of controlling the same, and computer-readable storage medium to select between a still and a moving image capturing mode
US8970762B2 (en) Digital photographing apparatus and method of controlling the same
JP4321287B2 (ja) 撮影装置および撮影方法、並びに、プログラム
TWI399082B (zh) Display control device, display control method and program
US9560266B2 (en) Information processing apparatus and method for extracting and categorizing postures of human figures
JP3867687B2 (ja) 撮像装置
US20110221920A1 (en) Digital photographing apparatus, method of controlling the same, and computer readable storage medium
US20110150280A1 (en) Subject tracking apparatus, subject region extraction apparatus, and control methods therefor
US8553138B2 (en) Image capture apparatus and method for generating combined-image data
JP4674471B2 (ja) デジタルカメラ

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20200130

Year of fee payment: 4