KR20060080526A - 최적의 촬영 시점을 선택할 수 있는 디지털 카메라 장치 - Google Patents

최적의 촬영 시점을 선택할 수 있는 디지털 카메라 장치 Download PDF

Info

Publication number
KR20060080526A
KR20060080526A KR1020050108775A KR20050108775A KR20060080526A KR 20060080526 A KR20060080526 A KR 20060080526A KR 1020050108775 A KR1020050108775 A KR 1020050108775A KR 20050108775 A KR20050108775 A KR 20050108775A KR 20060080526 A KR20060080526 A KR 20060080526A
Authority
KR
South Korea
Prior art keywords
mouth
eye
image
memory
module
Prior art date
Application number
KR1020050108775A
Other languages
English (en)
Other versions
KR100676408B1 (ko
Inventor
지엔 장
웬디 리
지엔치앙 황
Original Assignee
지엔 장
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 지엔 장 filed Critical 지엔 장
Publication of KR20060080526A publication Critical patent/KR20060080526A/ko
Application granted granted Critical
Publication of KR100676408B1 publication Critical patent/KR100676408B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21—Intermediate information storage
    • H04N1/2104—Intermediate information storage for one or a few pictures
    • H04N1/2112—Intermediate information storage for one or a few pictures using still video cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00—Details of cameras or camera bodies; Accessories therefor
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B7/00—Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
    • G03B7/08—Control effected solely on the basis of the response, to the intensity of the light received by the camera, of a built-in light-sensitive device
    • G03B7/091—Digital circuits
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21—Intermediate information storage
    • H04N1/2104—Intermediate information storage for one or a few pictures
    • H04N1/2112—Intermediate information storage for one or a few pictures using still video cameras
    • H04N1/2129—Recording in, or reproducing from, a specific memory area or areas, or recording or reproducing at a specific moment
    • H04N1/2133—Recording or reproducing at a specific moment, e.g. time interval or time-lapse

Abstract

본 발명은 최적의 촬영 시점을 선택할 수 있는 디지털 카메라 장치에 관한 것으로, 카메라부와, 메모리를 포함하며; 서로 직렬 연결된 얼굴 검출 모듈, 눈 및 입 위치 포착 모듈, 눈 깜박임 및 입 벌림 판단 모듈을 포함하는 신호 처리부를 포함하되, 상기 얼굴 검출 모듈은 메모리로부터 디지털 이미지를 읽어 얼굴 위치를 결정하여 결과를 눈 및 입 위치 포착 모듈로 출력하고, 상기 눈 및 입 위치 포착 모듈은 눈과 입의 위치를 결정하여 결과를 눈 깜박임 및 입 벌림 판단 모듈로 출력하며, 상기 눈 깜박임 및 입 벌림 판단 모듈은 판단결과를 출력하며; 상기 눈 깜박임 및 입 벌림 판단 모듈의 판단 결과가 최적의 촬영 시점이면 촬영 제어 명령을 출력하고, 판단결과가 최적의 촬영 시점이 아니면 촬영제어 명령을 출력하지 않는 제어부를 포함하여 구성되는 것을 특징으로 한다.
본 발명에 의하면 디지털 카메라에서 일반적인 디지털 카메라 장치의 모든 기능을 구비할 뿐 아니라 순간적인 최적의 촬영 시점을 선택할 수 있는 최적의 촬영 시점을 선택할 수 있다.
디지털 카메라, 촬영시점, 촬영시간, 슈팅타임, 최적

Description

최적의 촬영 시점을 선택할 수 있는 디지털 카메라 장치{BEST SHOOTING MOMENT SELECTABLE DIGITAL CAMERA APPARATUS}
도 1은 본 발명의 일실시예에 따른 디지털 카메라 장치의 구성 블록도.
도 2는 도 1에 도시된 신호 처리부의 구성 블록도.
도 3은 도 2에 도시된 얼굴 검출 모듈의 구성 블록도.
도 4는 도 2에 도시된 눈 및 입 위치 포착 모듈의 구성 블록도.
도 5는 도 2에 도시된 눈 깜박임 및 입 벌림 판단 모듈의 구성 블록도.
도 6은 눈 및 입 위치 포착 모듈과 눈 깜박임 및 입 벌림 판단 모듈의 동작 원리도.
도 7은 눈 깜박임 및 입 벌림 판단 모듈에서 입 벌림 판단을 위한 동작 원리도.
도 8a 내지 도 8c는 본 발명의 일실시예에 따른 템플릿 매칭을 위한 동작 흐름도.
도 9a 및 도 9b는 본 발명의 일실시예에 따른 눈 깜박임 및 입 벌림 판단 모듈의 동작 흐름도.
도 10a 및 도 10b는 본 발명의 일실시예에 따른 신호 처리부의 동작 흐름도.
본 발명은 최적의 촬영 시점을 선택할 수 있는 디지털 카메라 장치에 관한 것으로서, 특히 사람의 얼굴 상태를 포착하여 최적의 촬영 시점을 결정하는 디지털 카메라 장치에 관한 것이다. 본 발명은 촬영 전문인 및 아마추어, 혹은 일반적인 사용자에게 모두 적용될 수 있다.
현재 사용되고 있는 일반적인 디지털 카메라 장치는 촬영자가 최적 촬영 시점을 선택할 수 있게 해주는 기능이 구비되어 있지 않고, 단지 촬영 후 촬영자가 촬영된 사진을 점검해 보는 기능만 구비되어 있다. 예를 들면, 사용자가 촬영을 진행한 후, 디스플레이 장치를 통하여 촬영된 사진을 디스플레이 하는 것이다.
하지만 많은 촬영된 사진의 품질이 사용자들의 요구를 만족시킬 수 없다. 특히 많은 사람을 대상으로 하는 단체 촬영을 진행하는 경우, 피사되는 사람들이 순간적으로 눈을 깜박이던가 혹 표정의 변동이 많기 때문에 촬영 품질을 보장하기 힘들다.
종래의 디지털 카메라 장치는 촬영을 진행할 수 있는 최적의 시간을 판단할 수 없고 또 사람들이 눈을 깜박이거나 얼굴 표정을 짓는 것을 구별할 수 없음에 따라 촬영자들이 최적의 촬영 시점을 찾는데 어려움이 있으며 촬영의 품질을 보장하기 힘들다.
본 발명은 상술한 바와 같은 종래의 문제점을 해결하기 위하여 안출된 것으로, 일반적인 디지털 카메라 장치의 모든 기능을 구비할 뿐 아니라 순간적인 최적의 촬영 시점을 선택할 수 있는 최적의 촬영 시점을 선택할 수 있는 디지털 카메라 장치를 제공함에 그 목적이 있다.
이러한 목적을 달성하기 위한 본 발명의 일실시예에 따른 최적의 촬영 시점을 선택할 수 있는 디지털 카메라 장치는, 카메라부와, 메모리를 포함하며; 서로 직렬 연결된 얼굴 검출 모듈, 눈 및 입 위치 포착 모듈, 눈 깜박임 및 입 벌림 판단 모듈을 포함하는 신호 처리부를 포함하되, 상기 얼굴 검출 모듈은 상기 메모리로부터 디지털 이미지를 읽어 얼굴 위치를 결정하여 그 결과를 상기 눈 및 입 위치 포착 모듈로 출력하고, 상기 눈 및 입 위치 포착 모듈은 눈과 입의 위치를 결정하여 그 결과를 눈 깜박임 및 입 벌림 판단 모듈로 출력하며, 상기 눈 깜박임 및 입 벌림 판단 모듈은 판단결과를 출력하며; 상기 눈 깜박임 및 입 벌림 판단 모듈의 판단 결과가 최적의 촬영 시점이면 촬영 제어 명령을 출력하고, 판단결과가 최적의 촬영 시점이 아니면 촬영제어 명령을 출력하지 않는 제어부를 포함하여 구성되는 것을 특징으로 한다.
바람직하게 상기 얼굴 검출 모듈은, 다중 스케일 템플릿과, 촬영대기 이미지 와, 템플릿 매칭 연산 유닛을 포함하되, 상기 템플릿 매칭 연산유닛은, 상기 메모리에서 다중 스케일 템플릿과 촬영대기 이미지를 받아들여 연산을 수행하여 그 결과를 얼굴 이미지 위치로 출력하며, 상기 다중 스케일 템플릿과, 촬영대기 이미지와, 얼굴 이미지 위치는 각각 상기 메모리의 서로 다른 주소에 저장되어 있다.
바람직하게 상기 눈 및 입 위치 포착 모듈은, 촬영대기 이미지, 얼굴 이미지 위치와, 수평 및 수직 투영유닛을 포함하며, 상기 수평 및 수직 투영유닛은 상기 메모리에서 촬영대기 이미지와 얼굴 이미지 위치를 받아들여 연산을 수행하여 그 연산 결과를 눈 및 입 위치로 출력하며, 상기 촬영대기 이미지, 얼굴 이미지 위치와, 상기 눈 및 입 위치는 각각 메모리의 서로 다른 주소에 저장되어 있다.
바람직하게 상기 눈 깜박임 및 입 벌림 판단 모듈은, 촬영대기 이미지, 눈 및 입 위치와, 눈 깜박임 및 입 벌림 판단 유닛을 포함하며, 상기 눈 깜박임 및 입 벌림 판단 유닛은 상기 메모리에서 상기 촬영대기 이미지와 상기 눈 및 입 위치를 받아들여 연산을 수행하여 각 사람 얼굴에서의 눈 깜박임 및 입 벌림을 판단한 후 상기 제어부에 명령을 전송하며, 상기 촬영대기 이미지와, 상기 눈 및 입 위치는 각각 상기 메모리의 서로 다른 주소에 저장되어 있다.
이하, 첨부된 도면을 참조하여 본 발명의 일실시예를 설명하도록 한다.
도 1을 참조하면 본 발명의 일실시예에 따른 디지털 카메라 장치는 카메라부(1)와, 메모리(2)와, 신호 처리부(3)와, 제어부(4)를 포함하여 구성된다.
상기 카메라부(1)는 선택 및 전환된 디지털 신호를 메모리(2)로 출력한다.
상기 신호 처리부(3)는 상기 메모리(2)에 저장된 디지털 이미지에 대하여 처 리를 수행하여 디지털 이미지상의 사람들이 눈 깜박임이 있는지, 표정이 자연스러운지를 판단하여 최적의 촬영 시점을 결정하며, 만일 최적의 촬영 시점이 결정되면 신호 처리부(3)는 제어부(4)를 통하여 촬영 제어명령을 출력한다.
도 2에 도시된 바와 같이 상기 신호 처리부(3)는 서로 직렬 연결된 얼굴 검출 모듈(3-1)과, 눈 및 입 위치 포착모듈(3-2)과, 눈 깜박임 및 입 벌림 판단 모듈(3-3)을 포함하여 구성된다.
상기 얼굴 검출 모듈(3-1)은 메모리(2)로부터 디지털 이미지를 읽어 얼굴 위치를 결정하여 그 결과를 눈 및 입 위치 포착 모듈(3-2)로 출력한다.
상기 눈 및 입 위치 포착 모듈(3-2)은 눈과 입의 위치를 결정하여 그 결과를 눈 깜박임 및 입 벌림 판단 모듈(3-3)로 출력한다.
상기 눈 깜박임 및 입 벌림 판단 모듈(3-3)은 판단결과를 제어부(4)에 출력한다.
이에 따라 제어부(4)는 눈 깜박임 및 입 벌림 판단 모듈(3-3)로부터 수신된 판단 결과가 최적의 촬영 시점이면 촬영 제어 명령을 출력하고, 판단결과가 최적의 촬영 시점이 아니면 촬영제어 명령을 출력하지 않는다.
도 3에 도시된 바와 같이 상기 얼굴 검출 모듈(3-1)은 다중 스케일 템플릿(multi scale template)(3-1-1), 촬영대기 이미지(3-1-2), 템플릿 매칭(template matching) 연산 유닛(3-1-3)을 포함한다.
상기 템플릿 매칭 연산 유닛(3-1-3)은 메모리(2)에서 다중 스케일 템플릿(3-1-1)과 촬영대기 이미지(3-1-2)를 받아들여 연산을 수행하여 그 결과를 표정 이미 지 위치(3-1-4)로 출력하며, 또한 상기 다중 스케일 템플릿(3-1-1), 촬영대기 이미지(3-1-2), 얼굴 이미지 위치(3-1-4)는 각각 메모리(2)의 서로 다른 주소에 저장되어 있다.
상기 다중 스케일 템플릿은 12개의 동일하지 않은 크기의 평균 얼굴 템플릿로서, 상기 템플릿은 대량의 얼굴에 대하여 분석 및 훈련을 진행하여 형성된 것이다.
도 4에 도시된 바와 같이 상기 눈 및 입 위치 포착 모듈(3-2)은 촬영대기 이미지(3-1-2), 얼굴 이미지 위치(3-1-4)와 수평 및 수직 투영유닛(3-2-1)을 포함한다.
상기 수평 및 수직 투영유닛은 메모리(2)에서 촬영대기 이미지(3-1-2) 및 얼굴 이미지 위치(3-1-4)를 받아들여 연산을 수행하여 그 연산 결과를 눈 및 입 위치(3-2-2)로 출력한다.
상기 촬영대기 이미지(3-1-2), 얼굴 이미지 위치(3-1-4)와 눈 및 입 위치(3-2-2)는 각각 메모리(2)의 서로 다른 주소에 저장되어 있다.
도 5를 참조하면 상기 눈 깜박임 및 입 벌림 판단 모듈(3-3)은 촬영대기 이미지(3-1-2), 눈 및 입 위치(3-2-2)와 눈 깜박임 및 입 벌림 판단 유닛(3-3-1)을 포함한다.
눈 깜박임 및 입 벌림 판단 유닛은 메모리(2)에서 촬영대기 이미지(3-1-2)와 눈 및 입 위치(3-2-2)를 받아들여 연산을 수행하여 각 사람 얼굴에서의 눈 깜박임 및 입 벌림을 판단한 후 제어부(4)에 명령을 발송하며, 또한 상기 촬영대기 이미지 (3-1-2), 눈 및 입 위치(3-2-2)는 각각 메모리(2)의 서로 다른 주소에 저장되어 있다.
도 6은 눈 및 입 위치 포착 모듈과 눈 깜박임 및 입 벌림 판단 모듈의 작동 원리도로서, 수평 및 수직방향의 투영을 통하여 눈 및 입 위치를 포착할 수 있다. 눈 깜박임에 대한 판단은 수직방향의 투영도에서 대응되는 위치에 3개의 웨이브 크래스트(wave crest)가 있는가를 판단하는 것을 통하여 실현할 수 있으며, 또한 만일 두 눈을 감는다면 수평방향의 투영에도 하나의 웨이브 크래스트 밖에 없을 것이다. 입 벌림 판단은 입의 중심위치로부터 수직방향에 따라 입의 윗 경계선과 아래 경계선이 이르며, 경유하는 점에 연속적인 입술색이 아닌 점이 있는지를 판단한다.
도 7은 눈 깜박임 및 입 벌림 판단 모듈에서 입 벌림 판단에 대응되는 작동 원리도로서, 도 6에 의하여 취득한 입 중심위치에 의하여, 수직방향에 따라 입의 상부 경계선 yUp을 찾아내고, 이어 수직 방향에 따라 입의 하부 경계선 yDn을 찾아낸 후, 입의 벌림정도(yUp-yDn)을 계산하여 결과를 통계에 의하여 취득한 경험치와 비교하므로써 입 벌림 여부를 판단한다.
도 8a 내지 도 8c는 본 발명의 일실시예에 따른 얼굴 검출 모듈에서 템플릿 매칭을 수행하는 동작 흐름도이다.
도 8a 내지 도 8c를 참조하면 S801에서 얼굴 검출의 템플릿 매칭이 시작한다.
S802 단계에서 템플릿 인덱스를 0으로 설정한다(K=0). 여기에서 K는 템플릿 인덱스이다.
S803 단계에서 임의의 템플릿 Mk를 추출한다.
S804 단계에서 템플릿 Mk를 N개의 소블록(small block)으로 나눈다.
S805 단계에서 각 소블록에 대하여 웨이브렛 변환(wavelet transform)을 수행한다.
S806 단계에서 각 소블록에 대하여 최대 1/4 엘리먼트를 취하여 벡터 A(k)를 형성한다.
S807 단계에서 모든 템플릿에 대하여 수행했는지 판단하여, 판단 결과 예(Yes)이면 S808 단계로 진행하고, 아니오(No)이면 S803 단계로 진행한다.
S808 단계에서 K=0으로 설정한다. 여기서 K는 템플릿의 인덱스이다.
S809 단계에서 X와 Y에 대하여 초기화를 진행하여 이미지(Image)의 인덱스에 사용한다.
S810 단계에서 촬영 대기 이미지 Image를 읽어 들이고,
S811 단계에서 템플릿과 크기가 동일한 블록 S를 취하고,
S812 단계에서 블록 S를 N개의 작은 소블록으로 나누고,
S813 단계에서 각 소블록에 대하여 웨이브렛 변환을 진행하고,
S814 단계에서 각 소블록에 대하여 최대 1/4 엘리먼트를 취하여 벡터 B(k)를 형성한다.
S815 단계에서 X와 Y의 편위(deviation)를 증가시켜 다음 픽셀을 가리키게 하고, 만일 X가 이미지 너비보다 작으면 X를 하나의 픽셀의 크기만큼 너비를 증가시키고, 만일 X의 크기가 이미지의 너비에 달하면 X를 0으로 설정하고 Y를 한 픽셀 만큼 증가시킨다.
S816 단계에서 이미지의 경계선에 도달하였는지를 판단하여, 판단결과 예(Yes)이면 S817 단계로 진행하고, 아니오(No)이면 S815 단계로 진행한다.
S817 단계에서 벡터 A(k)와 B(k)의 거리 DistAB(k)를 구하고,
S818 단계에서 DistAB(k)가 사람 얼굴의 임계치(threshold) DistThreoldK를 초과하였는지를 판단하여, 만일 예(Yes)이면 S819 단계로 진행하고, 아니오(No)이면 S820 단계로 진행한다.
S819 단계에서 사람 얼굴의 위치를 기록하고, S820 단계에서 모든 템플릿를 처리하였는지를 판단하여, 판단 결과 예(Yes)이면 S821 단계로 진행하여 위치를 출력하고, 아니오(No)이면 S809 단계로 진행한다.
S822 단계에서 프로세스를 종료한다.
도 9a 및 도 9b는 본 발명의 눈 깜박임 및 입 벌림 판단 모듈(3-3)의 작동 흐름도이다.
S901 단계에서 얼굴 검출 모듈에서 취득한 얼굴 구역 이미지를 수평방향으로 투영을 진행한다.
S902 단계에서 상기 과정에서 취득한 이미지에 두 개의 웨이브 크래스트가 있는지를 판단하여, 예(Yes)이면 S904 단계로 진행하여 처리를 진행하고, 아니오(No)이면 S903 단계로 진행한다.
S904 단계에서 S902 단계에서 산출된 수평 웨이브 크래스트의 좌표위치 (y1, y2)를 기록한다. 사실상 y1는 입의 중심위치의 수평방향에서의 투영위치이고, y2는 눈의 중심위치의 수평방향에서의 투영위치이다.
S903 단계에서 얼굴에서 두 눈의 감김 여부를 판단하고,
S905 단계에서, S902 단계에서 산출된 수평방향으로 투영된 웨이브 크래스트의 좌표위치(y1)를 기록한다. 사실상 y1는 입의 중심위치의 수평방향에서의 투영위치이다.
S906 단계에서 얼굴 검출 모듈에서 취득한 얼굴 구역의 이미지를 수직방향으로 투영한다.
S907 단계에서 상기 과정에서 취득한 이미지에 세 개의 웨이브 크래스트가 있는지를 판단하여, 예(Yes)이면 S909 단계로 진행하고, 아니오(No)이면 S908 단계로 진행한다.
S909 단계에서, S907 단계에서 산출된 수평방향으로 투영된 웨이브 크래스트의 좌표위치(x1, x2, x3)를 기록한다. 사실상, x1, x2, x3는 각각 오른눈, 입, 왼눈의 중심의 수직방향에서의 투영위치이다.
S910 단계에서 입의 중심위치 (x2, y1)를 기록하고, S911 단계에서 yUp 및 yDn에 대하여 초기화를 진행하여 입의 수직좌표로 삼는다.
S912 단계에서 좌표 (x2,yUp)의 픽셀치가 입술의 색조구간에 위치하여 있는지를 판단하여, 예(Yes)이면 S914 단계로 진행하고, 아니오(No)면 S913 단계로 진행한다.
S913 단계에서 yUp를 1씩 증가시킨다. 사실상 수직좌표를 1 픽셀위치씩 증가하는 것이다.
S912 단계, S913 단계에서 입술의 상부 경계선을 찾을 때, 수평좌표 x2를 변화시키지 않고 y2를 증가시키며, 아울러 증가된 y2를 yUp로 삼아, 좌표 (x2, yUp)의 픽셀치가 입술의 색조구간에 위치하여 있는지를 판단한다.
S914 단계에서 좌표 (x2, yDn)의 픽셀치가 입술의 색조구간에 위치하여 있는지를 판단하여, 만일 예(Yes)이면 S916 단계로 진행하고, 아니오(No)이면 S915 단계로 진행한다.
S915 단계에서 yDn을 1씩 감소시킨다. 사실상 수직좌표를 1 픽셀위치씩 감소시키는 것이다.
S914 단계, S915 단계에서 입술의 하부 경계선을 찾을 때, 수평좌표 x2를 변화시키지 않고 y2를 감소시키고, 아울러 감소된 y2를 yDn으로 삼아, 좌표 (x2, yDn)의 픽셀치가 입술의 색조구간에 위치하여 있는지를 판단한다.
S916 단계에서 yUp에서 yDn을 뺄셈하여 그 차가 입 벌림 판단 임계치보다 큰지 판단한다. 판단 결과 입 벌림 판단 임계치보다 크면 S918 단계로 진행하고, 그렇지 않으면 S917 단계로 진행한다.
S917 단계에서는 지정된 사람의 얼굴 구역이 입다뭄으로 판단한다.
S918 단계에서는 지정된 사람의 얼굴 구역이 입 벌림으로 판단하고, S919 단계에서 프로세스를 종료한다.
도 10a 및 도 10b는 본 발명의 신호 처리부의 작동 흐름도이다.
도 10a 및 도 10b를 참조하면 S1001 단계에서 계산을 시작하여 S1002 단계에서 X=1로 설정한다. 여기에서 X는 선택될 이미지의 프레임 수로서, 촬영된 이미지 의 어느 프레임의 효과가 가장 좋은지를 판단하는데 사용된다.
S1003 단계에서 디지털 이미지 ImageX 를 선택한다.
S1004 단계에서 템플릿 매칭을 수행한다.
S1005 단계에서 각 얼굴의 위치 FA1, FA2, ..., FaN 및 얼굴 갯수 N을 기록한다.
S1006 단계에서 K=1로 설정한다. 여기에서 K는 각 얼굴 위치를 나타내며, 각 대응되는 얼굴에 사용된다.
S1007 단계에서 ImageX로부터 Fak 위치의 이미지 블록을 읽어 들인다.
S1008 단계에서 ImageX에 대하여 투영을 진행하고,
S1009 단계에서 눈의 투영이 존재하는지를 판단하여, 만일 예(Yes)이면 S1010 단계로 진행하고, 아니오(No)이면 S1014 단계로 진행한다.
S1010 단계에서 투영도에 입부위의 투영이 존재하는지를 판단하여, 만일 예(Yes)이면 S1011 단계로 진행하고, 아니오(No)이면 S1014 단계로 진행한다.
S1011 단계에서 입 벌림 판단을 진행할 것인지를 판단하여, 만일 예(Yes)이면 S1012 단계로 진행하고, 아니오(No)이면 S1013 단계로 진행한다.
S1012에서 입 벌림 상태인가 판단하여, 만일 예(Yes)이면 S1013 단계로 진행하고, 아니오(No)이면 S1014로 진행한다.
S1013 단계에서는 효과가 비교적 좋은 얼굴 이미지 수에 1을 증가시킨다.
S1014 단계에서는 현재 선택 및 검출된 정상적인 얼굴 이미지의 수가 전체 이미지 수보다 많은지를 판단하여, 만일 예(Yes)이면 S1015 단계로 진행하고, 만일 아니오(No)이면 S1016 단계로 진행한다.
S1016 단계에서는 현재 이미지의 모든 얼굴 이미지를 처리하였는지를 판단하여, 만일 예(Yes)이면 S1017 단계로 진행하고, 아니오(No)이면 S1018 단계로 진행한다.
S1017 단계에서 충분한 수량의 프레임을 처리하였는지를 판단하여, 만일 예(Yes)이면 S1020 단계로 진행하고, 아니오(No)이면 S1019 단계로 진행한다.
S1020 단계에서 메모리에 효과가 가장 좋은 얼굴 이미지 프레임을 저장하고, S1021 단계에서 촬영 제어명령을 출력하고 후속 절차 및 촬영상태 설정을 완료하라는 명령을 내린다.
본 발명은 촬영을 진행하는 동시에 촬영 진행시의 각 사람의 얼굴에서의 눈 깜박임이나 자연스러운 표정 등을 구분하여 최적의 촬영 시점을 결정하여 촬영을 진행하므로써 인물촬영의 품질을 크게 제고시킬 수 있다.

Claims (4)

  1. 카메라부와, 메모리를 포함하며;
    서로 직렬 연결된 얼굴 검출 모듈, 눈 및 입 위치 포착 모듈, 눈 깜박임 및 입 벌림 판단 모듈을 포함하는 신호 처리부를 포함하되,
    상기 얼굴 검출 모듈은 상기 메모리로부터 디지털 이미지를 읽어 얼굴 위치를 결정하여 그 결과를 상기 눈 및 입 위치 포착 모듈로 출력하고, 상기 눈 및 입 위치 포착 모듈은 눈과 입의 위치를 결정하여 그 결과를 눈 깜박임 및 입 벌림 판단 모듈로 출력하며, 상기 눈 깜박임 및 입 벌림 판단 모듈은 판단결과를 출력하며;
    상기 눈 깜박임 및 입 벌림 판단 모듈의 판단 결과가 최적의 촬영 시점이면 촬영 제어 명령을 출력하고, 판단결과가 최적의 촬영 시점이 아니면 촬영제어 명령을 출력하지 않는 제어부를 포함하여 구성되는 것을 특징으로 하는 최적의 촬영 시점을 선택할 수 있는 디지털 카메라 장치.
  2. 청구항 1에 있어서, 상기 얼굴 검출 모듈은,
    다중 스케일 템플릿과, 촬영대기 이미지와, 템플릿 매칭 연산 유닛을 포함하되,
    상기 템플릿 매칭 연산유닛은, 상기 메모리에서 다중 스케일 템플릿과 촬영 대기 이미지를 받아들여 연산을 수행하여 그 결과를 얼굴 이미지 위치로 출력하며,
    상기 다중 스케일 템플릿과, 촬영대기 이미지와, 얼굴 이미지 위치는 각각 상기 메모리의 서로 다른 주소에 저장되는 것을 특징으로 하는 최적의 촬영 시점을 선택할 수 있는 디지털 카메라 장치.
  3. 청구항 1에 있어서, 상기 눈 및 입 위치 포착 모듈은,
    촬영대기 이미지, 얼굴 이미지 위치와, 수평 및 수직 투영유닛을 포함하며,
    상기 수평 및 수직 투영유닛은 상기 메모리에서 촬영대기 이미지와 얼굴 이미지 위치를 받아들여 연산을 수행하여 그 연산 결과를 눈 및 입 위치로 출력하며,
    상기 촬영대기 이미지, 얼굴 이미지 위치와, 상기 눈 및 입 위치는 각각 메모리의 서로 다른 주소에 저장되어 있는 것을 특징으로 하는 최적의 촬영 시점을 선택할 수 있는 디지털 카메라 장치.
  4. 청구항 1에 있어서, 상기 눈 깜박임 및 입 벌림 판단 모듈은,
    촬영대기 이미지, 눈 및 입 위치와, 눈 깜박임 및 입 벌림 판단 유닛을 포함하며,
    상기 눈 깜박임 및 입 벌림 판단 유닛은 상기 메모리에서 상기 촬영대기 이미지와 상기 눈 및 입 위치를 받아들여 연산을 수행하여 각 사람 얼굴에서의 눈 깜 박임 및 입 벌림을 판단한 후 상기 제어부에 명령을 전송하며,
    상기 촬영대기 이미지와, 상기 눈 및 입 위치는 각각 상기 메모리의 서로 다른 주소에 저장되어 있는 것을 특징으로 하는 최적의 촬영 시점을 선택할 수 있는 디지털 카메라 장치.
KR1020050108775A 2005-01-05 2005-11-14 최적의 촬영 시점을 선택할 수 있는 디지털 카메라 장치 KR100676408B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN200510023256.5 2005-01-05
CNB2005100232565A CN100358340C (zh) 2005-01-05 2005-01-05 可选择最佳拍照时机的数码相机

Publications (2)

Publication Number Publication Date
KR20060080526A true KR20060080526A (ko) 2006-07-10
KR100676408B1 KR100676408B1 (ko) 2007-01-30

Family

ID=34875811

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050108775A KR100676408B1 (ko) 2005-01-05 2005-11-14 최적의 촬영 시점을 선택할 수 있는 디지털 카메라 장치

Country Status (11)

Country Link
US (1) US20060147192A1 (ko)
JP (1) JP2006191526A (ko)
KR (1) KR100676408B1 (ko)
CN (1) CN100358340C (ko)
CA (1) CA2517989A1 (ko)
DE (1) DE102005052901A1 (ko)
FI (1) FI20051187L (ko)
FR (1) FR2880452A1 (ko)
GB (1) GB2422020B (ko)
IT (1) ITMI20051990A1 (ko)
RU (1) RU2302026C2 (ko)

Families Citing this family (60)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8593542B2 (en) 2005-12-27 2013-11-26 DigitalOptics Corporation Europe Limited Foreground/background separation using reference images
US7471846B2 (en) 2003-06-26 2008-12-30 Fotonation Vision Limited Perfecting the effect of flash within an image acquisition devices using face detection
US9692964B2 (en) 2003-06-26 2017-06-27 Fotonation Limited Modification of post-viewing parameters for digital images using image region or feature information
US7844076B2 (en) 2003-06-26 2010-11-30 Fotonation Vision Limited Digital image processing using face detection and skin tone information
US8155397B2 (en) 2007-09-26 2012-04-10 DigitalOptics Corporation Europe Limited Face tracking in a camera processor
US8896725B2 (en) 2007-06-21 2014-11-25 Fotonation Limited Image capture device with contemporaneous reference image capture mechanism
US8682097B2 (en) 2006-02-14 2014-03-25 DigitalOptics Corporation Europe Limited Digital image enhancement with reference images
US8498452B2 (en) 2003-06-26 2013-07-30 DigitalOptics Corporation Europe Limited Digital image processing using face detection information
US9129381B2 (en) 2003-06-26 2015-09-08 Fotonation Limited Modification of post-viewing parameters for digital images using image region or feature information
US8989453B2 (en) 2003-06-26 2015-03-24 Fotonation Limited Digital image processing using face detection information
US7574016B2 (en) 2003-06-26 2009-08-11 Fotonation Vision Limited Digital image processing using face detection information
US8494286B2 (en) 2008-02-05 2013-07-23 DigitalOptics Corporation Europe Limited Face detection in mid-shot digital images
US7565030B2 (en) 2003-06-26 2009-07-21 Fotonation Vision Limited Detecting orientation of digital images using face detection information
US7792970B2 (en) 2005-06-17 2010-09-07 Fotonation Vision Limited Method for establishing a paired connection between media devices
US8948468B2 (en) 2003-06-26 2015-02-03 Fotonation Limited Modification of viewing parameters for digital images using face detection information
US7620218B2 (en) 2006-08-11 2009-11-17 Fotonation Ireland Limited Real-time face tracking with reference images
US8330831B2 (en) 2003-08-05 2012-12-11 DigitalOptics Corporation Europe Limited Method of gathering visual meta data using a reference image
US7440593B1 (en) 2003-06-26 2008-10-21 Fotonation Vision Limited Method of improving orientation and color balance of digital images using face detection information
US7269292B2 (en) 2003-06-26 2007-09-11 Fotonation Vision Limited Digital image adjustable compression and resolution using face detection information
US8320641B2 (en) 2004-10-28 2012-11-27 DigitalOptics Corporation Europe Limited Method and apparatus for red-eye detection using preview or other reference images
US8503800B2 (en) 2007-03-05 2013-08-06 DigitalOptics Corporation Europe Limited Illumination detection using classifier chains
US7315631B1 (en) 2006-08-11 2008-01-01 Fotonation Vision Limited Real-time face tracking in a digital image acquisition device
WO2007060980A1 (ja) * 2005-11-25 2007-05-31 Nikon Corporation 電子カメラおよび画像処理装置
US8125526B2 (en) 2006-02-03 2012-02-28 Olympus Imaging Corp. Camera for selecting an image from a plurality of images based on a face portion and contour of a subject in the image
JP2007318725A (ja) * 2006-04-27 2007-12-06 Olympus Imaging Corp カメラ、カメラの撮影制御方法、プログラム、記録媒体
JP4127296B2 (ja) * 2006-06-09 2008-07-30 ソニー株式会社 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム
US7965875B2 (en) 2006-06-12 2011-06-21 Tessera Technologies Ireland Limited Advances in extending the AAM techniques from grayscale to color images
US7916897B2 (en) 2006-08-11 2011-03-29 Tessera Technologies Ireland Limited Face tracking for controlling imaging parameters
US7403643B2 (en) 2006-08-11 2008-07-22 Fotonation Vision Limited Real-time face tracking in a digital image acquisition device
JP4240108B2 (ja) * 2006-10-31 2009-03-18 ソニー株式会社 画像記憶装置、撮像装置、画像記憶方法およびプログラム
US8055067B2 (en) 2007-01-18 2011-11-08 DigitalOptics Corporation Europe Limited Color segmentation
US20090048908A1 (en) * 2007-01-31 2009-02-19 Vulcan Portals, Inc. Media delivery system
US20080183575A1 (en) * 2007-01-31 2008-07-31 Vulcan Portals, Inc. Back-channel media delivery system
JP5049356B2 (ja) 2007-02-28 2012-10-17 デジタルオプティックス・コーポレイション・ヨーロッパ・リミテッド テクスチャ空間分解に基づく統計的顔モデリングにおける指向性照明変動性の分離
US8649604B2 (en) 2007-03-05 2014-02-11 DigitalOptics Corporation Europe Limited Face searching and detection in a digital image acquisition device
WO2008131823A1 (en) * 2007-04-30 2008-11-06 Fotonation Vision Limited Method and apparatus for automatically controlling the decisive moment for an image acquisition device
US7916971B2 (en) 2007-05-24 2011-03-29 Tessera Technologies Ireland Limited Image processing method and apparatus
KR100932860B1 (ko) 2007-07-09 2009-12-21 이영태 키패드용 에프엘지에프 도광판
JP2009038649A (ja) * 2007-08-02 2009-02-19 Panasonic Corp 信号処理回路、及び撮影装置
JP4853425B2 (ja) * 2007-08-14 2012-01-11 ソニー株式会社 撮像装置、撮像方法およびプログラム
CN101378454B (zh) * 2007-08-31 2010-06-16 鸿富锦精密工业（深圳）有限公司 摄像设备及其拍摄方法
CN101388070B (zh) * 2007-09-14 2011-11-30 鸿富锦精密工业（深圳）有限公司 选择最佳时机捕获影像的系统及方法
JP4663700B2 (ja) * 2007-09-28 2011-04-06 富士フイルム株式会社 撮影装置、及び撮影方法
JP5169139B2 (ja) * 2007-10-25 2013-03-27 株式会社ニコン カメラ、および画像記録プログラム
CN100582851C (zh) * 2007-12-04 2010-01-20 鸿富锦精密工业（深圳）有限公司 提高光学镜头解像力的对焦系统及方法
US7855737B2 (en) 2008-03-26 2010-12-21 Fotonation Ireland Limited Method of making a digital camera image of a scene including the camera user
WO2010012448A2 (en) 2008-07-30 2010-02-04 Fotonation Ireland Limited Automatic face and skin beautification using face detection
JP5361547B2 (ja) * 2008-08-07 2013-12-04 キヤノン株式会社 撮像装置及び撮影方法、プログラム
US8700451B2 (en) * 2008-10-29 2014-04-15 Vulcan Ip Holdings Inc. Systems and methods for tracking consumers
CN102006407B (zh) * 2009-09-03 2012-11-28 华晶科技股份有限公司 防眨眼拍摄系统及方法
US8379917B2 (en) 2009-10-02 2013-02-19 DigitalOptics Corporation Europe Limited Face recognition performance using additional image features
US20110205383A1 (en) * 2010-02-24 2011-08-25 Research In Motion Limited Eye blink avoidance during image acquisition in a mobile communications device with digital camera functionality
US20120300092A1 (en) * 2011-05-23 2012-11-29 Microsoft Corporation Automatically optimizing capture of images of one or more subjects
CN103312945A (zh) * 2012-03-07 2013-09-18 华晶科技股份有限公司 摄像装置及其摄像方法及人物辨识拍照系统
CN102710865A (zh) * 2012-06-18 2012-10-03 宇龙计算机通信科技(深圳)有限公司 具有拍照功能的移动终端及其人像自拍方法
CN103491297A (zh) * 2013-08-22 2014-01-01 英华达（南京）科技有限公司 拍照方法及设备
CN105282433A (zh) * 2015-06-25 2016-01-27 维沃移动通信有限公司 拍照方法及终端
CN105872352A (zh) * 2015-12-08 2016-08-17 乐视移动智能信息技术（北京）有限公司 一种拍摄照片的方法及装置
CN106454112A (zh) * 2016-11-21 2017-02-22 上海斐讯数据通信技术有限公司 一种拍摄方法及系统
US20200213510A1 (en) * 2018-12-30 2020-07-02 Luke Trevitt System and method to capture and customize relevant image and further allows user to share the relevant image over a network

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN87105458A (zh) * 1987-08-10 1988-05-18 程嵩岳 储能式照相机快门释放装置
JPH01193823A (ja) * 1988-01-29 1989-08-03 Konica Corp Ｉｄカードの撮影装置
CN2300931Y (zh) * 1997-05-30 1998-12-16 郭华有 带自拍蜂鸣装置的照相机
KR19990021639A (ko) * 1997-08-30 1999-03-25 정몽규 졸음운전 검출장치 및 판단방법
EP1085366B1 (en) * 1999-09-14 2004-09-15 Kabushiki Kaisha Toshiba Face image photographing apparatus and face image photographing method
JP4345154B2 (ja) * 1999-09-29 2009-10-14 カシオ計算機株式会社 撮影画像記録装置および撮影画像記録制御方法
JP2001211377A (ja) 2000-01-26 2001-08-03 Fuji Photo Film Co Ltd デジタルカメラ
JP2001338303A (ja) 2000-05-30 2001-12-07 Canon Inc 撮像装置、方法、及びコンピュータ読み取り可能な記憶媒体
US7027618B2 (en) * 2001-09-28 2006-04-11 Koninklijke Philips Electronics N.V. Head motion estimation from four feature points
JP4063583B2 (ja) 2002-05-20 2008-03-19 三洋電機株式会社 デジタルカメラ
KR100459438B1 (ko) * 2002-10-02 2004-12-03 엘지전자 주식회사 카메라의 정지영상 캡처 방법
JP2004294498A (ja) * 2003-03-25 2004-10-21 Fuji Photo Film Co Ltd 自動撮影システム
JP2004297518A (ja) * 2003-03-27 2004-10-21 Matsushita Electric Ind Co Ltd 認証対象画像撮像装置及びその方法
JP2004343317A (ja) * 2003-05-14 2004-12-02 Sony Corp 撮像装置

Also Published As

Publication number Publication date
FI20051187L (fi) 2006-07-06
FR2880452A1 (fr) 2006-07-07
GB2422020A (en) 2006-07-12
RU2302026C2 (ru) 2007-06-27
KR100676408B1 (ko) 2007-01-30
GB2422020B (en) 2007-05-23
RU2005128136A (ru) 2007-03-20
FI20051187A0 (fi) 2005-11-22
CA2517989A1 (en) 2006-07-05
DE102005052901A1 (de) 2006-07-13
ITMI20051990A1 (it) 2006-07-06
CN100358340C (zh) 2007-12-26
JP2006191526A (ja) 2006-07-20
GB0519288D0 (en) 2005-11-02
US20060147192A1 (en) 2006-07-06
CN1642233A (zh) 2005-07-20

Similar Documents

Publication Publication Date Title
KR100676408B1 (ko) 최적의 촬영 시점을 선택할 수 있는 디지털 카메라 장치
JP4656331B2 (ja) 撮像装置および撮像方法
KR101679290B1 (ko) 영상 처리 방법 및 장치
JP5736796B2 (ja) 電子カメラ、プログラム及び記録媒体
JP4663699B2 (ja) 画像表示装置、及び画像表示方法
JP6863284B2 (ja) 検出装置、検出方法、検出プログラムおよび撮像装置
JP2007251429A (ja) 動画撮影装置及びズーム調整方法
CN114339102A (zh) 一种录像方法及设备
TWI477887B (zh) 影像處理裝置、影像處理方法及記錄媒體
US9323981B2 (en) Face component extraction apparatus, face component extraction method and recording medium in which program for face component extraction method is stored
JP2011239267A (ja) 撮像装置及び画像処理装置
JP2009244944A (ja) 画像回復装置および撮影装置
JP6087615B2 (ja) 画像処理装置およびその制御方法、撮像装置、および表示装置
JP2011193066A (ja) 撮像装置
JP5242756B2 (ja) 画像処理装置、画像処理方法、およびカメラ
JP6545229B2 (ja) 画像処理装置、撮像装置、画像処理装置の制御方法およびプログラム
JP2009089083A (ja) 年齢推定撮影装置及び年齢推定撮影方法
JP4922066B2 (ja) カメラ
JP2021105850A (ja) 画像処理装置及び方法、及び撮像装置
JP2014153517A (ja) 画像処理装置および画像処理方法、プログラム並びに記憶媒体
KR101567668B1 (ko) 다중 초점 방식으로 영상을 생성하는 스마트폰 카메라 장치 및 방법
JP5015634B2 (ja) 撮影システムおよび撮影方法並びにプログラム
JP6580213B1 (ja) 画像処理装置、撮影装置、画像処理方法、およびプログラム
JP6504240B2 (ja) 電子機器、画像処理方法、および画像処理プログラム
JP2009130840A (ja) 撮像装置及びその制御方法及びプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee