KR20130035207A - 화상 처리 장치, 화상 처리 방법 및 기록 매체 - Google Patents
화상 처리 장치, 화상 처리 방법 및 기록 매체 Download PDFInfo
- Publication number
- KR20130035207A KR20130035207A KR1020120106389A KR20120106389A KR20130035207A KR 20130035207 A KR20130035207 A KR 20130035207A KR 1020120106389 A KR1020120106389 A KR 1020120106389A KR 20120106389 A KR20120106389 A KR 20120106389A KR 20130035207 A KR20130035207 A KR 20130035207A
- Authority
- KR
- South Korea
- Prior art keywords
- image
- images
- subject
- face
- image data
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Stereoscopic And Panoramic Photography (AREA)
Abstract
디지털 카메라(1)는, 화상 취득부(52)와, 얼굴 검출부(53)와, 표정 판정부(55)와, 표정 결정부(56)와, 합성부(58)를 구비한다. 화상 취득부(52)는, 촬상 범위가 소정 방향으로 이동되면서 연속적으로 촬상된 화상을 순차적으로 취득한다. 얼굴 검출부(53)는, 순차적으로 취득된 화상으로부터 피사체상을 각각 검출한다. 표정 판정부(55)는, 각각 검출된 피사체상의 평가값을 산출한다. 표정 결정부(56)는, 각각 산출된 평가값에 기초하여, 복수의 상기 피사체상으로부터 특정한 피사체상을 합성 대상으로서 결정한다. 합성부(58)는, 합성 대상으로서 결정된 피사체상과 상기 취득 수단에 의해 순차적으로 취득된 화상을 합성하고, 광범위의 화상을 생성한다.
Description
본 발명은, 광범위의 화상을 생성 가능한 화상 처리 장치, 화상 처리 방법 및 기록 매체에 관한 것이다.
디지털 카메라나, 촬상 기능을 가지는 휴대 전화기 등에 있어서는, 촬상 화각(畵角)의 한계는 렌즈의 초점 거리, 촬상 소자의 사이즈 등, 장치 본체가 구비하는 하드 스펙에 의존하고 있다.
따라서, 하드 스펙을 초과하는 광각(廣角) 화상, 예를 들면, 이른바 파노라마 화상을 얻기 위한 기술의 하나로서, 파노라마 촬상이 종래부터 알려져 있다.
전술한 파노라마 촬상을 실현하기 위해서는, 사용자는, 예를 들면, 셔터 스위치를 누름(press) 조작한 상태를 유지하면서, 자체의 몸을 축으로 하여, 디지털 카메라를 수직 방향으로 대략 고정시킨 수평 방향으로 회전시키도록 이동시킨다.
그러면, 디지털 카메라는, 그 사이에 복수 회의 촬상 처리를 실행하고, 상기 복수 회의 촬상 처리의 각각의 결과 얻어진 복수의 화상(이하, 「촬상 화상」이라고 함)의 화상 데이터를 가로 방향(수평 방향)으로 합성함으로써, 파노라마 화상의 화상 데이터를 생성한다.
일본공개특허 1999―282100호 공보에는, 복수 회의 촬상 처리마다 촬상 화상에서의 특징점을 검출하고, 인접하는 2개의 촬상 화상의 특징점끼리가 일치하도록, 복수의 촬상 화상의 화상 데이터를 가로 방향으로 합성함으로써, 파노라마 화상의 화상 데이터를 생성하는 방법이 개시되어 있다.
그러나, 상기 특허 문헌 1에서도 파노라마 화상으로서는 배경이 중요시되고 있어, 파노라마 화상에 인물 등의 피사체가 포함되는 경우에, 상기 인물의 부각에 대해서는 중요시되지 않았다는 문제가 있었다.
본 발명은, 이와 같은 문제점을 해결하기 위해 이루어진 것이며, 촬상하는 타이밍에 관계없이, 촬상 화상으로서 바람직한 피사체를 포함하는 광범위의 화상을 생성할 수 있는 것을 목적으로 한다.
상기 목적을 달성하기 위해, 본 발명의 일 태양(態樣; aspect)의 화상 처리 장치는, 촬상 범위가 소정 방향으로 이동되면서 연속적으로 촬상된 화상을 취득하는 화상 취득 수단;
상기 화상 취득 수단에 의해 취득된 복수의 화상으로부터 동일한 피사체상을 각각 검출하는 검출 수단;
상기 검출 수단에 의해 각각 검출된 피사체상의 평가값을 각각 산출하는 산출 수단;
상기 산출 수단에 의해 각각 산출된 평가값에 기초하여, 상기 피사체상으로부터 특정한 피사체상을 합성 대상으로서 결정하는 결정 수단;
상기 결정 수단에 의해 합성 대상으로서 결정된 특정한 피사체상과 상기 취득 수단에 의해 순차적으로 취득된 화상을 합성함으로써, 광범위의 화상을 생성하는 생성 수단
을 포함하는 것을 특징으로 한다.
또한, 본 발명의 일 태양의 화상 처리 방법은, 촬상 범위가 소정 방향으로 이동되면서 연속적으로 촬상된 화상을 순차적으로 취득하는 화상 취득 수단을 구비한 화상 처리 장치의 화상 처리 방법으로서,
상기 화상 취득 수단에 의해 취득된 복수의 화상으로부터 피사체상을 각각 검출하는 검출 스텝;
상기 검출 스텝에 의해 각각 검출된 피사체상의 평가값을 산출하는 산출 스텝;
상기 산출 스텝에 의해 각각 산출된 평가값에 기초하여, 복수의 상기 피사체상으로부터 특정한 피사체상을 합성 대상으로서 결정하는 결정 스텝;
상기 결정 스텝에 의해 결정된 피사체상과 상기 취득 수단에 의해 순차적으로 취득된 화상을 합성함으로써, 광범위의 화상을 생성하는 생성 스텝
을 포함하는 것을 특징으로 한다.
또한, 본 발명의 일 태양의 기록 매체는, 컴퓨터가 판독 가능한 프로그램을 기록한 기록 매체로서,
촬상 범위가 소정 방향으로 이동되면서 연속적으로 촬상된 화상을 취득하는 화상 취득 수단;
상기 화상 취득 수단에 의해 취득된 복수의 화상으로부터 피사체상을 각각 검출하는 검출 수단;
상기 검출 기능에 의해 각각 검출된 피사체상의 평가값을 산출하는 산출 수단;
상기 산출 기능에 의해 각각 산출된 평가값에 기초하여, 복수의 상기 피사체상으로부터 특정한 피사체상을 합성 대상으로서 결정하는 결정 수단;
상기 결정 수단에 의해 결정된 피사체상과 상기 취득 수단에 의해 순차적으로 취득된 화상을 합성함으로써, 광범위의 화상을을 생성하는 생성 수단
으로서의 기능을 상기 컴퓨터에 실현시킨다.
도 1은 본 발명에 관한 촬상 장치의 일 실시예로서의 디지털 카메라의 하드웨어 구성을 나타낸 블록도이다.
도 2는 도 1의 디지털 카메라가, 촬상 처리를 실행하기 위한 기능적 구성을 나타낸 기능 블록도이다.
도 3은 도 2의 디지털 카메라의 동작 모드로서, 통상 촬상 모드와 파노라마 촬상 모드가 각각 선택된 경우에 있어서의 촬상 조작을 설명하는 도면이다.
도 4는 도 3에 나타낸 파노라마 촬상 모드에 따라서 생성되는 파노라마 화상의 일례를 나타낸 도면이다.
도 5는 파노라마 화상의 합성에 사용되는 화상 데이터 및 상기 화상 데이터로부터 생성되는 파노라마 화상의 화상 데이터의 일례를 나타낸 도면이다.
도 6은 도 2의 디지털 카메라가 실행하는 촬상 처리의 흐름의 일례를 나타낸 플로우차트이다.
도 7은 도 6의 촬상 처리 중, 파노라마 촬상 처리의 상세한 흐름을 나타낸 플로우차트이다.
도 8은 도 7의 파노라마 촬상 처리 중, 표정 판정 처리의 상세한 흐름을 나타낸 플로우차트이다.
도 9는 도 7의 파노라마 촬상 처리 중, 화상 합성 처리의 상세한 흐름을 나타낸 플로우차트이다.
도 2는 도 1의 디지털 카메라가, 촬상 처리를 실행하기 위한 기능적 구성을 나타낸 기능 블록도이다.
도 3은 도 2의 디지털 카메라의 동작 모드로서, 통상 촬상 모드와 파노라마 촬상 모드가 각각 선택된 경우에 있어서의 촬상 조작을 설명하는 도면이다.
도 4는 도 3에 나타낸 파노라마 촬상 모드에 따라서 생성되는 파노라마 화상의 일례를 나타낸 도면이다.
도 5는 파노라마 화상의 합성에 사용되는 화상 데이터 및 상기 화상 데이터로부터 생성되는 파노라마 화상의 화상 데이터의 일례를 나타낸 도면이다.
도 6은 도 2의 디지털 카메라가 실행하는 촬상 처리의 흐름의 일례를 나타낸 플로우차트이다.
도 7은 도 6의 촬상 처리 중, 파노라마 촬상 처리의 상세한 흐름을 나타낸 플로우차트이다.
도 8은 도 7의 파노라마 촬상 처리 중, 표정 판정 처리의 상세한 흐름을 나타낸 플로우차트이다.
도 9는 도 7의 파노라마 촬상 처리 중, 화상 합성 처리의 상세한 흐름을 나타낸 플로우차트이다.
이하, 도면을 참조하여, 본 발명에 관한 실시예에 대하여 설명한다.
도 1은 본 발명에 관한 화상 처리 장치의 일 실시예로서의 디지털 카메라(1)의 하드웨어 구성을 나타낸 블록도이다.
디지털 카메라(1)는, CPU(Central Processing Unit)(11)와, ROM(Read Only Memory)(12)과, RAM(Random Access Memory)(13)과, 버스(14)와, 광학계(15)와, 촬상부(16)와, 화상 처리부(17)와, 기억부(18)와, 표시부(19)와, 조작부(20)와, 통신부(21)와, 각속도 센서(22)와, 드라이브(23)를 구비하고 있다.
CPU(11)는, ROM(12)에 기억되어 있는 프로그램, 또는 기억부(18)로부터 RAM(13)에 로드된 프로그램에 따라 각종 처리를 실행한다. ROM(12)은, CPU(11)가 각종 처리를 실행하기 위한 프로그램에 더하여, CPU(11)가 각종 처리를 실행하는 데 있어서 필요한 데이터 등을 적절히 기억하고 있다.
예를 들면, 본 실시예에서는, 후술하는 도 2의 화상 제어부(51) 내지 합성부(58)의 각 기능을 실현하는 프로그램이, ROM(12)이나 기억부(18)에 기억되어 있다. 따라서, CPU(11)가, 이들 프로그램에 따른 처리를 실행하고, 후술하는 화상 처리부(17)와 적절히 협동함으로써, 후술하는 도 2의 화상 제어부(51) 내지 합성부(58)의 각 기능을 실현할 수 있다.
CPU(11), ROM(12), 및 RAM(13)은, 버스(14)를 통하여 서로 접속되어 있다. 이 버스(14)에는 또한, 광학계(15), 촬상부(16), 화상 처리부(17), 기억부(18), 표시부(19), 조작부(20), 통신부(21), 각속도 센서(22), 및 드라이브(23)가 접속되어 있다.
광학계(15)는, 피사체를 촬영하기 위해, 광을 집광하는 렌즈, 예를 들면, 포커스 렌즈나 줌 렌즈 등으로 구성된다. 포커스 렌즈는, 촬상부(16)의 촬상 소자의 수광면에 피사체상을 결상(結像)시키는 렌즈이다. 줌 렌즈는, 초점 거리를 일정한 범위에서 가능하게 변화시키는 렌즈이다. 광학계(15)에는 또한, 필요에 따라 초점이나, 노출 등을 조정하는 주변 장치가 설치된다.
촬상부(16)는, 광전 변환 소자나 AFE(Analog Front End) 등으로 구성되어 있다. 광전 변환 소자는, 예를 들면, CCD(Charge Coupled Device)나 CMOS(Complementary Metal Oxide Semiconductor)형의 광전 변환 소자로 구성된다. 광전 변환 소자는, 일정 시간마다, 그 사이에 입사되어 축적된 피사체상의 광신호를 광전 변환(촬상)하고, 그 결과 얻어지는 아날로그의 전기 신호를 AFE에 순차적으로 공급한다.
AFE는, 상기 아날로그의 전기 신호에 대하여, A/D(Analog/Digital) 변환 처리 등의 각종 신호 처리를 행하고, 그 결과 얻어지는 디지털 신호를, 촬상부(16)의 출력 신호로서 출력한다.
그리고, 이하, 촬상부(16)의 출력 신호를, 「촬상 화상의 화상 데이터」라고 한다. 따라서, 촬상부(16)로부터는 촬상 화상의 화상 데이터가 출력되어, 화상 처리부(17) 등에 적절히 공급된다.
화상 처리부(17)는, DSP(Digital Signal Processor)나, VRAM(Video Random Access Memory) 등으로 구성되어 있다.
화상 처리부(17)는, CPU(11)와 협동하여, 촬상부(16)로부터 입력되는 촬상 화상의 화상 데이터에 대하여, 노이즈 저감, 화이트 밸런스, 손떨림 보정 등의 화상 처리 외에, 후술하는 화상 취득부(52) 내지 합성부(58)의 각 기능의 발휘에 필요한 각종 화상 처리를 행한다.
여기서, 이하, 특별히 한정되지 않는 한, 「화상 데이터」란, 촬상부(16)로부터 일정 시간마다 출력되는 촬상 화상의 화상 데이터, 또는 상기 화상 데이터가 가공된 것 등을 말한다. 즉, 본 실시예에서는, 상기 화상 데이터가 처리 단위로서 채용되어 있다.
기억부(18)는, DRAM(Dynamic Random Access Memory) 등으로 구성되며, 화상 처리부(17)로부터 출력된 화상 데이터나, 후술하는 파노라마 도중 화상의 화상 데이터 등을 일시적으로 기억한다. 또한, 기억부(18)는, 각종 화상 처리에 필요한 각종 데이터 등도 기억한다.
표시부(19)는, 예를 들면, LCD(Liquid Crystal Device: 액정 표시 장치)나 LCD 구동부로 이루어지는 플랫·디스플레이·패널로서 구성되어 있다. 표시부(19)는, 기억부(18) 등으로부터 공급되는 화상 데이터에 의해 표현되는 화상, 예를 들면, 후술하는 라이브 뷰(live-view) 화상을 화상 데이터 단위로 표시한다.
조작부(20)는, 셔터 스위치(41) 외에, 도시하지 않지만, 전원 스위치, 촬상 모드 스위치, 재생 스위치 등의 복수의 스위치를 가지고 있다. 조작부(20)는, 이들 복수의 스위치 중 소정의 스위치가 누름 조작되면, 상기 소정의 스위치에 할당되어 있는 지령을 CPU(11)에 공급한다.
통신부(21)는, 인터넷을 포함하는 네트워크와 연결되는, 도시하지 않은 다른 장치와의 사이의 통신을 제어한다.
각속도 센서(22)는, 쟈이로(gyro) 등으로 이루어지고, 파노라마 촬상 시의 사용자의 몸을 축으로 한 회전에 따른, 디지털 카메라(1)의 수평 방향의 변위량을 검출하고, 검출 결과를 나타내는 디지털 신호(이하, 단지 「각도 변위량」이라고 함)를 CPU(11)에 공급한다. 그리고, 각속도 센서(22)는, 필요에 따라 방위 센서의 기능도 발휘하는 것으로 한다.
드라이브(23)에는, 자기 디스크, 광디스크, 광자기 디스크, 또는 반도체 메모리 등으로 이루어지는 착탈 가능(removable) 미디어(31)가 적절히 장착된다. 그리고, 착탈 가능 미디어(31)로부터 판독된 프로그램이, 필요에 따라 기억부(18)에 인스톨된다. 또한, 착탈 가능 미디어(31)는, 기억부(18)에 기억되어 있는 화상 데이터 등의 각종 데이터도, 기억부(18)와 마찬가지로 기억할 수 있다.
도 2는 도 1의 디지털 카메라(1)가 실행하는 처리 중, 피사체를 촬상하고, 그 결과 얻어지는 촬상 화상의 화상 데이터를 착탈 가능 미디어(31)에 기록할 때까지의 일련의 처리(이하, 「촬상 처리」라고 함)를 실행하기 위한 기능적 구성을 나타낸 기능 블록도이다.
도 2에 나타낸 바와 같이, 촬상 처리가 실행되는 경우에는, CPU(11)에 있어서는 화상 제어부(51)가 기능하고, 화상 처리부(17)에 있어서는, 화상 취득부(52)와, 얼굴 검출부(53)와, 얼굴 영역 추출부(54)와, 표정 판정부(55)와, 표정 결정부(56)와, 표정 변경부(57)와, 합성부(58)가 기능한다. 그리고, 화상 제어부(51)의 기능은, 본 실시예와 같이 특별히 CPU(11)에 탑재되어 있을 필요는 없고, 상기 기능을, 화상 처리부(17)에 이양(移讓)시키는 것도 가능하다. 반대로, 화상 취득부(52) 내지 합성부(58)의 각 기능은, 본 실시예와 같이 특별히 화상 처리부(17)에 탑재되어 있을 필요는 없고, 이들 기능 중 적어도 일부를, CPU(11)에 이양시키는 것도 가능하다.
화상 제어부(51)는, 촬상 처리의 실행 전체를 제어한다. 예를 들면, 화상 제어부(51)는, 디지털 카메라(1)의 동작 모드로서, 통상 촬상 모드와, 파노라마 촬상 모드를 선택적으로 전환하여, 전환 후의 동작 모드에 따른 처리를 실행한다. 파노라마 촬상 모드로 되면, 화상 취득부(52) 내지 합성부(58)가, 화상 제어부(51)의 제어 하에 동작한다.
여기서, 화상 제어부(51) 내지 합성부(58)의 이해를 용이하게 하기 위해, 이들 기능적 구성의 설명 전에, 도 3 및 도 4를 적절히 참조하여, 파노라마 촬상 모드에 대하여 상세하게 설명한다.
도 3은 도 1의 디지털 카메라(1)의 동작 모드로서, 통상 촬상 모드와 파노라마 촬상 모드가 각각 선택된 경우에 있어서의 촬상 조작을 설명하는 도면이다. 상세하게는, 도 3의 (A)는, 통상 촬상 모드에서의 촬상 조작을 설명하는 도면이다. 도 3의 (B)는, 파노라마 촬상 모드에서의 촬상 조작을 설명하는 도면이다.
도 3의 (A) 및 도 3의 (B)의 각각에 있어서, 디지털 카메라(1)의 안쪽에 있는 그림(picture)은, 디지털 카메라(1)의 피사체를 포함하는 실세계의 모양을 나타내고 있다. 또한, 도 3의 (B)에 나타낸 세로의 점선은, 디지털 카메라(1)의 이동 방향의 각 위치 a, b, c를 나타내고 있다. 디지털 카메라(1)의 이동 방향이란, 사용자가, 자체의 몸을 축으로 하여 디지털 카메라(1)의 촬상 방향(각도)을 변화시킨 경우에 있어서의, 디지털 카메라(1)의 광축이 이동하는 방향을 말한다. 디지털 카메라(1)의 이동 방향의 변위량은, 각속도 센서(22)에 의해 각도 변위량으로서 검출된다.
통상 촬상 모드란, 디지털 카메라(1)의 화각에 대응하는 사이즈(해상도)의 화상을, 촬상하는 경우의 동작 모드를 말한다.
통상 촬상 모드에서는, 도 3의 (A)에 나타낸 바와 같이, 사용자는, 디지털 카메라(1)를 고정시킨 상태에서, 조작부(20)의 셔터 스위치(41)를 하한까지 누른다. 그리고, 이와 같이, 셔터 스위치(41)를 하한까지 누르는 조작을, 이하, 「완전 누름 조작」 또는 단순히 「완전 누름」이라고 한다.
화상 제어부(51)는, 완전 누름 조작이 행해진 직후에 화상 처리부(17)로부터 출력된 화상 데이터를, 기록 대상으로서 착탈 가능 미디어(31)에 기록시킬 때까지의 일련의 처리의 실행을 제어한다.
이하, 이와 같이, 통상 촬상 모드에 있어서 화상 제어부(51)의 제어에 의해 실행되는 일련의 처리를, 「통상 촬상 처리」라고 한다.
한편, 파노라마 촬상 모드란, 파노라마 화상을 촬상하는 경우의 동작 모드를 말한다.
파노라마 촬상 모드에서는, 도 3의 (B)에 나타낸 바와 같이, 사용자는, 셔터 스위치(41)의 완전 누름 조작을 유지한 상태에서, 디지털 카메라(1)를 도 3의 (B) 중 흑색의 화살표의 방향으로 이동시킨다.
화상 제어부(51)는, 완전 누름 조작이 유지되고 있는 동안, 화상 취득부(52) 내지 합성부(58)를 제어하여, 각속도 센서(22)로부터의 각도 변위량이 일정값에 달할 때마다, 그 직후에 촬상부(16)로부터 출력된 화상 데이터를 취득하고, 또한 기억부(18)에 일시적으로 기억하여 가는 것을 반복한다.
그 후, 화상 제어부(51)는, 화상 취득부(52) 내지 합성부(58)를 제어하여, 기억부(18)에 기억된 인접하는 화상 데이터끼리를, 수평 방향으로 차례대로 합성함으로써, 파노라마 화상의 화상 데이터를 생성한다. 여기서, 인접하는 화상 데이터는, 파노라마 촬상 중에, K회째[K는 1이상의 정수값(整數値)]의 촬상에 의해 얻어진 촬상 화상의 화상 데이터와, 동 파노라마 촬상 중에, K+1회째의 촬상에 의해 얻어진 촬상 화상의 화상 데이터를 말한다. 그리고, 화상 데이터의 합성에 대해서는, 인접하는 2개의 화상 데이터의 합성에 한정되지 않고, 합성 대상으로 되는 2 이상의 임의의 수의 화상 데이터를 취득할 때마다 행하는 것으로 해도 되고, 합성 대상으로 되는 모든 화상 데이터를 취득한 후에 행하는 것으로 해도 된다.
그 후, 사용자가 완전 누름 조작을 해제하는 조작, 즉 셔터 스위치(41)로부터 손가락 등을 떼어 놓는 조작(이하, 이와 같은 조작을 「릴리스 조작」이라고 함)을 행함으로써, 파노라마 촬상의 종료를 지시하면, 화상 제어부(51)는, 합성부(58) 등을 제어하여, 파노라마 화상의 화상 데이터를, 기록 대상으로서 착탈 가능 미디어(31)에 기록시킨다.
이와 같이, 화상 제어부(51)는, 파노라마 촬상 모드에 있어서, 화상 취득부(52) 내지 합성부(58)를 제어하여, 파노라마 화상의 화상 데이터를 생성하고, 그것을 기록 대상으로서 착탈 가능 미디어(31)에 기록시킬 때까지의 일련의 처리를 제어한다.
이하, 이와 같이, 파노라마 촬상 모드에 있어서 화상 제어부(51)의 제어에 의해 실행되는 일련의 처리를 「파노라마 촬상 처리」라고 한다.
도 4는 도 3에 나타낸 파노라마 촬상 모드에 있어서, 화상 취득부(52) 내지 합성부(58)에 의해 생성된 파노라마 화상의 화상 데이터를 나타내고 있다.
즉, 파노라마 촬상 모드에 있어서, 도 3의 (B)에 나타낸 바와 같은 촬상 조작이 행해지면, 화상 제어부(51)의 제어 하에, 화상 취득부(52) 내지 합성부(58)에 의해, 도 4에 나타낸 바와 같은 파노라마 화상 P1의 화상 데이터가 생성되고, 착탈 가능 미디어(31)에 기록된다.
여기서, 파노라마 촬상 모드에 있어서 인물 등의 피사체를 포함하는 파노라마 화상의 화상 데이터를 생성하는 경우, 합성 원(元)의 복수의 화상 데이터의 각각에 있어서 피사체가 상이하게 되는 것이며, 이와 같은 경우에는, 가장 돋보이는 피사체를 포함하는 파노라마 화상의 화상 데이터를 생성하는 것이 바람직하다. 구체적으로는, 파노라마 화상의 합성 원의 복수의 화상 데이터의 각각에 있어서, 어느 화상 데이터에서는 인물이 눈을 감고 있고, 다른 화상 데이터에서는 인물이 눈을 뜨고 있는 경우가 있고, 이와 같은 경우에는, 눈을 뜨고 있는 인물을 포함하는 파노라마 화상의 화상 데이터를 생성하는 것이 바람직하다.
그러므로, 본 실시예에 관한 디지털 카메라(1)에서는, 화상 취득부(52) 내지 합성부(58)는, 화상 제어부(51)의 제어 하에, 다음과 같은 처리를 실행한다.
화상 취득부(52)는, 디지털 카메라(1)가 소정량만큼 이동할 때마다(각도 변위량이 일정값으로 될 때마다), 화상 제어부(51)로부터 발행되는 취득 지령을 받아, 화상 처리부(17)로부터 화상 데이터를 순차적으로 취득한다.
얼굴 검출부(53)는, 화상 취득부(52)가 취득한 화상 데이터를 해석하고, 상기 화상 데이터에 포함되는 인물의 얼굴의 정보(적어도 얼굴 부분의 위치 및 크기를 포함함)를 검출한다. 그리고, 얼굴 검출부(53)에 의한 얼굴의 검출은, 이미 공지인 임의의 방법에 의해 행할 수 있다.
얼굴 영역 추출부(54)는, 얼굴 검출부(53)가 얼굴을 검출한 화상 데이터로부터, 얼굴 영역을 추출한다. 그리고, 추출하는 얼굴 영역으로서는, 합성 처리에 있어서 바람직한 임의의 영역을 설정할 수 있고, 예를 들면, 목·코·입을 포함하는 얼굴 부분의 영역으로 해도 되고, 얼굴 부분과 머리 부분을 포함하는 영역으로 해도 되고, 화상 데이터에 포함되는 인물 모두를 포함하는 영역으로 해도 된다.
표정 판정부(55)는, 얼굴 검출부(53)가 검출한 얼굴의 표정 판정을 행한다. 표정 판정은, 촬상 화상으로서 바람직한 인물의 표정(웃는 얼굴)을 판정하기 위한 것이며, 예를 들면, 눈의 크기나 입의 형상 등에 대하여 미리 스코어(score)를 정해 두고, 얼굴 검출부(53)가 검출한 얼굴을 상기 스코어로 평가하고, 판정 대상의 얼굴의 평가값을 산출함으로써 실행한다.
표정 결정부(56)는, 표정 판정부(55)가 산출한 평가값이 소정값 이상의 얼굴을, 합성 대상의 얼굴로서 결정하고, 결정한 얼굴을 포함하는 얼굴 영역의 화상 데이터를 메모리[본 실시예에서는 기억부(18)]에 저장한다. 그리고, 표정 결정부(56)는, 산출한 평가값이 가장 높은 얼굴을 합성 대상의 얼굴로서 결정하는 것으로 해도 된다. 또한, 소정값 이상의 평가값에 대해서는, 임의로 설정할 수 있고, 예를 들면, 웃는 얼굴로 되는 평가값을 설정하여 둘 수가 있다.
표정 변경부(57)는, 표정 판정부(55)가 산출한 평가값이 소정값 미만의 얼굴을 포함하는 얼굴 영역의 화상 데이터를, 표정 결정부(56)가 합성 대상으로서 결정한 얼굴을 포함하는 얼굴 영역의 화상 데이터로 변경한다.
합성부(58)는, 화상 취득부(52)가 취득한 화상 데이터 중 인접하는 화상 데이터끼리를 합성하고, 파노라마 화상의 화상 데이터를 생성한다. 구체적으로는, 합성부(58)는, 화상 취득부(52)가 취득한 화상 데이터로서, 표정 변경부(57)에 의한 얼굴 영역의 변경 후의 화상 데이터 중 인접하는 화상 데이터끼리를 합성하고, 파노라마 화상의 화상 데이터를 생성한다. 바꾸어 말하면, 합성부(58)는, 화상 취득부(52)가 취득한 복수의 화상 데이터에 포함되는 인물의 얼굴 중, 표정 결정부(56)가 결정된 얼굴을 사용하여 파노라마 화상의 화상 데이터를 생성하는 것과 등가(等價)의 처리를 실행한다.
이상과 같은, 화상 취득부(52) 내지 합성부(58)에 의해 생성되는 파노라마 화상의 화상 데이터에 대하여, 도 5를 참조하여 설명한다. 도 5의 (A)는, 파노라마 화상의 합성에 사용되는 화상 취득부(52)에 의해 취득된 화상 데이터를 나타내고, 도 5의 (B)는, 도 5의 (A)의 화상 데이터로부터 생성되는 파노라마 화상의 화상 데이터를 나타낸다.
도 5의 (A)를 참조하여, 화상 취득부(52)에 의해 촬상 화상 Fa의 화상 데이터가 취득되면 얼굴 검출부(53)는, 촬상 화상 Fa로부터 피사체(인물 A)의 얼굴(100)을 검출한다. 이어서, 얼굴 영역 추출부(54)는, 얼굴(100)을 검출한 촬상 화상 Fa로부터 얼굴 영역(100a)을 추출한다. 그리고, 얼굴 영역(100a)에 대해서는, 임의의 영역으로 할 수 있고, 예를 들면, 얼굴(100)만의 영역으로 해도 되고, 도 5에 나타낸 바와 같이 얼굴(100)과 머리(모발)를 합친 영역으로 해도 되고, 촬상 화상 Fa에 포함되는 인물의 모든 영역으로 해도 된다.
이어서, 표정 판정부(55)는, 촬상 화상 Fa의 얼굴(100)에 대하여, 눈의 크기나 입의 형상 등으로부터 평가값을 산출한다. 도 5의 (A)에서는, 얼굴(100)은, 웃는 얼굴이며 눈도 크게 뜨고 있으므로 표정 판정부(55)는, 소정값 이상의 평가값을 특정한다. 그러므로, 표정 결정부(56)는, 얼굴(100)을 파노라마 화상에 사용하는 얼굴로서 결정하고, 얼굴(100)의 얼굴 영역(100a)의 부분의 화상 데이터를 기억부(18)에 저장한다.
마찬가지로, 촬상 화상 Fa의 화상 데이터의 후에 연속적으로 촬상 화상 Fb의 화상 데이터가 화상 취득부(52)에 의해 취득되면 얼굴 검출부(53)는, 촬상 화상 Fb로부터 피사체(동일 인물 A)의 얼굴(110)을 검출하고, 얼굴 영역 추출부(54)는, 얼굴(110)을 검출한 촬상 화상 Fb의 화상 데이터로부터 얼굴 영역(110a)을 추출한다.
이어서, 표정 판정부(55)는, 촬상 화상 Fb의 얼굴(110)에 대하여, 평가값을 산출하지만, 도 5의 (A)에서는, 얼굴(110)은, 눈을 감고 있으므로, 표정 판정부(55)는, 소정값 미만의 평가값을 산출한다. 그러므로, 표정 변경부(57)는, 얼굴(110)의 얼굴 영역(11a)의 부분의 화상 데이터를, 기억부(18)에 저장되어 있던 얼굴(100)의 얼굴 영역(100a) 부분의 화상 데이터로 변경한다.
그 후, 합성부(58)는, 촬상 화상 Fa 및 촬상 화상 Fb를 포함하는 복수의 촬상 화상의 각각의 화상 데이터를 순차적으로 합성함으로써, 도 5의 (B)에 나타낸 파노라마 화상 P2의 화상 데이터를 생성한다. 이 때, 표정 결정부(56)에 의해 결정된 얼굴(100)의 얼굴 영역(100a)을 사용하여 파노라마 화상 P2를 생성하므로, 도 5의 (B)에 나타낸 바와 같이, 보다 사진이 돋보이는 피사체를 포함하는 파노라마 화상 P2를 얻을 수 있다.
이상, 도 2 내지 도 5를 참조하여, 본 발명이 적용되는 디지털 카메라(1)의 기능적 구성에 대하여 설명하였다. 다음에, 도 6을 참조하여, 이와 같은 기능적 구성을 가지는 디지털 카메라(1)가 실행하는 촬상 처리에 대하여 설명한다.
도 6은 촬상 처리의 흐름의 일례를 나타낸 플로우차트이다. 본 실시예에서는, 촬상 처리는, 디지털 카메라(1)의 도시하지 않은 전원이 온 상태로 되고, 소정 조건이 만족되면 개시한다.
스텝 S1에 있어서, 도 2의 화상 제어부(51)는, 조작 검출 처리 및 초기 설정 처리를 실행한다.
조작 검출 처리란, 조작부(20)의 각 스위치 상태를 검출하는 처리를 말한다. 화상 제어부(51)는, 조작 검출 처리를 실행함으로써, 동작 모드로서, 통상 촬상 모드가 설정되어 있는 것인지, 그렇지 않으면 파노라마 촬상 모드가 설정되어 있는 것인지를 검출할 수 있다.
또한, 본 실시예의 초기 설정 처리의 하나로서, 각도 변위량의 일정값과 각도 변위량의 최대 한계인 각도 변위 임계값(예를 들면, 360°)을 설정하는 처리가 채용되고 있다. 구체적으로는, 각도 변위량의 일정값과 각도 변위량의 최대 한계인 각도 변위 임계값(예를 들면, 360°)은, 도 1의 ROM(12)에 미리 기억되어 있고, ROM(12)으로부터 판독되어 RAM(13)에 기입됨으로써 설정된다. 그리고, 각도 변위량의 일정값은, 후술하는 도 7의 스텝 S31의 판정 처리에서 사용된다. 한편, 각도 변위량의 최대 한계인 각도 변위 임계값(예를 들면, 360°)은, 도 7의 스텝 S37의 판정 처리에서 사용된다.
스텝 S2에 있어서, 화상 제어부(51)는, 라이브 뷰 촬상 처리 및 라이브 뷰 표시 처리를 개시한다.
즉, 화상 제어부(51)는, 촬상부(16) 등을 제어하여, 촬상부(16)에 의한 촬상 동작을 계속시킨다. 그리고, 화상 제어부(51)는, 촬상부(16)에 의한 촬상 동작이 계속되고 있는 동안, 상기 촬상부(16)로부터 순차적으로 출력되는 화상 데이터를, 메모리[본 실시예에서는 기억부(18)]에 일시적으로 기억시킨다. 이와 같은 화상 제어부(51)에 의한 일련의 제어 처리가, 여기서 말하는 「라이브 뷰 촬상 처리」이다.
또한, 화상 제어부(51)는, 라이브 뷰 촬상 시에 메모리[본 실시예에서는 기억부(18)]에 일시적으로 기록된 각 화상 데이터를 순차적으로 판독하여, 각각에 대응하는 화상을 표시부(19)에 순차적으로 표시하게 한다. 이와 같은 화상 제어부(51)에 의한 일련의 제어 처리가, 여기서 말하는 「라이브 뷰 표시 처리」이다. 그리고, 라이브 뷰 표시 처리에서 표시부(19)에 표시되어 있는 화상을, 이하, 「라이브 뷰 화상」이라고 한다.
스텝 S3에 있어서, 화상 제어부(51)는, 셔터 스위치(41)가 반누름되었는지의 여부를 판정한다. 여기서, 반누름이란, 조작부(20)의 셔터 스위치(41)의 도중(하한에 이르지 않는 소정의 위치)까지 누르는 조작을 말하며, 이하, 적절히 「반누름 조작」이라고도 한다.
셔터 스위치(41)가 반누름되어 있지 않은 경우, 스텝 S3에 있어서 NO인 것으로 판정되고, 처리는 스텝 S9로 진행한다.
스텝 S9에 있어서, 화상 제어부(51)는, 처리의 종료 지시가 행해졌는지의 여부를 판별한다. 처리의 종료 지시는, 특별히 한정되지 않지만, 본 실시예에서는, 디지털 카메라(1)의 도시하지 않은 전원이 오프 상태로 된 취지의 통지가 채용되어 있는 것으로 한다.
따라서, 본 실시예에서는 전원이 오프 상태로 되고, 그 취지가 화상 제어부(51)에 통지되면 스텝 S9에 있어서 YES인 것으로 판정되어, 촬상 처리 전체가 종료하게 된다.
이에 대하여, 전원이 온 상태의 경우에는, 전원이 오프 상태로 된 취지의 통지는 행해지지 않으므로, 스텝 S9에 있어서 NO인 것으로 판정되고, 처리는 스텝 S2로 되돌려지고, 그 이후의 처리가 반복된다. 즉, 본 실시예에서는 전원이 온 상태를 유지하고 있는 한, 셔터 스위치(41)가 반누름될 때까지의 동안, 스텝 S3: NO 및 스텝 S9: NO의 루프 처리가 반복 실행되어, 촬상 처리는 대기 상태로 된다.
다른 한편, 라이브 뷰 표시 처리 중에, 셔터 스위치(41)가 반누름되면, 스텝 S3에 있어서 YES인 것으로 판정되어, 처리는 스텝 S4로 진행한다.
스텝 S4에 있어서, 화상 제어부(51)는, 촬상부(16)를 제어하여, 이른바 AF(Auto Focus) 처리를 실행한다.
스텝 S5에 있어서, 화상 제어부(51)는, 셔터 스위치(41)가 완전히 눌러졌는지의 여부를 판정한다.
셔터 스위치(41)가 완전히 눌러지지 않은 경우에는, 스텝 S5에 있어서 NO인 것으로 판정된다. 이 경우에는, 처리는 스텝 S4로 되돌려지고, 그 이후의 처리가 반복된다. 즉, 본 실시예에서는, 셔터 스위치(41)가 완전히 눌러지기까지의 동안, 스텝 S4, 및 스텝 S5: NO의 루프 처리가 반복 실행되어, AF 처리가 그 때마다 실행된다.
그 후, 셔터 스위치(41)가 완전히 눌러지면, 스텝 S5에 있어서 YES인 것으로 판정되어, 처리는 스텝 S6으로 진행한다. 스텝 S6에 있어서, 화상 제어부(51)는, 현재 설정되어 있는 촬상 모드가 파노라마 촬상 모드인지의 여부를 판정한다.
파노라마 촬상 모드가 아닌 경우, 즉 통상 촬상 모드가 현재 설정되어 있는 경우, 스텝 S6에 있어서 NO인 것으로 판정되고, 처리는 스텝 S7로 진행한다. 스텝 S7에 있어서, 화상 제어부(51)는, 전술한 통상 촬상 처리를 실행한다. 즉, 완전 누름 조작이 행해진 직후에 화상 처리부(17)로부터 출력된 1개의 화상 데이터가, 기록 대상으로서 착탈 가능 미디어(31)에 기록된다. 이로써, 스텝 S7의 통상 촬상 처리가 종료하여, 처리는 스텝 S9로 진행한다. 그리고, 스텝 S9 이후의 처리에 대해서는 전술하였으므로, 여기서는 그 설명은 생략한다.
이에 대하여, 파노라마 촬상 모드가 현재 설정되어 있는 경우, 스텝 S6에 있어서 YES인 것으로 판정되어, 처리는 스텝 S8로 진행한다.
스텝 S8에 있어서, 화상 제어부(51)는, 전술한 파노라마 촬상 처리를 실행한다. 파노라마 촬상 처리의 상세한 것에 대해서는 도 7을 참조하여 후술하지만, 화상 제어부(51)는, 파노라마 화상의 화상 데이터를 생성하고, 기록 대상으로서 착탈 가능 미디어(31)에 기록한다. 이로써, 스텝 S8의 파노라마 촬상 처리가 종료하고, 처리는 스텝 S9로 진행한다. 그리고, 스텝 S9 이후의 처리에 대해서는 전술하였으므로, 여기서는 그 설명은 생략한다.
이상, 도 6을 참조하여, 촬상 처리의 흐름에 대하여 설명하였다. 다음에, 도 7을 참조하여, 도 6의 촬상 처리 중, 스텝 S8의 파노라마 촬상 처리의 상세한 흐름에 대하여 설명한다.
도 7은 파노라마 촬상 처리의 상세한 흐름을 설명하는 플로우차트이다. 전술한 바와 같이, 파노라마 촬상 모드의 상태에서 셔터 스위치(41)가 완전히 눌러지면, 도 6의 스텝 S5 및 S6에 있어서 YES인 것으로 판정되고, 처리는 스텝 S8로 진행하고, 파노라마 촬상 처리로서 다음과 같은 처리가 실행된다.
스텝 S31에 있어서, 화상 제어부(51)는, 디지털 카메라(1)가 일정 거리 움직였는지의 여부를 판정한다. 즉, 화상 제어부(51)는, 각속도 센서(22)로부터 공급되는 각도 변위량이 일정값에 달했는지의 여부를 판정한다. 디지털 카메라(1)가 움직이는 것이나 각도 변위량이 변화하는 것은, 디지털 카메라의 촬상 범위가 이동하고 있는 것을 의미한다.
디지털 카메라(1)가 일정 거리 움직이고 있지 않은 경우, 스텝 S31에 있어서 NO인 것으로 판정된다. 이 경우에는, 처리는 스텝 S31로 되돌려진다. 즉, 디지털 카메라(1)가 일정 거리 움직일 때까지 파노라마 촬상 처리가 대기 상태로 된다.
이에 대하여, 디지털 카메라(1)가 일정 거리 움직였을 경우, 스텝 S31에 있어서, YES인 것으로 판정되어, 처리는 스텝 S32로 진행한다.
스텝 S32에 있어서, 화상 취득부(52)는, 화상 제어부(51)의 제어 하에, 촬상부(16)로부터 출력되는 화상 데이터(합성 대상)를 취득한다. 즉, 화상 취득부(52)는, 각속도 센서(22)로부터 공급되는 각도 변위량이 일정값에 달할 때마다, 그 직후에 촬상부(16)로부터 출력된 화상 데이터를 취득한다.
스텝 S33에 있어서, 얼굴 검출부(53)는, 화상 제어부(51)의 제어 하에, 화상 취득부(52)가 취득한 화상 데이터를 해석하고, 상기 화상 데이터에 인물의 얼굴(피사체상)이 존재하는지의 여부를 판정한다.
화상 데이터에 인물의 얼굴이 존재하지 않는 경우, 스텝 S33에 있어서 NO인 것으로 판정되고, 이 경우에는, 처리는 스텝 S35로 진행한다.
다른 한편, 화상 데이터에 인물의 얼굴이 존재하는 경우, 스텝 S33에 있어서 YES인 것으로 판정되고, 이 경우에는, 처리는 스텝 S34로 진행한다.
스텝 S34에 있어서, 화상 제어부(51)는, 표정 판정 처리를 행한다. 표정 판정 처리의 상세한 것에 대해서는 도 8을 참조하여 후술하지만, 화상 제어부(51)는, 표정 판정부(55)를 제어하고, 화상 데이터에 포함되는 얼굴의 표정을 판정한다. 이로써, 스텝 S34의 표정 판정 처리가 종료하고, 처리는 스텝 S35로 진행한다.
스텝 S35에 있어서, 화상 제어부(51)는, 화상 합성 처리를 행한다. 화상 합성 처리의 상세한 것에 대해서는 도 9를 참조하여 후술하지만, 화상 제어부(51)는, 합성부(58)를 제어하고, 인접하는 화상 데이터끼리를 순차적으로 합성하고, 파노라마 화상의 화상 데이터를 생성한다. 이로써, 스텝 S35의 화상 합성 처리가 종료하고, 처리는 스텝 S36으로 이행한다.
스텝 S36에 있어서, 화상 제어부(51)는, 사용자에 의한 종료 지시가 있는지의 여부를 판정한다. 사용자에 의한 종료 지시에 대해서는, 임의로 설정할 수 있지만, 예를 들면, 사용자에 의한 셔터 스위치(41)의 완전 누름의 해제를, 사용자에 의한 종료 지시로 할 수 있다.
사용자에 의한 종료 지시가 있었을 경우, 스텝 S36에 있어서 YES인 것으로 판정되고, 파노라마 촬상 처리가 종료한다.
다른 한편, 사용자에 의한 종료 지시가 없는 경우, 스텝 S36에 있어서 NO인 것으로 판정되고, 이 경우에는, 처리는 스텝 S37로 진행한다.
스텝 S37에 있어서, 화상 제어부(51)는, 화상 취득 방향의 이동 거리가 임계값을 넘고 있는지의 여부를 판정한다. 즉, 화상 제어부(51)는, 각속도 센서(22)로부터 공급되는 각도 변위량의 누적값이, 최대 한계인 각도 변위 임계값(예를 들면, 360°)에 달했는지의 여부를 판정한다.
화상 취득 방향의 이동 거리가 임계값을 초과한 경우, 스텝 S37에 있어서 YES인 것으로 판정되고, 파노라마 촬상 처리가 종료한다.
다른 한편, 화상 취득 방향의 이동 거리가 임계값을 초과하지 않은 경우, 스텝 S37에 있어서 NO인 것으로 판정되고, 이 경우에는, 처리는 스텝 S31로 되돌려진다. 즉, 사용자에 의한 종료 지시가 없고, 화상 취득 방향의 이동 거리가 임계값을 초과하지 않은 경우에는, 파노라마 촬상 처리가 계속되고, 새로운 화상 데이터의 취득 및 상기 화상 데이터의 합성이라는 처리가 반복된다.
이상, 도 7을 참조하여, 파노라마 촬상 처리의 흐름에 대하여 설명하였다. 다음에, 도 8을 참조하여, 도 7의 파노라마 촬상 처리 중, 스텝 S34의 표정 판정 처리의 상세한 흐름에 대하여 설명한다. 도 8은 표정 판정 처리의 상세한 흐름을 설명하는 플로우차트이다.
스텝 S51에 있어서, 얼굴 영역 추출부(54)는, 화상 제어부(51)의 제어 하에, 인물의 얼굴을 포함하는 화상 데이터로부터, 얼굴 영역을 추출한다. 그리고, 얼굴 영역에 대해서는, 전술한 바와 같이, 목·코·입을 포함하는 얼굴 부분만의 영역으로 해도 되고, 또한 얼굴 부분과 머리 부분을 포함하는 영역으로 해도 되고, 또한 인물 모두를 포함하는 영역으로 해도 된다.
얼굴 영역을 추출하면, 스텝 S52에 있어서, 표정 판정부(55)는, 화상 제어부(51)의 제어 하에, 얼굴 검출부(53)에 의해 검출된 얼굴의 평가값을 산출한다. 즉, 표정 판정부(55)는, 화상 데이터에 포함되는 얼굴의 눈의 크기나 입의 형상 등에 기초하여, 판정 대상의 얼굴의 평가값을 산출한다.
그 후, 스텝 S53에 있어서, 표정 판정부(55)는, 화상 제어부(51)의 제어 하에, 산출한 평가값이 소정값 이상인지의 여부를 판정한다.
산출한 평가값이 소정값 이상이 아닌 경우, 스텝 S53에 있어서 NO인 것으로 판정되고, 표정 판정 처리가 종료한다.
다른 한편, 산출한 평가값이 소정값 이상인 경우, 스텝 S53에 있어서 YES인 것으로 판정되고, 이 경우에는, 처리는 스텝 S54로 진행한다.
스텝 S54에 있어서, 표정 결정부(56)는, 화상 제어부(51)의 제어 하에, 소정값 이상의 평가값인 것으로 판정된 얼굴의 얼굴 영역 부분의 화상 데이터를 기억부(18)에 보존하고, 표정 판정 처리를 종료한다.
이상, 도 8을 참조하여, 표정 판정 처리의 흐름에 대하여 설명하였다.
다음에, 도 9를 참조하여, 도 7의 파노라마 촬상 처리 중, 스텝 S35의 화상 합성 처리의 상세한 흐름에 대하여 설명한다. 도 9는 화상 합성 처리의 상세한 흐름을 설명하는 플로우차트이다.
스텝 S71에 있어서, 화상 제어부(51)는, 합성 대상으로 되는 인접하는 화상 데이터에 있어서, 피사체에 움직임이 있는지의 여부를 판정한다. 여기서, 본 실시예에서는, 평가값이 소정값 미만인 얼굴 영역 부분의 화상 데이터를 평가값이 소정값 이상인 얼굴 영역 부분의 화상 데이터에 재기입(overwritten)하는 것으로 하고 있다(후술하는 스텝 S75). 그러므로, 스텝 S71에서의 피사체의 움직임이란, 얼굴 영역의 화상 데이터의 재기입에 적합하지 않는 움직임을 말하고, 예를 들면, 얼굴 영역의 형상이 변화하도록 한 움직임이나 화각 내에서의 얼굴 영역의 위치(각도 변위량을 고려한)가 변화하도록 한 움직임 등을 말한다. 다른 한편, 얼굴 영역 내에서의 피사체의 움직임, 예를 들면, 눈을 감는 등의 표정의 변화는, 스텝 S71에서의 피사체의 움직임에 포함되지 않는다.
피사체에 움직임이 있는 경우, 스텝 S71에 있어서 YES인 것으로 판정되고, 이 경우에는, 처리는 스텝 S76로 진행한다.
다른 한편, 피사체에 움직임이 없는 경우, 스텝 S72에 있어서 NO인 것으로 판정되고, 이 경우에는, 처리는 스텝 S72로 진행한다.
스텝 S72에 있어서, 화상 제어부(51)는, 합성하는 화상 데이터에 얼굴 영역이 존재하는지의 여부를 판정한다. 그리고, 본 실시예에 있어서, 합성하는 화상 데이터는, 인접하는 화상 데이터 중 후에 취득된 화상 데이터라도 되고, 또한 인접하는 화상 데이터의 양쪽이라도 된다.
합성하는 화상 데이터에 얼굴 영역이 존재하지 않는 경우, 스텝 S72에 있어서 NO인 것으로 판정되고, 이 경우에는, 처리는 스텝 S76으로 진행한다.
합성하는 화상 데이터에 얼굴 영역이 존재하는 경우, 스텝 S72에 있어서 YES인 것으로 판정되고, 이 경우에는, 처리는 스텝 S73으로 진행한다.
스텝 S73에 있어서, 표정 판정부(55)는, 화상 제어부(51)의 제어 하에, 합성하는 화상 데이터의 얼굴 영역의 평가값이 소정값 이상인지의 여부를 판정한다.
합성하는 화상 데이터의 얼굴 영역의 평가값이 소정값 이상인 경우, 스텝 S73에 있어서 YES인 것으로 판정되고, 이 경우에는, 처리는 스텝 S76으로 진행한다.
다른 한편, 합성하는 화상 데이터의 얼굴 영역의 평가값이 소정값 이상이 아닌 경우, 스텝 S73에 있어서 NO인 것으로 판정되고, 이 경우에는, 처리는 스텝 S74로 진행한다.
스텝 S74에 있어서, 표정 변경부(57)는, 화상 제어부(51)의 제어 하에, 소정값 이상의 평가값의 얼굴 영역 부분의 화상 데이터가 기억부(18)에 보존되어 있는지의 여부를 판정한다.
소정값 이상의 평가값의 얼굴 영역 부분의 화상 데이터가 기억부(18)에 보존되어 있지 않은 경우, 스텝 S74에 있어서 NO인 것으로 판정되고, 이 경우에는, 처리는 스텝 S76으로 진행한다.
다른 한편, 소정값 이상의 평가값의 얼굴 영역 부분의 화상 데이터가 기억부(18)에 보존되어 있는 경우, 스텝 S74에 있어서 YES인 것으로 판정되고, 이 경우에는, 처리는 스텝 S75로 진행한다.
스텝 S75에 있어서, 표정 변경부(57)는, 화상 제어부(51)의 제어 하에, 스텝 S73에 있어서 소정값 미만의 평가값인 것으로 판정된 얼굴 영역 부분의 화상 데이터를, 기억부(18)에 보존되어 있는 소정값 이상의 평가값의 얼굴 영역 부분의 화상 데이터에 재기입한다.
그 후, 스텝 S76에 있어서, 합성부(58)는, 화상 제어부(51)의 제어 하에, 인접하는 화상 데이터끼리를 합성하고, 파노라마 화상의 화상 데이터를 생성하여, 화상 합성 처리를 종료한다.
이상과 같은 본 실시예의 디지털 카메라(1)에 의하면, 얼굴 검출부(53)가 화상 데이터에 포함되는 인물의 얼굴을 검출하면, 표정 판정부(55)는, 상기 얼굴의 표정 판정을 행한다. 그리고, 표정 결정부(56)는, 표정 판정부(55)에 의한 표정 판정의 결과, 촬상 화상으로서 바람직한 얼굴을 합성 대상의 인물의 얼굴로서 결정하고, 합성부(58)는, 결정된 인물의 얼굴을 포함하도록 파노라마 합성을 행한다.
이로써, 파노라마 화상의 촬상 중에 피사체인 인물의 표정이 바뀌어 버렸을 경우, 예를 들면, 파노라마 화상의 촬상 중에 눈을 감아 버린 경우라도, 눈을 감아 버린 타이밍이 아니고, 눈을 뜨고 있는 타이밍에서 촬상된 화상 데이터를 사용하여 파노라마 화상의 화상 데이터를 생성할 수 있어, 바람직한 표정의 인물을 포함하는 파노라마 화상을 얻을 수 있다.
또한, 디지털 카메라(1)에서는, 얼굴 영역 추출부(54)는, 합성 대상의 화상 데이터로부터 인물의 얼굴을 포함하는 얼굴 영역을 추출하고, 표정 결정부(56)는, 촬상 화상으로서 바람직한 얼굴을 포함하는 얼굴 영역 부분의 화상 데이터를 기억부(18)에 보존하여 둔다. 그리고, 표정 변경부(57)는, 합성하는 화상 데이터에 포함되는 얼굴이 촬상 화상으로서 바람직하지 않은 경우에는, 상기 얼굴 영역을 기억부(18)에 보존하고 있던 얼굴 영역 부분의 화상 데이터에 재기입한 후에, 파노라마 합성을 행한다.
이로써, 촬상 화상으로서 바람직하지 않은 얼굴과 바람직한 얼굴이 합성되어 버리는 것을 방지할 수 있어, 자연스러운 파노라마 합성을 행할 수 있다.
또한, 파노라마 촬상 처리의 대상으로 되는 촬상 범위에 복수의 인물이 존재하는 경우의 파노라마 합성의 방법에 대하여 이하에 변형예로서 기재한다.
[변형예]
파노라마 촬상 처리의 대상으로 되는 촬상 범위에 복수의 인물(예를 들면, 인물 A, B, C)이 존재하는 경우에는, 얼굴 검출부(53)에 의해 최초에 검출된 각각의 인물의 얼굴의 정보를 사용하여, 얼굴 영역 추출부(54)가 템플레이트 매칭 기술(template matching technology)에 의해 최초에 검출된 각각의 인물(인물 A, B, C)에 대응하는 얼굴의 위치를 특정한 후, 상기 특정된 각각의 위치에 대응하는 각각의 인물의 얼굴 영역을 추출하면 된다.
그리고, 표정 판정부(55)가 각각의 인물의 얼굴 영역에 대하여 평가값을 산출하고, 표정 결정부(56)가 소정값 이상으로 되는 얼굴 영역을 기억부(18)에 각각 보존한다.
그 후의 파노라마 촬상 처리에 관하여는, 각각의 인물의 얼굴 영역에 대하여 상기 실시예와 동일한 처리를 행하면 된다.
또한, 복수의 인물(인물 A, B, C)의 얼굴의 위치의 특정한 방법에 대해서는, 템플레이트 매칭 기술을 이용하는 것으로 했지만, 각각의 인물의 얼굴 위치의 특정한 방법은 이에 한정되지 않는다.
예를 들면, 미리 각각의 인물의 얼굴 정보를 기억부(18)에 기억시켜 둠으로써, 얼굴 검출부(53)가 기억부(18)에 기억된 각각의 인물의 얼굴 정보를 기초로 각각의 인물의 얼굴을 파노라마 촬상 처리 중의 각 화상으로부터 검출하도록 해도 된다.
그리고, 본 발명은, 전술한 실시예에 한정되지 않고, 본 발명의 목적을 달성할 수 있는 범위에서의 변형, 개량 등은 본 발명에 포함되는 것이다.
예를 들면, 전술한 실시예에서는, 1개의 화상 데이터를 취득할 때마다 화상 합성 처리를 행하는 것으로 하고 있지만(도 7의 스텝 S31에서 YES인 것으로 판정되면 스텝 S35이 행해지지만), 이에 한정되지 않고, 파노라마 합성용의 모든 화상 데이터를 취득한 후에 화상 합성 처리를 행하는 것으로 해도 되고, 2 이상의 임의의 수의 화상 데이터를 취득할 때마다 화상 합성 처리를 행하는 것으로 해도 된다.
또한, 전술한 실시예에서는, 얼굴 영역의 재기입 후에 파노라마 합성을 했지만, 화상 합성 처리의 순서는 이에 한정되지 않는다. 즉, 파노라마 합성을 행한 후에 해당하는 얼굴 영역의 재기입을 행해도 된다.
또한, 전술한 실시예에서는, 평가값을 사용하여 인물의 얼굴 표정을 판정하고, 촬상 화상으로서 바람직한 얼굴로 파노라마 합성을 행하는 것으로 하고 있지만, 평가값을 사용하여 판정하는 대상은, 표정에 한정되지 않는다. 예를 들면, 파노라마 화상의 촬상 중에 인물에 그늘이 지는 경우 등도 상정(想定)되어 평가값을 사용하여 인물의 밝기 등을 판정하는 것이라도 된다.
또한, 전술한 실시예에서는, 합성 대상의 화상 데이터에 포함되는 피사체상의 일례로서 인물의 얼굴을 사용하고 있지만, 이에 한정되는 것은 아니다. 예를 들면, 동물의 얼굴을 합성 대상의 화상 데이터에 포함되는 피사체상으로 해도 된다. 이 경우, 평가값을 사용하여 판정하는 대상으로서는, 동물이 눈을 감고 있는지의 여부 등을 적용해도 된다.
또한, 전술한 실시예에서는, 본 발명이 적용되는 화상 처리 장치는, 디지털 카메라(1)를 예로서 설명하였으나, 특별히 이에 한정되지 않는다. 본 발명은, 파노라마 화상의 생성이 가능하게 되는 기능을 가지는 전자 기기 일반적으로 적용할 수 있고, 예를 들면, 휴대형 퍼스널 컴퓨터, 휴대형 네비게이션 장치, 휴대용 게임기 등에 폭넓게 적용할 수 있다.
전술한 일련의 처리는, 하드웨어에 의해 실행시킬 수 있고, 소프트웨어에 의해 실행시킬 수도 있다.
일련의 처리를 소프트웨어에 의해 실행시키는 경우에는, 그 소프트웨어를 구성하는 프로그램이, 화상 처리 장치 또는 상기 화상 처리 장치를 제어하는 컴퓨터 등에 네트워크나 기록 매체로부터 인스톨된다. 여기서, 컴퓨터는, 전용의 하드웨어에 내장되어 있는 컴퓨터라도 된다. 또한, 컴퓨터는, 각종 프로그램을 인스톨함으로써, 각종 기능을 실행할 수 있는 컴퓨터, 예를 들면, 범용의 퍼스널 컴퓨터라도 된다.
이와 같은 프로그램을 포함하는 기록 매체는, 사용자에게 프로그램을 제공하기 위해 장치 본체와는 별도로 배포되는 착탈 가능 미디어(31)에 의해 구성될뿐아니라, 장치 본체에 미리 내장된 상태로 사용자에게 제공되는 기록 매체 등으로 구성된다. 착탈 가능 미디어(31)는, 예를 들면, 자기 디스크(플로피 디스크를 포함함), 광디스크, 광자기 디스크 등에 의해 구성된다. 또한, 장치 본체에 미리 내장된 상태에서 사용자에게 제공되는 기록 매체는, 예를 들면, 프로그램이 기록되어 있는 ROM(12)이나 기억부(18)에 포함되는 하드디스크 등으로 구성된다.
그리고, 본 명세서에 있어서, 기록 매체에 기록되는 프로그램을 기술하는 스텝은, 그 순서에 따라 시계열적으로 행해지는 처리는 물론, 반드시 시계열적으로 처리되지 않아도, 병렬적 또는 개별적으로 실행되는 처리도 포함하는 것이다.
이상, 본 발명의 몇 가지의 실시예에 대하여 설명하였으나, 이들 실시예는, 예시에 지나지 않고, 본 발명의 기술적 범위를 한정하는 것은 아니다. 본 발명은 그 외의 다양한 실시예를 취하는 것이 가능하고, 또한 본 발명의 요지를 벗어나지 않는 범위에서, 생략이나 치환(置換) 등 각종 변경을 행할 수 있다. 이들 실시예나 그 변형은, 본 명세서 등에 기재된 발명의 범위나 요지에 포함되고, 또한, 특허 청구의 범위에 기재된 발명과 그 균등의 범위에 포함된다.
Claims (7)
- 촬상 범위가 소정 방향으로 이동되면서 연속적으로 촬상된 화상을 취득하는 화상 취득 수단;
상기 화상 취득 수단에 의해 취득된 복수의 화상으로부터 동일한 피사체상을 각각 검출하는 검출 수단;
상기 검출 수단에 의해 각각 검출된 피사체상의 평가값을 각각 산출하는 산출 수단;
상기 산출 수단에 의해 각각 산출된 평가값에 기초하여, 상기 피사체상으로부터 특정한 피사체상을 합성 대상으로서 결정하는 결정 수단;
상기 결정 수단에 의해 합성 대상으로서 결정된 특정한 피사체상과 상기 취득 수단에 의해 순차적으로 취득된 화상을 합성함으로써, 광범위의 화상을 생성하는 생성 수단
을 포함하는, 화상 처리 장치. - 제1항에 있어서,
상기 복수의 화상 중 상기 피사체상으로부터 피사체 영역을 추출하는 피사체 추출 수단과,
상기 피사체 추출 수단에 의해 추출된 피사체 영역을 구성하는 화상을, 상기 특정한 피사체상으로 변경하는 피사체 변경 수단을 더 포함하고,
상기 생성 수단은, 상기 특정한 피사체상과 상기 순차적으로 취득되는 화상을 합성하여, 상기 광범위의 화상을 생성하는, 화상 처리 장치. - 제1항에 있어서,
상기 취득 수단은, 복수 종류의 동일한 피사체상을 포함하는 복수의 화상을 취득하고,
상기 검출 수단은, 상기 취득된 복수의 화상으로부터 복수 종류의 동일한 피사체상을 검출하고,
상기 산출 수단은, 상기 검출 수단에 의해 검출된 복수 종류의 동일한 피사체상에 관한 복수의 평가값을 산출하고,
상기 결정 수단은, 상기 산출 수단에 의해 산출된 복수의 피사체상에 관한 복수의 평가값에 기초하여, 상기 검출된 복수의 피사체상으로부터 복수의 특정한 피사체상을 합성 대상으로서 결정하고,
상기 생성 수단은, 상기 결정 수단에 의해 합성 대상으로서 결정된 복수의 특정한 피사체상과 상기 취득 수단에 의해 순차적으로 취득된 화상을 합성함으로써, 광범위의 화상을 생성하는, 화상 처리 장치. - 제1항에 있어서,
상기 피사체상은, 얼굴 영역을 중심으로 한 화상인, 화상 처리 장치. - 제1항에 있어서,
촬상 수단을 더 포함하고,
상기 화상 취득 수단은, 상기 촬상 수단에 의해 촬상된 화상을 순차적으로 취득하는, 화상 처리 장치. - 촬상 범위가 소정 방향으로 이동되면서 연속적으로 촬상된 화상을 취득하는 화상 취득 수단을 구비한 화상 처리 장치의 화상 처리 방법으로서,
상기 화상 취득 수단에 의해 취득된 복수의 화상으로부터 피사체상을 각각 검출하는 검출 스텝;
상기 검출 스텝에 의해 각각 검출된 피사체상의 평가값을 산출하는 산출 스텝;
상기 산출 스텝에 의해 각각 산출된 평가값에 기초하여, 복수의 상기 피사체상으로부터 특정한 피사체상을 합성 대상으로서 결정하는 결정 스텝;
상기 결정 스텝에 의해 결정된 피사체상과 상기 취득 수단에 의해 순차적으로 취득된 화상을 합성함으로써, 광범위의 화상을 생성하는 생성 스텝
을 포함하는, 화상 처리 방법. - 컴퓨터가 판독 가능한 프로그램을 기록한 기록 매체로서,
촬상 범위가 소정 방향으로 이동되면서 연속적으로 촬상된 화상을 취득하는 화상 취득 수단;
상기 화상 취득 수단에 의해 취득된 복수의 화상으로부터 피사체상을 각각 검출하는 검출 수단;
상기 검출 기능에 의해 각각 검출된 피사체상의 평가값을 산출하는 산출 수단;
상기 산출 기능에 의해 각각 산출된 평가값에 기초하여, 복수의 상기 피사체상으로부터 특정한 피사체상을 합성 대상으로서 결정하는 결정 수단;
상기 결정 수단에 의해 결정된 피사체상과 상기 취득 수단에 의해 순차적으로 취득된 화상을 합성함으로써, 광범위의 화상을 생성하는 생성 수단
으로서의 기능을 상기 컴퓨터에 실현시키는 프로그램을 기록한, 컴퓨터가 판독 가능한 프로그램을 기록한 기록 매체.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JPJP-P-2011-213890 | 2011-09-29 | ||
JP2011213890A JP2013074572A (ja) | 2011-09-29 | 2011-09-29 | 画像処理装置、画像処理方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20130035207A true KR20130035207A (ko) | 2013-04-08 |
KR101325002B1 KR101325002B1 (ko) | 2013-11-08 |
Family
ID=47992206
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020120106389A KR101325002B1 (ko) | 2011-09-29 | 2012-09-25 | 화상 처리 장치, 화상 처리 방법 및 기록 매체 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9270881B2 (ko) |
JP (1) | JP2013074572A (ko) |
KR (1) | KR101325002B1 (ko) |
CN (1) | CN103037156B (ko) |
TW (1) | TWI477887B (ko) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101470442B1 (ko) * | 2014-10-21 | 2014-12-08 | 주식회사 모리아타운 | 모바일 단말의 광각 영상 통화 방법 및 장치 |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101567497B1 (ko) | 2014-02-11 | 2015-11-11 | 동서대학교산학협력단 | 축 방향 분산 영상 기법(ads)을 이용한 가려진 영상 도출 시스템 및 그 방법 |
JP2017212698A (ja) * | 2016-05-27 | 2017-11-30 | キヤノン株式会社 | 撮像装置、撮像装置の制御方法およびプログラム |
JP7003558B2 (ja) * | 2017-10-12 | 2022-01-20 | カシオ計算機株式会社 | 画像処理装置、画像処理方法、及びプログラム |
CN108322625B (zh) * | 2017-12-28 | 2020-06-23 | 杭州蜜迩科技有限公司 | 一种基于全景图的全景视频制作方法 |
JP6587006B2 (ja) * | 2018-03-14 | 2019-10-09 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | 動体検出装置、制御装置、移動体、動体検出方法、及びプログラム |
Family Cites Families (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6714665B1 (en) * | 1994-09-02 | 2004-03-30 | Sarnoff Corporation | Fully automated iris recognition system utilizing wide and narrow fields of view |
JPH10334212A (ja) * | 1997-04-01 | 1998-12-18 | Fuji Photo Film Co Ltd | 付加情報付き画像ファイルからの画像プリントシステム |
JP3403060B2 (ja) * | 1998-03-27 | 2003-05-06 | 三洋電機株式会社 | パノラマ画像撮影装置、およびパノラマ画像生成装置 |
JP2004048648A (ja) * | 2002-05-13 | 2004-02-12 | Fuji Photo Film Co Ltd | 特殊効果画像の作成方法及びカメラ並びに画像サーバ |
AU2003280516A1 (en) * | 2002-07-01 | 2004-01-19 | The Regents Of The University Of California | Digital processing of video images |
US20040189849A1 (en) * | 2003-03-31 | 2004-09-30 | Hofer Gregory V. | Panoramic sequence guide |
JP2005012660A (ja) * | 2003-06-20 | 2005-01-13 | Nikon Corp | 画像生成方法、画像生成装置 |
US7358498B2 (en) * | 2003-08-04 | 2008-04-15 | Technest Holdings, Inc. | System and a method for a smart surveillance system |
US8705808B2 (en) * | 2003-09-05 | 2014-04-22 | Honeywell International Inc. | Combined face and iris recognition system |
WO2006022855A2 (en) * | 2004-03-18 | 2006-03-02 | Northrop Grumman Corporation | Multi-camera image stitching for a distributed aperture system |
US20050289582A1 (en) * | 2004-06-24 | 2005-12-29 | Hitachi, Ltd. | System and method for capturing and using biometrics to review a product, service, creative work or thing |
US7929016B2 (en) * | 2005-06-07 | 2011-04-19 | Panasonic Corporation | Monitoring system, monitoring method and camera terminal |
JP4093273B2 (ja) * | 2006-03-13 | 2008-06-04 | オムロン株式会社 | 特徴点検出装置、特徴点検出方法および特徴点検出プログラム |
KR100827089B1 (ko) * | 2006-04-25 | 2008-05-02 | 삼성전자주식회사 | 파노라마 사진 촬영 방법 |
JP2008131094A (ja) * | 2006-11-16 | 2008-06-05 | Fujifilm Corp | 撮像装置および撮像方法 |
JP2008197889A (ja) * | 2007-02-13 | 2008-08-28 | Nippon Telegr & Teleph Corp <Ntt> | 静止画生成方法、静止画生成装置および静止画生成プログラム |
JP4888192B2 (ja) * | 2007-03-30 | 2012-02-29 | 株式会社ニコン | 撮像装置 |
US8717412B2 (en) * | 2007-07-18 | 2014-05-06 | Samsung Electronics Co., Ltd. | Panoramic image production |
TW200907557A (en) * | 2007-08-08 | 2009-02-16 | Behavior Tech Computer Corp | Camera array apparatus and the method for capturing wide-angle video over a network |
JP4623200B2 (ja) * | 2008-10-27 | 2011-02-02 | ソニー株式会社 | 画像処理装置、画像処理方法およびプログラム |
JP4623201B2 (ja) * | 2008-10-27 | 2011-02-02 | ソニー株式会社 | 画像処理装置、画像処理方法およびプログラム |
JP4623199B2 (ja) * | 2008-10-27 | 2011-02-02 | ソニー株式会社 | 画像処理装置、画像処理方法およびプログラム |
JP5347716B2 (ja) * | 2009-05-27 | 2013-11-20 | ソニー株式会社 | 画像処理装置、情報処理方法およびプログラム |
KR101665130B1 (ko) * | 2009-07-15 | 2016-10-25 | 삼성전자주식회사 | 복수의 인물에 대한 이미지 생성 장치 및 방법 |
US9036898B1 (en) * | 2011-01-18 | 2015-05-19 | Disney Enterprises, Inc. | High-quality passive performance capture using anchor frames |
JP5863423B2 (ja) * | 2011-11-30 | 2016-02-16 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
US9106789B1 (en) * | 2012-01-20 | 2015-08-11 | Tech Friends, Inc. | Videoconference and video visitation security |
US8948517B2 (en) * | 2013-03-01 | 2015-02-03 | Adobe Systems Incorporated | Landmark localization via visual search |
-
2011
- 2011-09-29 JP JP2011213890A patent/JP2013074572A/ja active Pending
-
2012
- 2012-09-25 KR KR1020120106389A patent/KR101325002B1/ko active IP Right Grant
- 2012-09-26 CN CN201210363903.7A patent/CN103037156B/zh active Active
- 2012-09-28 US US13/630,981 patent/US9270881B2/en active Active
- 2012-09-28 TW TW101135716A patent/TWI477887B/zh active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101470442B1 (ko) * | 2014-10-21 | 2014-12-08 | 주식회사 모리아타운 | 모바일 단말의 광각 영상 통화 방법 및 장치 |
Also Published As
Publication number | Publication date |
---|---|
CN103037156B (zh) | 2015-12-16 |
TWI477887B (zh) | 2015-03-21 |
KR101325002B1 (ko) | 2013-11-08 |
JP2013074572A (ja) | 2013-04-22 |
US9270881B2 (en) | 2016-02-23 |
TW201319724A (zh) | 2013-05-16 |
CN103037156A (zh) | 2013-04-10 |
US20130083158A1 (en) | 2013-04-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4254873B2 (ja) | 画像処理装置及び画像処理方法、撮像装置、並びにコンピュータ・プログラム | |
US9036038B2 (en) | Information processing apparatus and method for extracting and categorizing postures of human figures | |
US8199221B2 (en) | Image recording apparatus, image recording method, image processing apparatus, image processing method, and program | |
KR101325002B1 (ko) | 화상 처리 장치, 화상 처리 방법 및 기록 매체 | |
US8350918B2 (en) | Image capturing apparatus and control method therefor | |
JP5950678B2 (ja) | 撮像装置、制御方法、及びプログラム | |
US8988545B2 (en) | Digital photographing apparatus and method of controlling the same | |
KR20100055946A (ko) | 동영상 썸네일 생성 방법 및 장치 | |
JP4802884B2 (ja) | 撮像装置、撮像画像記録方法、及び、プログラム | |
JP2008139683A (ja) | 撮像装置及びオートフォーカス制御方法 | |
JP2007249132A (ja) | 撮像装置、自動焦点調整方法、およびプログラム | |
JP6149854B2 (ja) | 撮像装置、撮像制御方法及びプログラム | |
JP2013183185A (ja) | 撮像装置、撮影制御方法及びプログラム | |
JP2008301162A (ja) | 撮影装置、及び撮影方法 | |
JP2009089220A (ja) | 撮像装置 | |
JP2011239267A (ja) | 撮像装置及び画像処理装置 | |
JP2008172395A (ja) | 撮像装置、画像処理装置、方法およびプログラム | |
JP5200820B2 (ja) | 撮像装置及び撮像方法、画像処理プログラム | |
JP6024135B2 (ja) | 被写体追尾表示制御装置、被写体追尾表示制御方法およびプログラム | |
JP7444604B2 (ja) | 画像処理装置及び方法、及び撮像装置 | |
JP2013081136A (ja) | 画像処理装置および制御プログラム | |
JP2017147498A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2009267733A (ja) | 撮像装置および撮像制御方法 | |
JP7566830B2 (ja) | 撮像装置、撮像装置の制御方法、プログラム | |
JP2009077066A (ja) | 撮像装置の画像取り込み方法とその方法を用いる撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20181023 Year of fee payment: 6 |