KR20120084696A

KR20120084696A - 동영상을 촬영하는 촬상 장치, 및 촬상 처리 방법

Info

Publication number: KR20120084696A
Application number: KR1020120006879A
Authority: KR
Inventors: 요시유키 가토
Original assignee: 가시오게산키 가부시키가이샤
Priority date: 2011-01-20
Filing date: 2012-01-20
Publication date: 2012-07-30
Also published as: CN102611845A; US20120189263A1; JP5234119B2; CN102611845B; KR101342477B1; JP2012151706A

Abstract

촬상 장치(100)로서, 피사체의 동영상을 1개의 연속된 동영상 데이터로서 기록하는 중에, 촬상부에 의해 촬상되는 피사체 상태 변화에 맞추어, 상기 피사체의 촬상 조건을 조정하는 촬상 조건 조정부(6c)로 동영상 데이터의 기록 중에, 동영상을 기록할 때의 프레임 레이트를 전환하는 제1 기록 프레임 레이트 설정부(6a)로 동영상을 기록할 때의 프레임 레이트가 제1 기록 프레임 레이트로부터 제1 기록 프레임 레이트보다 고속인 제2 기록 프레임 레이트로 전환되는 경우에는, 이 제2 기록 프레임 레이트에서 기록하는 동안 촬상 조건 조정부에 의한 촬상 조건의 조정을 제한하는 촬상 제어부(6)를 구비하고 있다. 이로써, 주요 피사체의 상태의 확인을 적절하게 행하는 것이 가능한 동영상 데이터를 얻는다.

Description

동영상을 촬영하는 촬상 장치, 및 촬상 처리 방법{IMAGING APPARATUS AND IMAGING METHOD FOR TAKING MOVING IMAGE}

본 발명은 동영상을 촬영할 때의 프레임 레이트를 제어할 수 있는 촬상 장치, 및 촬상 처리 방법에 관한 것이다.

종래, 동영상 촬상의 도중에, 촬상 프레임 레이트를 변경함으로써 슬로 모션이나 하이스피드 모션으로 재생 가능한 동영상 데이터를 얻을 수 있는 촬상 장치가 알려져 있다(예를 들면, 일본공개특허 제2005―136754호 공보 참조).

그런데, 일반적으로, 동영상 촬영 중에는, 항상 피사체의 상태에 적합한 노출이나 화이트 밸런스가 유지하도록 되어, 촬상 조건을 피사체 상태 변화에 추종하도록 조정하고 있다. 그러므로 예를 들면, 동작이 빠른 주요 피사체를 슬로 모션으로 재생하여 확인할 생각으로 촬상 프레임 레이트를 고속으로 한 경우에도, 노출이나 화이트 밸런스 등의 촬상 조건은 피사체의 상태에 추종하도록 조정되므로, 이 동영상 데이터를 재생했을 때, 주요 피사체의 상세한 동작을 슬로 모션으로 확인하는 것은 가능해도, 주요 피사체의 밝기나 색조의 확인을 적절하게 행할 수 없는 문제가 있다.

주요 피사체의 상태의 확인을 적절하게 행할 수 있는 동영상 데이터를 얻을 수 있는 촬상 장치나 촬상 처리 방법이 요구된다.

본 발명의 한 관점은,

피사체를 촬상하는 촬상부를 구비한 촬상 장치로서,

상기 촬상부에 의해 순차 촬상되는 피사체의 동영상을 1개의 연속된 동영상 데이터로서 기록하는 동영상 기록부와,

상기 동영상 기록부에 의한 1개의 연속된 동영상 데이터의 기록 중에, 상기 촬상부에 의해 촬상되는 피사체 상태 변화에 맞추어, 상기 피사체의 촬상 조건을 조정하는 조정부와,

상기 동영상 기록부에 의한 1개의 연속된 동영상 데이터의 기록 중에, 동영상을 기록할 때의 프레임 레이트를 전환하는 전환부와,

상기 전환부에 의해 상기 동영상을 기록할 때의 프레임 레이트가 제1 기록 프레임 레이트로부터 상기 제1 기록 프레임 레이트보다 고속인 제2 기록 프레임 레이트로 전환되는 경우에는, 상기 제2 기록 프레임 레이트에서의 기록 중에서의 상기 조정부에 의한 촬상 조건의 조정을 제한하는 조정 제어부

를 구비하는 것을 특징으로 한다.

또한, 본 발명의 다른 관점은,

촬상부를 구비하는 촬상 장치를 사용한 촬상 처리 방법으로서,

상기 촬상부에 의해 순차 촬상되는 피사체의 동영상을 1개의 연속된 동영상 데이터로서 기록하는 처리와,

상기 1개의 연속된 동영상 데이터의 기록 중에, 상기 촬상부에 의해 촬상되는 피사체 상태 변화에 맞추어, 상기 피사체의 촬상 조건을 조정하는 처리와,

상기 1개의 연속된 동영상 데이터의 기록 중에, 동영상을 기록할 때의 프레임 레이트를 전환하는 처리와,

상기 동영상을 기록할 때의 프레임 레이트가 제1 기록 프레임 레이트로부터 상기 제1 기록 프레임 레이트보다 고속인 제2 기록 프레임 레이트로 전환되는 경우에는, 상기 제2 기록 프레임 레이트에서의 기록 중에서의 상기 촬상 조건의 조정을 제한하는 처리

를 포함하는 것을 특징으로 한다.

도 1은 본 발명을 적용한 실시예 1의 촬상 장치의 개략적인 구성을 나타낸 블록도이다.
도 2는 도 1의 촬상 장치에 의한 촬상 처리에 관한 동작의 일례를 나타낸 플로우차트이다.
도 3은 도 2의 촬상 처리를 설명하기 위한 도면이다.
도 4는 본 발명을 적용한 실시예 2의 촬상 장치의 개략적인 구성을 나타낸 블록도이다.
도 5는 도 4의 촬상 장치에 의한 촬상 처리에 관한 동작의 일례를 나타낸 플로우차트이다.
도 6은 도 5의 촬상 처리를 설명하기 위한 도면이다.
도 7은 본 발명을 적용한 실시예 3의 촬상 장치의 개략적인 구성을 나타낸 블록도이다.
도 8은 도 7의 촬상 장치에 의한 촬상 처리에 관한 동작의 일례를 나타낸 플로우차트이다.
도 9는 도 8의 촬상 처리를 설명하기 위한 도면이다.

이하에, 본 발명의 실시예에 대해 도면을 참조하여 구체적으로 설명한다. 단, 발명의 범위는 도시한 예에 한정되지 않는다.

[ 실시예 1]

도 1은 본 발명을 적용한 실시예 1의 촬상 장치(100)의 개략적인 구성을 나타낸 블록도이다.

실시예 1의 촬상 장치(100)는, 피사체의 동영상을 1개의 연속된 동영상 데이터로서 기록하는 중에, 촬상되는 피사체 상태 변화에 맞추어 상기 피사체의 촬상 조건을 조정하고, 동영상 데이터의 기록 중에, 동영상을 기록할 때의 프레임 레이트가 제1 기록 프레임 레이트로부터 제1 기록 프레임 레이트보다 고속인 제2 기록 프레임 레이트로 전환되는 경우에는, 이 제2 기록 프레임 레이트에서 기록하는 동안 촬상 조건의 조정을 제한한다.

구체적으로는, 도 1에 나타낸 바와 같이, 촬상 장치(100)는, 렌즈부(1), 전자 촬상부(2), 유닛 회로부(3), 화상 생성부(4), 피사체 검출부(5), 촬상 제어부(6), 화상 처리부(7), 표시 제어부(8), 표시부(9), 기록 매체 제어부(10), 조작 입력부(11), 버퍼 메모리(12), 프로그램 메모리(13), 중앙 제어부(14) 등을 구비하고 있다.

또한, 화상 생성부(4), 피사체 검출부(5), 촬상 제어부(6), 화상 처리부(7), 표시 제어부(8), 기록 매체 제어부(10), 버퍼 메모리(12), 프로그램 메모리(13), 중앙 제어부(14)는, 버스 라인(15)을 통하여 접속되어 있다.

렌즈부(1)는, 예를 들면, 도시는 생략하지만, 줌 렌즈, 포커스 렌즈, 조리개 등을 가지고, 이들 렌즈를 통과한 피사체의 광학상(optical image)을 결상한다.

전자 촬상부(2)는, 렌즈부(1)의 광축 상에 배치되어 있다. 또한, 전자 촬상부(2)는, 예를 들면, CCD(Charge Coupled Device)나 CMOS(Complementary Metal―oxide Semiconductor) 등의 이미지 센서로 구성되며, 렌즈부(1)의 각종 렌즈를 통과한 광학상을 촬상 프레임 레이트에 따른 소정의 주기마다 이차원의 화상 신호(RGB 화상 데이터)로 변환하여, 유닛 회로부(3)에 출력한다.

유닛 회로부(3)는, 예를 들면, 도시는 생략하지만, CDS(Correlated Double Sampling: 상관 이중 샘플링 회로), AGC(Auto Gain Control: 게인 조정 앰프), ADC(Analog to Digital Converter: 아날로그/디지털 변환기) 등을 구비하고 있다. 이 유닛 회로부(3)는, 전자 촬상부(2)로부터 출력되어 입력되는 피사체의 광학상에 따른 아날로그의 화상 신호를 기록 프레임 레이트에 따른 소정의 주기마다 CDS에 의해 유지하고, 상기 화상 신호를 AGC에 의해 증폭한 후, 증폭된 화상 신호를 ADC에 의해 디지털의 화상 신호로 변환한다. 그리고 유닛 회로부(3)는, 디지털의 화상 신호를 화상 생성부(4)에 송신한다.

이와 같이, 렌즈부(1), 전자 촬상부(2) 및 유닛 회로부(3)는, 피사체를 촬상하는 촬상 수단을 구성하고 있다.

화상 생성부(4)는, 유닛 회로부(3)로부터 송신된 디지털의 화상 신호로부터 디지털 값의 휘도 신호 Y 및 색차 신호 Cb, Cr(YUV 데이터)를 생성한다.

구체적으로는, 화상 생성부(4)는, 소정의 주기마다 유닛 회로부(3)로부터 송신된 각 프레임 화상 f의 디지털의 화상 데이터에 대하여, 컬러 프로세스 회로(도시하지 않음)로 화소 보간 처리 및 γ보정 처리를 포함하는 컬러 프로세스 처리를 각각 행한 후, 디지털 값의 휘도 신호 Y 및 색차 신호 Cb, Cr(YUV 데이터)를 생성한다.

여기서, 촬상 장치(100)가, 동영상을 촬상하여 동영상 데이터로서 기록하는 처리를 행할 때의 프레임 레이트에는, 전자 촬상부(2)가 동영상을 촬상하는 프레임 레이트를 나타내는 촬상 프레임 레이트, 촬상 조건 조정부(6c)가 촬상 조건을 조정하는 프레임 레이트를 나타내는 조정 프레임 레이트, 및 화상 생성부가 각 프레임의 화상을 생성하여 동영상 데이터로서 기록 매체 M에 기록하는 프레임 레이트를 나타내는 기록 프레임 레이트 등이 있지만, 실시예 1에 있어서는, 촬상 프레임 레이트를 120fps나 240fps 등의 고속의 프레임 레이트에 고정하고, 조정에 사용하는 프레임이나 기록에 사용하는 프레임을 솎아냄으로써, 조정 프레임 레이트나 기록 프레임 레이트를 변화시키는 것이다.

이와 같은 동작을 행함으로써, 조정 프레임 레이트나 기록 프레임 레이트를 전환할 때의 프레임의 어긋남 등이 발생하지 않고, 용이하고 신속하게 조정 프레임 레이트나 기록 프레임 레이트의 전환을 행하는 것이 가능해진다. 그러나, 촬상 프레임 레이트를 고정하여 조정 프레임 레이트나 기록 프레임 레이트를 변화시키는 것이 아닌, 촬상 프레임 레이트 그 자체를 변화시킴으로써 프레임을 솎아내지 않고서 조정 프레임 레이트나 기록 프레임 레이트를 변화시키도록 해도 된다.

상기 기록 프레임 레이트는, 통상의 동영상 촬영에 대응하는 프레임 레이트와 상기 통상의 동영상 촬영보다 고속의 동영상 촬영에 대응하는 프레임 레이트가 있다. 예를 들면, 통상 동영상 촬영에 대응하는 기록 프레임 레이트는, 30fps나 60fps 등이며, 고속 동영상 촬영에 대응하는 기록 프레임 레이트는, 120fps나 240fps 등이지만, 일례로서 이들에 한정되지 않고, 적절하게 임의로 변경 가능하다.

그리고 화상 생성부(4)는, 생성된 휘도 색차 신호의 화상 데이터를, 피사체 검출부(5), 촬상 제어부(6) 및 화상 처리부(7)에 출력한다.

피사체 검출부(5)는, 화상 생성부(4)로부터 출력된 각 프레임 화상 f의 휘도 색차 신호의 화상 데이터로부터 특정한 피사체를 검출한다.

즉, 피사체 검출부(5)는, 각 프레임 화상 f의 화상 데이터(YUV 데이터)를 취득하여, 상기 화상 데이터에 대하여, 예를 들면, 얼굴 검출 처리, 에지 검출 처리, 특징 추출 처리 등의 각종 화상 처리를 행하여 특정한 피사체가 포함되는 영역(예를 들면, 얼굴 영역 등)을 검출한다. 구체적으로는, 피사체 검출부(5)는, 예를 들면, 얼굴 검출 처리, 에지 검출 처리, 특징 추출 처리 등의 각종 화상 처리에 의해 특정한 피사체의 후보로 되는 후보 영역을 추출하고, 추출된 후보 영역 중 소정의 식별 조건을 만족시키는 것을 특정한 피사체로서 검출한다.

그리고 소정의 식별 조건으로서는, 예를 들면, 「사람의 얼굴」이나 「동물」 등의 형상을 기준으로 하는 것이나, 화각 전체의 화상에 대한 비율(예를 들면, 절반 이상인지) 등의 크기를 기준으로 하는 것이나, 명도나 채도가 높고 선명한(화려한) 색조인지 여부나 살색인지 여부 등의 색조를 기준으로 하는 것 등을 들 수 있다.

또한, 얼굴 검출 처리나 에지 검출 처리나 특징 추출 처리는, 공지의 기술이므로, 여기서는 상세한 설명을 생략한다.

이와 같이, 피사체 검출부(5)는, 촬상 수단으로서의 렌즈부(1), 전자 촬상부(2) 및 유닛 회로부(3)에 의해 촬상된 동영상으로부터 특정한 피사체를 검출하는 피사체 검출 수단을 구성하고 있다.

촬상 제어부(6)는, 렌즈부(1), 전자 촬상부(2), 유닛 회로부(3) 등의 동작을 제어한다.

즉, 촬상 제어부(6)는, 예를 들면, 모터 등의 구동원과, 이 구동원을 구동하는 드라이버 등(어느 쪽도 도시하지 않음)을 구비하고, 렌즈부(1)의 줌 렌즈나 포커스 렌즈를 광축 방향으로 구동시킨다. 또한, 촬상 제어부(6)는, 예를 들면, 렌즈부(1)의 조리개의 확경이나 축경을 행하는 구동부(도시하지 않음)를 구비하고, 촬상 조건 조정부(6c)(후술)에 의해 조정된 노출 조정 조건에 따라 조리개의 확경이나 축경을 행한다.

또한, 촬상 제어부(6)는, 예를 들면, TG(Timing Generator), 전자 촬상부(2)를 구동하는 드라이버 등(어느 쪽도 도시하지 않음)을 구비하고, 촬상 프레임 레이트나 촬상 조건 조정부(6c)에 의해 조정된 촬상 조건(예를 들면, 노광 시간 등)에 따라 TG 및 드라이버를 통하여 전자 촬상부(2)의 동작 타이밍을 제어한다. 또한, 촬상 제어부(6)는, 기록 프레임 레이트에 따라 유닛 회로부(3)의 동작 타이밍을 제어한다.

즉, 촬상 제어부(6)는, 전자 촬상부(2)를 촬상 프레임 레이트나 촬상 조건(예를 들면, 노광 시간 등)에 따른 소정의 타이밍에서 동작시켜 피사체의 광학상을 아날로그의 화상 신호로 변환시켜, 유닛 회로부(3)를 소정의 기록 프레임 레이트(예를 들면, 통상 동영상 촬영에 대응하는 제1 기록 프레임 레이트 등)에 따른 소정의 타이밍에서 동작시켜, 전자 촬상부(2)로부터 출력되어 입력되는 피사체의 광학상에 따른 아날로그의 화상 신호를 디지털의 화상 신호(프레임 화상 f)로 변환시킨다. 즉, 촬상 제어부(6)는, 전자 촬상부(2) 및 유닛 회로부(3)를 제어하여, 복수 개의 프레임 화상 f, …으로 이루어지는 피사체의 동영상을 제1 기록 프레임 레이트에 따른 주기로 촬상시킨다.

이때, 사용자에 의한 조작 입력부(11)의 소정 조작에 따라 기록 프레임 레이트의 전환 지시가 입력되면, 촬상 제어부(6)는, 제1 기록 프레임 레이트 설정부(6a)(후술)에 의해 전환하여 설정된 기록 프레임 레이트(예를 들면, 고속 동영상 촬영에 대응하는 제2 기록 프레임 레이트 등)에 따른 소정의 주기마다, 전자 촬상부(2)로부터 출력되어 입력되는 피사체의 광학상에 따른 아날로그의 화상 신호를 유닛 회로부(3)에 의해 디지털의 화상 신호(프레임 화상 f)로 변환시킨다.

또한, 촬상 제어부(6)는, 제1 기록 프레임 레이트 설정부(6a)와 상태 검출부(6b)와 촬상 조건 조정부(6c)를 구비하고 있다.

제1 기록 프레임 레이트 설정부(6a)는 기록 프레임 레이트를 설정한다.

즉, 제1 기록 프레임 레이트 설정부(6a)는, 유닛 회로부(3)의 구동 주기에 관한 기록 프레임 레이트를 사용자에 의한 조작 입력부(11)의 소정 조작에 따라 설정한다. 구체적으로는, 통상 동영상 촬영 및 고속 동영상 촬영의 각각에 대응하는 기록 프레임 레이트 중, 사용자에 의한 조작 입력부(11)의 선택 결정용 버튼(11b)의 소정 조작에 따라 지정된 기록 프레임 레이트의 설정 신호를 중앙 제어부(14)에 출력한다. 중앙 제어부(14)는, 조작 입력부(11)로부터 출력되고 입력된 설정 신호를 촬상 제어부(6)에 출력하고, 촬상 제어부(6)의 제1 기록 프레임 레이트 설정부(6a)는, 입력된 설정 신호에 따라 기록 프레임 레이트를 설정한다. 즉, 1개의 연속된 동영상 데이터의 기록 중에, 사용자에 의해 선택 결정용 버튼(11b)이 소정 조작됨으로써, 제1 기록 프레임 레이트 설정부(6a)는, 기록 프레임 레이트를 통상 동영상 촬영에 대응하는 기록 프레임 레이트와 고속 동영상 촬영에 대응하는 기록 프레임 레이트로 전환하여 설정한다.

이와 같이, 촬상 프레임 레이트 설정부(6a)는, 피사체의 동영상 데이터의 기록 중에, 동영상을 기록할 때의 프레임 레이트를 전환하는 전환 수단을 구성하고 있다.

상태 검출부(6b)는, 상태 검출 수단으로서, 피사체의 촬상에 의해 생성된 동영상을 구성하는 복수 개의 프레임 화상 f, …에 기초하여, 피사체 상태를 검출한다. 즉, 상태 검출부(6b)는, 화상 생성부(4)로부터 출력된 각 프레임 화상 f의 휘도 색차 신호의 화상 데이터(YUV 데이터)에 기초하여, 각 프레임 화상 f의 밝기나 색조를 검출한다.

구체적으로는, 예를 들면, 프레임 화상 f의 밝기를 검출하는 경우, 상태 검출부(6b)는, 소정의 측광 방법(예를 들면, 중앙 중점 측광 방법, 스폿 측광 방법, 평균 측광 방법, 다분(多分) 비율 측광 방법 등)으로 따라 각 프레임 화상 f의 휘도 신호(Y)에 기초하여 상기 프레임 화상 f의 밝기를 검출한다. 또한, 예를 들면, 프레임 화상 f의 색조를 검출하는 경우, 상태 검출부(6b)는, 각 프레임 화상 f의 YUV 데이터를 HSV 색공간(color space)의 화상 데이터로 변환한 후, 채도 S 및 명도 V의 히스토그램으로부터 광원(예를 들면, 태양광, 형광등, 맑은 하늘, 구름 낀 하늘 등)의 색온도에 따른 회색 화소 추정 조건을 산출한다. 그리고 상태 검출부(6b)는 회색 화소 추정 조건에 따라 각 프레임 화상 f에 포함되는 회색 성분을 추정한다.

이때, 상태 검출부(6b)는, 각 프레임 화상 f로부터 피사체 검출부(5)에 의해 검출된 특정한 피사체(예를 들면, 사람의 얼굴 영역 등)를 기준으로 하여 각 프레임 화상 f의 밝기나 색조의 검출을 행해도 된다.

그리고 중앙 중점 측광 방법은, 프레임 화상 f의 중앙부에 중점을 두어 측광하는 측광 방법이며, 스폿 측광 방법은, 프레임 화상 f의 소정 영역에 한정해 측광하는 측광 방법이며, 평균 측광 방법은, 프레임 화상 f 전체면에서 측광해서 그 평균값을 취하는 측광 방법이며, 다분 비율 측광 방법은, 프레임 화상 f를 복수 개의 영역으로 나누어 각각 독립적으로 측광하는 측광 방법이다.

촬상 조건 조정부(6c)는, 조정 수단으로서, 촬상되어 있는 피사체 상태 변화에 맞추어, 촬상 제어부(6)에 의해 설정되는 상기 피사체의 촬상 조건을 조정한다. 즉, 촬상 조건 조정부(6c)는, 상태 검출부(6b)에 의해 검출된 피사체 상태를 기준으로 하여, 예를 들면, 촬상 제어부(6)에 의한 자동 노출 조정 처리(AE)나 자동 화이트 밸런스 조정 처리(AWB)에 관한 노출 조정 조건이나 화이트 밸런스 조정 조건을 조정한다.

구체적으로는, 예를 들면, 자동 노출 조정 처리(AE)에 관한 노출 조정 조건을 조정하는 경우, 촬상 조건 조정부(6c)는, 상태 검출부(6b)에 의해 검출된 피사체의 밝기를 기준으로 하여, 소정의 프로그램 선도에 기초하여, 렌즈부(1)의 조리개의 조리개 값, 전자 촬상부(2)의 셔터 속도나 유닛 회로의 AGC의 신호 증폭률(ISO 감도) 등을 조정한다. 또한, 예를 들면, 자동 화이트 밸런스 조정 처리(AWB)에 관한 화이트 밸런스 조정 조건을 조정하는 경우, 촬상 조건 조정부(6c)는, 상태 검출부(6b)에 의해 검출된 피사체의 회색 성분의 색(색조)을 기준으로 하여, 프레임 화상 f의 각 화소의 RGB의 각 색성분의 게인량을 조정한다.

여기서, 촬상 조건 조정부(6c)는, 피사체 검출부(5)에 의해 검출된 특정한 피사체(예를 들면, 사람의 얼굴 영역 등)를 기준으로 하여, 노출 조정 조건 및 화이트 밸런스 조정 조건 중 적어도 한쪽을 조정해도 된다. 즉, 촬상 조건 조정부(6c)는, 예를 들면, 피사체 검출부(5)에 의해 검출된 사람의 얼굴 영역의 밝기를 기준으로 하여 노출 조정 조건을 조정해도 되고, 얼굴 영역의 색조를 기준으로 하여 화이트 밸런스 조정 조건을 조정해도 된다.

이와 같이, 촬상 조건 조정부(6c)는, 피사체의 동영상 데이터의 기록 중에, 피사체 상태 변화에 맞추어, 상기 피사체의 촬상 조건을 조정하는 조정 수단을 구성하고 있다.

또한, 촬상 제어부(6)는, 기록 프레임 레이트에 따라 촬상 조건 조정부(6c)에 의한 촬상 조건의 조정을 제한한다. 구체적으로는, 촬상 제어부(6)는, 통상 동영상 촬영에 대응하는 기록 프레임 레이트(제1 기록 프레임 레이트)로 동영상을 기록할 때, 피사체의 촬상 조건을 피사체 상태 변화에 추종시키도록 촬상 조건 조정부(6c)에 의해 순차 조정시킨다. 즉, 촬상 제어부(6)는, 통상 동영상 촬영에 대응하는 기록 프레임 레이트에 따른 주기로 촬상되는 각 프레임 화상 f(예를 들면, 프레임 화상 f1 등)에 대하여, 촬상 조건 조정부(6c)에 의해 노출 조정 조건이나 화이트 밸런스 조정 조건 등의 피사체의 촬상 조건을 피사체 상태 변화에 추종시키도록 순차 조정시킨다.

또한, 촬상 제어부(6)는, 기록 프레임 레이트가 통상 동영상 촬영에 대응하는 기록 프레임 레이트(제1 기록 프레임 레이트)로부터 고속 동영상 촬영에 대응하는 기록 프레임 레이트(제2 기록 프레임 레이트)로 전환할 수 있으면, 상기 기록 프레임 레이트의 전환 이전에 조정된 소정의 촬상 조건을 유지하도록 촬상 조건 조정부(6c)에 의한 조정을 제한한다. 즉, 통상 동영상 촬영에 대응하는 기록 프레임 레이트(제1 기록 프레임 레이트)로 동영상을 기록 중에, 사용자에 의한 조작 입력부(11)의 소정 조작에 따라 제1 기록 프레임 레이트 설정부(6a)에 의해 기록 프레임 레이트가 고속 동영상 촬영에 대응하는 기록 프레임 레이트(제2 기록 프레임 레이트)로 전환할 수 있으면, 촬상 제어부(6)는, 기록 프레임 레이트가 전환되기 전에 통상 동영상 촬영에 대응하는 기록 프레임 레이트에 따른 주기로 촬상된 프레임 화상 f에 대하여 촬상 조건 조정부(6c)에 의해 조정된 노출 조정 조건이나 화이트 밸런스 조정 조건 등의 피사체의 촬상 조건을 유지시킨다.

이와 같이, 촬상 제어부(6)는, 제1 기록 프레임 레이트 설정부(6a)에 의해 동영상을 기록할 때의 프레임 레이트가 제1 기록 프레임 레이트(예를 들면, 통상 동영상 촬영에 대응하는 기록 프레임 레이트)로부터 제1 기록 프레임 레이트보다 고속인 제2 기록 프레임 레이트(예를 들면, 고속 동영상 촬영에 대응하는 기록 프레임 레이트)로 전환하는 경우에는, 이 제2 기록 프레임 레이트에서 기록하는 동안 촬상 조건 조정부(6c)에 의한 촬상 조건의 조정을 제한하는 조정 제어 수단을 구성하고 있다.

또한, 촬상 제어부(6)는, 고속 동영상 촬영에 대응하는 기록 프레임 레이트(제2 기록 프레임 레이트)로 동영상을 기록 중에, 사용자에 의한 조작 입력부(11)의 소정 조작에 따라 기록 프레임 레이트가 통상 동영상 촬영에 대응하는 기록 프레임 레이트(제1 기록 프레임 레이트)로 전환할 수 있으면, 상기 통상 동영상 촬영에 대응하는 기록 프레임 레이트로 촬상된 각 프레임 화상 f(예를 들면, 프레임 화상 f3 등)에 대하여, 프레임 레이트의 전환 이전과 비교하여 피사체의 기록 상태가 완만하게 변화하도록 촬상 조건 조정부(6c)에 의한 조정을 제한시켜도 된다.

즉, 고속 동영상 촬영에 대응하는 기록 프레임 레이트에서의 동영상의 기록 중에는, 피사체의 촬상 조건이 소정의 촬상 조건에 유지되어 있으므로, 통상 동영상 촬영에 대응하는 기록 프레임 레이트로 전환시킨 직후, 촬상된 프레임 화상 f에 대하여 피사체 상태 변화에 피사체의 촬상 조건을 즉시 추종시키도록 순차 조정하면, 피사체의 기록 상태가 급격하게 변화되어 버린다. 그래서, 촬상 제어부(6)는, 촬상 조건 조정부(6c)에 의해 노출 조정 조건이나 화이트 밸런스 조정 조건 등의 피사체의 촬상 조건을 피사체 상태 변화에 즉시 추종하도록 조정하는 것이 아니라, 통상 동영상 촬영에 대응하는 기록 프레임 레이트로 전환하고 나서 잠시 동안, 피사체의 촬상 조건을 상기 피사체의 기록 상태가 완만하게 변화하도록 촬상 조건 조정부(6c)에 의해 조정시킨다.

이로써, 고속 동영상 촬영에 대응하는 기록 프레임 레이트로 동영상을 기록 중에, 기록 프레임 레이트가 통상 동영상 촬영에 대응하는 기록 프레임 레이트로 전환하여도, 피사체의 기록 상태가 급격하게 변화하는 것을 방지할 수 있다.

화상 처리부(7)는, 화상 생성부(4)에 의해 생성된 화상 데이터(YUV 데이터)를 소정의 부호화 방식(예를 들면, Motion―JPEG 방식 등)에 의해 압축·부호화하는 부호화부(도시하지 않음)나, 기록 매체 제어부(10)로부터 판독된 부호화된 화상 데이터를 상기 부호화 방식에 대응하는 복호화 방식으로 복호화하는 복호화부 등(어느 쪽도 도시하지 않음)을 구비하고 있다.

표시 제어부(8)는, 버퍼 메모리(12)에 일시적으로 기억되어 있는 표시용 간판의 화상 데이터를 판독하여 표시부(9)에 표시하게 하는 제어를 행한다.

구체적으로는, 표시 제어부(8)는, VRAM(Video Random Access Memory), VRAM 컨트롤러, 디지털 비디오 인코더 등을 구비하고 있다. 그리고 디지털 비디오 인코더는, 버퍼 메모리(12)로부터 판독되어 VRAM(도시하지 않음)에 기억되어 있는 동영상을 구성하는 복수 개의 프레임 화상 f, …의 휘도 신호 Y 및 색차 신호 Cb, Cr을, VRAM 컨트롤러를 통하여 VRAM으로부터 소정의 재생 프레임 레이트로 판독하여, 이들의 데이터를 기초로 비디오 신호를 발생하여 표시부(9)에 출력한다.

여기서, 소정의 재생 프레임 레이트는, 동영상 데이터를 기록했을 때의 기록 프레임 레이트와 같은 프레임 레이트이며, 재생 수단으로서의 표시부(9)는, 예를 들면, 통상의 동영상 촬영에 대응하는 30fps의 기록 프레임 레이트로 기록된 동영상 데이터의 재생이면, 30fps의 재생 프레임 레이트로 재생을 행하고, 또한 60fps의 기록 프레임 레이트로 기록된 동영상 데이터의 재생이면, 60fps의 재생 프레임 레이트로 재생을 행한다. 이로써, 어떤 재생 프레임 레이트이어도 실시간과 같은 스피드로 재생할 수 있지만, 프레임 레이트 수가 더 높은 쪽(예를 들면, 60fps)이 더 원활하게(깜박거림이 더 적은 영상으로) 재생할 수 있다.

이하에 설명하도록, 기록 프레임 레이트가 도중에 전환된 동영상 데이터의 경우에는, 기록 개시 시에 설정된 기록 프레임 레이트가 상기 동영상 데이터의 기록 프레임 레이트 속성으로서 부가되어 있다.

이 동영상 데이터를 재생하는 경우에는, 기록 프레임 레이트 속성으로서 부가되어 있는 기록 프레임 레이트를 재생 개시 시에 판독하고, 재생 개시로부터 재생 종료까지의 사이는, 이 판독된 기록 프레임 레이트에 고정하여 재생을 계속한다.

이와 같이, 재생 프레임 레이트를 고정하여 재생을 행하는 경우, 입력되는 동영상 데이터의 기록 프레임 레이트의 변화에 따라 동영상을 보는 재생 속도가 가변한다. 예를 들면, 표시 제어부(8)는, 통상 동영상 촬영에 대응하는 기록 프레임 레이트(예를 들면, 30fps)에 따른 주기로 촬상된 복수 개의 프레임 화상 f, …으로 이루어지는 동영상 데이터를 소정의 재생 프레임 레이트(예를 들면, 30fps)로 재생하면, 각 프레임 화상 f의 촬상 간격과 재생 간격이 일치해서 보는 통상의 재생 속도로 된다. 또한, 예를 들면, 표시 제어부(8)는, 기록 프레임 레이트가 도중에 전환되어, 고속 동영상 촬영에 대응하는 기록 프레임 레이트(예를 들면, 240fps)에 따른 주기로 촬상된 복수 개의 프레임 화상 f, …으로 이루어지는 동영상 데이터를 소정의 재생 프레임 레이트(예를 들면, 30fps)로 재생하면, 각 프레임 화상 f의 촬상 간격이 재생 간격보다 짧아지고 보기에 슬로 모션의 재생 속도로 된다. 즉, 표시 제어부(8)는, 제1 기록 프레임 레이트로 기록된 부분과 제2 기록 프레임 레이트로 기록된 부분의 재생 시의 프레임 레이트를 변경하지 않고 상기 동영상 데이터의 전체를 제1 기록 프레임 레이트와 같은 프레임 레이트로 연속적으로 재생 시킴으로써, 제2 기록 프레임 레이트로 기록한 부분을 자동적으로 슬로 모션으로 재생시킨다.

이와 같이, 표시 제어부(8)는, 제1 기록 프레임 레이트 설정부(6a)에 의해 일시적으로 기록 시의 프레임 레이트(예를 들면, 240fps)가 전환된 형태로 기록된 동영상 데이터를 표시부(9)에 재생 표시하는 경우, 상기 일시적으로 기록 시의 프레임 레이트가 전환된 부분을 재생할 때의 재생 시의 프레임 레이트를, 기록 시의 프레임 레이트(예를 들면, 240fps)와는 상이한 프레임 레이트(예를 들면, 30fps)로 재생시키는 재생 제어 수단을 구성하고 있다.

그리고 실시예 1에 있어서는, 기록 시의 프레임 레이트가 부분적으로 전환된 형태로 기록된 동영상 데이터의 재생 시에, 상기 부분을 자동적으로 슬로 모션 재생할 수 있도록 재생 시의 프레임 레이트를 고정하였으나, 기록 시의 프레임 레이트의 변화에 맞추어 재생 시의 프레임 레이트를 실시간에 대응시키도록 변화시키면서 재생하는 재생 방법을 선택할 수도 있다. 이 경우에는, 부분적으로 슬로 모션 재생하는 대신에, 부분적으로 부드러운 재생을 행하는 것이 가능해진다.

또한, 이들 2개의 재생 방법을 재생 모드의 선택에 의해 사용자가 임의로 선택할 수 있도록 해도 된다.

표시부(9)는, 예를 들면, 액정 표시 패널이며, 표시 제어부(8)로부터의 비디오 신호에 기초하여 전자 촬상부(2)에 의해 촬상된 화상 등을 표시 화면에 표시한다. 구체적으로는, 표시부(9)는, 정지화상 촬상 모드나 동영상 촬상 모드에 의해, 전자 촬상부(2) 및 촬상 제어부(6)에 의한 피사체의 촬상에 의해 생성된 복수 개의 프레임 화상 f, …를 소정의 프레임 레이트로 순차 갱신하면서 라이브 뷰 화상을 표시한다. 또한, 표시부(9)는, 동영상으로서 기록 중인 복수 개의 프레임 화상 f, …를 표시하거나, 정지 화상으로서 기록되는 화상(렉크뷰 화상)을 표시한다.

기록 매체 제어부(10)는, 기록 매체 M가 착탈 가능하게 구성되며, 장착된 기록 매체 M으로부터의 데이터의 판독이나 기록 매체 M에 대한 데이터의 기록을 제어한다.

구체적으로는, 기록 매체 제어부(10)는, 화상 처리부(7)의 부호화부(도시하지 않음)에 의해 소정의 압축 형식(예를 들면, Motion―JPEG 형식 등)으로 부호화된 기록용의 화상 데이터, 즉 렌즈부(1), 전자 촬상부(2) 및 유닛 회로부(3)에 의해 순차 촬상되는 복수 개의 프레임 화상으로 구성되는 피사체의 동영상을 1개의 연속된 동영상 데이터로서 기록 매체(동영상 기록 수단) M에 기록시킨다.

그리고 기록 매체 M은, 예를 들면, 불휘발성 메모리(플래시 메모리) 등에 의해 구성되지만, 일례로서 이에 한정되지 않고, 적절 임의로 변경 가능하다.

조작 입력부(11)는, 상기 촬상 장치(100)의 소정 조작을 행하기 위한 것이다. 구체적으로는, 조작 입력부(11)는, 피사체의 촬영 지시와 관련되어, 반누름 및 완전 누름 조작 가능한 셔터 버튼(11a), 촬상 모드나 기능 등의 선택 지시에 관한 선택 결정용 버튼(11b), 줌량의 조정 지시에 관한 줌 버튼(도시하지 않음) 등을 구비하고, 이들의 버튼의 조작에 따라 소정의 조작 신호를 중앙 제어부(14)에 출력한다.

버퍼 메모리(12)는 화상 데이터 등을 일시 보존하는 버퍼인 동시에, 중앙 제어부(14)의 워킹 메모리 등으로서도 사용된다.

프로그램 메모리(13)에는, 상기 촬상 장치(100)의 기능에 관한 각종 프로그램이나 데이터가 저장되어 있다.

중앙 제어부(14)는 촬상 장치(100)의 각 부를 제어한다. 구체적으로는, 중앙 제어부(14)는 촬상 장치(100)의 각 부를 제어하는 CPU(도시하지 않음)를 구비하고, 각종 처리 프로그램(도시하지 않음)에 따라 각종 제어 동작을 행한다.

다음에, 촬상 장치(100)에 의한 촬상 처리에 대하여, 도 2 및 도 3을 참조하여 설명한다.

도 2는 촬상 처리에 관한 동작의 일례를 나타낸 플로우차트이다. 또한, 도 3은 촬상 처리를 설명하기 위한 도면이다.

그리고 이하의 촬상 처리는, 사용자에 의한 조작 입력부(11)의 선택 결정용 버튼(11b)의 소정 조작에 따라 복수 개의 촬상 모드 중에서 동영상의 촬상 모드가 선택 지시된 경우에 실행된다. 또한, 촬상 처리는, 동영상의 촬상 지시가 입력되면 개시되고, 동영상의 촬상의 종료 지시가 입력될 때까지, 각 단계의 처리를 반복 실행한다.

도 2에 나타낸 바와 같이, 먼저, 촬상 제어부(6)는, 전자 촬상부(2)를 소정의 촬상 프레임 레이트(예를 들면, 240fps 등)로 구동시켜, 렌즈부(1)에 의해 결상된 피사체의 광학상을 이차원의 화상 신호(RGB 화상 데이터)로 변환시킴으로써 프레임 화상 f의 취입을 행한다(단계 S1).

다음에, 촬상 제어부(6)는 기록 프레임 레이트에 따라 처리를 분기시킨다(단계 S2). 구체적으로는, 촬상 제어부(6)는, 기록 프레임 레이트가 통상 동영상 촬영에 대응하는 기록 프레임 레이트(예를 들면, 30fps 등)인 경우에는(단계 S2；통상 동영상 촬영 프레임 레이트), 처리를 단계 S3으로 이행시키는 한편, 기록 프레임 레이트가 고속 동영상 촬영에 대응하는 기록 프레임 레이트(예를 들면, 240fps 등)인 경우에는(단계 S2；고속 동영상 촬영 프레임 레이트), 처리를 단계 S8로 이행시킨다.

＜통상 동영상 촬영 프레임 레이트＞

단계 S2에 의해, 통상 동영상 촬영에 대응하는 기록 프레임 레이트(예를 들면, 30fps 등)인 경우(단계 S2；통상 동영상 촬영 프레임 레이트), 촬상 제어부(6)는, 상기 통상 동영상 촬영의 기록 프레임 레이트에 따라 처리 대상이 되는 프레임 화상 f(예를 들면, 프레임 화상 f1 등；도 3 참조)를, 소정의 촬상 프레임 레이트(예를 들면, 240fps 등)로 계속하여 취입되는 프레임 화상 f 중에서 솎아내어(이 예의 경우에는, 8개에 1개의 비율로 선택하여) 특정한다(단계 S3). 즉, 솎아낸 프레임 화상 f에 대해서는 이하의 단계 S4로부터 단계 S7까지의 처리를 실행하지 않고 스킵하고, 솎아내지 않은(처리 대상으로서 선택된) 프레임 화상 f에 대하여는 이하의 단계 S4로부터 단계 S7까지의 처리를 실행한다. 이 솎아냄 처리를 행함으로써, 촬상 제어부(6)는, 전자 촬상부(2)로부터 출력되는 아날로그의 화상 신호를 유닛 회로부(3)에 의해 통상 동영상 촬영의 기록 프레임 레이트에 따른 소정의 주기마다 디지털의 화상 신호로 변환시킨다. 그리고 화상 생성부(4)는, 유닛 회로부(3)로부터 송신된 처리 대상의 프레임 화상 f에 관한 디지털의 화상 신호로부터, 디지털 값의 휘도 신호 Y 및 색차 신호 Cb, Cr(YUV 데이터)를 생성한다.

계속하여, 촬상 제어부(6) 상태 검출부(6b)는, 화상 생성부(4)로부터 출력되어 입력된 처리 대상의 프레임 화상 f의 휘도 색차 신호의 화상 데이터(YUV 데이터)에 기초하여, 피사체 상태를 검출한다(단계 S4). 구체적으로는, 상태 검출부(6b)는, 촬상 제어부(6)에 의한 자동 노출 조정 처리(AE)에 사용되는 처리 대상의 프레임 화상 f의 밝기를 소정의 측광 방법에 따라 검출하거나, 자동 화이트 밸런스 조정 처리(AWB)에 사용되는 처리 대상의 프레임 화상 f의 색조(회색 성분)를 소정의 광원(예를 들면, 태양광 등)의 색온도에 따른 회색 화소 추정 조건에 따라 검출한다.

다음에, 피사체 검출부(5)는, 화상 생성부(4)로부터 출력되어 입력된 각 프레임 화상 f의 화상 데이터(YUV 데이터)에 대하여, 예를 들면, 얼굴 검출 처리, 에지 검출 처리, 특징 추출 처리 등의 각종 화상 처리를 행하여 특정한 피사체가 포함되는 영역(예를 들면, 얼굴 영역 등)을 검출한다(단계 S5).

그리고 단계 S4에서의 피사체의 상태의 검출은, 상기 처리 대상의 프레임 화상 f보다 이전에 보존되는 프레임 화상 f로부터 검출된 특정한 피사체(예를 들면, 얼굴 영역 등)를 기준으로 하여 행해도 된다.

또한, 단계 S4의 피사체의 상태의 검출 처리와 단계 S5의 특정한 피사체의 검출 처리는, 처리 순서를 교체해도 되고, 이 경우에는, 하나의 처리 대상의 프레임 화상 f로부터 검출된 특정한 피사체를 기준으로 하여 상기 하나의 처리 대상의 프레임 화상 f의 밝기나 색조 등을 검출해도 된다.

다음에, 촬상 제어부(6)의 촬상 조건 조정부(6c)는, 상태 검출부(6b)에 의해 검출된 피사체 상태를 기준으로 하여, 촬상 제어부(6)에 의해 설정되는 상기 피사체의 촬상 조건을 조정하여, 소정의 저장 영역에 저장되어 있는 촬상 조건의 내용을 갱신한다(단계 S6). 구체적으로는, 촬상 조건 조정부(6c)는, 상태 검출부(6b)에 의해 검출된 피사체 상태를 기준으로 하여, 촬상 제어부(6)에 의한 자동 노출 조정 처리(AE)나 자동 화이트 밸런스 조정 처리(AWB)에 관한 노출 조정 조건이나 화이트 밸런스 조정 조건을 조정한다. 그리고 촬상 조건 조정부(6c)는, 조정 후의 노출 조정 조건이나 화이트 밸런스 조정 조건 하에서, 소정의 저장 영역에 저장되어 있는 촬상 조건의 내용을 갱신한다.

이로써, 상기 처리 대상의 프레임 화상 f보다 후에 보존되는 프레임 화상 f는, 갱신 후의 촬상 조건이 반영된 상태로 촬상된 프레임 화상 f가 된다.

다음에, 중앙 제어부(14)는, 화상 생성부(4)에 의해 생성된 상기 처리 대상의 프레임 화상 f를 기록 프레임 화상 f로서, 상기 프레임 화상 f의 YUV 데이터를 버퍼 메모리(12)에 보존시킨다(단계 S7). 즉, 통상 동영상 촬영 프레임 레이트의 경우, 240fps로 계속하여 취입되는 프레임 화상 f 중에서 8개에 1개의 비율로 선택된 프레임 화상 f가, 30fps의 기록 프레임 레이트로 버퍼 메모리(12)에 보존되게 된다.

＜고속 동영상 촬영 프레임 레이트＞

한편, 단계 S2에 의해, 고속 동영상 촬영에 대응하는 기록 프레임 레이트(예를 들면, 240fps 등)인 경우(단계 S2；고속 동영상 촬영 프레임 레이트), 촬상 제어부(6)는, 기록 프레임이 상기 고속 동영상 촬영에 대응하는 기록 프레임 레이트로 전환하기 이전의 소정의 촬상 조건을 유지하도록 촬상 조건 조정부(6c)에 의해 조정시킨다(단계 S8). 구체적으로는, 촬상 제어부(6)는, 기록 프레임 레이트가 고속 동영상 촬영에 대응하는 기록 프레임 레이트로 전환하기 전에 통상 동영상 촬영에 대응하는 기록 프레임 레이트에 따른 주기로 촬상된 프레임 화상 f에 대하여 촬상 조건 조정부(6c)에 의해 순차 조정되어, 소정의 저장 영역에 저장되어 있는 노출 조정 조건이나 화이트 밸런스 조정 조건 등의 피사체의 촬상 조건을 유지한다.

그 후, 중앙 제어부(14)는, 처리를 단계 S7로 이행하여, 고속 동영상 촬영에 대응하는 기록 프레임 레이트에 따른 주기로 촬상되어 화상 생성부(4)에 의해 생성된 프레임 화상 f(예를 들면, 프레임 화상 f2 등；도 3 참조)를 기록 프레임 화상 f로서, 상기 프레임 화상 f의 YUV 데이터를 버퍼 메모리(12)에 보존시킨다(단계 S7). 즉, 고속 동영상 촬영 프레임 레이트의 경우, 240fps로 계속하여 취입되는 프레임 화상 f를 솎아내지 않고, 그대로 240fps의 기록 프레임 레이트로 버퍼 메모리(12)에 보존하게 된다.

상기한 각각의 처리는, 동영상의 촬상의 종료 지시가 입력될 때까지 반복 실행된다.

그리고 동영상의 촬상의 종료 지시가 입력되면, 기록 매체 제어부(10)는, 버퍼 메모리(12)에 보존된 동영상 데이터에 대하여, 상기 동영상 데이터의 기록 개시 시에 설정된 기록 프레임 레이트(이 예의 경우에는 30fps)를 기록 프레임 레이트 속성으로서 부가하여 기록 매체 M에 보존한다.

이상과 같이, 실시예 1의 촬상 장치(100)에 의하면, 동영상 촬영 전체를 통해서는, 항상 피사체의 상태에 적합한 노출이나 화이트 밸런스가 유지하도록 되어, 촬상 조건을 피사체 상태 변화에 추종하도록 조정하면서 촬영 기록을 행하고, 이 동영상 촬영 중에 부분적으로 통상의 프레임 레이트(제1 기록 프레임 레이트)보다 더 고속 프레임 레이트(제2 기록 프레임 레이트)로 전환하는 경우에는, 촬상 조건의 변화를 제한하도록 촬영 기록을 행하여 동영상 데이터를 기록한다. 따라서, 상기 동영상 데이터 전체를 일정한 재생 속도로 재생했을 때, 동영상 촬영 전체를 통해 항상 피사체의 상황에 맞은 적절한 노출이나 화이트 밸런스에 조정된 영상을 볼 수가 있고, 또한 결정적 순간 등을 사용자의 지시 조작을 필요로 하지 않고 자동적으로 슬로 모션 재생하여 주요 피사체의 상세한 동작을 확인할 수 있고, 또한 이 슬로 모션 재생 중에서의 주요 피사체의 밝기나 색조의 확인까지도 적절하게 행하는 것이 가능해진다.

즉, 예를 들면, 프레임 화상 f 전체면의 밝기를 고려하는 측광 방법으로 촬상 장치(100)를 펀(pan)시키면서 촬상하는 경우 등, 주요 피사체 상태는 변화하지 않아도 관계없이 배경이 변화함으로써 주요 피사체의 밝기나 색조가 변동되는 것을 방지할 수 있고, 그 후, 동영상을 소정의 재생 프레임 레이트로 재생했을 때 상기 주요 피사체의 밝기나 색조의 확인을 적절하게 행할 수 있다. 또한, 주요 피사체의 밝기를 기준으로 하는 측광 방법을 이용하여, 회전하는 주요 피사체를 촬상하는 경우 등, 상기 주요 피사체의 회전에 의해 변화하는 광의 반사 정도에 따라 피사체의 촬상 조건을 변동시키지 않기 때문에, 그 후, 동영상을 소정의 재생 프레임 레이트로 재생했을 때 상기 주요 피사체의 광의 반사 정도의 확인을 적절하게 행할 수 있다.

그리고 상기 실시예 1에서는, 기록 프레임 레이트가 고속 동영상 촬영에 대응하는 기록 프레임 레이트로 전환하는 경우에는, 피사체의 상태의 검출 처리(단계 S4)나 특정한 피사체의 검출 처리(단계 S5)를 행하지 않도록 했지만, 이에 한정되지 않고, 피사체 상태의 검출 처리나 특정한 피사체의 검출 처리를, 촬상 조건을 반영함이 없이 행하여도 된다. 이 경우에는, 예를 들면, 동영상을 구성하는 복수 개의 프레임 화상 f, …중, 피사체의 상태의 검출 처리나 특정한 피사체의 검출 처리의 실행에 필요한 시간을 고려한 소정 간격마다 프레임 화상 f를 처리 대상으로 하여 특정해도 된다.

또한, 기록 프레임 레이트가 고속 동영상 촬영에 대응하는 기록 프레임 레이트로 전환할 때, 프레임 레이트의 전환 이전의 소정의 촬상 조건을 유지하도록 했지만, 이에 한정되지 않고, 피사체의 촬상 조건을 상기 피사체의 기록 상태가 완만하게 변화하도록 촬상 조건 조정부(6c)에 의해 조정시키도록 해도 된다.

즉, 예를 들면, 동영상을 구성하는 복수 개의 프레임 화상 f, …중에서, 고속 동영상 촬영에 대응하는 기록 프레임 레이트에 따른 간격보다 긴 소정 간격마다 촬상된 프레임 화상 f를 처리 대상으로 하여, 피사체의 상태의 검출 처리나 특정한 피사체의 검출 처리를 실행하고, 촬상 조건 조정부(6c)는, 상태 검출부(6b)에 의해 소정 간격마다 검출된 피사체 상태나 피사체 검출부(5)에 의해 검출된 특정한 피사체(예를 들면, 사람의 얼굴 영역 등)를 기준으로 하여, 예를 들면, 노출 조정 조건이나 화이트 밸런스 조정 조건 등의 피사체의 촬상 조건을 조정한다. 이때, 촬상 제어부(6)는, 촬상 조건 조정부(6c)에 의해 노출 조정 조건이나 화이트 밸런스 조정 조건 등의 피사체의 촬상 조건을 피사체 상태 변화에 추종하도록 조정하는 것이 아니라, 피사체의 촬상 조건을 상기 피사체의 기록 상태가 완만하게 변화하도록 촬상 조건 조정부(6c)에 의해 조정시킨다. 구체적으로는, 예를 들면, 촬상 제어부(6)는, 소정 간극을 두고 촬상된 2개의 프레임 화상 f, f 사이의 적어도 하나의 프레임 화상 f의 각각에 대하여, 앞의 프레임 화상 f로부터 검출된 피사체의 상태에 대응하여 촬상 조건 조정부(6c)에 의해 조정되는 촬상 조건으로부터, 후의 프레임 화상 f로부터 검출된 피사체의 상태에 대응하여 촬상 조건 조정부(6c)에 의해 조정되는 촬상 조건으로 서서히 변화하도록 촬상 조건을 조정시킨다. 또한, 예를 들면, 촬상 제어부(6)는, 소정 간극을 두고 촬상된 2개의 프레임 화상 f, f에 대하여, 후의 프레임 화상 f에 기초하여 촬상 조건 조정부(6c)에 의해 조정되는 촬상 조건이, 앞의 프레임 화상 f에 기초하여 촬상 조건 조정부(6c)에 의해 조정되는 촬상 조건에 대하여 소정의 비율 이상 크게 변화하는 경우에는, 후의 프레임 화상 f에 기초하여 촬상 조건 조정부(6c)에 의해 조정되는 촬상 조건의 변화가 소정의 비율 작아지도록 제어한다.

이로써, 고속 동영상 촬영에 대응하는 기록 프레임 레이트로 기록된 동영상의 기록 상태가 급격하게 변화하는 것을 방지하고, 주요 피사체의 상태의 확인을 적절하게 행할 수 있다.

[ 실시예 2]

도 4는 본 발명을 적용한 실시예 2의 촬상 장치(200)의 개략적인 구성을 나타낸 블록도이다.

그리고 실시예 2의 촬상 장치(200)는, 이하에 상세하게 설명하는 이외의 점에서 상기 실시예 1의 촬상 장치(100)과 대략 동일한 구성을 이루므로, 상세한 설명은 생략한다.

실시예 2의 촬상 장치(200)는, 고속 동영상 촬영에 대응하는 기록 프레임 레이트에서의 동영상의 기록 시에, 상기 장치 본체에 생기는 촬영 방향을 변화시키는 동작의 크기가 소정값보다 큰 경우에는, 피사체의 촬상 조건을 동영상에서의 상기 피사체의 기록 상태가 완만하게 변화하도록 조정한다.

구체적으로는, 도 4에 나타낸 바와 같이, 촬상 장치(200)는, 렌즈부(1), 전자 촬상부(2), 유닛 회로부(3), 화상 생성부(4), 상태 검출부(6b), 촬상 제어부(6), 화상 처리부(7), 표시 제어부(8), 표시부(9), 기록 매체 제어부(10), 조작 입력부(11), 버퍼 메모리(12), 프로그램 메모리(13), 중앙 제어부(14)에 더하여, 모션 검출부(16)를 구비하고 있다.

모션 검출부(16)는, 모션 검출 수단으로서, 상기 촬상 장치(200) 본체에 생기는 동작의 크기를 검출한다.

즉, 모션 검출부(16)는, 예를 들면, 가속도 검출 센서나 각속도 검출 센서 등의 모션 검출 센서(도시하지 않음)를 구비하고, 이 모션 검출 센서로부터의 출력 신호에 기초하여, 상기 장치 본체에 생기는 촬영 방향을 변화시키는 동작(요동)의 크기 등의 동작 정보를 특정한다.

그리고 모션 검출부(16)는, 모션 검출 센서로부터의 출력 신호에 기초하여, 동작의 크기 대신 동작의 속도를 검출해도 된다.

촬상 제어부(6)는, 고속 동영상 촬영에 대응하는 기록 프레임 레이트(예를 들면, 240fps 등)에서의 동영상의 기록 시에, 모션 검출부(16)에 의해 검출된 상기 장치 본체에 생기는 동작의 크기가 소정의 임계값보다 큰지 여부를 판정한다. 여기서, 상기 장치 본체에 생기는 동작의 크기가 소정의 임계값보다 큰 것으로 판정되면, 촬상 제어부(6) 상태 검출부(6b)는, 동영상을 구성하는 복수 개의 프레임 화상 f, …중, 고속 동영상 촬영에 대응하는 기록 프레임 레이트에 따른 간격(예를 들면, 1/240초 등)보다 긴 소정 간격마다 촬상된 프레임 화상 f(예를 들면, 프레임 화상 f2 등； 도 6 참조)를 처리 대상으로 하여, 피사체의 상태의 검출 처리를 행한다.

이때, 피사체 검출부(5)는, 고속 동영상 촬영에 대응하는 기록 프레임 레이트에 따른 간격보다 긴 소정 간격마다 촬상된 프레임 화상 f를 처리 대상으로 하여, 특정한 피사체의 검출 처리를 행해도 된다.

또한, 촬상 제어부(6)는, 고속 동영상 촬영에 대응하는 기록 프레임 레이트에서의 동영상의 기록 시에, 모션 검출부(16)에 의해 검출된 상기 장치 본체에 생기는 동작의 크기가 소정의 임계값보다 큰 것으로 판정하면 고속 동영상 촬영에 대응하는 기록 프레임 레이트에 따른 간격보다 긴 소정 간극을 두고 촬상된 각 프레임 화상 f에 대하여, 피사체의 촬상 조건을 피사체 상태 변화에 추종하도록 조정하는 것이 아니라, 피사체의 촬상 조건을 동영상에서의 상기 피사체의 기록 상태가 완만하게 변화하도록 촬상 조건 조정부(6c)에 의해 조정시킨다.

즉, 촬상 제어부(6)의 촬상 조건 조정부(6c)는, 고속 동영상 촬영에 대응하는 기록 프레임 레이트에 따른 간격보다 긴 소정 간격마다 촬상된 각 프레임 화상 f에 대하여, 상태 검출부(6b)에 의해 소정 간격마다 검출된 피사체 상태를 기준으로 하여, 예를 들면, 노출 조정 조건이나 화이트 밸런스 조정 조건 등의 피사체의 촬상 조건을 조정한다. 이때, 촬상 제어부(6)는, 소정 간극을 두고 촬상된 2개의 프레임 화상 f, f 사이의 적어도 하나의 프레임 화상 f의 각각에 대하여, 앞의 프레임 화상 f로부터 검출된 피사체의 상태에 대응하여 촬상 조건 조정부(6c)에 의해 조정되는 촬상 조건으로부터, 후의 프레임 화상 f로부터 검출된 피사체의 상태에 대응하여 촬상 조건 조정부(6c)에 의해 조정되는 촬상 조건으로 서서히 변화하도록 촬상 조건을 조정시킨다.

그리고 촬상 제어부(6)는, 예를 들면, 소정 간극을 두고 촬상된 2개의 프레임 화상 f, f에 대하여, 후의 프레임 화상 f에 기초하여 촬상 조건 조정부(6c)에 의해 조정되는 촬상 조건이, 앞의 프레임 화상 f에 기초하여 촬상 조건 조정부(6c)에 의해 조정되는 촬상 조건에 대하여 소정의 비율 이상 크게 변화하는 경우에는, 후의 프레임 화상 f에 기초하여 촬상 조건 조정부(6c)에 의해 조정되는 촬상 조건의 변화가 소정의 비율 작아지도록 제어해도 된다.

다음에, 촬상 장치(200)에 의한 촬상 처리에 대하여, 도 5 및 도 6을 참조하여 설명한다.

도 5는 촬상 처리에 관한 동작의 일례를 나타낸 플로우차트이다. 또한, 도 6은 촬상 처리를 설명하기 위한 도면이다.

그리고 이하의 실시예 2의 촬상 처리는, 장치 본체에 생기는 동작의 크기의 판정 처리를 행하는 이외의 점은, 상기 실시예 1의 촬상 처리와 대략 마찬가지이므로, 그 상세한 설명은 생략한다.

도 5에 나타낸 바와 같이, 먼저, 촬상 제어부(6)는, 상기 실시예 1의 촬상 처리와 마찬가지로, 전자 촬상부(2)를 소정의 촬상 프레임 레이트(예를 들면, 240fps 등)로 구동시키고, 렌즈부(1)에 의해 결상된 피사체의 광학상을 이차원의 화상 신호(RGB 화상 데이터)로 변환시킴으로써 프레임 화상 f의 취입을 행한다(단계 S1).

다음에, 촬상 제어부(6)는, 상기 실시예 1의 촬상 처리와 마찬가지로, 기록 프레임 레이트에 따라 처리를 분기시킨다(단계 S2).

＜통상 동영상 촬영 프레임 레이트＞

단계 S2에 의해, 통상 동영상 촬영에 대응하는 기록 프레임 레이트(예를 들면, 30fps 등)인 경우(단계 S2；통상 동영상 촬영 프레임 레이트), 상기 실시예 1의 촬상 처리와 마찬가지로, 단계 S3~S7의 처리가 행해진다.

즉, 촬상 제어부(6)는, 상기 통상 동영상 촬영의 기록 프레임 레이트에 따라 처리 대상이 되는 프레임 화상 f(예를 들면, 프레임 화상 f1 등；도 6참조)를, 소정의 촬상 프레임 레이트(예를 들면, 240fps 등)로 계속하여 취입되는 프레임 화상 f 중에서 솎아내어(이 예의 경우에는, 8개에 1개의 비율로 선택하여) 특정한다(단계 S3). 계속하여, 촬상 제어부(6) 상태 검출부(6b)는, 화상 생성부(4)로부터 출력되어 입력된 처리 대상의 프레임 화상 f의 휘도 색차 신호의 화상 데이터(YUV 데이터)에 기초하여, 피사체 상태를 검출한다(단계 S4). 다음에, 피사체 검출부(5)는, 통상 동영상 촬영의 기록 프레임 레이트에 따른 소정의 주기마다 화상 생성부(4)로부터 출력되어 입력된 각 프레임 화상 f의 화상 데이터(YUV 데이터)에 대하여 각종 화상 처리를 행하여 특정한 피사체가 포함되는 영역(예를 들면, 얼굴 영역 등)을 검출한다(단계 S5).

계속하여, 촬상 제어부(6)의 촬상 조건 조정부(6c)는, 상태 검출부(6b)에 의해 검출된 피사체 상태를 기준으로 하여, 촬상 제어부(6)에 의해 설정되는 상기 피사체의 촬상 조건을 조정하여, 소정의 저장 영역에 저장되어 있는 촬상 조건의 내용을 갱신한다(단계 S6).

다음에, 중앙 제어부(14)는, 화상 생성부(4)에 의해 통상 동영상 촬영의 기록 프레임 레이트에 따른 소정의 주기마다 생성된 상기 처리 대상의 프레임 화상 f를 기록 프레임 화상 f로서, 상기 프레임 화상 f의 YUV 데이터를 버퍼 메모리(12)에 보존시킨다(단계 S7).

＜고속 동영상 촬영 프레임 레이트＞

한편, 단계 S2에 의해, 고속 동영상 촬영에 대응하는 기록 프레임 레이트(예를 들면, 240fps 등)인 경우(단계 S2；고속 동영상 촬영 프레임 레이트), 촬상 제어부(6)는, 모션 검출부(16)에 의해 검출된 상기 장치 본체에 생기는 동작의 크기가 소정의 임계값보다 큰지 여부를 판정한다(단계 S21). 즉, 촬상 제어부(6)는, 예를 들면, 상기 촬상 장치(100)본체의 소정 방향에 대한 펀 동작 등에 의해, 상기 장치 본체에 소정의 임계값보다 큰 동작이 생기고 있는지, 또는 소정 상태로 고정되어 있는지를 판정한다.

단계 S21에 의해, 상기 장치 본체에 생기는 동작의 크기가 소정의 임계값보다 크지 않은 것으로 판정되면(단계 S21；NO), 상기 실시예 1의 촬상 처리와 마찬가지로, 촬상 제어부(6)는, 기록 프레임 레이트가 상기 고속 동영상 촬영에 대응하는 기록 프레임 레이트로 전환하기 이전의 소정의 촬상 조건을 유지하도록 촬상 조건 조정부(6c)에 의해 조정시킨다(단계 S8).

그 후, 중앙 제어부(14)는, 처리를 단계 S7로 이행하여, 고속 동영상 촬영에 대응하는 기록 프레임 레이트에 따른 소정의 주기로 촬상되어 화상 생성부(4)에 의해 생성된 프레임 화상 f를 기록 프레임 화상 f로서, 상기 프레임 화상 f의 YUV 데이터를 버퍼 메모리(12)에 보존시킨다(단계 S7).

한편, 단계 S21에 의해, 상기 장치 본체에 생기는 동작의 크기가 소정의 임계값보다 큰 것으로 판정되면(단계 S21；YES), 촬상 제어부(6)는, 처리를 단계 S3으로 이행하여, 소정의 촬상 프레임 레이트(예를 들면, 240fps 등)로 계속하여 취입되는 프레임 화상 f 중에서, 처리 대상이 되는 프레임 화상 f를 소정 조건 하에서 솎아내어 (이 예의 경우에는, 8개에 1개의 비율로 선택하여) 특정한다(단계 S3). 즉, 촬상 제어부(6)는, 소정의 촬상 프레임 레이트(예를 들면, 240fps 등)로 계속하여 취입되는 프레임 화상 f 중, 고속 동영상 촬영에 대응하는 기록 프레임 레이트에 대응하는 간격보다 긴 소정 간격마다 촬상된 프레임 화상 f를 처리 대상으로 하여 특정한다.

계속하여, 촬상 제어부(6) 상태 검출부(6b)는, 상기 실시예 1의 촬상 처리와 마찬가지로, 화상 생성부(4)로부터 출력되어 입력된 처리 대상의 프레임 화상 f의 휘도 색차 신호의 화상 데이터(YUV 데이터)에 기초하여, 피사체 상태를 검출한 후(단계 S4), 피사체 검출부(5)는, 화상 생성부(4)로부터 출력되어 입력된 각 프레임 화상 f의 화상 데이터(YUV 데이터)에 대하여 각종 화상 처리를 행하여 특정한 피사체가 포함되는 영역(예를 들면, 얼굴 영역 등)을 검출한다(단계 S5).

이때, 촬상 제어부(6)는, 고속 동영상 촬영에 대응하는 기록 프레임 레이트에 따른 간격보다 긴 소정 간극을 두고 촬상된 각 프레임 화상 f에 대하여, 피사체의 촬상 조건을 동영상에서의 상기 피사체의 기록 상태가 완만하게 변화하도록 촬상 조건 조정부(6c)에 의해 조정시킨다. 구체적으로는, 촬상 제어부(6)는, 소정 간극을 두고 촬상된 2개의 프레임 화상 f, f 사이의 적어도 하나의 프레임 화상 f의 각각에 대해서는, 앞의 프레임 화상 f로부터 검출된 피사체의 상태에 대응하여 촬상 조건 조정부(6c)에 의해 조정되는 촬상 조건으로부터, 후의 프레임 화상 f로부터 검출된 피사체의 상태에 대응하여 촬상 조건 조정부(6c)에 의해 조정되는 촬상 조건으로 서서히 변화하도록 촬상 조건을 조정시킨다.

그 후, 중앙 제어부(14)는, 상기와 마찬가지로, 처리를 단계 S7로 이행하여, 고속 동영상 촬영에 대응하는 기록 프레임 레이트에 따른 주기로 촬상되어 화상 생성부(4)에 의해 생성된 프레임 화상 f를 기록 프레임 화상 f로서, 상기 프레임 화상 f의 YUV 데이터를 버퍼 메모리(12)에 보존시킨다(단계 S7).

이상과 같이, 실시예 2의 촬상 장치(200)에 의하면, 고속 동영상 촬영에 대응하는 제2 기록 프레임 레이트에서의 동영상의 기록 시에, 장치 본체에 생기는 동작의 크기가 소정의 임계값보다 큰 경우에, 제2 기록 프레임 레이트에 대응하는 간격보다 긴 소정 간극을 두고 촬상된 각 프레임 화상 f에 대하여, 피사체의 촬상 조건을 동영상에서의 상기 피사체의 기록 상태가 완만하게 변화하도록 조정하므로, 상기 장치 본체의 동작이 큰 경우에는, 배경의 변화에 따른 피사체 상태 변화를 고려하여 피사체의 촬상 조건을 조정할 수 있다. 즉, 주요 피사체의 밝기나 색조의 확인을 위해 상기 장치 본체를 움직이지 않게 해서 촬상하는 경우에는, 피사체의 촬상 조건의 변동에 따라 피사체의 기록 상태가 변화하는 것을 방지할 수 있다. 즉, 결정적 순간 등의 슬로 모션 재생 중에서의 주요 피사체의 밝기나 색조의 확인을 적절하게 행할 수 있다.

한쪽에서, 예를 들면, 촬상 장치(200)를 펀시키면서 촬상하는 경우 등의 상기 장치 본체의 동작이 큰 경우에는, 주요 피사체의 밝기나 색조의 확인이 주목적이 되지 않기 때문에, 변화하는 배경에서의 피사체 상태 변화를 고려하여 피사체의 촬상 조건을 조정할 수 있다. 즉, 동영상 데이터를 재생했을 때, 피사체의 상황에 맞은 적절한 노출이나 화이트 밸런스에 조정된 영상을 볼 수가 있다.

이때, 피사체의 기록 상태가 완만하게 변화하도록, 즉 제2 기록 프레임 레이트에 대응하는 간격보다 긴 소정 간극을 두고 촬상된 2개의 프레임 화상 f, f 사이의 적어도 하나의 프레임 화상 f의 각각에 대하여, 앞의 프레임 화상 f로부터 검출된 피사체의 상태에 대응하여 조정되는 촬상 조건으로부터, 후의 프레임 화상 f로부터 검출된 피사체의 상태에 대응하여 조정되는 촬상 조건으로 서서히 변화하도록 피사체의 촬상 조건을 조정함으로써, 고속 동영상 촬영에 대응하는 기록 프레임 레이트로 동영상의 기록 중에, 주요 피사체의 밝기나 색조 등의 피사체의 기록 상태가 급격하게 변화하는 것을 방지할 수 있다. 따라서, 그 후, 동영상을 소정의 재생 프레임 레이트로 재생했을 때, 주요 피사체의 밝기나 색조 등의 피사체의 기록 상태가 급격하게는 변화하지 않기는 하지만, 배경의 변화에 따른 피사체 상태 변화를 고려하여 상기 주요 피사체의 밝기나 색조의 확인을 적절하게 행할 수 있다.

그리고 상기 실시예 2에 있어서는, 예를 들면, 촬상 장치(200) 본체가 삼각대 등에 고정되어, 상기 장치 본체에 생기는 동작의 크기가 소정의 임계값보다 크지 않은 경우, 상태 검출부(6b)는, 촬상 제어부(6)에 의한 자동 화이트 밸런스 조정 처리(AWB)에 사용되는 처리 대상의 프레임 화상 f의 회색 성분(색조)의 검출을 행하지 않고, 촬상 조건 조정부(6c)는, 자동 화이트 밸런스 조정 처리(AWB)에 관한 화이트 밸런스 조정 조건의 조정을 행하지 않도록 해도 된다. 즉, 예를 들면, 상기 장치 본체가 삼각대 등에 고정되어 있는 경우에는, 광원은 변화하지 않으면 추정하여, 자동 화이트 밸런스 조정 처리(AWB)에 관한 각종 처리를 생략함으로써, 촬상 처리의 고속화 및 소비 에너지의 삭감을 도모할 수 있다.

[ 실시예 3]

도 7은 본 발명을 적용한 실시예 3의 촬상 장치(300)의 개략적인 구성을 나타낸 블록도이다.

그리고 실시예 3의 촬상 장치(300)는, 이하에 상세하게 설명하는 이외의 점에서 상기 실시예 2의 촬상 장치(200)과 대략 동일한 구성을 이루므로, 상세한 설명은 생략한다.

실시예 3의 촬상 장치(300)는, 동영상의 촬영 기록 시에 있어서, 프레임 레이트를 자동적으로 전환하는 소정의 동영상 동작 모드가 설정되어 있는 경우, 상기 장치 본체에 생기는 동작의 크기가 소정의 임계값보다 큰 동안은, 통상 동영상 촬영에 대응하는 제1 기록 프레임 레이트에 따른 소정의 주기로 동영상을 촬상시켜, 상기 장치 본체에 생기는 동작의 크기가 소정의 임계값 이하로 되었을 경우에, 자동적으로 고속 동영상 촬영에 대응하는 제2 기록 프레임 레이트로 전환해 동영상을 촬상시킨다.

구체적으로는, 도 7에 나타낸 바와 같이, 촬상 장치(300)의 촬상 제어부(6)는 제2 기록 프레임 레이트 설정부(6d)를 구비하고 있다.

제2 기록 프레임 레이트 설정부(6d)는, 상기 장치 본체에 생기는 동작의 크기에 따라 기록 프레임 레이트를 전환하여 설정한다.

즉, 제2 기록 프레임 레이트 설정부(6d)는, 모션 검출부(16)에 의해 검출된 상기 장치 본체에 생기는 동작의 크기가 소정의 임계값보다 큰지 여부를 판정한다. 그리고 제2 기록 프레임 레이트 설정부(6d)는, 상기 장치 본체에 생기는 동작의 크기가 소정의 임계값보다 크면 판정되면, 기록 프레임 레이트를 통상 동영상 촬영에 대응하는 기록 프레임 레이트(제1 기록 프레임 레이트)로 설정하는 한편, 상기 장치 본체에 생기는 동작의 크기가 소정의 임계값보다 크지 않은 것으로 판정되면, 기록 프레임 레이트를 고속 동영상 촬영에 대응하는 기록 프레임 레이트(제2 기록 프레임 레이트)로 설정한다.

촬상 제어부(6)는, 촬상 제어부(6)는, 유닛 회로부(3)를 제2 기록 프레임 레이트 설정부(6d)에 의해 전환하여 설정된 기록 프레임 레이트(예를 들면, 고속 동영상 촬영에 대응하는 제2 기록 프레임 레이트 등)에 따른 소정의 타이밍에서 동작시켜, 전자 촬상부(2)로부터 출력되어 입력되는 피사체의 광학상에 따른 아날로그의 화상 신호를 디지털의 화상 신호(프레임 화상 f)로 변환시킨다.

다음에, 촬상 장치(300)에 의한 촬상 처리에 대하여, 도 8 및 도 9를 참조하여 설명한다.

도 8은 촬상 처리에 관한 동작의 일례를 나타낸 플로우차트이다. 또한, 도 9는 촬상 처리를 설명하기 위한 도면이다.

그리고 이하의 실시예 3의 촬상 처리는, 장치 본체에 생기는 동작의 크기의 크기에 따라 기록 프레임 레이트를 전환하여 설정하는 이외의 점은, 상기 실시예 1의 촬상 처리와 대략 마찬가지이므로, 그 상세한 설명은 생략한다.

도 8에 나타낸 바와 같이, 먼저, 촬상 제어부(6)는, 상기 실시예 1의 촬상 처리와 마찬가지로, 전자 촬상부(2)를 소정의 촬상 프레임 레이트(예를 들면, 240fps 등)로 구동시켜, 렌즈부(1)에 의해 결상된 피사체의 광학상을 이차원의 화상 신호(RGB 화상 데이터)로 변환시킴으로써 프레임 화상 f의 취입을 행한다(단계 S1).

다음에, 제2 기록 프레임 레이트 설정부(6d)는, 모션 검출부(16)에 의해 검출된 상기 장치 본체에 생기는 동작의 크기가 소정의 임계값보다 큰지 여부를 판정한다(단계 S31). 즉, 제2 기록 프레임 레이트 설정부(6d)는, 예를 들면, 상기 촬상 장치(100)본체의 소정 방향에 대한 펀 동작 등에 의해, 상기 장치 본체에 소정의 임계값보다 큰 동작이 생기고 있는지의 여부를 판정한다.

단계 S31에 의해, 제2 기록 프레임 레이트 설정부(6d)는, 상기 장치 본체에 생기는 동작의 크기가 소정의 임계값보다 큰 것으로 판정하면(단계 S31；YES), 기록 프레임 레이트를 통상 동영상 촬영에 대응하는 기록 프레임 레이트로 설정한다(단계 S32).

그 후, 상기 실시예 1의 촬상 처리와 마찬가지로, 단계 S3~S7의 처리가 행해진다.

즉, 촬상 제어부(6)는, 상기 통상 동영상 촬영의 기록 프레임 레이트에 따라 처리 대상이 되는 프레임 화상 f(예를 들면, 프레임 화상 f1 등；도 9참조)를, 소정의 촬상 프레임 레이트(예를 들면, 240fps 등)로 계속하여 취입되는 프레임 화상 f 중에서 솎아내어 (이 예의 경우에는, 8개에 1개의 비율로 선택하여) 특정한다(단계 S3). 계속하여, 촬상 제어부(6) 상태 검출부(6b)는, 화상 생성부(4)로부터 출력되어 입력된 처리 대상의 프레임 화상 f의 휘도 색차 신호의 화상 데이터(YUV 데이터)에 기초하여, 피사체 상태를 검출한다(단계 S4). 다음에, 피사체 검출부(5)는, 통상 동영상 촬영의 기록 프레임 레이트에 따른 소정의 주기마다 화상 생성부(4)로부터 출력되어 입력된 각 프레임 화상 f의 화상 데이터(YUV 데이터)에 대하여 각종 화상 처리를 행하여 특정한 피사체가 포함되는 영역(예를 들면, 얼굴 영역 등)을 검출한다(단계 S5).

한편, 단계 S31에 의해, 제2 기록 프레임 레이트 설정부(6d)는, 상기 장치 본체에 생기는 동작의 크기가 소정의 임계값보다 크지 않은 것으로 판정되면(단계 S31；NO), 기록 프레임 레이트를 고속 동영상 촬영에 대응하는 기록 프레임 레이트로 설정한다(단계 S33).

다음에, 촬상 제어부(6)는, 상기 실시예 1의 촬상 처리와 마찬가지로, 기록 프레임 레이트가 상기 고속 동영상 촬영에 대응하는 기록 프레임 레이트로 전환하기 이전의 소정의 촬상 조건을 유지하도록 촬상 조건 조정부(6c)에 의해 조정시킨다(단계 S8).

그 후, 중앙 제어부(14)는, 처리를 단계 S7로 이행하여, 고속 동영상 촬영에 대응하는 기록 프레임 레이트에 따른 소정의 주기로 촬상되어 화상 생성부(4)에 의해 생성된 프레임 화상 f(예를 들면, 프레임 화상 f2 등；도 9참조)를 기록 프레임 화상 f로서, 상기 프레임 화상 f의 YUV 데이터를 버퍼 메모리(12)에 보존시킨다(단계 S7).

이상과 같이, 실시예 3의 촬상 장치(300)에 의하면, 장치 본체에 생기는 동작의 크기가 소정의 임계값 이하의 경우에, 고속 동영상 촬영에 대응하는 제2 기록 프레임 레이트에 따른 소정의 주기로 동영상을 촬상시키는 한편, 동작의 크기가 소정의 임계값보다 큰 경우에, 통상 동영상 촬영에 대응하는 제1 기록 프레임 레이트에 따른 소정의 주기로 동영상을 촬상시키므로, 장치 본체에 생기는 동작의 크기에 따라 기록 프레임 레이트를 자동적으로 전환하여 설정할 수 있다.

즉, 기록 프레임 레이트를 전환하기 위해 사용자에 의한 조작 입력부(11)의 소정 조작을 필요로 하면, 상기 사용자에 의한 소정 조작에 따라 상기 장치 본체가 움직여 버려, 흔들린 화상이 촬상되어 버린다. 그래서, 장치 본체에 생기는 동작의 크기에 따라 기록 프레임 레이트를 자동적으로 전환하여 설정함으로써, 기록 프레임 레이트를 전환하기 위한 사용자에 의한 조작 입력부(11)의 소정 조작이 불필요하게 되어, 흔들린 화상이 촬상되어 버리는 것을 방지할 수 있고, 동영상 데이터를 재생했을 때 주요 피사체의 상태의 확인을 적절하게 행할 수 있다.

그리고 본 발명은, 상기 실시예에 한정되지 않고, 본 발명의 취지를 벗어나지 않는 범위에 있어서, 각종 개량 및 설계의 변경을 행해도 된다.

예를 들면, 상기 실시예1~3에 있어서는, 촬상 제어부(6)는, 촬상되는 피사체 상태 변화에 따라 기록 프레임 레이트를 통상 동영상 촬영에 대응하는 제1 기록 프레임 레이트와 고속 동영상 촬영에 대응하는 제2 기록 프레임 레이트로 전환하여 설정하도록 해도 된다. 즉, 기록 프레임 레이트를 전환하기 위해 사용자에 의한 조작 입력부(11)의 소정 조작을 필요로 하면, 상기 사용자에 의한 소정 조작에 따라 상기 장치 본체가 움직여 버려, 흔들린 화상이 촬상되어 버린다. 그래서, 예를 들면, 촬상되는 피사체 상태 변화가 상대적으로 큰 경우에는, 기록 프레임 레이트를 고속 동영상 촬영에 대응하는 제2 기록 프레임 레이트에 자동적으로 전환하도록 함으로써, 그 후의 동영상의 재생에 의해 각 프레임 화상 f의 촬상 간격이 재생 간격보다 짧게 본 눈은 슬로 모션으로 재생할 수 있고, 주요 피사체의 상태의 확인을 적절하게 행할 수 있다.

또한, 상기 실시예1~3에 있어서는, 상태 검출부(6b)와 촬상 조건 조정부(6c)를 분류 구성으로 하였으나, 이들을 일체로서 구성해도 된다. 즉, 피사체 상태를 검출하는 상태 검출부(6b)의 구비하는 기능을 촬상 조건 조정부(6c)에 구비하도록 해도 된다.

또한, 촬상 장치(100, 200, 300)의 구성은, 상기 실시예에 예시한 것은 일례이며, 이에 한정되지 않고, 적어도 촬상 수단, 촬상 제어 수단, 재생 제어 수단, 조정 수단, 조정 제어 수단을 포함하는 구성이면 적절하게 임의로 변경할 수 있다.

부가하여, 상기 실시예에 있어서는, 동영상 기록 수단, 조정 수단, 전환 수단, 조정 제어 수단으로서의 기능을, 중앙 제어부(14)의 제어 하에서, 기록 매체 M, 촬상 조건 조정부(6c), 제1 기록 프레임 레이트 설정부(6a), 촬상 제어부(6)가 구동함으로써 실현되는 구성으로 하였으나, 이에 한정되지 않고, 중앙 제어부(14)의 CPU에 의해 소정의 프로그램 등이 실행되는 것에 의해 실현되는 구성으로 해도 된다.

즉, 프로그램을 기억하는 프로그램 메모리(13)에, 동영상 기록 처리 루틴, 조정 처리 루틴, 전환 처리 루틴, 조정 제어 처리 루틴을 포함하는 프로그램을 기억시켜 둔다. 그리고 동영상 기록 처리 루틴으로부터 중앙 제어부(14)의 CPU를, 촬상 수단에 의해 순차 촬상되는 피사체의 동영상을 1개의 연속된 동영상 데이터로서 기록시키는 동영상 기록 수단으로서 기능하게 하도록 해도 된다. 또한, 조정 처리 루틴으로부터 중앙 제어부(14)의 CPU를, 동영상 기록 수단에 의한 1개의 연속된 동영상 데이터의 기록 중에, 촬상 수단에 의해 촬상되는 피사체 상태 변화에 맞추어, 상기 피사체의 촬상 조건을 조정하는 조정 수단으로서 기능하게 하도록 해도 된다. 또한, 전환 처리 루틴으로부터 중앙 제어부(14)의 CPU를, 동영상 기록 수단에 의한 1개의 연속된 동영상 데이터의 기록 중에, 동영상을 기록할 때의 프레임 레이트를 전환하는 전환 수단으로서 기능하게 하도록 해도 된다. 또한, 조정 제어 처리 루틴으로부터 중앙 제어부(14)의 CPU를, 전환 수단에 의해 동영상을 기록할 때의 프레임 레이트가 제1 기록 프레임 레이트로부터 상기 제1 기록 프레임 레이트보다 고속인 제2 기록 프레임 레이트로 전환되는 경우에는, 이 제2 기록 프레임 레이트에서의 기록 중에서의 조정 수단에 의한 촬상 조건의 조정을 제한하는 조정 제어 수단으로서 기능하게 하도록 해도 된다.

마찬가지로, 재생 수단, 재생 제어 수단, 모션 검출 수단, 상태 검출 수단, 촬상 제어 수단, 피사체 검출 수단에 대하여도, 중앙 제어부(14)의 CPU에 의해 소정의 프로그램 등이 실행되는 것에 의해 실현되는 구성으로 해도 된다.

또한, 상기한 각각의 처리를 실행하기 위한 프로그램을 저장한 컴퓨터 판독 가능한 매체로서, ROM이나 하드디스크 등 외에, 플래시 메모리 등의 불휘발성 메모리, CD―ROM 등의 포터블형 기록 매체를 적용할 수도 있다. 또한, 프로그램의 데이터를 소정의 통신 회선을 통하여 제공하는 매체로서는, 캐리어 웨이브(반송파)도 적용된다.

부가하여, 이번 개시된 실시예는, 모든 점에서 예시이며, 제한적인 것으로 생각되어서는 안 된다. 본 발명의 범위는, 상기한 설명에는 없고 특허 청구의 범위에 의해 표시되고, 특허 청구의 범위와 균등의 의미 및 범위 내에서의 모든 변경이 포함되는 것으로 의도된다.

이하에, 본원 출원의 당초의 특허 청구의 범위에 기재된 발명을 부기한다.

즉, 본 발명의 촬상 장치는, 촬상부에 의해 순차 촬상되는 피사체의 화상을 1개의 연속된 동영상 데이터로서 순차 기록하는 동영상 기록부와, 이 동영상 기록부에 의한 1개의 연속된 동영상 데이터의 촬상 및 기록 중에, 상기 촬상부에 의해 촬상되는 피사체 상태 변화에 맞추어, 상기 피사체의 촬상 조건을 조정하는 조정부와, 상기 동영상 기록부에 의한 1개의 연속된 동영상 데이터의 촬상 및 기록 중에, 동영상을 기록할 때의 프레임 레이트를 전환하는 전환부와, 이 전환부에 의해 상기 동영상을 기록할 때의 프레임 레이트가 제1 기록 프레임 레이트로부터 상기 제1 기록 프레임 레이트보다 고속인 제2 기록 프레임 레이트로 전환되는 경우에는, 이 제2 기록 프레임 레이트에서의 기록 중에서의 상기 조정부에 의한 촬상 조건의 조정을 제한하는 조정 제어부를 포함하는 구성을 채용하고 있다.

또한, 상기 조정 제어부는, 또한 상기 제1 기록 프레임 레이트로부터 상기 제2 기록 프레임 레이트로 전환할 때, 이 전환 이전에 조정된 촬상 조건을 유지하도록 상기 조정부에 의한 촬상 조건의 조정을 제한하거나, 또는 이 전환 이전과 비교하여 촬상 조건이 보다 완만하게 변화하도록 상기 조정부에 의한 촬상 조건의 조정을 제한해도 된다.

또한, 상기 동영상 기록부에 의해 기록된 동영상 데이터를, 기록 시의 프레임 레이트와 같은 프레임 레이트로 재생하는 재생부와, 상기 전환부에 의해 일시적으로 기록 시의 프레임 레이트가 전환된 형태로 기록된 동영상 데이터를 상기 재생부에 의해 재생하는 경우, 상기 일시적으로 기록 시의 프레임 레이트가 전환된 부분을 재생할 때의 재생 시의 프레임 레이트를, 기록 시의 프레임 레이트와는 상이한 프레임 레이트로 재생시키는 재생 제어부를 추가로 구비해도 된다.

또한, 상기 재생 제어부는, 또한 상기 동영상 기록부에 의해 기록된 1개의 동영상 데이터의 전체를 연속적으로 재생하는 경우에, 상기 제2 기록 프레임 레이트로 기록한 부분이 자동적으로 슬로 모션으로 재생되도록, 상기 제1 기록 프레임 레이트로 기록된 부분과 상기 제2 기록 프레임 레이트로 기록된 부분의 재생 시의 프레임 레이트를 변경하지 않고 상기 동영상 데이터의 전체를 상기 제1 기록 프레임 레이트와 같은 프레임 레이트로 연속적으로 재생시켜도 된다.

또한, 상기 촬상부에 의한 피사체의 동영상의 촬상에 의해 생성된 복수 개의 프레임 화상에 따라 피사체 상태를 검출하는 상태 검출부를 더 포함하고, 상기 상태 검출부는, 상기 제2 기록 프레임 레이트에서의 동영상의 촬상 시에, 상기 제2 기록 프레임 레이트에 대응하는 간격보다 긴 소정 간극을 두고 촬상된 각 프레임 화상에 대하여, 피사체 상태를 검출해도 된다.

또한, 장치 본체에 생기는 동작의 크기를 검출하는 모션 검출부를 더 포함하고, 상기 조정 제어부는, 상기 제2 기록 프레임 레이트에서의 동영상의 기록 시에, 상기 모션 검출부에 의해 검출된 동작의 크기가 소정값보다 큰 경우에, 상기 제2 기록 프레임 레이트에 대응하는 간격보다 긴 소정 간극을 두고 촬상된 각 프레임 화상보다 검출되는 피사체의 상태에 기초하여, 동영상에서의 상기 피사체의 기록 상태가 완만하게 변화하도록, 상기 조정부에 의한 제한된 촬상 조건의 조정을 행하도록 해도 된다.

또한, 상기 조정 제어부는, 또한 상기 제2 기록 프레임 레이트에서의 동영상의 기록 시에, 상기 제2 기록 프레임 레이트에 대응하는 간격보다 긴 소정 간극을 두고 촬상된 2개의 프레임 화상의 각각에 대하여, 상기 상태 검출부에 의해 피사체 상태를 검출하고, 이 2개의 프레임 화상 중 앞의 프레임 화상으로부터 검출된 피사체의 상태에 대응하여 조정되는 촬상 조건으로부터, 후의 프레임 화상으로부터 검출된 피사체의 상태에 대응하여 조정되는 촬상 조건으로 서서히 변화하도록 상기 조정부에 의한 제한된 촬상 조건의 조정을 행하도록 해도 된다.

또한, 상기 상태 검출부는, 또한 상기 제1 기록 프레임 레이트에서의 동영상의 기록 시에, 상기 제1 기록 프레임 레이트에 따른 주기로 촬상된 각 프레임 화상에 대하여, 피사체 상태를 순차 검출하고, 상기 조정 제어부는, 또한 상기 상태 검출부에 의해 순차 검출된 피사체의 상태에 따라서, 피사체의 촬상 조건을 상기 조정부에 의해 순차 조정시켜도 된다.

또한, 상기 조정 제어부는, 또한 상기 전환부에 의해 상기 제2 기록 프레임 레이트로부터 상기 제1 기록 프레임 레이트로 전환하는 경우에, 상기 제1 기록 프레임 레이트에 따른 주기로 촬상된 각 프레임 화상에 대하여, 피사체의 촬상 조건을 상기 피사체의 기록 상태가 완만하게 변화하도록 상기 조정부에 의한 촬상 조건의 조정을 제한해도 된다.

또한, 장치 본체에 생기는 동작의 크기를 검출하는 모션 검출부와 이 모션 검출부에 의해 검출된 동작의 크기가 소정값 이하인 경우에, 상기 촬상부에 의해 상기 제2 기록 프레임 레이트에 따른 주기로 동영상을 촬상시키는 한편, 상기 검출부에 의해 검출된 동작의 크기가 소정값보다 큰 경우에, 상기 촬상부에 의해 상기 제1 기록 프레임 레이트에 따른 주기로 동영상을 촬상시키는 촬상 제어부를 추가로 구비해도 된다.

또한, 상기 전환부는, 또한 사용자에 의한 소정 조작에 따라 입력된 기록 프레임 레이트의 전환 지시에 따라 상기 동영상을 기록할 때의 프레임 레이트를 상기 제1 기록 프레임 레이트와 상기 제2 기록 프레임 레이트로 전환해도 된다.

또한, 상기 전환부는, 또한 상기 촬상부에 의해 촬상되는 피사체 상태 변화에 따라 상기 동영상을 기록할 때의 프레임 레이트를 상기 제1 기록 프레임 레이트와 상기 제2 기록 프레임 레이트로 전환해도 된다.

또한, 상기 촬상 조건은, 상기 촬상부에 의해 피사체를 촬상할 때의 노출 조정 조건 및 화이트 밸런스 조정 조건 중, 적어도 한쪽을 포함해도 된다.

또한, 상기 촬상부에 의해 촬상된 동영상으로부터 특정한 피사체를 검출하는 피사체 검출부를 더 포함하고, 상기 조정부는, 상기 피사체 검출부에 의해 검출된 특정한 피사체를 기준으로 하여, 상기 노출 조정 조건 및 상기 화이트 밸런스 조정 조건 중, 적어도 한쪽을 조정해도 된다.

또한, 본 발명의 촬상 처리 방법은, 촬상부를 구비하는 촬상 장치를 사용한 촬상 처리 방법으로서, 상기 촬상부에 의해 순차 촬상되는 피사체의 동영상을 1개의 연속된 동영상 데이터로서 순차 기록하는 처리와, 상기 1개의 연속된 동영상 데이터의 촬상 및 기록 중에, 상기 촬상부에 의해 촬상되는 피사체 상태 변화에 맞추어, 상기 피사체의 촬상 조건을 조정하는 처리와, 상기 1개의 연속된 동영상 데이터의 촬상 및 기록 중에, 동영상을 기록할 때의 프레임 레이트를 전환하는 처리와, 상기 동영상을 기록할 때의 프레임 레이트가 제1 기록 프레임 레이트로부터 상기 제1 기록 프레임 레이트보다 고속인 제2 기록 프레임 레이트로 전환되는 경우에는, 이 제2 기록 프레임 레이트에서의 기록 중에서의 상기 촬상 조건의 조정을 제한하는 처리를 포함하는 구성을 채용하고 있다.

Claims

촬상부에 의해 순차 촬상되는 피사체의 화상을 1개의 연속된 동영상 데이터로서 순차 기록하는 동영상 기록부와,
상기 동영상 기록부에 의한 1개의 연속된 동영상 데이터의 촬상 및 기록 중에, 상기 촬상부에 의해 촬상되는 피사체 상태 변화에 맞추어, 상기 피사체의 촬상 조건을 조정하는 조정부와,
상기 동영상 기록부에 의한 1개의 연속된 동영상 데이터의 촬상 및 기록 중에, 동영상을 기록할 때의 프레임 레이트를 전환하는 전환부와,
상기 전환부에 의해 상기 동영상을 기록할 때의 프레임 레이트가 제1 기록 프레임 레이트로부터 상기 제1 기록 프레임 레이트보다 고속인 제2 기록 프레임 레이트로 전환되는 경우에는, 상기 제2 기록 프레임 레이트에서의 기록 중에서의 상기 조정부에 의한 촬상 조건의 조정을 제한하는 조정 제어부
를 포함하는 촬상 장치.
제1항에 있어서,
상기 조정 제어부는 또한,
상기 제1 기록 프레임 레이트로부터 상기 제2 기록 프레임 레이트로 전환할 때, 상기 전환 이전에 조정된 촬상 조건을 유지하도록 상기 조정부에 의한 촬상 조건의 조정을 제한하거나, 또는 상기 전환 이전과 비교하여 촬상 조건이 보다 완만하게 변화하도록 상기 조정부에 의한 촬상 조건의 조정을 제한하는, 촬상 장치.
제2항에 있어서,
상기 동영상 기록부에 의해 기록된 동영상 데이터를, 기록 시의 프레임 레이트와 같은 프레임 레이트로 재생하는 재생부와,
상기 전환부에 의해 일시적으로 기록 시의 프레임 레이트가 전환된 형태로 기록된 동영상 데이터를 상기 재생부에 의해 재생하는 경우, 상기 일시적으로 기록 시의 프레임 레이트가 전환된 부분을 재생할 때의 재생 시의 프레임 레이트를, 기록 시의 프레임 레이트와는 상이한 프레임 레이트로 재생시키는 재생 제어부
를 더 포함하는 촬상 장치.
제3항에 있어서,
상기 재생 제어부는 또한,
상기 동영상 기록부에 의해 기록된 1개의 동영상 데이터의 전체를 연속적으로 재생하는 경우에, 상기 제2 기록 프레임 레이트로 기록한 부분이 자동적으로 슬로 모션으로 재생되도록, 상기 제1 기록 프레임 레이트로 기록된 부분과 상기 제2 기록 프레임 레이트로 기록된 부분의 재생 시의 프레임 레이트를 변경하지 않고 상기 동영상 데이터의 전체를 상기 제1 기록 프레임 레이트와 같은 프레임 레이트로 연속적으로 재생시키는, 촬상 장치.
제2항 내지 제4항 중 어느 한 항에 있어서,
상기 촬상부에 의한 피사체의 동영상의 촬상에 의해 생성된 복수 개의 프레임 화상에 따라 피사체 상태를 검출하는 상태 검출부를 더 포함하고,
상기 상태 검출부는,
상기 제2 기록 프레임 레이트에서의 동영상의 촬상 시에, 상기 제2 기록 프레임 레이트에 대응하는 간격보다 긴 소정 간극을 두고 촬상된 각 프레임 화상에 대하여 피사체 상태를 검출하는, 촬상 장치.
제5항에 있어서,
장치 본체에 생기는 동작의 크기를 검출하는 모션 검출부를 더 포함하고,
상기 조정 제어부는,
상기 제2 기록 프레임 레이트에서의 동영상의 기록 시에, 상기 모션 검출부에 의해 검출된 동작의 크기가 소정값보다 큰 경우에, 상기 제2 기록 프레임 레이트에 대응하는 간격보다 긴 소정 간극을 두고 촬상된 각 프레임 화상보다 검출되는 피사체의 상태에 기초하여, 동영상에서의 상기 피사체의 기록 상태가 완만하게 변화하도록, 상기 조정부에 의한 제한된 촬상 조건의 조정을 행하는, 촬상 장치.
제6항에 있어서,
상기 조정 제어부는 또한,
상기 제2 기록 프레임 레이트에서의 동영상의 기록 시에, 상기 제2 기록 프레임 레이트에 대응하는 간격보다 긴 소정 간극을 두고 촬상된 2개의 프레임 화상의 각각에 대하여, 상기 상태 검출부에 의해 피사체 상태를 검출하고, 상기 2개의 프레임 화상 중 앞의 프레임 화상으로부터 검출된 피사체의 상태에 대응하여 조정되는 촬상 조건으로부터, 후의 프레임 화상으로부터 검출된 피사체의 상태에 대응하여 조정되는 촬상 조건으로 서서히 변화하도록 상기 조정부에 의한 제한된 촬상 조건의 조정을 행하는, 촬상 장치.
제6항에 있어서,
상기 상태 검출부는 또한,
상기 제1 기록 프레임 레이트에서의 동영상의 기록 시에, 상기 제1 기록 프레임 레이트에 따른 주기로 촬상된 각 프레임 화상에 대하여 피사체 상태를 순차 검출하고,
상기 조정 제어부는 또한,
상기 상태 검출부에 의해 순차 검출된 피사체의 상태에 따라서, 피사체의 촬상 조건을 상기 조정부에 의해 순차 조정시키는, 촬상 장치.
제1항 내지 제4항 중 어느 한 항에 있어서,
상기 조정 제어부는 또한,
상기 전환부에 의해 상기 제2 기록 프레임 레이트로부터 상기 제1 기록 프레임 레이트로 전환하는 경우에, 상기 제1 기록 프레임 레이트에 따른 주기로 촬상된 각 프레임 화상에 대하여, 피사체의 촬상 조건을 상기 피사체의 기록 상태가 완만하게 변화하도록 상기 조정부에 의한 촬상 조건의 조정을 제한하는, 촬상 장치.
제1항 내지 제4항 중 어느 한 항에 있어서,
장치 본체에 생기는 동작의 크기를 검출하는 모션 검출부와,
상기 모션 검출부에 의해 검출된 동작의 크기가 소정값 이하인 경우에, 상기 촬상부에 의해 상기 제2 기록 프레임 레이트에 따른 주기로 동영상을 촬상시키는 한편, 상기 검출부에 의해 검출된 동작의 크기가 소정값보다 큰 경우에, 상기 촬상부에 의해 상기 제1 기록 프레임 레이트에 따른 주기로 동영상을 촬상시키는 촬상 제어부
를 더 포함하는 촬상 장치.
제1항 내지 제4항 중 어느 한 항에 있어서,
상기 전환부는 또한,
사용자에 의한 소정 조작에 따라 입력된 기록 프레임 레이트의 전환 지시에 따라, 상기 동영상을 기록할 때의 프레임 레이트를, 상기 제1 기록 프레임 레이트와 상기 제2 기록 프레임 레이트로 전환하는, 촬상 장치.
제1항 내지 제4항 중 어느 한 항에 있어서,
상기 전환부는 또한,
상기 촬상부에 의해 촬상되는 피사체 상태 변화에 따라, 상기 동영상을 기록할 때의 프레임 레이트를, 상기 제1 기록 프레임 레이트와 상기 제2 기록 프레임 레이트로 전환하는, 촬상 장치.
제1항 내지 제4항 중 어느 한 항에 있어서,
상기 촬상 조건은, 상기 촬상부에 의해 피사체를 촬상할 때의 노출 조정 조건 및 화이트 밸런스 조정 조건 중, 적어도 한쪽을 포함하는, 촬상 장치.
제13항에 있어서,
상기 촬상부에 의해 촬상된 동영상으로부터 특정한 피사체를 검출하는 피사체 검출부를 더 포함하고,
상기 조정부는, 상기 피사체 검출부에 의해 검출된 특정한 피사체를 기준으로 하여, 상기 노출 조정 조건 및 상기 화이트 밸런스 조정 조건 중, 적어도 한쪽을 조정하는, 촬상 장치.
촬상부를 구비하는 촬상 장치를 사용한 촬상 처리 방법에 있어서,
상기 촬상부에 의해 순차 촬상되는 피사체의 동영상을 1개의 연속된 동영상 데이터로서 순차 기록하는 처리와,
상기 1개의 연속된 동영상 데이터의 촬상 및 기록 중에, 상기 촬상부에 의해 촬상되는 피사체 상태 변화에 맞추어, 상기 피사체의 촬상 조건을 조정하는 처리와,
상기 1개의 연속된 동영상 데이터의 촬상 및 기록 중에, 동영상을 기록할 때의 프레임 레이트를 전환하는 처리와,
상기 동영상을 기록할 때의 프레임 레이트가 제1 기록 프레임 레이트로부터 상기 제1 기록 프레임 레이트보다 고속인 제2 기록 프레임 레이트로 전환되는 경우에는, 상기 제2 기록 프레임 레이트에서의 기록 중에서의 상기 촬상 조건의 조정을 제한하는 처리
를 포함하는 촬상 처리 방법.