KR100871639B1 - 카메라 및 카메라의 화상처리방법 - Google Patents

카메라 및 카메라의 화상처리방법 Download PDF

Info

Publication number
KR100871639B1
KR100871639B1 KR1020077013186A KR20077013186A KR100871639B1 KR 100871639 B1 KR100871639 B1 KR 100871639B1 KR 1020077013186 A KR1020077013186 A KR 1020077013186A KR 20077013186 A KR20077013186 A KR 20077013186A KR 100871639 B1 KR100871639 B1 KR 100871639B1
Authority
KR
South Korea
Prior art keywords
image
images
divided
exposure
camera
Prior art date
Application number
KR1020077013186A
Other languages
English (en)
Other versions
KR20070086061A (ko
Inventor
히데오 타마무라
Original Assignee
캐논 가부시끼가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 캐논 가부시끼가이샤 filed Critical 캐논 가부시끼가이샤
Publication of KR20070086061A publication Critical patent/KR20070086061A/ko
Application granted granted Critical
Publication of KR100871639B1 publication Critical patent/KR100871639B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/76Circuitry for compensating brightness variation in the scene by influencing the image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6811Motion detection based on the image signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/683Vibration or motion blur correction performed by a processor, e.g. controlling the readout of an image memory
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/684Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time
    • H04N23/6845Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time by combination of a plurality of images sequentially taken
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio

Abstract

카메라는, 기록용의 제1 화상으로 합성되도록 복수의 화상을 촬영하는 촬상장치와, 그 복수의 화상중에서 특정 화상을 화상처리하여서 표시용의 제2 화상을 생성하는 화상 생성기를 구비한다.
촬상장치, 화상 생성기, 합성, 디지털 카메라.

Description

카메라 및 카메라의 화상처리방법{CAMERA AND IMAGE PROCESSING METHOD FOR CAMERA}
본 발명은, 디지탈 카메라 등의 카메라 및 카메라의 화상 처리에 관한 것이다.
통상적인 카메라에 있어서는 촬영에 있어서의 중요한 처리가 자동화되어 있으므로, 아마추어 카메라 조작자가 촬영 실패를 일으킬 가능성이 없다.
또한, 최근에는, 촬영시의 손진동을 보상하는 시스템도 검토되고 있다. 예를 들면, 촬영자의 손진동을 카메라내에서 검출하고, 렌즈를 그 진동에 동기시켜서 움직이는 것에 의해, 노출기간이 길어도 진동이 적은 화상을 형성하는 시스템이 알려져 있다.
또한, 일본국 공개특허공보 특개2000-341577호에는, 손진동을 일으키지 않는 정도의 빠른 셔터 스피드로 노출 부족의 화상을 복수매 촬영하고, 이것들을 합성하여 진동이 적은 적정 노출의 화상을 얻는 수법이 개시되어 있다.
최근 디지탈 카메라 대부분은, 촬영된 화상을 촬영할 때마다 카메라 배면의 액정 디스플레이("LCD")에 표시하고, 촬영한 복수매의 화상을 재생할 때에 촬영자가 재생 화상을 선택하도록, 액정 디스플레이에 복수의 섬네일을 표시한다.
그렇지만, 종래기술에 개시된 디지털 카메라는, 이하와 같은 문제점이 있다. 다시 말해, 카메라 진동의 영향을 작게 하기 위해서 빠른 셔터 스피드로 노출 부족의 화상을 복수매 촬영하고, 이것들을 합성하여서 한 장의 적정한 노출의 화상을 얻을 때에, 각 화상의 위치 좌표를 산출해 내고, 진동 검출기능으로 구한 진동량에 의거하여 상기 화상을 합성한다. 그래서, 결과적으로 합성된 화상을 LCD에 표시될 때까지 긴 시간이 걸리고, 촬영을 중단하고 다음 숏의 촬영에서 촬영을 잘하기 위한 가장 좋은 순간을 놓친다.
한편, 합성되기 전의 각각의 화상은 노출 부족의 화상이므로, 이것을 그대로 표시하면 촬영자에는 구도도 알 수 없는 어두운 화상이 표시되게 된다.
(발명의 개시)
본 발명은, 복수매의 화상을 합성 함에 의해 한 장의 노출된 화상을 얻을 때에, 촬영을 방해하지 않고 촬영된 화상을 적절하게 표시하는 카메라를 제공하는데 그 목적이 있다.
본 발명의 일 국면에 따른 카메라는, 기록용의 제1 화상으로 합성되는 복수의 화상을 촬영하는 촬상장치와, 상기 복수의 화상중 하나의 특정 화상에 대해 노출 보정 처리를 수행함으로써 표시용의 제2 화상을 생성하는 화상 생성기를 구비하며, 상기 제1 화상은 제1 노출기간에 촬영된 화상에 대응하고, 상기 복수의 화상 각각은 상기 제1 노출기간보다 짧은 제2 노출기간에 촬영된 화상인 것을 특징으로 한다.
본 발명의 다른 국면에 따른 화상처리방법은, 합성되는 복수의 화상을 촬영하여 기록용의 제1 화상을 생성하는 스텝과, 상기 복수의 화상중 하나의 특정 화상에 대해 노출 보정 처리를 수행함으로써 표시용의 제2 화상을 생성하는 스텝을 포함하며, 상기 제1 화상은 제1 노출기간에 촬영된 화상에 대응하고, 상기 복수의 화상 각각은 상기 제1 노출기간보다 짧은 제2 노출기간에 촬영된 화상인 것을 특징으로 한다.
본 발명의 목적 및 또 다른 특징은, 첨부도면을 참조하여 이하의 실시예들의 설명으로부터 손쉽게 분명해질 것이다.
도 1은 본 발명의 일 실시예에 따른 디지탈 카메라의 블록도다.
도 2a 및 도 2b는 상기 실시예에 따른 디지탈 카메라의 LCD에 표시된 화상의 모식도다.
도 3a 및 도 3b는 상기 실시예에 따른 상기 디지탈 카메라의 LCD에 표시된 화상의 모식도다.
도 4는 상기 LCD에 화상을 표시하는 과정을 나타내는 흐름도다.
도 5는 상기 실시예의 디지탈 카메라에 의한 화상합성의 과정을 나타내는 흐름도다.
이제, 본 발명에 따른 바람직한 실시예를 첨부도면을 참조하면서 설명한다.
도 1은, 본 발명의 일 실시예에 의한 디지탈 카메라의 블록도다. 도 1에서, 도면부호 11은, 해당 디지탈 카메라에 착탈가능하게 설치된 광학계의 일부를 구성하는 렌즈이다. 이 렌즈(11)를 거쳐서 촬영 광은 셔터(12)를 통과하고, 조리개(13) 에 의해 광량이 조정되면서 촬상소자(15)에 결상된다. 그 촬상소자(15)는, CMOS 센서와 CCD센서 등의 반도체 CCD이다.
상기 렌즈(11)는, 포커싱 AF구동 모터(14)에 의해 광축(10)을 따라 이동가능하고, 해당 포커싱 AF구동 모터(14)는 포커스 드라이버(19)에 의해 구동량을 제어하여 포커싱한다. 또한, 비록 도시되지 않았지만, 렌즈(11)는 복수의 렌즈를 갖는 렌즈 유닛이고, 서로 인접하는 렌즈간의 간격을 AF구동 모터(14)에 의해 변하게 하여 포커싱한다. 또 조리개(13)는 조리개 드라이버(17)에 의해 그 조리개의 지름이 제어된다. 또 셔터(12)는 셔터 드라이버(18)에 의해 개폐 동작이 제어된다. 이 조리개(13)와 셔터(12)에 의해 촬상소자(15)에 입사하는 광 강도를 제어한다.
보다 자세하게는, 포커스 드라이버(19), 조리개 드라이버(17), 셔터 드라이버(18)는, 촬영 제어기(111)에 의해 그 동작이 제어된다. 해당 촬영 제어기(111)는 후술하는 신호 처리기(211)에 입력된 촬상소자(15)로부터의 화상신호를 사용해서 측광을 행하고, 그 결과에 의거하여 조리개(13)의 개구 지름 및 셔터(12)의 개구 기간을 결정한다. 또한, 촬영 제어기(111)는, 포커스 드라이버(19)를 통해 최적의 초점 또는 설정 값을 구하여, 상기 포커스 드라이버(19), 조리개 드라이버(17), 셔터 드라이버(18)를 구비한 회로 및 메모리들 모두의 동작을 제어한다.
또 촬상소자(15)로부터 출력되는 화상신호는, A/D변환기(110)에 의해 디지탈 신호로 변환되어, 신호 처리기(211)에 입력된다. 이 신호 처리기(211)는, 휘도신호와 색신호의 형성 등의 입력된 화상신호에 대한 소정의 신호처리를 수행하고, 컬러의 화상신호를 생성한다. 그 생성된 화상신호는, 예를 들면 디지탈 카메라의 배면 의 액정 패널과 그 액정 패널을 구동하는 드라이버를 구비한 LCD(212)에 표시된다. 메모리(213)는 그 생성된 화상신호를 기록한다. 촬영자가 메모리(213)에 기록된 화상을 볼 경우에는, 예를 들면 카메라 조작부(214)에서 소정의 스위치를 누르고, 메모리(213)로부터 화상을 판독하여 LCD(212)에 표시한다.
조작부(214)에서 표시 모드의 전환에 의해, 촬영자가 1장의 화상과, 공지의 디지탈 카메라와 같이 복수의 섬네일을 선택 가능하게 한다.
촬영모드에서 상기 일련의 동작은, 짧은 노출시간으로 적절한 노출을 행하기 때문에, 밝은 피사체라고 가정하면, 진동 보상을 할 필요가 없다(이후, "보통 촬영 모드"라고 함).
한편, 어두운 피사체는, 긴 노출시간이 필요하고 카메라 진동의 우려가 있다. 그러면, 촬영자는 조작부(214)에 의해 방진 시스템을 온 또는 작동시킨다. 이하의 동작은, 방진 촬영모드에서 수행된다.
촬영자가 보통 촬영 모드와 유사한 카메라의 릴리즈 버튼(도시 생략)을 반누른 경우, 촬영 제어기(111)는 오토 포커싱과 측광을 행한다. 그 측광 값에 의거하여, 상기 촬영 제어기(111)는, 적정 노출의 화상을 얻기 위해서 셔터 속도(노광 시간) 및 조리개 값을 결정한다. 그리고, 상기 촬영 제어기(111)는, 손진동을 일으킬 가능성이 없는 셔터 속도에 의해 총 노광 시간의 촬영자의 분할을 산출하고, 숏(shot)마다 셔터 속도와 조리개 값을 최종적으로 결정한다. 그리고, 각 촬영이 후속하는데, 각 화상은 노출부족(짧은 노출)으로 촬영된다.
촬영자가 릴리즈 버튼을 누름에 따라, 촬영 제어기(111)는, 산출된 시간에 피사체를 연속 촬영해서 복수의 화상을 취득한다. 1장의 화상에 대해 최초에 설정된 노광 시간을 복수의 숏으로 분할하면, 각 화상은 노광시간이 보다 짧고 노출 부족의 화상이 된다. 이러한 구성은, 노광 시간이 짧기 때문에 노광시에 카메라의 진동에 의해 덜 영향을 받는 화상을 제공한다. 복수의 얻어진 화상은, 적절한 노광으로 1장의 화상으로 합성된다.
복수의 화상에 관한 노광 시간을 짧게 하는 것으로 인해 카메라 진동의 영향을 작아지게 하는 경우라도, 연속적인 복수의 화상의 숏의 카메라 진동으로 인해 그들간의 구도에서 약간의 오프셋이 일어나기도 한다. 이것들 복수의 화상의 합성은, 합성된 화상을 흐리게 할 가능성이 있다.
따라서, 촬영자가 임의의 타이밍에서 조작부(214)의 합성 개시 스위치를 온할 때에, 방진촬영 모드는, 각 촬영마다 A/D변환기(110)에 의해 디지탈 신호로 변환하고, 신호 처리기(211)에서 컬러의 화상신호로 된 후, 메모리(213)에 저장하고, 이하의 합성 처리를 개시한다.
또한, 보통 촬영 모드에서의 화상과 구별하기 위해서, 방진 촬영모드에서 노광 시간을 분할해서 얻어진 "분할 화상"과, 복수의 분할 화상을 합성해서 얻은 "합성 화상"로서 이하의 설명을 한다.
진동 검출기(215)는, 기록 메모리(213)에 기억되어 있는 복수의 분할 화상을 판독하고, 이어서 그 분할된 화상간의 공통의 특징점을 추출하고, 이 특징점의 각 분할 화상의 위치의 좌표를 산출해낸다. 예를 들면, 그 특징점은, 그 분할 화상내에 피사체의 배경으로서 건물 등의 정지 물건이 있는 건물 창문의 엣지에 설정된다.
좌표 변환기(216)는, 산출된 각 분할 화상의 특징점의 위치 좌표에 의거하여, 제 1 분할 화상을 제외하고 분할된 화상들에 대해 좌표 변환을 한다. 이 때문에, 복수의 분할 화상의 특징점의 위치 좌표는, 서로 일치한다. 제1의 분할 화상과 다른 좌표변환된 분할 화상은, 버퍼 메모리(217)에 기억된다. 화상 합성기(218)는, 그 버퍼 메모리(217)로부터 이들 분할된 화상을 판독해서 합성한다.
상기 얻어진 합성된 화상은, 카메라로부터 착탈 가능한 반도체메모리 및 광 디스크 등의 기록 매체(220)에 최종 기록용 화상으로서 기록된다.
종래의 LCD(212)는, 상기 합성된 화상을 표시한다. 그러나, 복수의 분할된 화상을 촬영 후 합성하고 그 결과의 합성된 화상을 LCD(212)에 표시하는 경우, 복수의 분할된 화상을 촬영하면서 그 촬영된 화상을 볼 수 없다. 그 때문에, 복수의 분할 화상을 촬영할 때에, 구도 등을 빨리 확인하고자하는 촬영자의 요구를 만족시키기가 곤란하다.
카메라는, 본 실시예와 달리 화상합성기(218)를 구비하지 않아도 되고, 퍼스널 컴퓨터("PC") 등의 다른 처리장치로 화상처리를 행하여도 된다.
이러한 문제점에 대한 해결책으로서, 본 실시예의 디지탈 카메라는 아래와 같이 기록용 화상과 서로 다른 표시용 화상을 생성한다.
도 2a는, 보통 촬영 모드 시에, LCD(212) 상의 노출이 불충분한 화상을 개략적으로 도시한 것이다. 도 2a에서, 301은 LCD(212)의 표시 프레임이며, 또 302는 촬영된 화상을 나타내고 있다. 일회의 촬영으로 한 장의 화상이 생성되는 보통 촬영 모드에 있어서, 표시 프레임(301)은, 일회의 촬영으로 얻어진 대화상을 나타낸다. 도 2a에서, 반색조 점 메싱은, 불충분한 노출을 의미한다.
한편, 도 2b는, 방진촬영 모드에서, 4장의 분할 화상을 표시한 것을 개략적으로 나타낸 것이다. 방진촬영 모드에 있어서, 각각의 촬영 화상 또는 분할 화상이 노출이 부족하므로, 표시된 경우의 화상은 도 2a와 같이 노출이 부족하고 촬영자는 구도 등을 확인하는 것이 곤란하다. 따라서, 4장의 분할 화상은 표시 프레임(301) 아래에 306으로서 표시되고, 화상 생성기로서 노출 보정기(219)는, 제1의 분할 화상(4개의 화상 306에서 가장 왼쪽의 화상과 같은 화상)의 노출을 조정하는 화상처리 또는 노출 보정을 수행해서, 표시용 화상을 생성한다. 도 2b에 대화상(305)으로서 표시용 화상을 표시한다.
구체적으로는, 노출 보정기(219)는, 제1의 분할 화상의 톤 커브를 변경하여 노출을 보정하고, 휘도와 콘트라스트를 증폭해서, 표시용 화상(305)을 생성한다. 따라서, 표시용 화상(305)이 제1의 분할 화상에 대해서만 노출 보정을 통해 생성되므로, 화상 노이즈는 증폭되어, 결과적으로는 거친 화상이 되는 것이 많다. 그러나, 촬영자는, 방진촬영 모드 시에 있어서도, 제1의 분할 화상 촬영 직후에 있어서 그 화상들이 합성되기 전에 촬영된 화상을 보고 그 구도를 확인할 수 있다.
노출 보정된 분할 화상을 표시할 때, 307로 나타나 있는 바와 같이, 현재 화상이 방진촬영 모드에 의해 촬영된 복수의 화상 중 하나의 화상에 대해 노출을 보정을 통해 얻어진 것을 의미하는 마크 또는 아이콘을 표시해도 된다. 노출 보정된 분할 화상은, 반드시 제1의 분할 화상일 필요는 없고, 비교적 작은 양의 노이즈를 포함하도록 결정되는 제2 또는 이후의 화상 중 하나이어도 된다.
이상의 설명은, 1장의 대화상을 표시하는 LCD(212)에 초점을 맞춘다. 기록 메모리(213)에 기억된 복수의 분할 화상의 섬네일을 도 3a 및 3b를 참조하면서 설명한다. 섬네일 모드는, 촬영한 복수의 작은 화상을 동시에 표시한다.
도 3a는, 보통 촬영 모드에서 촬영이 행해진 화상의 섬네일 상태를 개략적으로 나타낸 것이다. 도 3a에서, 401은, LCD(212)의 표시 프레임이며, 이 프레임(401)내에 각각의 촬영 화상이 섬네일로 표시된다. 따라서, 노출이 불충분하게 촬영된 화상은, 403과 같이 노출이 불충분한 상태에서 표시된다.
한편, 도 3b는 보통 촬영 모드를 방진촬영 모드로 전환하여서 촬영한 복수의 화상을 포함한 섬네일을 개략적으로 표시한 것이다. 방진촬영 모드에 의한 촬영은, 4장의 분할 화상을 촬영한 것으로 한다. 도 3b에서, 406은, 촬영한 4장의 분할 화상의 섬네일을 나타낸다. 각 섬네일 표시된 분할 화상은, 노출이 부족하다.
노출 보정기(219)에 의해 제1 또는 제2의 분할 화상과 상기 축소, 표시 및 분할된 화상에 대해, 노출 보정을 통해 얻어진 표시용 화상(405)은, 보통 촬영모드에서 촬영된 섬네일 화상과 같은 크기로 표시된다.
이 경우에, 상술한 것처럼, 표시용 화상(405)은 증폭된 노이즈를 갖지만, 그 표시용 화상 크기가 작은 섬네일 크기이기 때문에 노이즈는 눈에 잘 띄지 않는다. 오히려, 촬영 화상을 쉽게 촬영자가 확인할 수 있는 이점은, 의미심장하다. 이 경우에도, 표시용 화상(405)은, 방진촬영 모드에서 촬영된 분할 화상인 것을 나타내는 아이콘을 표시하여도 된다.
도 4에 나타낸 흐름도를 참조하여, 방진촬영 모드에서의 복수의 분할 화상의 촬영부터 도 2b에 도시된 표시용 화상의 표시까지의 동작을 설명한다. 이러한 동작은, CPU를 구비한 촬영 제어기(111)에 기억된 컴퓨터 프로그램(화상처리 프로그램)에 따라 실행된다.
그 동작은, 촬영자가 조작부(214)에서 방진촬영 모드를 선택했을 때에 개시된다(스텝(도 4에서는 간단히 "S")1OO1). 촬영자가 릴리즈 버튼을 반눌러서(SW1 온) 촬영을 개시하는 경우(오토포커스 및 측광)(스텝1OO2), 촬상소자(15)는 광전기적으로 피사체로부터 광(피사체 상)을 변환하고, 출력을 신호처리기(211)에 공급한다. 그 화상의 콘트라스트를 검출하면서 촬영 제어기(111)에 의해 AF구동 모터(14)를 구동해서 렌즈(11)를 이동시키고, 그리고 가장 콘트라스트가 높은 위치에서 렌즈(11)를 정지해서 오토 포커스를 행한다. 이것과 동시에, 촬상소자(15)로부터 얻어진 화상에 의거하여 피사체의 밝기를 구한다(스텝1OO3).
다음에, 스텝1OO3에서 구한 피사체의 밝기로부터 촬영하는 분할 화상의 매수를 구한다(스텝1OO4). 예를 들면, 피사체의 밝기를 측광하고, 그 피사체를 적정하게 노광하기 위해서는 조리개(13)는 완전 개방(예를 들면, f2.8), 셔터(12)는 노광 시간 1/8초가 필요하다고 가정한다. 초점거리가 35mm필름 환산으로 30mm일 경우에는, 노광 시간 1/8초가 카메라 및 화상이 진동의 원인이 될 우려가 있기 때문에, 화상 진동의 우려가 없는 노광 시간 1/32초로 결정한다. 이에 따라, 노광 시간을 4분할해서 4회의 분할 화상의 사진을 결정한다.
분할 화상의 매수를 결정하는 경우, 카메라의 파인더나 LCD(212)에 사진의 수를 표시해서 촬영자에 알린다(스텝1OO5).
그후, 촬영자가 릴리즈 버튼(SW2)을 완전히 누를 때까지 대기 상태가 된다. 한편, 이 대기중에 릴리즈 버튼(SW1)의 반누름이 해제되는 경우, 이 그 과정은 스타트로 복귀된다(스텝1OO1). 그 후, 촬영자가 릴리즈 버튼(SW2)을 완전히 누르고 촬영을 지시하면, 제1(커트)분할 화상의 촬영을 시작해(스텝1OO7), 메모리(213)에 기억한다(스텝1OO8).
그리고, 상기 촬영 제어기(111)는, 그 메모리(213)에 기록된 분할 화상의 매수가 소정 매수에 이를 때까지 스텝1OO7와 스텝1OO8의 동작을 반복한다(스텝1OO9).
모든 분할 화상이 기록되면, 촬영 제어기(111)는, 예를 들면 제1(커트) 분할 화상의 노출 보정을 행하도록 노출 보정기(219)에 지시하고(스텝1O1O), 그 노출 보정된 분할 화상을 LCD(212)에 도 2a에 도시된 것처럼, 표시용 화상으로서 표시될 수 있게 한다(스텝1O11). 그리고, 다음 촬영을 위해 스타트로 복귀한다(스텝1O12).
또한, 상기 흐름도는, 상기 분할 화상 모두를 끝까지 촬영한 후에, 제1의 분할 화상을 판독하고, 그 표시용 화상을 생성한다. 그러나, 예를 들면 제1의 분할 화상의 촬영이 끝난 직후, 모든 분할 화상의 촬영이 끝나기 전이라도, 제1의 분할 화상을 메모리(213)로부터 판독하여 노출 보정의 처리를 하여도 된다. 이렇게 구성하면, 촬영과 노출 보정의 처리가 병행해서 행해지므로, 디지탈 카메라의 처리에서는 부담이 되지만, 보다 조기에 LCD(212)에 노출 보정한 화상을 표시하는 것이 가능하다.
이제, 촬영한 복수의 분할 화상을 합성해서 1장의 화상을 생성하는 동작을 도 5를 참조하여 설명한다. 또한, 이러한 동작은, 촬영 제어기(111)에 기억된 컴퓨 터 프로그램(화상 합성 프로그램)에 따라 실행된다. 그러나, 상술한 것처럼, 그 컴퓨터 프로그램은, PC 등의 다른 프로세서에서 가동되기도 한다.
동작 개시 후(스텝2001), 촬영자는 조작부(214)의 재생모드 스위치를 온으로 한다(스텝2002). 응답시, 촬영 제어기(111)는, 메모리(213)로부터 촬영된 화상의 섬네일을 생성하여, 도 3b에 도시된 것처럼, LCD(212)에 표시 가능하게 한다(스텝2003).
촬영자가 조작부(214)의 조작에 의해 상기 섬네일 표시된 촬영된 화상 중에서 방진촬영 모드에서 촬영한 분할 화상을 선택하고(스텝2004), 합성 개시 버튼을 온으로 하는 경우(스텝2005), 제1의 분할 화상을 그 메모리(213)로부터 판독한다. 또한, 진동 검출기(215)는, 상기 분할 화상의 주변영역에서 특징점을 추출하고, 그 특징점의 위치 좌표를 산출해낸다(스텝 2006).
이어서, 촬영 제어기(111)는, 좌표변환기(216)에 제1의 분할 화상을 제외하고 상기 분할 화상을 좌표 변환하도록 지시한다(스텝2007). 보다 구체적으로는, 좌표 변환은, 제 1 분할 화상의 특징점의 좌표가 다른 분할 화상의 특징점의 좌표가 겹치도록 한다.
버퍼 메모리(217)에는, 상기 제1의 분할 화상과 상기 좌표 변환된 분할 화상을 기억해둔다(스텝2008).
제1 화상을 제외하고 모든 분할 화상의 좌표변환이 종료할 때까지는 상기 스텝2006로부터 스텝2008까지의 동작을 반복한다(스텝2009). 이에 따라, 제2와 그 이후의 분할 화상의 구도는, 상기 제1의 분할 화상의 구도와 일치한다.
제1의 분할 화상 이외에 모든 분할 화상에 대해 좌표변환처리가 종료하면, 촬영 제어기(111)는 화상합성처리를 화상 합성기(218)에 지시한다(스텝2010). 본 실시예는, 이 화상합성처리의 특정 수법에 한정되지 않지만, 각 분할 화상의 동일 좌표위치의 화소에 휘도 및 색정보를 가산하여도 된다. 이 경우, 각 분할 화상에서의 랜덤한 노이즈는, 가중 평균을 통해 감소한다.
이렇게 그 합성 화상이 생성되면, 그 화상 합성기(218)는, 각 분할 화상 가장자리 근처의 또 다른 분할 화상에 존재하지 않는 영역 또는, 상기 분할 화상 모두에 있어서의 겹치지 않는 영역을 제거한다. 그 겹치지 않는 영역은, 복수의 분할 화상을 촬영할 때 진동으로 인한 구도로부터 분할 화상의 시프트에 의해 생긴다. (크기가 보다 작은) 상기 제거된 합성된 화상을, 원래의 크기로 확산 보간하고(스텝2011), LCD(212)에 표시한다(스텝2012). 그 확산 보간된 합성 화상을 기록 매체(220)에 기록하고(스텝2013), 스타트로 복귀한다.
합성된 화상을 표시하기 위해서, 도 2a에 도시된 보통 촬영 모드에 있어서의 표시 모드이어도 되고, 또는 도 2b에 도시된 방진촬영 모드에 있어서의 표시 모드이어도 된다. 또한, 각 분할 화상에는, 각 화상이 상관되는 태그 정보로서 기억된다.
상술한 것처럼, 본 실시예는, 복수의 화상이 합성되기 전에 복수의 화상 중에서 한 장의 화상의 노출을 보정하여 디지털 카메라 등의 카메라에서의 표시용 화상을 생성하는데, 노출 부족의 복수의 화상을 연속적으로 촬영하여 그 복수의 화상을 한 장의 화상으로 합성한다. 이에 따라, 촬영자는, 촬영한 화상의 구도를 그 화상 합성 처리의 종료를 기다리지 않고 확인할 수 있고 가장 좋은 순간을 유지하여 촬영을 양호하게 행할 수 있다.
그래서, 본 발명은 촬영을 중단하지 않는 카메라를 제공할 수 있고, 합성복수의 화상으로부터 한 장의 노출된 화상을 생성할 때 촬영된 화상을 적절하게 표시할 수 있다.

Claims (13)

  1. 기록용의 제1 화상으로 합성되는 복수의 화상을 촬영하는 촬상장치와,
    상기 복수의 화상중 하나의 특정 화상에 대해 노출 보정 처리를 수행함으로써 표시용의 제2 화상을 생성하는 화상 생성기를 구비하며,
    상기 제1 화상은 제1 노출기간에 촬영된 화상에 대응하고, 상기 복수의 화상 각각은 상기 제1 노출기간보다 짧은 제2 노출기간에 촬영된 화상인 것을 특징으로 하는 카메라.
  2. 삭제
  3. 제 1 항에 있어서,
    상기 제2 화상을 표시하는 디스플레이를 더 구비한 것을 특징으로 하는 카메라.
  4. 삭제
  5. 제 1 항에 있어서,
    상기 특정 화상은, 상기 복수의 화상 중에서 제1의 촬영된 화상인 것을 특징으로 하는 카메라.
  6. 제 1 항에 있어서,
    상기 화상 생성기는, 상기 복수의 화상을 촬영한 후에 있어서 상기 복수의 화상을 합성하기 전에 상기 제2 화상을 형성하는 것을 특징으로 하는 카메라.
  7. 제 1 항에 있어서,
    상기 화상 생성기는, 상기 복수의 화상의 촬영을 종료하기 전에 제2 화상을 형성하기 시작하는 것을 특징으로 하는 카메라.
  8. 삭제
  9. 삭제
  10. 제 3 항에 있어서,
    상기 디스플레이는, 상기 제2 화상보다 작은 복수의 화상을 더 표시하는 것을 특징으로 하는 카메라.
  11. 제 3 항에 있어서,
    상기 디스플레이는, 상기 복수의 화상중의 화상이 상기 특정 화상인 것을 나타내는 마크를 더 표시하는 것을 특징으로 하는 카메라.
  12. 제 1 항에 있어서,
    상기 복수의 화상을 합성해서 상기 제1 화상을 생성하는 화상 합성기를 더 구비한 것을 특징으로 하는 카메라.
  13. 합성되는 복수의 화상을 촬영하여 기록용의 제1 화상을 생성하는 스텝과,
    상기 복수의 화상중 하나의 특정 화상에 대해 노출 보정 처리를 수행함으로써 표시용의 제2 화상을 생성하는 스텝을 포함하며,
    상기 제1 화상은 제1 노출기간에 촬영된 화상에 대응하고, 상기 복수의 화상 각각은 상기 제1 노출기간보다 짧은 제2 노출기간에 촬영된 화상인 것을 특징으로 하는 화상처리방법.
KR1020077013186A 2004-12-13 2005-12-13 카메라 및 카메라의 화상처리방법 KR100871639B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2004360241A JP4533119B2 (ja) 2004-12-13 2004-12-13 撮像装置及び撮像装置の画像表示方法
JPJP-P-2004-00360241 2004-12-13

Publications (2)

Publication Number Publication Date
KR20070086061A KR20070086061A (ko) 2007-08-27
KR100871639B1 true KR100871639B1 (ko) 2008-12-02

Family

ID=36587979

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020077013186A KR100871639B1 (ko) 2004-12-13 2005-12-13 카메라 및 카메라의 화상처리방법

Country Status (7)

Country Link
US (1) US7817186B2 (ko)
EP (1) EP1808014B1 (ko)
JP (1) JP4533119B2 (ko)
KR (1) KR100871639B1 (ko)
CN (1) CN101076997B (ko)
DE (1) DE602005027380D1 (ko)
WO (1) WO2006064936A1 (ko)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5105139B2 (ja) * 2006-08-03 2012-12-19 ソニー株式会社 撮像装置および表示方法、並びにプログラム
JP4483841B2 (ja) * 2006-09-06 2010-06-16 カシオ計算機株式会社 撮像装置
EP2129111B1 (en) 2007-03-06 2013-01-09 Panasonic Corporation Imaging device, edition device, image processing method, and program
JP2009017078A (ja) * 2007-07-03 2009-01-22 Fujifilm Corp ディジタル・スチル・カメラおよびその動作制御方法
KR101411324B1 (ko) * 2007-08-14 2014-06-25 삼성전자주식회사 이미지 디스플레이 방법 및 상기 방법을 적용한 디스플레이장치
JP4551439B2 (ja) * 2007-12-17 2010-09-29 株式会社沖データ 画像処理装置
JP4656168B2 (ja) 2008-03-05 2011-03-23 カシオ計算機株式会社 画像合成装置
JP5635896B2 (ja) * 2010-02-18 2014-12-03 キヤノン株式会社 画像入力装置及び画像検証装置並びにそれらの制御方法
CN102938842B (zh) * 2011-08-16 2015-04-15 联咏科技股份有限公司 影像校正装置、影像校正方法及相关装置和产品
US8786737B2 (en) 2011-08-26 2014-07-22 Novatek Microelectronics Corp. Image correction device and image correction method
JP5761272B2 (ja) * 2013-08-06 2015-08-12 カシオ計算機株式会社 撮像装置、撮像方法及びプログラム
US9311114B2 (en) * 2013-12-13 2016-04-12 International Business Machines Corporation Dynamic display overlay
KR102238532B1 (ko) * 2014-02-12 2021-04-09 엘지전자 주식회사 이동 단말기 및 그 제어방법
US9641759B2 (en) * 2014-07-10 2017-05-02 Lg Electronics Inc. Mobile terminal and controlling method thereof
CN105450920B (zh) * 2014-08-19 2019-10-11 宇龙计算机通信科技(深圳)有限公司 一种拍照方法及装置
JP6522539B2 (ja) * 2016-03-18 2019-05-29 富士フイルム株式会社 内視鏡システム及びその作動方法
US10966001B2 (en) 2018-04-05 2021-03-30 Tvu Networks Corporation Remote cloud-based video production system in an environment where there is network delay
US11463747B2 (en) 2018-04-05 2022-10-04 Tvu Networks Corporation Systems and methods for real time control of a remote video production with multiple streams
US11212431B2 (en) * 2018-04-06 2021-12-28 Tvu Networks Corporation Methods and apparatus for remotely controlling a camera in an environment with communication latency

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000092378A (ja) * 1998-09-16 2000-03-31 Olympus Optical Co Ltd 撮像装置
JP2000307921A (ja) * 1999-04-15 2000-11-02 Ricoh Co Ltd 画像処理装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000224470A (ja) * 1999-02-02 2000-08-11 Minolta Co Ltd カメラシステム
JP4473363B2 (ja) 1999-05-26 2010-06-02 富士フイルム株式会社 手振れ補正装置およびその補正方法
JP4503892B2 (ja) * 2001-08-22 2010-07-14 オリンパス株式会社 撮像装置
US7136101B2 (en) * 2001-12-24 2006-11-14 Hewlett-Packard Development Company, L.P. Use-controlled exposure method and system with visual feedback
JP4701598B2 (ja) * 2003-01-07 2011-06-15 セイコーエプソン株式会社 静止画像生成装置、静止画像生成方法、静止画像生成プログラム、および静止画像生成プログラムを記録した記録媒体
US7295232B2 (en) * 2003-01-15 2007-11-13 Canon Kabushiki Kaisha Camera and program
JP3722125B2 (ja) * 2003-01-30 2005-11-30 コニカミノルタフォトイメージング株式会社 撮像装置
JP3804617B2 (ja) * 2003-02-14 2006-08-02 コニカミノルタフォトイメージング株式会社 画像処理装置及び方法
JP4181923B2 (ja) 2003-05-29 2008-11-19 キヤノン株式会社 撮像装置および撮像装置の制御方法
JP4575022B2 (ja) 2004-05-13 2010-11-04 パナソニック株式会社 撮像装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000092378A (ja) * 1998-09-16 2000-03-31 Olympus Optical Co Ltd 撮像装置
JP2000307921A (ja) * 1999-04-15 2000-11-02 Ricoh Co Ltd 画像処理装置

Also Published As

Publication number Publication date
JP2006173774A (ja) 2006-06-29
EP1808014B1 (en) 2011-04-06
KR20070086061A (ko) 2007-08-27
US7817186B2 (en) 2010-10-19
CN101076997A (zh) 2007-11-21
JP4533119B2 (ja) 2010-09-01
WO2006064936A1 (en) 2006-06-22
EP1808014A4 (en) 2009-06-03
CN101076997B (zh) 2010-06-16
US20080136939A1 (en) 2008-06-12
EP1808014A1 (en) 2007-07-18
DE602005027380D1 (de) 2011-05-19

Similar Documents

Publication Publication Date Title
KR100871639B1 (ko) 카메라 및 카메라의 화상처리방법
JP4378272B2 (ja) 撮影装置
JP3634232B2 (ja) デジタルスチルカメラ
JP2006086978A (ja) カメラシステム、カメラ本体及び交換レンズ
JP2004077517A (ja) オートフォーカス機能付きカメラ
JP4533252B2 (ja) 撮像装置及びその制御方法及びプログラム及び記憶媒体
JPWO2011065000A1 (ja) 電子カメラ
JP4323969B2 (ja) 撮影装置
JP4977569B2 (ja) 撮影制御装置、撮影制御方法、撮影制御プログラム、および撮影装置
JP2001275033A (ja) デジタルスチルカメラ
JP2007336394A (ja) 撮像装置及び画像合成方法
JP2003219244A (ja) デジタルカメラ
US7961231B2 (en) Apparatus, method and computer-readable recording medium containing program for photographing
JP2007049408A (ja) 撮影装置
JP4046276B2 (ja) デジタルカメラ
US11330179B2 (en) Imaging device and control method thereof
JP2003241066A (ja) カメラ
JP2006050139A (ja) 光学機器
JP2002258344A (ja) カメラ
JP5239687B2 (ja) 撮像装置
JP4365973B2 (ja) 撮像装置、焦点調節装置及び焦点調節方法
JP2009038589A (ja) 撮像装置
JP2007184787A (ja) デジタルカメラ
JP2006033578A (ja) 光学機器補正装置及びシステム
JP2006041796A (ja) 撮影装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121023

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20131029

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20141028

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20151023

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20161025

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20171025

Year of fee payment: 10

LAPS Lapse due to unpaid annual fee