KR20090088435A - 복수의 센서들을 구비한 hdr 카메라 - Google Patents
복수의 센서들을 구비한 hdr 카메라 Download PDFInfo
- Publication number
- KR20090088435A KR20090088435A KR1020097014034A KR20097014034A KR20090088435A KR 20090088435 A KR20090088435 A KR 20090088435A KR 1020097014034 A KR1020097014034 A KR 1020097014034A KR 20097014034 A KR20097014034 A KR 20097014034A KR 20090088435 A KR20090088435 A KR 20090088435A
- Authority
- KR
- South Korea
- Prior art keywords
- image sensor
- sensor arrays
- dynamic range
- high dynamic
- image
- Prior art date
Links
- 238000003491 array Methods 0.000 claims abstract description 37
- 238000000034 method Methods 0.000 claims description 25
- 238000004590 computer program Methods 0.000 claims 2
- 238000001444 catalytic combustion detection Methods 0.000 description 42
- 238000003384 imaging method Methods 0.000 description 4
- 238000013500 data storage Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 2
- XAGFODPZIPBFFR-UHFFFAOYSA-N aluminium Chemical compound [Al] XAGFODPZIPBFFR-UHFFFAOYSA-N 0.000 description 1
- 229910052782 aluminium Inorganic materials 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/57—Control of the dynamic range
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Studio Devices (AREA)
- Exposure Control For Cameras (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Color Television Image Signal Generators (AREA)
- Cameras In General (AREA)
Abstract
전자 카메라는 2개 이상의 이미지 센서 어레이들을 포함한다. 이미지 센서 어레이들 중 적어도 하나는 고 동적 범위(high dynamic range:HDR)를 갖는다. 또한, 카메라는 2개 이상의 이미지 센서 어레이들에 광이 선택적으로 도달하도록 하는 셔터(shutter); 이미지 센서 어레이들로부터의 화소 데이터를 선택적으로 판독하기 위한 판독 회로(readout circuitry); 및 셔터 및 판독 회로를 제어하도록 구성된 제어기를 포함한다. 제어기는 프로세서, 그리고 컴퓨터 판독가능 코드가 구현되어 있는 메모리를 포함하고, 상기 컴퓨터 판독가능 코드는 프로세서에 의해 실행되었을 때, 제어기로 하여금, 이미지 캡쳐(capture) 기간 동안 셔터를 열어 2개 이상의 이미지 센서 어레이들이 화소 데이터를 캡쳐할 수 있게 하며, 2개 이상의 이미지 센서 어레이들로부터 화소 데이터를 판독하도록 한다.
고 동적 범위(HDR) 카메라, 이미지 센서 어레이, 화소 데이터, 이미지 캡쳐, 뷰 스크린, 후드, 감광 칩, 전하 결합 디바이스(CCD)
Description
본 발명은 전자 카메라들에 관한 것으로, 특히 복수의 노출들(exposures)을 캡쳐(capture)하기 위한 방법 및 전자 카메라 장치에 관한 것이다. 본 발명은 고 동적 범위(high dynamic range:HDR) 이미지들을 캡쳐하는데 적용할 수 있다.
실세계의 장면들은 가장 밝은 하이라이트들(highlights)의 밝기와 가장 어두운 음영들(shadows) 간에 50,000:1의 콘트라스트 비를 가질 수 있다. 많은 통상의 이미지 포맷들 및 이미지 렌더링 디바이스들(이를테면 디지털 프로젝터들, 컴퓨터 모니터들, 등)은 수백 대 1의 콘트라스트 비들을 재생할 수 있을 뿐이다. 이러한 파일 포맷들에서 있어서는 색 당 하나의 8비트 숫자를 사용하여 화소 밝기값들이 명시되는 것이 일반적이다.
고 동적 범위(HDR) 이미지 포맷들은 통상의 8비트 이미지 포맷들보다 현저하게 큰 콘트라스트 비들을 기록할 수 있게 한다. 예를 들면, 어떤 HDR 포맷들은 밝기의 서로 다른 레벨들을 표현하기 위해서 색 당 16 혹은 32 비트들을 사용한다.
고 동적 범위 이미지들을 위한 이미지 데이터를 얻는 한 방법은 서로 다른 노출 레벨들에서 통상의 이미징(imaging) 장비로 복수의 이미지들을 획득하는 것이다. 이 기술은 예를 들면 참조로 본 명세서에 포함되는, Debevec 등의 Recovering High Dynamic Range Radiance Maps from Photographs, Proceedings of SIGGRAPH 97, Computer Graphics Proceedings, Annual Conference Series, pp. 369-378 (August 1997, Los Angeles, California), Addison Wesley, Edited by Turner Whitted. ISBN 0-89791-896-7 에 기술되어 있다.
문제는 복수의 이미지들이 서로 정렬될 필요가 있다는 것이다. 이것은 대부분의 경우들에 있어서 삼각대(tripod)를 사용하는 것을 필요하게 만든다. 또한, HDR 이미지로 조합하기에 적합한 복수의 이미지들을 촬영하게 카메라를 설정하는 것은 이미지들 각각에 대해 사용하기 위한 노출들의 적절한 조합에 관해 상당한 지식을 요구한다.
HDR 이미지들은 주류가 되고 있다. HDR 이미지들을 쉽게 획득하기 위한 방법들 및 장치에 대한 필요성이 존재한다.
본 발명은 전자 카메라들에서 복수의 노출들을 획득하기 위한 방법들 및 장치를 제공한다. 방법들 및 장치는 HDR 이미지를 생성하기 위해 결합될 수 있는 이미지들을 획득하는 것에 적용될 수 있다. 본 발명의 일부 실시예들에 따른 장치는 복수의 이미지 센서들을 구비하는 전자 카메라를 포함할 수 있다.
본 발명의 일 양태는 2개 이상의 이미지 센서 어레이들을 포함하는 전자 카메라를 제공한다. 이미지 센서 어레이들 중 적어도 하나는 고 동적 범위를를 갖는다. 또한, 카메라는 광이 선택적으로 2개 이상의 이미지 센서 어레이들에 도달하도록 하는 셔터(shutter), 이미지 센서 어레이들로부터 화소 데이터를 선택적으로 판독하기 위한 판독 회로, 및 셔터와 판독 회로를 제어하도록 구성된 제어기를 포함한다. 제어기는 프로세서, 그리고 컴퓨터 판독가능 코드가 구현되어 있는 메모리를 포함하고, 코드는 프로세서에 의해 실행되었을 때, 제어기로 하여금, 이미지 캡쳐 기간 동안 셔터를 열어 2개 이상의 이미지 센서 어레이들이 화소 데이터를 캡쳐할 수 있게 하며, 2개 이상의 이미지 센서 어레이들로부터 화소 데이터를 판독하도록 한다.
본 발명의 또 다른 양태는 2개 이상의 이미지 센서 어레이들을 포함하는 전자 카메라에서 고 동적 범위 이미지 데이터를 생성하는 방법을 제공하고, 2개 이상의 이미지 센서 어레이들 중 적어도 하나는 고 동적 범위를 갖는다. 상기 방법은 이미지 캡쳐 기간 동안 상기 2개 이상의 이미지 센서 어레이들에 광이 도달하도록 하는 단계; 상기 이미지 캡쳐 기간 동안 상기 2개 이상의 이미지 센서 어레이들에 의해 캡쳐된 화소 데이터를 판독하는 단계; 및 상기 2개 이상의 이미지 센서 어레이들로부터 판독된 상기 화소 데이터를 결합하여 고 동적 범위 이미지 데이터를 생성하는 단계를 포함한다.
본 발명의 다른 양태들 및 구체적인 실시예들의 특징들이 이하 기술된다.
본 발명의 비제한적 실시예들을 도시한 도면들에서,
도 1은 라인간 전송 CCD를 위한 센서 레이아웃을 도시한 것이다.
도 2는 발명의 일 실시예에 따른 전자 카메라의 블록도이다.
도 3은 발명의 또 다른 실시예에 따른 방법에서의 단계들을 도시한 흐름도이 다.
다음 설명 전체에 걸쳐, 구체적 상세들은 본 발명의 더 완전한 이해를 제공하기 위해서 개시된다. 그러나, 본 발명은 이들 상세들 없이도 실시될 수 있다. 다른 경우들에서, 잘 공지된 요소들은 본 발명을 불필요하게 모호하도록 하는 것을 피하기 위해서 상세히 도시 또는 기술되지 않았다. 따라서, 명세서 및 도면들은 제한적인 것이 아니라 예시적인 것으로 간주되어야 한다.
본 발명의 한 양태는 단일 이미지의 복수의 노출을 캡쳐하도록 구성된 전자 카메라를 제공한다. 복수의 노출들은 고 동적 범위(HDR) 이미지를 생성하기 위해 사용될 수 있다. HDR 이미지를 생성하기 위해 복수의 노출들로부터 데이터를 조합하는 방법들이 이 기술에 공지되어 있다. 예를 들면, 일부 이러한 방법들은 참조로 본 명세서에 포함되는 Mann, S. et al.에 의한, Being 'undigital' with digital cameras: Extending dynamic range by combining differently exposed pictures, In Proc. IS&T 46th Annual Conference (May, 1995) pp. 422-428에, 그리고 위에 언급된 Debevec 등의 논문에 기술되어 있다.
전형적으로 전자 카메라들은 선택적으로 광이 감광 칩에 도달할 수 있게 열리거나 혹은 광이 칩에 도달하는 것을 차단하기 위해 닫혀질 수 있는 셔터를 구비한다. 셔터가 열릴 때, 렌즈는 이미지를 칩에 투사(project)한다. 셔터는 예를 들면 기계식 셔처를 포함할 수 있다.
칩은 다수의 화소 위치들에서 광의 세기를 측정한다. 화소들 각각에서 세기 를 나타내는 값들이 읽혀져 메모리에 저장될 수 있다. 감광 칩들은 또한 전형적으로, 이에 저장된 데이터가 읽혀지기 전에 감광요소들이 광을 수집하는 시간량을 선택하는 수단을 포함한다. 이러한 수단은 "전자식 셔터"로서 동작할 수 있다. 예를 들면, 많은 CCD 칩들은 감광 화소들로부터 화소 데이터를 광으로부터 차폐된 수직 데이터 레지스터들로 읽어내는 것을 시발(trigger)시키는 제어를 포함한다. 본 발명자들은 전자 카메라에 복수의 CCD 칩들을 제공함으로써 카메라가 단일의 이미지의 복수의 노출들을 동시에 캡쳐할 수 있도록 결정하였다.
도 1은 많은 전자 카메라들에서 사용되는 유형의 라인간 전송 전하 결합 디바이스(charge coupled device:CCD)(10)에 대한 센서 레이아웃을 도시한 것이다. CCD(10)은 감광요소들, 그리고 수직 레지스터들(14)을 포함하는 저장영역들을 포함하는 복수의 이미징 영역들(12)을 포함한다. 예시된 실시예에서, 이미징 영역들(12)은 수평방향으로 수직 레지스터들(14)과 교번하여 있다. 이미징 영역들(12) 각각은 복수의 화소들(16)을 포함한다. 각각의 화소(16)는 전하를 저장하는 센서를 포함한다. 저장된 전하량은 센서에 의해 검출된 광자들의 수에 따른다. 도 1에 화살표들로 나타낸 바와 같이, 이미지가 노출된 후에, 화소들(16)에 저장된 전하들을 특징짓는 화소 데이터는 수직 레지스터들(14)에 옮겨진다.
수직 레지스터들(14)(때때로 "컬럼 레지스터들"이라고도 함)은 들어오는 광이 수직 레지스터들(14)에 부딪히지 못하게 하기 위해서 불투명 마스크층(예를 들면, 알루미늄으로 된 스트립들)로 피복되어 있을 수 있다. 수직 레지스터들(14)은 화소 데이터가 수직 레지스터들(14) 아래로 해서 수평 레지스터(18)에 옮겨질 때 전하들의 특성들을 보존한다. (본 명세서에서 사용되는 "수직", "수평" 및 "아래로"라는 용어들은 임의 특정한 물리적 방위를 말하기보다는 도 1에 도시된 요소들이 놓인 방위를 말함). 화소 데이터는 일반적으로 하나 이상의 증폭기들 및/또는 그외 다른 신호 조건 회로들(도시되지 않음)을 통해 수평 레지스터(18)에서 아날로그-디지털 변환기로 읽혀진다.
도 2는 제 1 및 제 2 CCD들(10A, 10B)가 장착된 전자 카메라(20)를 도시한 것이다. CCD들(10A, 10B) 각각은 구조가 도 1의 CCD(10)와 유사할 수 있으나, 서로 다른 특성들을 가질 수 있다. 예를 들면, 제 1 CCD(10A)는 보통의 동적 범위를 갖는 고 해상 센서를 포함할 수 있다. 제 2 CCD(10B)는 고 동적 범위를 갖는 저 해상 센서를 포함할 수 있다. 일부 실시예들에서, 제 1 CCD(10A)의 해상도는 예를 들면, 1920 x 1080 혹은 그 이상일 수 있다. 제 2 CCD(10B)의 해상도는 각 크기(dimension)에서 제 1 CCD(10A)의 해상도의 1/4만큼 낮을 수도 있다. 또한, 일부 실시예들에서, 제 1 CCD(10A)는 색 센서를 포함할 수 있고, 제 2 CCD(10B)는 단색 센서를 포함할 수도 있다.
카메라(20)는 이미지로부터의 광이 CCD들(10A, 10B)에 선택적으로 도달할 수 있게 기계식 셔터(22)를 포함한다. 기계식 셔터(22)가 열려졌을 때, 들어오는 광은 광학 시스템(도시되지 않음)에 의해 CCD들(10A, 10B)에 집중(focus)된다. 제어기(24)는 셔터 제어라인(26)에 의해 셔터(22)의 개폐를 제어한다. 제어기(24)는 또한 CCD 제어 라인들(28A, 28B)에 의해 CCD들(10A, 10B)의 수직 레지스터들(14) 및 수평 레지스터(18)의 클럭킹(clocking)도 제어한다. 제어기(24)는, 예를 들면, 소 프트웨어(예를 들면, 펌웨어(25))를 실행하는 마이크로프로세서를 포함할 수 있다. 제어기(24)는 데이터 라인들(30A, 30B)에 의해 CCD들(10A, 10B)로부터 화소 데이터를 수신한다.
제어기(24)는 메모리(32)에 화소 데이터를 저장할 수 있다. 제어기(24)는, 예를 들면, 본 명세서에 참조로 포함되는 2004년 12월 24일에 출원된 국제출원 PCT/CA2004/002199에 기술된 바와 같이, HDR 정보를 포함하는 제 1 부분, 및 톤 맵 데이터(tone map data)를 포함하는 제 2 부분을 포함하는 데이터 구조로 메모리(32)에 화소 데이터를 저장할 수 있다.
제어기(24)는 화소 데이터에 기초하여 이미지를 뷰 스크린(34) 상에 표시할 수도 있다. 뷰 스크린(34)은, 예를 들면, 뷰어(viewer)가 이미지를 보는 것을 어렵게 만들 수도 있을 주변 조명을 극복하기 위해서 고 휘도(luminance) 디스플레이를 포함할 수 있다. 대안적으로, 뷰 스크린(34)은 본 명세서에 참조로 포함되는, 예를 들면 2002년 2월 27일에 출원된 국제출원번호 PCT/CA2002/000255에, 혹은 2003년 3월 13일에 출원된 국제출원 PCT/CA03/00350에 개시된 것들과 같은 고 동적 범위 디스플레이 디바이스를 포함할 수도 있다. 이러한 실시예들에서, 카메라(20)는 고 동적 범위 디스플레이 디바이스를 주변 조명으로부터 차폐하기 위해 후드(hood)를 포함할 수 있다.
또한, 카메라(20)는 사용자가 제어기(24)와 상호작용할 수 있게 하는 인터페이스(35)를 포함한다. 인터페이스(35)는 셔터 릴리즈(release)(36)를 포함한다. 셔터 릴리즈(36)는 타이머, 전자신호, 셔터 릴리즈 버튼 등에 의해 시발될 수 있다.
도 3은 예를 들면 도 2의 카메라(20)와 같은 복수의 CCD들을 구비하는 카메라를 사용하여 고 동적 범위(HDR) 이미지를 생성하기 위한 방법(100)을 도시한 것이다. 방법(100)이 2개의 CCD들을 구비하는 카메라의 맥락에서 기술될지라도, 방법(100)이 2개 이상의 CCD들을 구비하는 카메라를 사용하여 실시될 수도 있을 것임을 알아야 한다.
블록(102)에서, 방법(100)은 카메라의 렌즈를 적절한 개구(aperture)로 설정한다. 이 개구는 카메라의 노출 제어 회로에 의해 설정될 수 있다. 디지털 카메라들에서 셔터 개구를 설정하기 위한 매우 다양한 적합한 시스템들이 이 기술에 공지되어 있다. 이러한 시스템들은 개구를 사용자가 결정한 값으로 설정하거나 검출된 광 레벨들에 기초하여 알고리즘에 따라 개구를 설정할 수 있다.
블록(104)에서 제 1 및 제 2 CCD들(10A, 10B)의 화소들에 저장된 임의 전하들이든 제거되고, 이미지 캡쳐 기간이 시작된다. 블록(106)에서 카메라의 타이머는 이미지 캡쳐를 위한 소정의 기간을 카운트 다운 한다. 제 1 및 제 2 CCD들(10A, 10B)은 각각 동일 기간 동안 노출될 수 있으나, 이것은 모든 실시예들에서 필요한 것은 아니다. 이에 더하여 혹은 대안적으로, 예를 들면, 본 명세서에 참조로 포함되는 것들인, 2005년 9월 26일에 출원된 미국특허출원번호 11/236,155 및 2006년 7월 24일에 출원된 미국특허출원번호 11/459,633에 기술된 것들과 같은 기술들을 채용함으로써, 제 1 CCD(10A) 및 제 2 CCD(10B) 혹은 이들 둘 다는 이미지 캡쳐 기간 동안 복수의 노출들을 캡쳐하게 동작될 수도 있다.
제 1 및 제 2 CCD들(10A, 10B)이 같은 기간 노출되지 않는 실시예들에서, 제 1 및 제 2 CCD들(10A, 10B)로부터의 데이터를 결합할 때 시간-영역 보간 기술들이 사용될 수도 있다. 제 1 및 제 2 CCD들(10A, 10B)의 노출 후에, 제 1 및 제 2 CCD들(10A, 10B)의 화소들에 저장된 전하를 나타내는 데이터가 블록(108)에서 읽혀진다. 제 1 및 제 2 CCD들(10A, 10B) 각각이 단지 한번 노출되는 실시예들에서, 데이터는 이미지 캡쳐 기간 후에 읽혀질 수 있다. 제 1 CCD(10A) 혹은 제 2 CCD(10B) 혹은 이들 둘 다가 복수의 노출들을 캡쳐하는 실시예들에서, 데이터의 일부는 이미지 캡쳐 기간 동안 읽혀질 수도 있고, 데이터의 일부는 이미지 캡쳐 기간 후에 읽혀질 수 있다.
블록(110)에서, 제 1 및 제 2 CCD들(10A, 10B)로부터 데이터는 HDR 이미지를 생성하기 위해 결합된다. 제 1 및 제 2 CCD들(10A, 10B)로부터의 데이터를 결합하는 것은, 예를 들면, 국제출원번호 PCT/CA2004/002199에 기술된 것들과 같은 기술들의 사용을 포함할 수도 있다. 제 1 및 제 2 CCD들(10A, 10B)로부터 결합된 데이터는 메모리에 저장될 수 있다. 예를 들면, 결합된 데이터는 보통 및 동적 범위 이미지들 둘 다가 결합된 데이터로부터 생성될 수 있도록, 국제출원번호 PCT/CA2004/002199에 기술된 바와 같이, HDR 정보를 포함하는 제 1 부분, 및 톤 맵 데이터를 포함하는 제 2 부분을 포함하는 데이터 구조로 저장될 수 있다.
2개의 CCD들이면 일반적으로 HDR 이미지를 생성하기에 충분하다고 발명자들이 결정하였을지라도, 발명의 특정 실시예들에 따른 카메라들은 2개 이상의 CCD들을 포함할 수도 있다. 예를 들면, 2개 이상의 CCD들의 사용은 결과적인 이미지에 추가의 동적 범위 및/또는 색들을 제공할 수 있다. 또한, 일부 실시예들에서, 2개 이상의 CCD들 중 적어도 하나는 HDR 화소들을 캡쳐하는데 맞게 특정하게 수정될 수 있다.
카메라 내의 제어기는 HDR 이미지 데이터를 생성하고 임의의 적합한 HDR 포맷으로 HDR 이미지 데이터를 저장하기 위해 2개 이상의 CCD들로부터의 데이터를 결합하도록 프로그램될 수 있다. 이것이 행해진 경우, 근본적으로 사용자에게 명료하게 HDR 이미지들이 얻어질 수 있음을 알 수 있다.
본 발명의 특정 구현예들은 프로세서들로 하여금 본 발명의 방법을 수행하도록 하는 소프트웨어 명령들을 실행하는 컴퓨터 프로세서들을 포함한다. 예를 들면, 전자 카메라를 위한 제어기 내에 하나 이상의 프로세서들은 프로세서들에 액세스할 수 있는 프로그램 메모리 내의 소프트웨어 명령들을 실행함으로써 도 3의 방법을 구현할 수 있다. 본 발명은 또한 프로그램 제품 형태로 제공될 수 있다. 프로그램 제품은 데이터 프로세서에 의해 실행되었을 때 데이터 프로세서로 하여금 본 발명의 방법을 실행하도록 하는 명령들을 포함하는 한 세트의 컴퓨터 판독가능 신호들을 수록한 임의의 매체를 포함할 수 있다. 본 발명에 따른 프로그램 제품들은 매우 다양한 형태들 중 어느 한 형태일 수 있다. 프로그램 제품은, 예를 들면, 플로피 디스켓들 및 하드디스크 드라이브들을 포함하는 자기 데이터 저장 매체, CD ROM들 및 DVD들을 포함하는 광학 데이터 저장 매체, 및 ROM들, 플래시 RAM, 등을 포함하는 전자 데이터 저장 매체와 같은 물리적 매체, 혹은 디지털 또는 아날로그 통신 링크들과 같은 전송유형의 매체를 포함할 수 있다. 프로그램 제품상의 컴퓨터 판독가능 신호들은 선택적으로 압축 혹은 암호화될 수 있다.
구성요소(예를 들면, 소프트웨어 모듈, 프로세서, 어셈블리, 디바이스, 회로, 등)가 위에 언급된 경우, 다른 말이 없으면, 이 구성요소에 대한 언급("수단"에 대한 언급을 포함해서)은 이 구성요소의 등가물들로서, 발명의 예시된 실시예들에 기능을 수행하는 개시된 구조와 구조적으로 동등하지 않는 구성요소들을 포함해서, 기술된 구성요소의 기능(즉, 기능적으로 동등한)을 수행하는 임의의 구성요소를 포함하는 것으로서 해석되어야 한다.
앞에 개시된 바에 비추어 당업자들에게 명백한 바와 같이, 본 발명의 실시에서 많은 변경들 및 수정들이 본 발명의 정신 혹은 범위 내에서 가능하다. 따라서, 본 발명의 범위는 다음의 청구항들에 의해 정의된 내용에 따라 해석되어야 한다.
Claims (15)
- 전자 카메라에 있어서,2개 이상의 이미지 센서 어레이들로서, 상기 이미지 센서 어레이들 중 적어도 하나는 고 동적 범위(high dynamic range:HDR)를 갖는, 상기 이미지 센서 어레이들;상기 2개 이상의 이미지 센서 어레이들에 광이 선택적으로 도달하도록 하는 셔터(shutter);상기 이미지 센서 어레이들로부터의 화소 데이터를 선택적으로 판독하기 위한 판독 회로(readout circuitry); 및상기 셔터 및 상기 판독 회로를 제어하도록 구성된 제어기로서, 상기 제어기는 프로세서, 그리고 컴퓨터 판독가능 코드가 구현되어 있는 메모리를 포함하고, 상기 컴퓨터 판독가능 코드는 상기 프로세서에 의해 실행되었을 때, 상기 제어기로 하여금,이미지 캡쳐(capture) 기간 동안 상기 셔터를 열어 상기 2개 이상의 이미지 센서 어레이들이 화소 데이터를 캡쳐할 수 있게 하며,상기 2개 이상의 이미지 센서 어레이들로부터 화소 데이터를 판독하도록 하는, 상기 제어기를 포함하는, 전자 카메라.
- 제 1 항에 있어서, 상기 컴퓨터 판독가능 코드는, 상기 프로세서에 의해 실 행되었을 때, 상기 제어기로 하여금, 상기 2개 이상의 이미지 센서 어레이들로부터 판독된 상기 화소 데이터를 고 동적 범위 데이터 구조로 저장하도록 하는, 전자 카메라.
- 제 2 항에 있어서, 상기 고 동적 범위 데이터 구조는 고 동적 범위 정보를 포함하는 제 1 부분 및 톤 맵 데이터(tone map data)를 포함하는 제 2 부분을 포함하는, 전자 카메라.
- 제 1 항에 있어서, 상기 컴퓨터 판독가능 코드는 상기 프로세서에 의해 실행되었을 때, 상기 제어기로 하여금, 고 동적 범위 이미지 데이터를 생성하기 위해 상기 2개 이상의 이미지 센서 어레이들로부터 판독된 상기 화소 데이터를 결합하도록 하는, 전자 카메라.
- 제 4 항에 있어서, 상기 고 동적 범위 이미지 데이터에 기초하여 이미지를 디스플레이하기 위한 뷰 스크린(view screen)을 포함하는, 전자 카메라.
- 제 5 항에 있어서, 상기 뷰 스크린은 고 동적 범위 이미지를 디스플레이하도록 구성된 고 동적 범위 디스플레이 디바이스를 포함하는, 전자 카메라.
- 제 6 항에 있어서, 상기 고 동적 범위 디스플레이 디바이스를 차폐하기 위한 후드(hood)를 포함하는, 전자 카메라.
- 제 1 항에 있어서, 고 동적 범위를 갖는 상기 이미지 센서 어레이들 중 적어도 하나는 저 해상 이미지 센서 어레이를 포함하는, 전자 카메라.
- 제 8 항에 있어서, 상기 이미지 센서 어레이들 중 다른 하나는 고 해상 이미지 센서 어레이를 포함하는, 전자 카메라.
- 제 1 항에 있어서, 고 동적 범위를 갖는 상기 이미지 센서 어레이들 중 상기 적어도 하나는 HDR 화소들을 캡쳐하도록 특정하게 구성된 전하 결합 디바이스(charge coupled device)를 포함하는, 전자 카메라.
- 2개 이상의 이미지 센서 어레이들을 포함하는 전자 카메라에서 고 동적 범위 이미지 데이터를 생성하는 방법에 있어서, 상기 2개 이상의 이미지 센서 어레이들 중 적어도 하나는 고 동적 범위를 가지며,이미지 캡쳐 기간 동안 상기 2개 이상의 이미지 센서 어레이들에 광이 도달하도록 하는 단계;상기 이미지 캡쳐 기간 동안 상기 2개 이상의 이미지 센서 어레이들에 의해 캡쳐된 화소 데이터를 판독하는 단계; 및상기 2개 이상의 이미지 센서 어레이들로부터 판독된 상기 화소 데이터를 결 합하여 고 동적 범위 이미지 데이터를 생성하는 단계를 포함하는, 고 동적 범위 이미지 데이터 생성 방법.
- 제 11 항에 있어서, 상기 이미지 캡쳐 기간 동안 상기 2개 이상의 이미지 센서 어레이들에 광이 도달하도록 하는 단계는 상기 이미지 센서 어레이들 중 하나로 복수의 노출들을 캡쳐하는 단계를 포함하는, 고 동적 범위 이미지 데이터 생성 방법.
- 제 12 항에 있어서, 상기 이미지 캡쳐 기간 동안 상기 2개 이상의 이미지 센서 어레이들에 의해 캡쳐된 화소 데이터를 판독하는 단계는 상기 이미지 캡쳐 기간 동안 상기 이미지 센서 어레이들 중 하나의 제 1 노출을 판독하는 단계를 포함하는, 고 동적 범위 이미지 데이터 생성 방법.
- 제 11 항에 있어서, 상기 고 동적 범위 이미지 데이터를 상기 카메라에 의해 액세스될 수 있는 메모리에 저장하는 단계를 포함하는, 고 동적 범위 이미지 데이터 생성 방법.
- 제 14 항에 있어서, 상기 고 동적 범위 이미지 데이터를 상기 메모리에 저장하는 단계는 고 동적 범위 정보를 포함하는 제 1 부분 및 톤 맵 데이터를 포함하는 제 2 부분을 포함하는 데이터 구조로 상기 고 동적 범위 이미지 데이터를 저장하는 단계를 포함하는, 고 동적 범위 이미지 데이터 생성 방법.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US11/609,837 | 2006-12-12 | ||
US11/609,837 US8242426B2 (en) | 2006-12-12 | 2006-12-12 | Electronic camera having multiple sensors for capturing high dynamic range images and related methods |
PCT/US2007/087301 WO2008073991A2 (en) | 2006-12-12 | 2007-12-12 | Hdr camera with multiple sensors |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20090088435A true KR20090088435A (ko) | 2009-08-19 |
KR101449973B1 KR101449973B1 (ko) | 2014-10-14 |
Family
ID=39512472
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020097014034A KR101449973B1 (ko) | 2006-12-12 | 2007-12-12 | 복수의 센서들을 구비한 hdr 카메라 |
Country Status (9)
Country | Link |
---|---|
US (3) | US8242426B2 (ko) |
EP (1) | EP2123026A4 (ko) |
JP (3) | JP5551937B2 (ko) |
KR (1) | KR101449973B1 (ko) |
CN (1) | CN101622862B (ko) |
CA (1) | CA2672143C (ko) |
HK (1) | HK1139263A1 (ko) |
MX (1) | MX2009006185A (ko) |
WO (1) | WO2008073991A2 (ko) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101428635B1 (ko) * | 2011-07-20 | 2014-08-08 | 브로드콤 코포레이션 | 듀얼 이미지 캡쳐 프로세싱 |
Families Citing this family (95)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8242426B2 (en) * | 2006-12-12 | 2012-08-14 | Dolby Laboratories Licensing Corporation | Electronic camera having multiple sensors for capturing high dynamic range images and related methods |
US8866920B2 (en) | 2008-05-20 | 2014-10-21 | Pelican Imaging Corporation | Capturing and processing of images using monolithic camera array with heterogeneous imagers |
EP2289235A4 (en) | 2008-05-20 | 2011-12-28 | Pelican Imaging Corp | RECORDING AND PROCESSING IMAGES BY MONOLITHIC CAMERA ARRANGEMENT WITH HETEROGENIC IMAGE TRANSFORMER |
US11792538B2 (en) | 2008-05-20 | 2023-10-17 | Adeia Imaging Llc | Capturing and processing of images including occlusions focused on an image sensor by a lens stack array |
CA2743518C (en) * | 2008-11-21 | 2015-02-10 | Precitec Itm Gmbh | Method and device for monitoring a laser processing operation to be performed on a workpiece and laser processing head having such a device |
AU2010221241A1 (en) * | 2009-03-04 | 2011-10-27 | Paul A. Wagner | Temporally aligned exposure bracketing for high dynamic range imaging |
JP5282689B2 (ja) * | 2009-07-23 | 2013-09-04 | ソニー株式会社 | 撮像装置及び撮像方法 |
US8514491B2 (en) | 2009-11-20 | 2013-08-20 | Pelican Imaging Corporation | Capturing and processing of images using monolithic camera array with heterogeneous imagers |
KR101824672B1 (ko) | 2010-05-12 | 2018-02-05 | 포토네이션 케이맨 리미티드 | 이미저 어레이 구조 및 어레이 카메라 |
JP5545016B2 (ja) * | 2010-05-12 | 2014-07-09 | ソニー株式会社 | 撮像装置 |
US8462221B2 (en) * | 2010-11-03 | 2013-06-11 | Eastman Kodak Company | Method for producing high dynamic range images |
US8878950B2 (en) | 2010-12-14 | 2014-11-04 | Pelican Imaging Corporation | Systems and methods for synthesizing high resolution images using super-resolution processes |
US9077910B2 (en) | 2011-04-06 | 2015-07-07 | Dolby Laboratories Licensing Corporation | Multi-field CCD capture for HDR imaging |
EP2708019B1 (en) | 2011-05-11 | 2019-10-16 | FotoNation Limited | Systems and methods for transmitting and receiving array camera image data |
US20130265459A1 (en) | 2011-06-28 | 2013-10-10 | Pelican Imaging Corporation | Optical arrangements for use with an array camera |
RU2472299C1 (ru) * | 2011-08-24 | 2013-01-10 | Вячеслав Михайлович Смелков | Телевизионная камера для наблюдения в условиях сложного освещения и/или сложной яркости объектов |
RU2472300C1 (ru) * | 2011-09-13 | 2013-01-10 | Вячеслав Михайлович Смелков | Телевизионная камера для наблюдения в условиях изменяющейся во всем поле зрения освещенности и/или яркости объектов |
US20130070060A1 (en) | 2011-09-19 | 2013-03-21 | Pelican Imaging Corporation | Systems and methods for determining depth from multiple views of a scene that include aliasing using hypothesized fusion |
WO2013049699A1 (en) | 2011-09-28 | 2013-04-04 | Pelican Imaging Corporation | Systems and methods for encoding and decoding light field image files |
RU2472301C1 (ru) * | 2011-09-29 | 2013-01-10 | Вячеслав Михайлович Смелков | Телевизионная камера для наблюдения в условиях сложного освещения и/или сложной яркости объектов |
RU2484597C1 (ru) * | 2011-12-21 | 2013-06-10 | Вячеслав Михайлович Смелков | Телевизионная камера для наблюдения в условиях сложной освещенности и/или сложной яркости объектов |
RU2481724C1 (ru) * | 2011-12-21 | 2013-05-10 | Вячеслав Михайлович Смелков | Телевизионная камера для наблюдения в условиях сложного освещения и/или сложной яркости объектов |
US9412206B2 (en) | 2012-02-21 | 2016-08-09 | Pelican Imaging Corporation | Systems and methods for the manipulation of captured light field image data |
US9210392B2 (en) | 2012-05-01 | 2015-12-08 | Pelican Imaging Coporation | Camera modules patterned with pi filter groups |
US8993974B2 (en) * | 2012-06-12 | 2015-03-31 | Nikon Corporation | Color time domain integration camera having a single charge coupled device and fringe projection auto-focus system |
CN104508681B (zh) | 2012-06-28 | 2018-10-30 | Fotonation开曼有限公司 | 用于检测有缺陷的相机阵列、光学器件阵列和传感器的系统及方法 |
US20140002674A1 (en) | 2012-06-30 | 2014-01-02 | Pelican Imaging Corporation | Systems and Methods for Manufacturing Camera Modules Using Active Alignment of Lens Stack Arrays and Sensors |
US8619082B1 (en) | 2012-08-21 | 2013-12-31 | Pelican Imaging Corporation | Systems and methods for parallax detection and correction in images captured using array cameras that contain occlusions using subsets of images to perform depth estimation |
US20140055632A1 (en) | 2012-08-23 | 2014-02-27 | Pelican Imaging Corporation | Feature based high resolution motion estimation from low resolution images captured using an array source |
WO2014043641A1 (en) | 2012-09-14 | 2014-03-20 | Pelican Imaging Corporation | Systems and methods for correcting user identified artifacts in light field images |
US9143673B2 (en) | 2012-09-19 | 2015-09-22 | Google Inc. | Imaging device with a plurality of pixel arrays |
US20140092281A1 (en) | 2012-09-28 | 2014-04-03 | Pelican Imaging Corporation | Generating Images from Light Fields Utilizing Virtual Viewpoints |
US9143711B2 (en) | 2012-11-13 | 2015-09-22 | Pelican Imaging Corporation | Systems and methods for array camera focal plane control |
WO2014130849A1 (en) | 2013-02-21 | 2014-08-28 | Pelican Imaging Corporation | Generating compressed light field representation data |
US9253380B2 (en) | 2013-02-24 | 2016-02-02 | Pelican Imaging Corporation | Thin form factor computational array cameras and modular array cameras |
WO2014138695A1 (en) | 2013-03-08 | 2014-09-12 | Pelican Imaging Corporation | Systems and methods for measuring scene information while capturing images using array cameras |
US8866912B2 (en) | 2013-03-10 | 2014-10-21 | Pelican Imaging Corporation | System and methods for calibration of an array camera using a single captured image |
US9521416B1 (en) | 2013-03-11 | 2016-12-13 | Kip Peli P1 Lp | Systems and methods for image data compression |
US9519972B2 (en) | 2013-03-13 | 2016-12-13 | Kip Peli P1 Lp | Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies |
WO2014164909A1 (en) | 2013-03-13 | 2014-10-09 | Pelican Imaging Corporation | Array camera architecture implementing quantum film sensors |
US9124831B2 (en) | 2013-03-13 | 2015-09-01 | Pelican Imaging Corporation | System and methods for calibration of an array camera |
US9106784B2 (en) | 2013-03-13 | 2015-08-11 | Pelican Imaging Corporation | Systems and methods for controlling aliasing in images captured by an array camera for use in super-resolution processing |
WO2014159779A1 (en) * | 2013-03-14 | 2014-10-02 | Pelican Imaging Corporation | Systems and methods for reducing motion blur in images or video in ultra low light with array cameras |
WO2014153098A1 (en) | 2013-03-14 | 2014-09-25 | Pelican Imaging Corporation | Photmetric normalization in array cameras |
US10122993B2 (en) | 2013-03-15 | 2018-11-06 | Fotonation Limited | Autofocus system for a conventional camera that uses depth information from an array camera |
US9497429B2 (en) | 2013-03-15 | 2016-11-15 | Pelican Imaging Corporation | Extended color processing on pelican array cameras |
WO2014150856A1 (en) | 2013-03-15 | 2014-09-25 | Pelican Imaging Corporation | Array camera implementing quantum dot color filters |
US9633442B2 (en) | 2013-03-15 | 2017-04-25 | Fotonation Cayman Limited | Array cameras including an array camera module augmented with a separate camera |
US9445003B1 (en) | 2013-03-15 | 2016-09-13 | Pelican Imaging Corporation | Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information |
WO2014145856A1 (en) | 2013-03-15 | 2014-09-18 | Pelican Imaging Corporation | Systems and methods for stereo imaging with camera arrays |
US9955084B1 (en) | 2013-05-23 | 2018-04-24 | Oliver Markus Haynold | HDR video camera |
KR102106537B1 (ko) | 2013-09-27 | 2020-05-04 | 삼성전자주식회사 | 하이 다이나믹 레인지 영상 생성 방법 및, 그에 따른 장치, 그에 따른 시스템 |
US9898856B2 (en) | 2013-09-27 | 2018-02-20 | Fotonation Cayman Limited | Systems and methods for depth-assisted perspective distortion correction |
US9264592B2 (en) | 2013-11-07 | 2016-02-16 | Pelican Imaging Corporation | Array camera modules incorporating independently aligned lens stacks |
WO2015074078A1 (en) | 2013-11-18 | 2015-05-21 | Pelican Imaging Corporation | Estimating depth from projected texture using camera arrays |
US9456134B2 (en) | 2013-11-26 | 2016-09-27 | Pelican Imaging Corporation | Array camera configurations incorporating constituent array cameras and constituent cameras |
WO2015134996A1 (en) | 2014-03-07 | 2015-09-11 | Pelican Imaging Corporation | System and methods for depth regularization and semiautomatic interactive matting using rgb-d images |
CN104954627B (zh) * | 2014-03-24 | 2019-03-08 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
US9247117B2 (en) | 2014-04-07 | 2016-01-26 | Pelican Imaging Corporation | Systems and methods for correcting for warpage of a sensor array in an array camera module by introducing warpage into a focal plane of a lens stack array |
CN103986875A (zh) * | 2014-05-29 | 2014-08-13 | 宇龙计算机通信科技(深圳)有限公司 | 一种图像获取装置、方法、终端及视频获取方法 |
US9521319B2 (en) | 2014-06-18 | 2016-12-13 | Pelican Imaging Corporation | Array cameras and array camera modules including spectral filters disposed outside of a constituent image sensor |
US10277771B1 (en) | 2014-08-21 | 2019-04-30 | Oliver Markus Haynold | Floating-point camera |
WO2016054089A1 (en) | 2014-09-29 | 2016-04-07 | Pelican Imaging Corporation | Systems and methods for dynamic calibration of array cameras |
US10225485B1 (en) | 2014-10-12 | 2019-03-05 | Oliver Markus Haynold | Method and apparatus for accelerated tonemapping |
US9942474B2 (en) | 2015-04-17 | 2018-04-10 | Fotonation Cayman Limited | Systems and methods for performing high speed video capture and depth estimation using array cameras |
US9819889B2 (en) * | 2015-08-07 | 2017-11-14 | Omnivision Technologies, Inc. | Method and system to implement a stacked chip high dynamic range image sensor |
CN105578005B (zh) * | 2015-12-18 | 2018-01-19 | 广东欧珀移动通信有限公司 | 图像传感器的成像方法、成像装置和电子装置 |
KR102603426B1 (ko) | 2016-06-27 | 2023-11-20 | 삼성전자주식회사 | 이미지 처리장치 및 방법 |
CN109417592B (zh) | 2016-07-01 | 2020-12-29 | 麦克赛尔株式会社 | 拍摄装置、拍摄方法及拍摄程序 |
CN106161979B (zh) | 2016-07-29 | 2017-08-25 | 广东欧珀移动通信有限公司 | 高动态范围图像拍摄方法、装置和终端设备 |
RU2631828C1 (ru) * | 2016-09-21 | 2017-09-27 | Вячеслав Михайлович Смелков | Устройство компьютерной системы панорамного телевизионного наблюдения |
RU2631830C1 (ru) * | 2016-10-31 | 2017-09-27 | Вячеслав Михайлович Смелков | Устройство компьютерной системы панорамного телевизионного наблюдения |
US10482618B2 (en) | 2017-08-21 | 2019-11-19 | Fotonation Limited | Systems and methods for hybrid depth regularization |
RU2670419C1 (ru) * | 2017-12-01 | 2018-10-23 | Вячеслав Михайлович Смелков | Способ управления чувствительностью телевизионной камеры на матрице ПЗС в условиях сложной освещённости и/или сложной яркости объектов |
US10757320B2 (en) * | 2017-12-28 | 2020-08-25 | Waymo Llc | Multiple operating modes to expand dynamic range |
RU2691942C1 (ru) * | 2018-09-13 | 2019-06-19 | Вячеслав Михайлович Смелков | Способ управления чувствительностью телевизионной камеры на матрице ПЗС в условиях сложной освещённости и/или сложной яркости объектов |
CN110278375B (zh) * | 2019-06-28 | 2021-06-15 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN114600165A (zh) | 2019-09-17 | 2022-06-07 | 波士顿偏振测定公司 | 用于使用偏振提示表面建模的系统和方法 |
EP4042101A4 (en) | 2019-10-07 | 2023-11-22 | Boston Polarimetrics, Inc. | SYSTEMS AND METHODS FOR DETECTING SURFACE NORMALS USING POLARIZATION |
KR102558903B1 (ko) | 2019-11-30 | 2023-07-24 | 보스턴 폴라리메트릭스, 인크. | 편광 신호를 이용한 투명 물체 분할을 위한 시스템 및 방법 |
JP7462769B2 (ja) | 2020-01-29 | 2024-04-05 | イントリンジック イノベーション エルエルシー | 物体の姿勢の検出および測定システムを特徴付けるためのシステムおよび方法 |
CN115428028A (zh) | 2020-01-30 | 2022-12-02 | 因思创新有限责任公司 | 用于合成用于在包括偏振图像的不同成像模态下训练统计模型的数据的系统和方法 |
US12028619B2 (en) | 2020-03-05 | 2024-07-02 | Sony Group Corporation | Image processing device and image processing method |
EP3902240B1 (en) * | 2020-04-22 | 2022-03-30 | Axis AB | Method, device, camera and software for performing electronic image stabilization of a high dynamic range image |
CN114827487B (zh) * | 2020-04-28 | 2024-04-12 | 荣耀终端有限公司 | 一种高动态范围图像合成方法和电子设备 |
WO2021243088A1 (en) | 2020-05-27 | 2021-12-02 | Boston Polarimetrics, Inc. | Multi-aperture polarization optical systems using beam splitters |
US11474743B2 (en) * | 2020-08-13 | 2022-10-18 | Micron Technology, Inc. | Data modification |
JP7231598B2 (ja) * | 2020-11-05 | 2023-03-01 | マクセル株式会社 | 撮像装置 |
US12020455B2 (en) | 2021-03-10 | 2024-06-25 | Intrinsic Innovation Llc | Systems and methods for high dynamic range image reconstruction |
US12069227B2 (en) | 2021-03-10 | 2024-08-20 | Intrinsic Innovation Llc | Multi-modal and multi-spectral stereo camera arrays |
US11290658B1 (en) | 2021-04-15 | 2022-03-29 | Boston Polarimetrics, Inc. | Systems and methods for camera exposure control |
US11954886B2 (en) | 2021-04-15 | 2024-04-09 | Intrinsic Innovation Llc | Systems and methods for six-degree of freedom pose estimation of deformable objects |
US12067746B2 (en) | 2021-05-07 | 2024-08-20 | Intrinsic Innovation Llc | Systems and methods for using computer vision to pick up small objects |
US11689813B2 (en) | 2021-07-01 | 2023-06-27 | Intrinsic Innovation Llc | Systems and methods for high dynamic range imaging using crossed polarizers |
US11877070B2 (en) * | 2021-10-18 | 2024-01-16 | Arthrex, Inc. | Surgical camera system with high dynamic range and fluorescent imaging |
Family Cites Families (39)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4652909A (en) * | 1982-09-14 | 1987-03-24 | New York Institute Of Technology | Television camera and recording system for high definition television having imagers of different frame rate |
CA2074488A1 (fr) * | 1990-02-16 | 1991-08-17 | Georges Cornuejols | Dispositif d'augmentation de dynamique d'une camera |
US5420635A (en) * | 1991-08-30 | 1995-05-30 | Fuji Photo Film Co., Ltd. | Video camera, imaging method using video camera, method of operating video camera, image processing apparatus and method, and solid-state electronic imaging device |
JP3517430B2 (ja) * | 1993-03-31 | 2004-04-12 | キヤノン株式会社 | 画像処理システム |
US6204881B1 (en) * | 1993-10-10 | 2001-03-20 | Canon Kabushiki Kaisha | Image data processing apparatus which can combine a plurality of images at different exposures into an image with a wider dynamic range |
US5801773A (en) * | 1993-10-29 | 1998-09-01 | Canon Kabushiki Kaisha | Image data processing apparatus for processing combined image signals in order to extend dynamic range |
NZ332626A (en) * | 1997-11-21 | 2000-04-28 | Matsushita Electric Ind Co Ltd | Expansion of dynamic range for video camera |
US6864916B1 (en) * | 1999-06-04 | 2005-03-08 | The Trustees Of Columbia University In The City Of New York | Apparatus and method for high dynamic range imaging using spatially varying exposures |
US6198505B1 (en) * | 1999-07-19 | 2001-03-06 | Lockheed Martin Corp. | High resolution, high speed digital camera |
JP2001136434A (ja) | 1999-11-09 | 2001-05-18 | Ricoh Co Ltd | 撮像装置 |
TW469733B (en) * | 2000-01-07 | 2001-12-21 | Dynacolor Inc | Method of dynamically modulating image brightness and image catching device using the method |
US7084905B1 (en) * | 2000-02-23 | 2006-08-01 | The Trustees Of Columbia University In The City Of New York | Method and apparatus for obtaining high dynamic range images |
US7623168B2 (en) | 2000-07-13 | 2009-11-24 | Eastman Kodak Company | Method and apparatus to extend the effective dynamic range of an image sensing device |
US6788338B1 (en) * | 2000-11-20 | 2004-09-07 | Petko Dimitrov Dinev | High resolution video camera apparatus having two image sensors and signal processing |
US6542698B2 (en) * | 2001-01-19 | 2003-04-01 | Kakuyo Co., Ltd. | Shading hood for digital camera having liquid crystal screen |
DE60237440D1 (de) | 2001-02-27 | 2010-10-07 | Dolby Lab Licensing Corp | Bildanzeigevorrichtungen mit grossem dynamikbereich |
JP3546853B2 (ja) * | 2001-03-23 | 2004-07-28 | ミノルタ株式会社 | 撮像装置及び画像再生システム |
JP2003037757A (ja) * | 2001-07-25 | 2003-02-07 | Fuji Photo Film Co Ltd | 画像撮像装置 |
JP2003101886A (ja) * | 2001-09-25 | 2003-04-04 | Olympus Optical Co Ltd | 撮像装置 |
JP4154157B2 (ja) * | 2002-02-25 | 2008-09-24 | 株式会社東芝 | 撮像装置 |
WO2003083773A2 (en) * | 2002-03-27 | 2003-10-09 | The Trustees Of Columbia University In The City Of New York | Imaging method and system |
JP2004014802A (ja) * | 2002-06-06 | 2004-01-15 | Sony Corp | 撮像装置 |
US6718010B2 (en) * | 2002-06-11 | 2004-04-06 | Ge Medical Systems Global Technology Company, Llc | Method and apparatus for acquiring a series of images utilizing a solid state detector with alternating scan lines |
US6983080B2 (en) * | 2002-07-19 | 2006-01-03 | Agilent Technologies, Inc. | Resolution and image quality improvements for small image sensors |
US7319423B2 (en) * | 2002-07-31 | 2008-01-15 | Quantum Semiconductor Llc | Multi-mode ADC and its application to CMOS image sensors |
JP2004248061A (ja) * | 2003-02-14 | 2004-09-02 | Fuji Photo Film Co Ltd | 画像処理装置、方法及びプログラム |
JP2004274578A (ja) * | 2003-03-11 | 2004-09-30 | Toshiba Corp | 固体撮像装置 |
JP2004328530A (ja) * | 2003-04-25 | 2004-11-18 | Konica Minolta Photo Imaging Inc | 撮像装置、画像処理装置及び画像記録装置 |
JP2005012734A (ja) * | 2003-06-16 | 2005-01-13 | Hiromichi Nakano | モニター画面の遮光ボックス |
JP4118916B2 (ja) * | 2003-11-11 | 2008-07-16 | オリンパス株式会社 | マルチスペクトル画像撮影装置 |
US7492375B2 (en) * | 2003-11-14 | 2009-02-17 | Microsoft Corporation | High dynamic range image viewing on low dynamic range displays |
US8218625B2 (en) | 2004-04-23 | 2012-07-10 | Dolby Laboratories Licensing Corporation | Encoding, decoding and representing high dynamic range images |
JP4189820B2 (ja) * | 2004-05-10 | 2008-12-03 | 富士フイルム株式会社 | 撮像装置及び画像記録方法 |
US7564019B2 (en) * | 2005-08-25 | 2009-07-21 | Richard Ian Olsen | Large dynamic range cameras |
EP1812968B1 (en) * | 2004-08-25 | 2019-01-16 | Callahan Cellular L.L.C. | Apparatus for multiple camera devices and method of operating same |
JP4530277B2 (ja) * | 2005-02-25 | 2010-08-25 | 株式会社リコー | 画像再生装置、画像再生方法、プログラムおよび記録媒体 |
CA2511220C (en) * | 2005-03-21 | 2012-08-14 | Sunnybrook Technologies Inc. | Multiple exposure methods and apparatus for electronic cameras |
US20060221209A1 (en) * | 2005-03-29 | 2006-10-05 | Mcguire Morgan | Apparatus and method for acquiring and combining images of a scene with multiple optical characteristics at multiple resolutions |
US8242426B2 (en) * | 2006-12-12 | 2012-08-14 | Dolby Laboratories Licensing Corporation | Electronic camera having multiple sensors for capturing high dynamic range images and related methods |
-
2006
- 2006-12-12 US US11/609,837 patent/US8242426B2/en active Active
-
2007
- 2007-12-12 CA CA2672143A patent/CA2672143C/en active Active
- 2007-12-12 WO PCT/US2007/087301 patent/WO2008073991A2/en active Application Filing
- 2007-12-12 CN CN2007800499624A patent/CN101622862B/zh active Active
- 2007-12-12 JP JP2009541566A patent/JP5551937B2/ja active Active
- 2007-12-12 MX MX2009006185A patent/MX2009006185A/es active IP Right Grant
- 2007-12-12 KR KR1020097014034A patent/KR101449973B1/ko active IP Right Grant
- 2007-12-12 EP EP07865604A patent/EP2123026A4/en not_active Ceased
-
2010
- 2010-05-14 HK HK10104716.3A patent/HK1139263A1/xx unknown
-
2012
- 2012-08-13 US US13/584,597 patent/US8513588B2/en active Active
-
2013
- 2013-07-15 US US13/942,006 patent/US10033940B2/en active Active
-
2014
- 2014-04-04 JP JP2014077656A patent/JP2014161055A/ja active Pending
-
2017
- 2017-01-20 JP JP2017008539A patent/JP6360211B2/ja active Active
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101428635B1 (ko) * | 2011-07-20 | 2014-08-08 | 브로드콤 코포레이션 | 듀얼 이미지 캡쳐 프로세싱 |
US9270875B2 (en) | 2011-07-20 | 2016-02-23 | Broadcom Corporation | Dual image capture processing |
Also Published As
Publication number | Publication date |
---|---|
MX2009006185A (es) | 2009-08-20 |
CA2672143A1 (en) | 2008-06-19 |
EP2123026A4 (en) | 2011-02-23 |
US20120307114A1 (en) | 2012-12-06 |
EP2123026A2 (en) | 2009-11-25 |
JP5551937B2 (ja) | 2014-07-16 |
HK1139263A1 (en) | 2010-09-10 |
CN101622862B (zh) | 2012-01-11 |
US10033940B2 (en) | 2018-07-24 |
WO2008073991A3 (en) | 2008-07-31 |
US20080149812A1 (en) | 2008-06-26 |
JP6360211B2 (ja) | 2018-07-18 |
CA2672143C (en) | 2015-05-05 |
JP2014161055A (ja) | 2014-09-04 |
JP2010512719A (ja) | 2010-04-22 |
US8242426B2 (en) | 2012-08-14 |
CN101622862A (zh) | 2010-01-06 |
JP2017118551A (ja) | 2017-06-29 |
WO2008073991A2 (en) | 2008-06-19 |
US8513588B2 (en) | 2013-08-20 |
US20130300887A1 (en) | 2013-11-14 |
KR101449973B1 (ko) | 2014-10-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101449973B1 (ko) | 복수의 센서들을 구비한 hdr 카메라 | |
US8698946B2 (en) | Multiple exposure methods and apparatus for electronic cameras | |
CA2511220C (en) | Multiple exposure methods and apparatus for electronic cameras | |
TWI615027B (zh) | 高動態範圍圖像的生成方法、拍照裝置和終端裝置、成像方法 | |
Xiao et al. | High dynamic range imaging of natural scenes | |
CN104038702B (zh) | 摄像设备及其控制方法 | |
US9077910B2 (en) | Multi-field CCD capture for HDR imaging | |
JP4565504B2 (ja) | 画像合成装置 | |
JP2010512719A5 (ko) | ||
US20110150357A1 (en) | Method for creating high dynamic range image | |
JP2006217609A (ja) | デジタル撮像装置において動きを推定する方法及び装置 | |
CN101635797A (zh) | 摄像装置 | |
JP5084366B2 (ja) | 撮像装置及び撮像装置の制御方法 | |
CN105993164A (zh) | 固态图像传感器、电子设备和自动聚焦方法 | |
JP2019161577A (ja) | 撮像装置、画素補正処理回路、及び、画素補正処理方法 | |
JP4148586B2 (ja) | 画像合成装置 | |
CN110266965A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
CN110213503A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
JP3899706B2 (ja) | 電子スチルカメラの制御方法及び電子スチルカメラ | |
Stump | Camera Sensors | |
JPH02244885A (ja) | 電子スチルカメラ |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20170927 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20180927 Year of fee payment: 5 |