KR102108597B1 - 폴드형 광학계를 이용한 다중-카메라 시스템 - Google Patents
폴드형 광학계를 이용한 다중-카메라 시스템 Download PDFInfo
- Publication number
- KR102108597B1 KR102108597B1 KR1020157012776A KR20157012776A KR102108597B1 KR 102108597 B1 KR102108597 B1 KR 102108597B1 KR 1020157012776 A KR1020157012776 A KR 1020157012776A KR 20157012776 A KR20157012776 A KR 20157012776A KR 102108597 B1 KR102108597 B1 KR 102108597B1
- Authority
- KR
- South Korea
- Prior art keywords
- image
- view
- light
- lens
- sensor
- Prior art date
Links
- 238000000034 method Methods 0.000 claims abstract description 62
- 230000003287 optical effect Effects 0.000 claims description 57
- 238000003384 imaging method Methods 0.000 claims description 39
- 230000015654 memory Effects 0.000 claims description 30
- 230000004044 response Effects 0.000 claims description 11
- 230000000644 propagated effect Effects 0.000 claims 2
- 230000001902 propagating effect Effects 0.000 claims 2
- 230000002194 synthesizing effect Effects 0.000 claims 1
- 230000000712 assembly Effects 0.000 description 58
- 238000000429 assembly Methods 0.000 description 58
- 230000008569 process Effects 0.000 description 19
- 238000003860 storage Methods 0.000 description 19
- 238000003491 array Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 11
- 239000000758 substrate Substances 0.000 description 11
- 230000006870 function Effects 0.000 description 9
- 238000012545 processing Methods 0.000 description 8
- 230000003936 working memory Effects 0.000 description 7
- 238000013461 design Methods 0.000 description 6
- 230000008901 benefit Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 238000004904 shortening Methods 0.000 description 3
- 230000007704 transition Effects 0.000 description 3
- 230000007423 decrease Effects 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 239000002245 particle Substances 0.000 description 2
- 238000012805 post-processing Methods 0.000 description 2
- 229910001285 shape-memory alloy Inorganic materials 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 1
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000005352 clarification Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000010297 mechanical methods and process Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012634 optical imaging Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 239000001540 sodium lactate Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 235000012431 wafers Nutrition 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
-
- H04N5/23238—
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B13/00—Optical objectives specially designed for the purposes specified below
- G02B13/001—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras
- G02B13/0055—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras employing a special optical element
- G02B13/0065—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras employing a special optical element having a beam-folding prism or mirror
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/41—Extracting pixel data from a plurality of image sensors simultaneously picking up an image, e.g. for increasing the field of view by combining the outputs of a plurality of sensors
-
- H04N5/2254—
-
- H04N5/23296—
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Optics & Photonics (AREA)
- Studio Devices (AREA)
- Cameras In General (AREA)
- Stereoscopic And Panoramic Photography (AREA)
- Structure And Mechanism Of Cameras (AREA)
- Optical Elements Other Than Lenses (AREA)
- Lens Barrels (AREA)
Abstract
본 명세서에서는 장면의 타겟 이미지를 캡처하기 위해 복수의 이미지 센서들을 채용하는 방법들 및 디바이스들이 기술된다. 기술된 바와 같이, 복수의 이미지 센서들 부근에 적어도 하나의 반사 또는 굴절 면을 포지셔닝시키는 것은 센서들이, 각 센서로 이미지 장면의 일부분을 가이드하기 위해 반사 또는 굴절 면을 이용함으로써 임의의 센서가 개별적으로 캡처하는 것보다 더 긴 초점 길이 및 더 넓은 시야의 이미지를 함께 캡처하는 것을 가능하게 한다. 센서들에 의해 캡처된 장면의 상이한 부분들은 오버랩될 수도 있고, 정렬 및 크로핑되어 타겟 이미지를 생성할 수도 있다.
Description
본 개시물은 다중-카메라 어레이를 포함하는 이미징 시스템들 및 방법들에 관한 것이다. 특히, 본 개시물은 이미지 품질을 유지 또는 향상시키면서 저-프로필 이미징 시스템들 및 모바일 디바이스들을 가능하게 하는 시스템들 및 방법들에 관한 것이다.
모바일 전화기들 및 태블릿 컴퓨팅 디바이스들과 같은 많은 모바일 디바이스들은 스틸 및/또는 비디오 이미지들을 캡처하기 위해 사용자에 의해 작동될 수도 있는 카메라들을 포함한다. 모바일 디바이스들은 통상적으로 비교적 작도록 설계되기 때문에, 카메라 또는 이미징 시스템들을 저-프로필 모바일 디바이스를 유지하기 위해 가능한 한 얇게 설계하는 것이 중요해질 수 있다. 다양한 종래의 디바이스들에서, 모바일 디바이스들의 두께는, 이미징 센서를 그것의 측면으로 돌리고 광선들을 그 센서로 굽게 하기 위해 반사 디바이스들을 이용함으로써 가능한 한 작게 유지된다. 하지만, 이 특별한 솔루션 (solution) 은, 이미징 센서의 폭 및 픽셀 피치가 카메라의 최고 해상도를 결정할 수도 있기 때문에, 매우 견고하지는 않다.
다른 종래의 디바이스들에서, 모바일 디바이스의 두께는 이미징 시스템의 초점 길이를 짧게 함으로써 가능한 한 작게 유지된다. 하지만, 시스템의 초점 길이가 가능한 한 짧도록 설계되는 경우에 여러 문제점들이 발생할 수 있다. 예를 들어, 초점 길이와 시스템의 시야는 역의 관계가 있기 때문에, 초점 길이를 짧게 하는 것은, 이미지가 자연스러운 이미지로부터 예컨대 약 60 도 이상의 시야로 자연스럽지 못한 넓은 시야 이미지로 바뀔 수도 있을 정도로 시야를 증가시킬 수도 있다. 또한, 초점 길이가 감소함에 따라 렌즈 롤-오프 (roll-off), 예컨대, 이미지의 중앙에 비해 이미지의 에지 부근에서의 광 또는 휘도의 손실이 증가할 수도 있다. 따라서, 모바일 디바이스들에서의 이미징 시스템들의 초점 길이가 감소됨에 따라, 이미지 품질은 바람직하지 않은 렌즈 롤-오프로 인해 열화될 수도 있다.
또한, 다양한 모바일 디바이스들에서의 이미징 시스템들의 변조 전달 함수 (modulation transfer function; MTF) 는 이미지의 중앙에 비해 이미지의 에지 부근에서 보다 낮은 해상도를 생성할 수도 있고, 이는 MTF 롤-오프로서 지칭될 수도 있다. MTF 롤-오프는 또한 초점 길이에 대해 역의 관계일 수도 있기 때문에, 모바일 디바이스들에서의 감소된 초점 길이는 이미지의 에지들에서의 해상도를 감소시킬 수도 있다. 또한, 보다 짧은 초점 길이들은 렌즈의 주 광선의 입사각을 증가시킬 수도 있고, 이는 또한 픽셀들 사이의 증가된 광 및 전기적 크로스토크 (crosstalk) 및 더 낮은 센서 MTF 성능을 포함하는 바람직하지 않은 아티팩트들 (artifacts) 을 생성할 수 있다. 따라서, 이미지 품질을 유지하면서 모바일 디바이스들에서의 이미징 시스템들의 두께를 감소시키는 것이 이로울 수 있다.
본 명세서에서 기술된 폴드형 (folded) 광학 센서 어레이들 및 이미지 캡처 기술들은 초점 길이 (focal length) 를 짧게 하는 것 또는 센서 어레이의 시야 (field of view) 에 걸쳐 이미지의 해상도를 감소시키는 것 없이 저-프로필 (low-profile) 이미지 캡처 (capture) 디바이스들의 형성을 허용한다. 주 및 부 면을 이용하여 어레이에서 각 센서를 향해 광을 재지향시킴으로써, 그리고, 주 및 부 면들 사이에서 입사 광 (incoming light) 을 포커싱하기 위해 사용되는 렌즈 어셈블리들을 포지셔닝 (positioning) 시킴으로써, 센서 어레이는 렌즈 어셈블리들에 대해 직교하는 평평한 기판 (flat substrate) 상에 포지셔닝될 수도 있다. 보다 긴 초점 길이는 광학 줌과 같은 특징들을 구현하는 것, 및 보다 많은 광학 엘리먼트들을 부가하는 것과 같이, 전통적인 모바일 카메라에 의해 통상적으로 부여되는 보다 많은 공간을 필요로하는 보다 복잡한 광학들을 통합하는 것을 가능하게 한다. 카메라의 각도 해상도를 지칭하고 카메라가 얼마나 잘 멀리 떨어진 곳의 물체들을 해상하는지를 정의하는 카메라 애큐티 (acuity) 는 초점 길이에 비례하고 따라서 보다 긴 카메라들로부터 직접 혜택이 있다.
실시형태들의 일부는 타겟 이미지를 포함하는 입사 광을 어레이에서의 센서들에 의한 캡처를 위해 다수의 부분들로 분할하기 위해 예를 들어 다수의 면들을 갖는 중앙 거울을 채용할 수도 있다. 다른 실시형태들은 다수의 면들 (facets) 을 갖는 프리즘을 채용할 수도 있고, 여기서, 각 면은 타겟 이미지를 포함하는 광의 일부분을 어레이에서의 센서를 향해 지향시킨다. 분할 광 (split light) 의 각 부분은 렌즈 어셈블리를 통과하여 센서 바로 위 또는 아래에 포지셔닝된 면에서 반사되어, 각 센서가 이미지의 일부분을 캡처할 수도 있다. 몇몇 상황들에서, 어레이에서의 각 센서는 어레이에서의 이웃하는 (neighboring) 센서들에 의해 캡처된 부분들과 약간 오버랩 (overlap) 되는 이미지의 부분을 캡처할 수도 있고, 이들 부분들은 예를 들어 이미지 스티칭 (image stitching) 기법들에 의해 타겟 이미지로 어셈블링될 수도 있다.
일 실시형태에 따르면, 이미지 캡처 시스템은, 복수의 이미지 센서들로서, 복수의 이미지 센서들의 각각은 복수의 시야들 (fields of view) 중 하나를 가지고, 복수의 시야들의 각각은 장면 (scene) 의 실질적으로 (substantially) 상이한 부분을 포함하는, 상기 복수의 이미지 센서들; 복수의 렌즈 어셈블리들로서, 각 렌즈 어셈블리는 복수의 이미지 센서들 중의 하나에 대응하는, 상기 복수의 렌즈 어셈블리들; 장면의 적어도 일부분을 포함하는 광을 복수의 렌즈 어셈블리들 중 적어도 하나를 통과하도록 지향 (direct) 시키도록 포지셔닝된 주면 (primary surface); 복수의 부면들 (secondary surfaces) 로서, 부면들의 각각은 광의 적어도 일부분을 복수의 렌즈 어셈블리들 중의 하나로부터 복수의 이미지 센서들 중의 하나로 지향시키고, 복수의 이미지 센서들의 각각은 복수의 부분 이미지들 중 하나를 캡처하며, 복수의 부분 이미지들의 각각은 복수의 시야들 중 하나에 대응하는, 상기 복수의 부면들; 및 복수의 부분 이미지들을 타겟 이미지로 어셈블링하도록 구성된 프로세싱 모듈을 포함한다.
이미지 캡처 시스템은 실질적으로 평평한 기판을 더 포함할 수도 있다. 복수의 이미지 센서들, 복수의 렌즈 어셈블리들, 주면 및 부면들은 다양한 적합한 구성들로 기판 상에 탑재될 수도 있다. 주면은 하나 이상의 반사 면을 포함할 수도 있고, 일부 실시형태들에서는 타겟 이미지 장면을 포함하는 입사광을 재지향 (redirect) 시키도록 구성된 하나 이상의 면들을 포함하는 프리즘일 수도 있다.
다른 실시형태에 따르면, 타겟 이미지 장면을 캡처하는 방법이 제공되고, 이 방법은, 복수의 이미지 센서들을 제공하는 단계로서, 복수의 이미지 센서들의 각각은 복수의 시야들 중 하나를 가지고, 복수의 시야들의 각각은 장면의 실질적으로 상이한 부분을 포함하는, 상기 복수의 이미지 센서들을 제공하는 단계; 복수의 렌즈 어셈블리들을 제공하는 단계로서, 각 렌즈 어셈블리는 복수의 이미지 센서들 중의 하나에 대응하는, 상기 복수의 렌즈 어셈블리들을 제공하는 단계; 장면의 적어도 일부분을 포함하는 광을 적어도 하나의 주면을 이용하여 복수의 렌즈 어셈블리들의 각각을 향해 지향시키는 단계; 복수의 렌즈 어셈블리들의 각각으로부터의 광을 복수의 부면들을 이용하여 복수의 이미지 센서들 중의 대응하는 이미지 센서를 향해 지향시키는 단계; 복수의 부분 이미지들을 캡처하는 단계로서, 복수의 부분 이미지들의 각각은 복수의 이미지 센서들 중의 하나에 의해 캡처되고 복수의 시야들 중 하나에 대응하는, 상기 복수의 부분 이미지들을 캡처하는 단계; 및 복수의 부분 이미지들을 타겟 이미지로 어셈블링 (assembling) 하는 단계를 포함한다.
이미지 캡처의 다양한 양태들이 첨부 도면들에서 제한적 방식이 아닌 예시적인 방식으로 도시된다.
도 1a 는 폴드형 광학 센서 어셈블리의 일 실시형태의 횡단 측면도를 나타낸다.
도 1b 는 도 1a 의 폴드형 광학 센서 어셈블리의 투영된 시야들의 일 실시형태의 상면도를 나타낸다.
도 2 는 이미지 캡처 디바이스의 하나의 실시형태의 블록도를 나타낸다.
도 3a 는 폴드형 광학 센서 어레이의 일 실시형태의 블록도를 나타낸다.
도 3b 는 도 3a 의 폴드형 광학 센서 어레이의 일 실시형태의 투시도를 나타낸다.
도 3c 는 도 3a 및 도 3b 의 폴드형 광학 센서 어레이의 투영된 시야들의 하나의 실시형태의 개략도를 나타낸다.
도 4 는 폴드형 광학 센서 어셈블리의 컴포넌트들의 각도 관계를 보여주는 폴드형 광학 센서 어셈블리의 하나의 실시형태의 횡단 측면도를 나타낸다.
도 5a 는 폴드형 광학 센서 어레이의 다른 실시형태의 투시도를 나타낸다.
도 5b 는 폴드형 광학 센서 어레이의 또 다른 실시형태의 투시도를 나타낸다.
도 5c 는 도 5a 및 도 5b 의 폴드형 광학 센서 어레이들의 투영된 시야들의 일 실시형태의 개략도를 나타낸다.
도 6a 는 폴드형 광학 센서 어레이의 다른 실시형태의 투시도를 나타낸다.
도 6b 는 도 6a 의 폴드형 광학 센서 어레이의 투영된 시야들의 일 실시형태의 개략도를 나타낸다.
도 7 은 캐스케이드된 폴드형 광학 센서 어레이의 일 실시형태의 블록도를 나타낸다.
도 8 은 폴드형 광학 센서 어셈블리의 다른 실시형태의 횡단 측면도를 나타낸다.
도 9 는 폴드형 광학 이미지 캡처 프로세스의 일 실시형태를 나타낸다.
도 1a 는 폴드형 광학 센서 어셈블리의 일 실시형태의 횡단 측면도를 나타낸다.
도 1b 는 도 1a 의 폴드형 광학 센서 어셈블리의 투영된 시야들의 일 실시형태의 상면도를 나타낸다.
도 2 는 이미지 캡처 디바이스의 하나의 실시형태의 블록도를 나타낸다.
도 3a 는 폴드형 광학 센서 어레이의 일 실시형태의 블록도를 나타낸다.
도 3b 는 도 3a 의 폴드형 광학 센서 어레이의 일 실시형태의 투시도를 나타낸다.
도 3c 는 도 3a 및 도 3b 의 폴드형 광학 센서 어레이의 투영된 시야들의 하나의 실시형태의 개략도를 나타낸다.
도 4 는 폴드형 광학 센서 어셈블리의 컴포넌트들의 각도 관계를 보여주는 폴드형 광학 센서 어셈블리의 하나의 실시형태의 횡단 측면도를 나타낸다.
도 5a 는 폴드형 광학 센서 어레이의 다른 실시형태의 투시도를 나타낸다.
도 5b 는 폴드형 광학 센서 어레이의 또 다른 실시형태의 투시도를 나타낸다.
도 5c 는 도 5a 및 도 5b 의 폴드형 광학 센서 어레이들의 투영된 시야들의 일 실시형태의 개략도를 나타낸다.
도 6a 는 폴드형 광학 센서 어레이의 다른 실시형태의 투시도를 나타낸다.
도 6b 는 도 6a 의 폴드형 광학 센서 어레이의 투영된 시야들의 일 실시형태의 개략도를 나타낸다.
도 7 은 캐스케이드된 폴드형 광학 센서 어레이의 일 실시형태의 블록도를 나타낸다.
도 8 은 폴드형 광학 센서 어셈블리의 다른 실시형태의 횡단 측면도를 나타낸다.
도 9 는 폴드형 광학 이미지 캡처 프로세스의 일 실시형태를 나타낸다.
본 명세서에서 개시된 구현형태들은 모바일 이미징 애플리케이션들 (mobile imaging applications) 을 위한 시스템들, 방법들 및 장치를 제공한다. 예를 들어, 본 명세서에서 설명된 바와 같이, 이미지 품질을 유지 또는 향상시키면서 모바일 디바이스들의 폼 팩터 (form factor) 를 감소시키는 것이 바람직할 수 있다. 본 명세서에서 개시된 구현형태들은 이미징 시스템의 시야에 걸쳐 다수의 이미징 센서들 및/또는 다수의 렌즈들을 채용함으로써 이미지 시스템들의 두께를 감소시키기 위해 모바일 디바이스들에서 이용될 수 있다. 다양한 구현들에서, 카메라들 및/또는 이미징 센서들의 어레이는 하나 이상의 반사 면들에 인접 (adjacent) 하여 제공될 수도 있다. 센서들의 어레이는 다수의, 중첩하는 (overlapping) 이미지들을 캡처할 수 있고, 이는 함께 스티치되어 높은 이미지 품질 및 해상도 (resolution) 를 유지하면서 단일 이미지를 형성할 수 있다. 다수의 센서들을 기판 상에서 측방으로 (laterally) 이격 배치하거나 그 외에 시스템에서 서로 인접하게 배치함으로써, 이미징 시스템의 전체 높이 또는 두께가 감소될 수 있다. 다양한 구현들에서, 개시된 시스템들은 비교적 긴 광학 경로 길이들을 포함하는 소위 폴드형 광학 시스템들일 수도 있다. 초점 길이를 실질적인 방식으로 감소시키지 않음으로써, 감소된 높이의 이미징 시스템을 여전히 유지하면서 상기 설명된 이미지 품질에서의 감소들이 회피될 수 있다.
개시된 개념들의 많은 다른 구현형태들이 가능하다는 것을 이해하여야 한다. 다양한 이점들은 개시된 구현형태들로 달성될 수 있다. 예를 들어, 이미징 시스템을 포함하는 모바일 디바이스의 전체 두께는 모바일 디바이스들에서 사용되는 종래의 이미징 시스템들에 비해 감소될 수 있다. 또한, 센서 어레이의 시야에 걸친 이미지의 해상도가 향상될 수 있고, (예컨대, 해상도가 에지들에서 감소할 수도 있는) 전통적인 카메라들에서 발견되는 해상도에서의 롤-오프를 회피할 수 있다. 또한, 시스템의 시야에 걸친 다중 렌즈들의 사용은 전체 시야에 걸친 총 유효 해상도를 증가시킬 수 있다. 또한, 다중 렌즈들의 사용은 카메라의 초점 길이를 증가시키고 따라서 카메라의 애큐티를 증가시킬 수도 있다.
다양한 배열들에서, 각 카메라의 시야는 포스트-프로세싱 (post-processing) 후에 초점을 조정하기 위한 능력을 가능하게 하는 것과 같은 특정 목적들을 달성하기 위해 오버랩될 수도 있다. 또한, 하이 다이내믹 레인지 카메라들은 2 개의 동시적 이미지들을 캡처하고 그 다음 그들을 함께 병합 (merge) 하도록 구현될 수 있다. 또한, 렌즈들과 어레이에서의 각 카메라의 센서 사이의 초점 길이를 변화시킴으로써 오토포커스 애플리케이션이 구현될 수 있다. 본 명세서에서 설명된 바와 같이, 다양한 다른 이점들 및 구현형태들이 달성될 수 있다.
당해 기술 분야에서 통상의 지식을 가진 자 (이하, '통상의 기술자' 라 함) 는, 이들 실시형태들이 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 임의의 조합으로 구현될 수도 있다는 것을 인식할 것이다. 통상의 기술자는, 정보 및 신호들이 여러 상이한 기술들 및 기법들의 임의의 것을 이용하여 표현될 수도 있다는 것을 이해할 것이다. 예를 들어, 상기 설명 전체를 통해 언급될 수도 있는 데이터, 명령들, 커맨드들, 정보, 신호들, 비트들, 심볼들, 및 칩들은 전압들, 전류들, 전자기파들, 자기 필드들 또는 입자들, 광학 필드들 또는 입자들, 또는 이들의 임의의 조합에 의해 표현될 수도 있다.
이하의 설명에서, 특정 상세들은 예들의 완전한 이해를 제공하기 위해 주어진다. 하지만, 통상의 기술자는 예들이 이들 특정 상세들 없이도 실시될 수도 있다는 것을 이해할 것이다. 예를 들어, 전기적 컴포넌트들/디바이스들은 불필요한 상세에서 예들을 모호하게 하지 않도록 블록도들로 보여질 수도 있다. 다른 견지들에서, 이러한 컴포넌트들, 다른 구조들 및 기법들은 예들을 추가적으로 설명하기 위해 상세하게 보여질 수도 있다.
예들은 플로우차트, 흐름도, 유한 상태도, 구조도, 또는 블록도로서 묘사되는 프로세스로서 설명될 수도 있다는 것을 또한 유의한다. 비록 플로우차트가 동작들을 순차적인 프로세스로서 설명할 수도 있지만, 많은 동작들은 병행하여 또는 동시에 수행될 수 있고 프로세스는 반복될 수 있다. 또한, 동작들의 순서는 재배열될 수도 있다. 프로세스는 그것의 동작들이 완료될 때 종결된다. 프로세스는 방법, 함수, 절차, 서브루틴, 서브프로그램 등에 대응할 수도 있다. 프로세스가 소프트웨어 함수에 대응하는 경우, 그것의 종결은 함수의 호출 함수 또는 메인 함수로의 복귀에 대응한다.
이제 도 1a 및 도 1b 를 참조하면, 예시적인 폴드형 광학 다중-센서 어셈블리 (100) 가 이제 보다 자세히 설명될 것이다. 도 1a 에서 보는 바와 같이, 센서 어셈블리 (100) 는 이미지 센서들 (105, 125), 반사 면들 (110, 135), 렌즈 어셈블리들 (115, 130), 중앙 반사 면 (120) 을 포함하고, 이들 모두는 기판 (150) 에 탑재된다.
이미지 센서들 (105, 125) 은, 어떤 실시형태들에서, 전하 결합형 디바이스 (CCD), 상보형 금속 산화물 반도체 센서 (CMOS), 또는 광을 수용하고 수용된 이미지에 응답하여 이미지 데이터를 생성하는 임의의 다른 이미지 감지 디바이스를 포함할 수도 있다. 이미지 센서들 (105, 125) 은 정지 사진의 이미지 데이터를 획득할 수도 있고, 또한 캡처된 비디오 스트림에서의 모션에 관한 정보를 제공할 수도 있다. 센서들 (105 및 125) 은 개별 센서들일 수도 있고, 또는, 3x1 어레이와 같은 센서들의 어레이를 나타낼 수도 있다. 하지만, 통상의 기술자에 의해 이해될 바와 같이, 임의의 적합한 센서들의 어레이가 개시된 구현형태들에서 사용될 수도 있다.
센서들 (105, 125) 은 도 1a 에서 도시된 바와 같이 기판 (150) 상에 탑재될 수도 있다. 일부 실시형태들에서, 모든 센서들은 평평한 기판 (150) 에 탑재됨으로써 하나의 평면 상에 있을 수도 있다. 기판 (150) 은 임의의 적합한 실질적으로 평평한 재료일 수도 있다. 중앙 반사 면 (120) 및 렌즈 어셈블리들 (115, 130) 역시 기판 (150) 상에 탑재될 수도 있다. 센서 어레이 또는 어레이들, 복수의 렌즈 어셈블리들, 및 복수의 주 및 부 반사 또는 굴절 면들을 탑재하기 위한 다수의 구성들이 가능하다.
일부 실시형태들에서, 중앙 반사 면 (120) 은 타겟 이미지 장면으로부터의 광을 센서들 (105, 125) 을 향해 재지향시키도록 이용될 수도 있다. 중앙 반사 면 (120) 은 거울 또는 복수의 거울들일 수도 있고, 평평할 수도 있고 또는 입사 광을 이미지 센서들 (105, 125) 로 적절하게 재지향시키기 위해 필요한 형상으로 될 수도 있다. 예를 들어, 일부 실시형태들에서, 중앙 반사 면 (120) 은 입사 광선들을 렌즈 어셈블리들 (115, 130) 을 통과하여 센서들 (105, 125) 로 반사시키기 위한 사이즈 및 형상의 거울일 수도 잇다. 중앙 반사 면 (120) 은 타겟 이미지를 포함하는 광을 다수의 부분들로 분할하고 각 부분을 상이한 센서에 지향시킬 수도 있다. 예를 들어, 중앙 반사 면 (120) 의 제 1 측 (122) 은 제 1 시야 (140) 에 대응하는 광의 일부분을 좌측 센서 (105) 를 향해 보낼 수도 있는 한편, 제 2 측 (124) 은 제 2 시야 (145) 에 대응하는 광의 제 2 부분을 우측 센서 (125) 를 향해 보낸다. 이미지 센서들의 시야들이 함께 적어도 타겟 이미지를 커버한다는 것을 이해하여야 한다.
수용 센서들이 복수의 센서들의 어레이의 각각인 일부 실시형태들에서, 중앙 반사 면은 타겟 이미지 장면의 상이한 부분을 센서들의 각각으로 보내도록 서로에 대해 각도를 가진 다수의 반사 면들로 이루어질 수도 있다. 어레이에서의 각 센서는 실질적으로 상이한 시야를 가질 수도 있고, 일부 실시형태들에서, 시야들은 오버랩할 수도 있다. 중앙 반사 면의 어떤 실시형태들은 렌즈 시스템을 설계할 때 자유도 (degree of freedom) 를 증가시키기 위해 복잡한 비-평면형 면들을 가질 수도 있다. 또한, 비록 중앙 면이 반사 면으로서 논의되지만, 다른 실시형태들에서, 중앙 면은 굴절형일 수도 있다. 예를 들어, 중앙 면은 복수의 면들로 구성된 프리즘일 수도 있고, 여기서, 각 면은 장면을 포함하는 광의 일부분을 센서들 중의 하나를 향해 지향시킨다.
중앙 반사 면 (120) 에서 반사된 후에, 광은 렌즈 어셈블리들 (115, 130) 을 통과할 수도 있다. 하나 이상의 렌즈 어셈블리들 (115, 130) 은 중앙 반사 면 (120) 과 센서들 (105, 125) 및 반사 면들 (110, 135) 사이에 제공될 수도 있다. 렌즈 어셈블리들 (115, 130) 은 각 센서를 향해 지향되는 타겟 이미지의 부분을 포커싱하기 위해 이용될 수도 있다.
일부 실해형태들에서, 각 렌즈 어셈블리는 하나 이상의 렌즈들 및 렌즈를 하우징 (housing) 을 통해 복수의 상이한 렌즈 포지션들 (positions) 중에서 이동시키기 위한 액츄에이터 (actuator) 를 포함할 수도 있다. 액츄에이터는 보이스 코일 모터 (VCM), 마이크로-전자 기계 시스템 (MEMS), 또는 형상 메모리 합금 (SMA) 일 수도 있다. 렌즈 어셈블리는 액츄에이터를 제어하기 위한 렌즈 드라이버 (lens driver) 를 더 포함할 수도 있다.
전통적인 오토 포커스 기법들은 렌즈들 (115, 130) 과 각 센서 어셈블리의 대응하는 센서 (105, 125) 사이의 초점 길이를 변경함으로써 구현될 수도 있다. 일부 실시형태들에서, 이것은 렌즈 배럴 (barrel) 을 이동시킴으로써 달성될 수도 있다. 다른 실시형태들은 렌즈 어셈블리에 대한 거울의 각도를 조정함으로써 또는 중앙 거울을 위 또는 아래로 이동시킴으로써 초점을 조정할 수도 있다. 어떤 실시형태들은 각 센서에 대해 측면 거울들을 이동시킴으로써 초점을 조정할 수도 있다. 이러한 실시형태들은 어셈블리가 각 센서의 초점을 개별적으로 조정하는 것을 허용할 수도 있다. 또한, 일부 실시형태들에 대해, 예를 들어 전체 어셈블리에 대해 액체 렌즈와 같은 렌즈를 배치함으로써, 전체 어셈블리의 초점을 한번에 변경하도록 하는 것이 가능하다. 어떤 구현형태들에서, 카메라 어레이의 초점 포인트를 변화시키기 위해 계산적인 사진촬영술이 이용될 수도 있다.
반사 면들 (110 및 135) 과 같은, 다수의 측면 반사 면들이 센서들과 대향하여 중앙 거울 (120) 주위에 제공될 수 있다. 렌즈 어셈블리들을 통과한 후에, 측면 반사 면들 (110, 135) 은 광을 평평한 센서들 (105, 125) 을 향해 아래로 반사시킬 수 있다. 묘사된 바와 같이, 센서 (105) 는 반사 면 (110) 아래에 포지셔닝될 수도 있고, 센서 (125) 는 반사 면 (135) 아래에 포지셔닝될 수도 있다. 하지만, 다른 실시형태들에서, 센서들은 측면 반사 면들 위에 있을 수도 있고, 측면 반사 면들은 광을 위로 반사시키도록 구성될 수도 있다. 각 렌즈 어셈블리로부터의 광이 센서들을 향해 재지향되는 측면 반사 면들 및 센서들의 다른 적합한 구성들이 가능하다. 어떤 실시형태들은 측면 반사 면들 (110, 135) 의 이동이 연관된 센서의 초점 또는 시야를 변화시키는 것을 가능하게 할 수도 있다.
도 1b 에서 도시된 바와 같이, 각 센서의 시야 (140, 145) 는 그 센서와 연관된 중앙 거울 (120) 의 면에 의해 대상 공간으로 방향이 틀어질 수도 있다. 각 카메라의 시야가 대상 필드 상의 상이한 로케이션들로 조향될 수 있도록 어레이에서의 프리즘들을 이동 및/또는 거울들을 경사시키기 위해 기계적인 방법들이 채용될 수도 있다. 이것은, 예를 들어, 하이 다이내믹 레인지 카메라를 구현하기 위해, 카메라 시스템의 해상도를 증가시키기 위해, 또는 플렌옵틱스 (plenoptics) 카메라 시스템을 구현하기 위해, 이용될 수도 있다. 각 센서의 (또는 각 3x1 어레이의) 시야는 대상 공간으로 투영될 수도 있고, 각 센서는 그 센서의 시야에 따라 타겟 장면의 일부분을 포함하는 부분 이미지를 캡처할 수도 있다. 일부 실시형태들에서, 대향 센서 어레이들 (105, 125) 에 대한 시야들 (140, 145) 은 소정 양 (150) 만큼 오버랩될 수도 있다. 오버랩 (150) 을 감소시키고 단일 이미지를 형성하기 위해, 이하 설명되는 스티칭 프로세스가 2 개의 대향하는 센서 어레이들 (105, 125) 로부터의 이미지들을 결합하기 위해 이용될 수도 있다. 스티칭 프로세스의 어떤 실시형태들은 부분 이미지들을 함께 스티칭함에 있어 공통적인 모습들을 식별하기 위해 오버랩 (150) 을 채용할 수도 있다. 중첩하는 이미지들을 함께 스티칭한 후에, 스티칭된 이미지는 최종 이미지를 형성하기 위해 원하는 애스펙트 비 (aspect ratio), 예컨대 4:3 또는 1:1 로 크로핑될 수도 있다.
도 2 는 하나 이상의 이미지 센서 어셈블리들 (215a-n) 에 연결된 이미지 프로세서 (220) 를 포함하는 컴포넌트들의 셋트를 갖는 디바이스 (200) 의 하이 레벨 블록도를 나타낸다. 이미지 프로세서 (220) 는 또한 작업 메모리 (205), 메모리 (230), 및 디바이스 프로세서 (250) 와 통신하고, 디바이스 프로세서 (250) 는 다시 스토리지 (storage) (210) 및 전자 디스플레이 (225) 와 통신한다.
디바이스 (200) 는 셀 전화기, 디지털 카메라, 태블릿 컴퓨터, PDA 등일 수도 있다. 본 명세서에서 기술된 것과 같은 감소된 두께의 이미징 시스템이 이점들을 제공할 수 있을 많은 휴대용 컴퓨팅 디바이스들이 존재한다. 디바이스 (200) 는 또한 정지형 컴퓨팅 디바이스 또는 얇은 이미징 시스템이 유리할 임의의 디바이스일 수도 있다. 디바이스 (200) 상의 사용자에 대해 복수의 애플리케이션들이 이용가능할 수도 있다. 이들 애플리케이션들은 전통적인 사진 및 비디오 애플리케이션들, 하이 다이내믹 레인지 이미징 (high dynamic range imaging), 파노라믹 포토 및 비디오, 또는 3D 이미지들 또는 3D 비디오와 같은 입체적 이미징을 포함할 수도 있다.
이미지 캡처 디바이스 (200) 는 외부 이미지들을 캡처하기 위한 이미지 센서 어셈블리들 (215a-n) 을 포함한다. 이미지 센서 어셈블리들 (215a-n) 은, 도 1a 에 대해 상기 논의된 바와 같이, 센서, 렌즈 어셈블리, 및 타겟 이미지의 일부분을 각 센서로 재지향시키기 위한 주 및 부 반사 또는 굴절 면을 각각 포함할 수도 있다. 일반적으로, N 개의 이미지 센서 어셈블리들 (215a-n) 이 사용될 수도 있고, 여기서, N ≥ 2 이다. 따라서, 타겟 이미지는 N 개의 부분들로 분할될 수도 있고, 여기서, N 센서 어셈블리들의 각 센서는 그 센서의 시야에 따라 타겟 이미지의 하나의 부분을 캡처한다. 하지만, 일부 실시형태들은 오직 하나의 이미지 센서 어셈블리만을 채용할 수도 있고, 이미지 센서 어셈블리들 (215a-n) 은 본 명세서에서 설명된 플드형 광학 이미징 디바이스의 구현을 위해 적합한 임의의 수의 이미지 센서 어셈블리들을 포함할 수도 있다는 것을 이해할 것이다. 센서들의 수는, 도 4 에 대해 이하 더 자세히 논의되는 바와 같이 시스템의 보다 낮은 z-높이를 달성하기 위해, 또는, 포스트-프로세싱 후에 이미지의 포커스를 조정하는 능력을 가능하게 할 수도 있는, 플렌옵틱스 카메라의 것과 유사한 중첩하는 시야들을 가지는 것과 같은 다른 목적들의 필요성들을 충족시키기 위해, 증가될 수도 있다. 다른 실시형태들은 2 개의 동시적인 이미지들을 캡처하고 그 다음 그들을 함께 병합하는 능력을 가능하게 하는 하이 다이내믹 레인지 카메라들에 적합한 시야 중첩 구성을 가질 수도 있다. 이미지 센서 어셈블리들 (215a-n) 은 캡처된 이미지를 이미지 프로세서 (220) 에 전송하기 위해 카메라 프로세서 (220) 에 커플링될 수도 있다.
이미지 프로세서 (220) 는, 이하 보다 자세히 설명될 바와 같이, 고품질의 스티칭된 이미지를 산출하기 위해 타겟 이미지의 N 개의 부분들을 포함하는 수신된 이미지 데이터에 대해 다양한 프로세싱 동작들을 수행하도록 구성될 수도 있다. 프로세서 (220) 는 범용 프로세싱 유닛 또는 이미징 애플리케이션들 (imaging applications) 을 위해 특별히 설계된 프로세서일 수도 있다. 이미징 프로세싱 동작들의 예들은 크로핑 (cropping), (예를 들어 상이한 해상도로의) 스케일링 (scaling), 이미지 스티칭, 이미지 포맷 변환, 컬러 보간, 컬러 프로세싱, 이미지 필터링 (예컨대, 공간 이미지 필터링), 렌즈 아티팩트 또는 결함 보정 등을 포함한다. 프로세서 (220) 는 일부 실시형태들에서 복수의 프로세서들을 포함할 수도 있다. 어떤 실시형태들은 각각의 이미지 센서에 대해 전용되는 프로세서를 가질 수도 있다. 프로세서 (220) 는 하나 이상의 전용 이미지 신호 프로세서들 (ISPs) 또는 프로세서의 소프트웨어 구현일 수도 있다.
도시된 바와 같이, 이미지 프로세서 (220) 는 메모리 (230) 및 작업 메모리 (205) 에 접속된다. 예시된 실시형태에서, 메모리 (230) 는 캡처 제어 모듈 (235), 이미지 스티칭 모듈 (240), 및 오퍼레이팅 시스템 (245) 을 저장한다. 이들 모듈들은 다양한 이미지 프로세싱 및 디바이스 관리 태스크들 (tasks) 을 수행하도록 디바이스 프로세서 (250) 의 이미지 프로세서 (220) 를 구성하는 명령들을 포함한다. 작업 메모리 (205) 는 메모리 (230) 의 모듈들에 포함된 프로세서 명령들의 작업 셋트를 저장하기 위해 이미지 프로세서 (220) 에 의해 이용될 수도 있다. 대안적으로, 작업 메모리 (205) 는 또한, 디바이스 (200) 의 동작 동안 생성된 동적 데이터를 저장하기 위해 이미지 프로세서 (220) 에 의해 이용될 수도 있다.
상기 언급된 바와 같이, 이미지 프로세서 (220) 는 메모리들에 저장된 수개의 모듈들에 의해 구성된다. 캡처 제어 모듈 (235) 은 이미징 센서 어셈블리들 (215a-n) 의 포커스 포지션을 조정하도록 이미지 프로세서 (220) 를 구성하는 명령들을 포함할 수도 있다. 캡처 제어 모듈 (235) 은 디바이스 (200) 의 전체 이미지 캡처 기능들을 제어하는 명령들을 더 포함할 수도 있다. 예를 들어, 캡처 제어 모듈 (235) 은 이미징 센서 어셈블리들 (215a-n) 을 이용하여 타겟 이미지 장면의 로 (raw) 이미지 데이터를 캡처하도록 이미지 프로세서 (220) 를 구성하기 위한 서브루틴들을 호출하는 명령들을 포함할 수도 있다. 캡처 제어 모듈 (235) 은 그 다음, 센서 어셈블리들 (215a-n) 에 의해 캡처된 N 개의 부분 이미지들에 대해 스티칭 기법을 수행하고 스티칭되고 크로핑된 타겟 이미지를 이미징 프로세서 (220) 로 출력하기 위해 이미지 스티칭 모듈 (240) 을 호출할 수도 있다. 캡처 제어 모듈 (235) 은 또한, 캡처될 장면의 프리뷰 (preview) 이미지를 출력하기 위해 로 이미지 데이터에 대해 스티칭 동작을 수행하기 위해, 그리고, 소정 시간 간격들로 또는 로 이미지 데이터에서의 장면이 변경될 때 프리뷰 이미지를 업데이트하기 위해 이미지 스티칭 모듈 (240) 을 호출할 수도 있다.
이미지 스티칭 모듈 (240) 은 캡처된 이미지 데이터에 대해 스티칭 및 크로핑 기법들을 수행하도록 이미지 프로세서 (220) 를 구성하는 명령들을 포함할 수도 있다. 예를 들어, N 개의 센서들 (215a-n) 의 각각은 각 센서의 시야에 따른 타겟 이미지의 부분을 포함하는 부분 이미지를 캡처할 수도 있다. 시야들은 도 1b 에 대해 상기 설명되고 도 3c, 도 4c, 도 5b 및 도 6b 에 대해 이하 설명되는 바와 같이, 오버랩 영역들을 공유할 수도 있다. 단일 타겟 이미지를 출력하기 위해, 이미지 스티칭 모듈 (240) 은 고해상도 타겟 이미지를 생성하기 위해 다수의 N 개의 부분 이미지들을 결합하도록 이미지 프로세서 (220) 를 구성할 수도 있다. 타겟 이미지 생성은 공지의 이미지 스티칭 기법들을 통해 발생할 수도 있다. 이미지 스티칭의 예들은, 참조에 의해 그 전체가 본원에 통합되는, 미국 특허 출원 번호 제 11/623,050 호 (문서 번호 060170) 에서 발견될 수 있다.
예를 들어, 이미지 스티칭 모듈 (240) 은 N 개의 부분 이미지들의 서로에 대한 회전 및 정렬을 결정하기 위해 피처들 (features) 을 매칭 (matching) 시키기 위해 N 개의 부분 이미지들의 에지들을 따라 오버랩 영역들을 비교하기 위한 명령들을 포함할 수도 있다. 각 센서의 시야의 형상 및/또는 부분 이미지들의 회전으로 인해, 결합된 이미지는 불규칙한 형상을 형성할 수도 있다. 따라서, N 개의 부분 이미지들을 정렬 및 결합한 후에, 이미지 스티칭 모듈 (240) 은 예컨대 4:3 직사각형 또는 1:1 정사각형과 같은 원하는 형상 및 애스펙트 비로 결합된 이미지를 크로핑하도록 이미지 프로세서 (220) 를 구성하는 서브루틴들을 호출할 수도 있다. 크로핑된 이미지는 스토리지 (210) 에의 저장을 위해 또는 디스플레이 (225) 상에서의 표시를 위해 디바이스 프로세서 (250) 로 전송될 수도 있다.
오퍼레이팅 시스템 모듈 (245) 은 디바이스 (200) 의 프로세싱 자원 및 작업 메모리 (205) 를 관리하도록 이미지 프로세서 (220) 를 구성한다. 예를 들어, 오퍼레이팅 시스템 모듈 (245) 은 이미징 센서 어셈블리들 (215a-n) 과 같은 하드웨어 자원을 관리하기 위한 디바이스 드라이버들을 포함할 수도 있다. 따라서, 일부 실시형태들에서, 상기 논의된 이미지 프로세싱 모듈들에 포함된 명령들은 이들 하드웨어 자원들과 직접 상호작용하지 않을 수도 있지만, 대신에, 오퍼레이팅 시스템 컴포넌트 (270) 에 위치된 표준 서브루틴들 또는 API 들을 통해 상호작용할 수도 있다. 오퍼레이팅 시스템 (245) 내의 명령들은 그 다음 이들 하드웨어 컴포넌트들과 직접 상호작용할 수도 있다. 오퍼레이팅 시스템 모듈 (245) 은 디바이스 프로세서 (250) 와 정보를 공유하도록 이미지 프로세서 (220) 를 추가로 구성할 수도 있다.
디바이스 프로세서 (250) 는 사용자에게 캡처된 이미지 또는 캡처된 이미지의 프리뷰를 표시하도록 디스플레이 (225) 를 제어하도록 구성될 수도 있다. 디스플레이 (225) 는 이미징 디바이스 (200) 의 외부에 있을 수도 있고, 또는 이미징 디바이스 (200) 의 일부일 수도 있다. 디스플레이 (225) 는 또한, 이미지를 캡처하기 이전에 사용자에 대해 프리뷰 이미지를 디스플레이하는 뷰 파인더 (view finder) 를 제공하도록 구성될 수도 있고, 또는, 사용자에 의해 최근에 캡처된 또는 메모리에 저장된 캡처된 이미지를 디스플레이하도록 구성될 수도 있다. 디스플레이 (225) 는 LCD 또는 LED 스크린을 포함할 수도 있고, 터치 감지 기술들을 구현할 수도 있다.
디바이스 프로세서 (250) 는 예를 들어 캡처된 이미지들을 나타내는 데이터를 스토리지 모듈 (210) 에 기입할 수도 있다. 스토리지 모듈 (210) 은 전통적인 디스크 디바이스로서 도표로 표현되지만, 통상의 기술자는, 스토리지 모듈 (210) 은 임의의 스토리지 매체 디바이스로서 구성될 수도 있다는 것을 이해할 것이다. 예를 들어, 스토리지 모듈 (210) 은, 플로피 디스크 드라이브, 하드 디스크 드라이브, 광학 디스크 드라이브 또는 광자기 디스크 드라이브와 같은 디스크 드라이브, 또는 플래시 메모리, RAM, ROM, 및/또는 EEPROM 과 같은 솔리드 스테이트 메모리를 포함할 수도 있다. 스토리지 모듈 (210) 은 또한 다수의 메모리 유닛들을 포함할 수 있고, 메모리 유닛들 중 임의의 것은 이미지 캡처 디바이스 (200) 내에 있도록 구성될 수도 있고, 또는, 이미지 캡처 디바이스 (200) 외부에 있을 수도 있다. 예를 들어, 스토리지 모듈 (210) 은 이미지 캡처 디바이스 (200) 내에 저장된 시스템 프로그램 명령들을 포함하는 ROM 메모리를 포함할 수도 있다. 저장 모듈 (210) 은 또한, 카메라로부터 착탈 가능할 수도 있는, 캡처된 이미지들을 저장하도록 구성된 메모리 카드들 또는 고속 메모리들을 포함할 수도 있다.
비록 도 2 는 프로세서, 이미징 센서, 및 메모리를 포함하도록 별개의 컴포넌트들을 갖는 디바이스를 묘사하지만, 통상의 기술자는, 이들 별개의 컴포넌트들은 특정 설계 목적들을 달성하기 위해 다양한 방식들로 결합될 수도 있다는 것을 인식할 것이다. 예를 들어, 대안적인 실시형태에서, 메모리 컴포넌트들은 비용을 절약하고 성능을 향상시키기 위해 프로세서 컴포넌트들과 결합될 수도 있다.
또한, 비록 도 2 는 수개의 모듈들을 포함하는 메모리 컴포넌트 (230) 및 작업 메모리를 포함하는 별개의 메모리 (205) 를 포함하는 2 개의 메모리 컴포넌트들을 도시하지만, 통상의 기술자는 상이한 메모리 아키텍쳐들 (architectures) 을 이용한 수개의 실시형태들을 인식할 것이다. 예를 들어, 설계는 메모리 (230) 에 포함된 모듈들을 구현하는 프로세서 명령들의 스토리지를 위해 ROM 또는 정적 RAM 을 이용할 수도 있다. 프로세서 명령들은 이미지 프로세서 (220) 에 의한 실행을 용이하게 하기 위해 RAM 내로 로딩될 수도 있다. 예를 들어, 작업 메모리 (205) 는, 프로세서 (220) 에 의한 실행 전에 작업 메모리 (205) 로 로딩되는 명령들을 갖는 RAM 메모리를 포함할 수도 있다.
도 3a 내지 도 3c 로 가서, 폴드형 광학 센서 어레이 (300) 의 하나의 실시형태가 보다 자세히 설명될 것이다. 어레이 (300) 는 2 개의 3x1 열들 (rows) 의 센서 어셈블리들 및 중앙 광 반사 면 (335), 예컨대 거울을 포함한다. 도 1a 에서 도시된 바와 같이, 센서 어셈블리들 A-F 은 각각, 이미지 센서, 렌즈 어셈블리, 및 부 반사 면을 포함할 수도 있다. 센서 어레이 (300) 구성의 일부 실시형태들은 82 도의 시야를 가질 수도 있다.
도 3a 및 도 3b 에서 도시된 바와 같이, 센서 어셈블리 A (305), 센서 어셈블리 B (310), 및 센서 어셈블리 C (315) 는 중앙 미러 (335) 의 일 측 (337) 에 제 1 축 (301) 을 따라 서로 인접하게 평행하게 정렬된다. 센서 어셈블리 D (320), 센서 어셈블리 E (325), 및 센서 어셈블리 F (330) 는 중앙 미러 (335) 의 대향 측 (338) 에 제 2 축 (302) 을 따라 서로 인접하게 평행하게 정렬된다. 제 1 및 제 2 축은 중앙 거울 (335) 의 대칭의 중앙 라인 (336) 에 대해 평행하게 정렬된다. 비록 축 상의 각 센서 어셈블리 사이에 균일한 갭 (gap) 이 존재하는 것으로 묘사되었지만, 이 갭의 양은 가변적이고, 일부 실시형태들은, 예를 들어 센서들을 실리콘 웨이퍼의 그룹으로서 컷팅함으로써, 그들 사이에 갭이 없이 센서들을 배열할 수도 있다.
도 3b 는 3 개의 구분 미러링되는 면들 (337, 338, 및 339) 을 디스플레이하는 중앙 거울 (335) 의 투시도를 나타낸다. 미러링된 면 (337) 은 타겟 이미지의 일부분을 포함하는 광을 센서 어셈블리 (320) 를 향해 재지향시킨다. 타겟 이미지의 이 부분은 센서 (320) 의 시야에 대응한다. 미러링된 면 (338) 은 타겟 이미지의 다른 부분을 센서 어셈블리 (325) 를 향해 재지향시키고, 미러링된 면 (339) 은 타겟 이미지의 제 3 부분을 센서 어셈블리 (330) 를 향해 재지향시킨다. 비록 도 3b 에 의해 도시된 도에서는 나타나지 않지만, 중앙 거울의 대향 측은 센서 어셈블리 (305, 310, 및 315) 를 향해 광을 반사시키는 3 개의 유사한 면들을 포함한다.
어레이 (300) 에서의 센서들의 각각의 시야들이 도 3c 에서 도시된다. 시야 (360) 는 센서 (320) 에 대응하고, 시야 (365) 는 센서 (325) 에 대응하며, 시야 (370) 는 센서 (330) 에 대응한다. 부분적으로 중앙 거울 면들 (337 및 338) 의 상대 각도로 인해, 시야들 (360 및 365) 은 삼각형의 오버랩을 공유한다. 시야들 (365 및 370) 은 또한 동일한 사양들의 삼각형의 오버랩을 공유할 수도 있다. 중앙 거울 (335) 이 대칭 라인 (336) 에 관해 대칭적이므로, 시야들 (345, 350, 및 355) 은 시야들 (360, 365, 및 370) 과 서로에 대해 유사한 관계를 보유할 수도 있다. 또한, 센서 어레이의 2 열들은 중첩하는 시야들을 공유할 수도 있다. 시야들 (365 및 350) 은 직사각형 오버랩을 공유한다. 일부 실시형태들에서, 어레이에서의 센서들은 예시된 시야들에 따라 복수의 이미지들을 캡처할 수도 있고, 복수의 이미지들은 함께 스티칭되고 직사각형 경계 (340) 로 크로핑되어 타겟 이미지를 생성할 수도 있다.
도 4 는 센서 (405), 렌즈 시스템 (495), 제 1 반사면 (480) 및 제 2 반사 면 (401) 을 포함하는 폴드형 광학 센서 어셈블리 (400) 의 일 실시형태를 나타낸다.
폴드형 광학 센서 어셈블리 (400) 에서, 제 1 반사 면 (480) 은 센서 (405) 가 탑재되는 평면에 대해 각도 τO 로 포지셔닝될 수도 있다. 제 2 반사 면 (401) 은 센서 (405) 가 탑재되는 평면에 대해 각도 τi 로 포지셔닝될 수도 있다. 센서 (405) 는 적어도 부분적으로 센서 높이 (410) 에 의해 결정된 센서의 높이의 시야 (γH) 및 대각선 시야 (γ) 를 가질 수도 있다. 렌즈 시스템 (495) 은, 렌즈 시스템 (495) 의 수용 에지 상의 포인트 (dO) 로부터 반사 면 (480) 상의 포인트 (QO) 까지 중앙 축을 따라서 측정된, 제 1 반사 면 (480) 으로부터 거리 (445) 에 포지셔닝될 수도 있다. 렌즈 시스템은, 렌즈 시스템 (495) 의 송광 에지 상의 포인트 (di) 로부터 반사 면 (401) 상의 포인트 (Qi) 까지 중앙 축을 따라서 측정된, 제 2 반사 면 (401) 으로부터 거리 (430) 에 포지셔닝될 수도 있다.
타겟 이미지 장면을 포함하는 입사 광 (475) 은 제 1 반사면 (480) 을 향해 이동한다. 입사 빔 (475) 은 포인트 (PO) 에서 면 (480) 을 때리고, 그 다음, 면 (480) 에서 반사되어 렌즈 시스템 (495) 을 향해 반사된 빔 (470) 으로서 이동한다. 입사 빔 (475) 은 렌즈 시스템 (495) 의 수용 에지에 대해 각도 (αO) 를 형성하고, 반사된 빔 (470) 은 렌즈 시스템 (495) 의 수용 에지에 대해 각도 (βO) 를 형성한다. 입사 빔 (475) 과 반사된 빔 (470) 사이의 반사각은 변수 (δO) 에 의해 표시된다.
반사된 빔 (470) 은 그 다음 렌즈 시스템 (495) 으로 들어가고, 적어도 하나의 직경 (465) 의 렌즈를 통과한다. 렌즈 시스템 (495) 은 길이 (435) 및 직경 (425) 을 갖는다. 렌즈 시스템 내에서, 타겟 이미지는 높이 (460) 의 것이다. 거리 (440) 는 렌즈 시스템 (495) 의 에지로부터 렌즈 다이어프램의 포지션을 나타낸다. 수렴 렌즈를 채용하는 실시형태들에서, 광은 초점 포인트 R 에서 수렴할 수도 있고, 그 다음, 렌즈 시스템 (495) 의 다른 측으로 밖으로 이동한다.
렌즈 시스템 (495) 을 떠난 후에, 광의 빔 (455) 은 부 반사 면 (401) 에 입사한다. 입사 빔 (455) 은 포인트 (Pi) 에서 면 (480) 을 때리고, 그 다음, 면 (401) 에서 반사되어 센서 (405) 를 향해 반사된 빔 (450) 으로서 이동한다. 반사된 빔 (450) 은 렌즈 시스템 (495) 의 송광 에지에 대해 각도 (αi) 를 형성하고, 입사 빔 (455) 은 렌즈 시스템 (495) 의 송광 에지에 대해 각도 (βi) 를 형성한다. 입사 빔 (455) 과 반사 빔 (450) 사이의 반사의 각도는 변수 (δi) 에 의해 표시된다.
전술한 변수들 사이의 관계는, 일부 2D 실시형태들에서, 다음 식들에 의해 정의된다:
폴드형 광학들을 갖는 시스템 (400) 의 최소 Z-높이 (490) 는 최소 백 초점 길이 (minimum back focal length) 에 의해 결정된다. 최소 백 초점 길이는 렌즈 시스템의 직경 (425) 에 대한 최대 값을 계산하기 위해 이용될 수도 있다. 렌즈 시스템의 직경 (425) 은 센서에 대한 Z-거리의 값 (420) 및 거울의 상부에 대한 Z-거리의 값 (485) 을 결정한다. 센서에 대한 Z-거리 (420) 및 거울의 상부에 대한 Z-거리 (485) 의 값들은 시스템 (480) 에 대한 최소 Z-높이를 제공한다.
일 실시형태에서, 센서에 대한 Z-거리 (420) 및 부 반사 면에 대한 거리 (430) 양자 모두는 최소이고, 따라서, 어셈블리 (400) 는 폴드형 광학들 (folded optics) 을 이용하기 위해 필요한 최소 백 초점 길이를 갖는다. 이것은, 반사된 빔 (450) 이 단지 렌즈 시스템 (495) 과 교차하지 않고 센서 (405) 가 단지 렌즈 시스템 (495) 및 부 반사 면 (401) 과 교차하지 않는 포인트까지 렌즈 시스템의 직경 (425) 이 증가될 때, 발생할 수도 있다. 이 포인트에서, 렌즈 시스템의 직경 (425) 은 또한 그것의 최대 값에 도달했을 수도 있다.
폴드형 광학들을 갖는 시스템 (490) 의 최소 Z-높이는 최소 백 초점 길이에 관련되고, 최소 백 초점 길이로부터, 렌즈 시스템의 직경 (425) 에 대한 최대 값이 계산될 수도 있다. 폴드형 광학들을 갖는 렌즈 시스템 (495) 의 백 초점 길이는 부 반사 면 (401) 까지의 거리와 센서 (415) 까지의 거리를 합산함으로써 계산될 수도 있다. 일 실시형태에서, 시야 (γH) 는 40 도로 고정될 수도 있고, 센서 (405) 의 높이는 1.6㎜ 일 수도 있으며, 센서 (405) 는 1Mpx 센서일 수도 있다. 백 초점 길이는 렌즈 직경 (465) 이 .5㎜ 인 경우에 2㎜ 일 수도 있다. 일부 실시형태들에서, 폴드형 광학 센서 어레이에서의 센서들의 수는 보다 낮은 Z-높이들을 달성하기 위해 증가될 수도 있다.
일 실시형태들에서, 센서 (405) 는 1.4㎛ 픽셀 피치를 갖는 5MP 센서일 수도 있고, 시야 (γH) 는 65 도일 수도 있다. 이 실시형태의 유효 초점 길이는 유한에서 포커싱될 때 3.57㎜ 일 수도 있다. 유사하게, 1.12㎛ 픽셀 피치를 갖는 8MP 센서를 갖는 실시형태의 유효 초점 길이는 또한, 센서가 5MP 센서와 동일한 물리적 사이즈일 수 있으므로, 3.57㎜ 일 수도 있다. 이들 실시형태들의 시스템의 Z-높이 (490) 가 3.9㎜ 정도이도록 하는 것이 가능하다.
도 5a 및 도 5b 는 대응하는 시야들을 갖는 6 센서 폴드형 광학 어레이들의 2 개의 실시형태들을 나타낸다. 도 4 와 관련하여 상기 논의된 바와 같이, 이들 실시형태들의 센서 어셈블리들은 각각, 센서, 렌즈 시스템, 및 광을 센서 상으로 가이드하기 위해 포지셔닝된 반사 면을 포함할 수도 있다. 이들 실시형태들에서 논의된 중앙 거울은 별개의 반사 면들의 어셈블리 (assembly) 로서 제조될 수도 있고, 또는, 다중 반사 면들을 갖는 단일 프리즘으로서 제조될 수도 있다.
도 5a 는 중앙 거울 (505) 주위에 센서 어셈블리들 (510, 520, 및 530) 의 제 1 열 및 센서 어셈블리들 (540, 550, 및 560) 의 제 2 열을 갖는 폴드형 광학 센서 어레이 (500) 의 다른 실시형태를 나타낸다. 각 열의 센서 어셈블리들은, 센서들이 동일 평면에 탑재되지 않도록, 서로에 대해 회전 또는 경사될 수도 있다. 예를 들어, 외측 센서 어셈블리들 (510, 530 및 540, 560) 은 중앙 센서들 (520, 550) 에 대해 대략적으로 21 도 플러스 또는 마이너스로 회전될 수도 있다. 어셈블리들의 중앙 축들은 이미지 평면에 대해 평행한 하나의 평면 내에 있을 수도 있다. 센서 어셈블리 (500) 의 어떤 실시형태들은 11㎜ × 12㎜ - 4.5㎜ (W × L - Z-높이) 를 측정할 수도 있다. 물론, 실시형태들이 이들 회전에 제한되지 않고, 다른 정도의 회전이 고려된다.
중앙 거울 (505) 은 6 개의 면들을 포함할 수도 있고, 각 면은 타겟 이미지 장면의 일부분을 포함하는 광을 센서 어셈블리들 중의 하나를 향해 재지향시키도록 구성된다. 예를 들어, 면 (570) 은 광을 센서 어셈블리 (540) 에 지향시킬 수도 있고, 면 (580) 은 광을 센서 어셈블리 (550) 에 지향시킬 수도 있으며, 면 (590) 은 광을 센서 어셈블리 (560) 에 지향시킬 수도 있다. 일 실시형태에서, 면들 (570 및 590) 은 76 × 31.3 도 (상부 × 하부) 로 각을 이룰 수도 있고, 면 (580) 은 76.4 도 × 0 도 (상부 × 하부) 로 각도를 이룰 수도 있다. 비록 도 5a 의 투시도에서는 보이지 않지만, 중앙 거울 (505) 의 측면은 센서 어셈블리들 (510, 520, 및 530) 에 대응하는 3 개의 추가적인 면들을 포함할 수도 있다. 일 실시형태는 10 개의 면들을 갖는 복잡한 거울을 포함할 수도 있고, 이 중 6 개는 반사 면들일 수도 있다. 중앙 거울의 일부 실시형태들은 6 개의 면들을 갖는 복잡한 거울을 포함할 수도 있고, 다른 실시형태들은 3 개의 별개의 웨지 (wedge) 형상의 거울들을 포함할 수도 있다. N 개의 센서들을 갖는 다른 실시형태들에서, 중앙 거울은 N 개의 면들을 포함할 수도 있고, 여기서, N 개의 면들의 각각은 타겟 이미지 장면의 일부분을 포함하는 광을 N 개의 센서들 중의 하나를 향해 지향시키도록 구성된다.
도 5b 는 6 개의 센서 어셈블리들 (511, 521, 531, 541, 551, 및 561) 이 3 개의 중앙 거울들 (571, 581, 및 591) 의 클러스터 (cluster) 주위에 일반적으로 원형 패턴으로 주위에 탑재된 폴드형 광학 센서 어레이 (501) 의 다른 실시형태를 나타낸다. 일부 실시형태들에서, 센서 어셈블리들 (511 및 541) 및 센서 어셈블리들 (531 및 561) 사이에는 대략적으로 76 도의 각도가 존재할 수도 있다. 센서 어셈블리들은 동일 평면에, 예컨대 실질적으로 평평한 기판 상에 탑재될 수도 있다. 일부 실시형태들에서, 센서 어셈블리들에서의 센서들은 탑재 면에 대해 수직으로 배열될 수도 있다. 각 센서는 전체 시야의 상이한 부분을 보여줄 수도 있다.
중앙 거울들 (571, 581, 및 591) 은 또한 기판 상에 탑재될 수도 있다. 중앙 거울들 (571, 581, 및 591) 은 각각 별개의 웨지 형상의 거울일 수도 있다. 면 (571) 은 광을 양 센서 어셈블리들 (511 및 541) 에 지향시킬 수도 있다. 면 (581) 은 2 개의 별개의 반사 면들을 포함할 수도 있고, 그것의 제 1 면은 광을 센서 어셈블리 (551) 에 지향시킬 수도 있고, 그것의 제 2 면은 광을 센서 어셈블리 (521) 에 지향시킬 수도 있다. 면 (591) 은 광을 양 센서 어셈블리들 (531 및 561) 에 지향시킬 수도 있다. 센서 어레이 (501) 의 어떤 실시형태들은 15㎜ × 17㎜ - 3.6㎜ (W × L - Z-높이) 를 측정할 수도 있다.
일 실시형태에서, 어레이 (501) 에서의 센서들은 1.4㎛ 픽셀 사이즈 및 4:3 비를 가지고 3.61 × 2.71 ㎜ (W × H) 를 갖는 5 메가픽셀들일 수도 있다. 다른 실시형태들에서, 센서들은 1.12㎛ 픽셀 사이즈 및 4:3 비를 가지고 3.66 × 2.74 ㎜ (W × H) 를 갖는 8 메가픽셀들일 수도 있다. 각 센서의 시야는 40 도일 수도 있다. 어떤 실시형태들에서 어레이 (501) 의 전체 사이즈는 18 × 18 - 2.5 ㎜ (W × L - Z-높이) 보다 더 크지 않을 수도 있다. 20㎝ 이상인 대상 거리에서 여러 센서들의 시야들 사이에 5% 내지 10% 의 오버랩이 존재할 수도 있다. 각도 오버랩은 대상 거리의 함수로서 일정할 수도 있고, 또는, 적어도 점근적으로 일정하다.
어레이들 (500, 501) 의 어떤 실시형태들은 도 4 에서 묘사된 렌즈 시스템 (495) 에 유사한 렌즈 어셈블리를 채용할 수도 있다. 어레이의 어떤 실시형태들에서의 모든 렌즈 시스템들은 동일한 초점 길이, 렌즈 직경 및 길이를 가질 수도 있고, 이는 이용가능한 센서 면적을 최대화시키는 것과 관련하여 바람직한 결과들을 가져올 수도 있다. 이용가능한 센서 면적을 최대화하는 것은 또한 내측 및 외측 센서들의 렌즈 시스템들에 대해 상이한 설계들을 이용함으로써 달성될 수도 있다. 일부 실시형태들에서, 렌즈 직경은 대략적으로 1.3㎜ 일 수도 있고, 초점 거리는 대략적으로 2.7㎜ 일 수도 있다. 렌즈 시스템의 최대 가능 길이는 대략적으로 2.3㎜ 일 수도 있고, 렌즈 시스템의 직경 (높이) 은 대략적으로 1.6㎜ 일 수도 있다. 어레이 (501) 의 총 시야는 83 도일 수도 있다.
도 5c 는 도 5a 및 도 5b 의 폴드형 광학 센서 어레이 실시형태들의 투영된 시야들의 일 실시형태를 나타낸다. 비록 2 개의 어레이 실시형태들 (500, 501) 사이에 센서 및 중앙 거울 구성들이 상이하지만, 그들은 동일한 시야 구성을 공유한다. 시야 (515) 는 센서들 (510, 511) 에 대응하고; 시야 (525) 는 센서들 (520, 521) 에 대응하고; 시야 (535) 는 센서들 (530, 531) 에 대응하고; 시야 (545) 는 센서들 (540, 541) 에 대응하며; 시야 (555) 는 센서들 (550, 551) 에 대응하고; 시야 (565) 는 센서들 (560, 561) 에 대응한다.
시야들 (515 및 525) 은 삼각형 오버랩을 공유하고, 여기서, 각도 오버랩은 X 및 Y-방향들에서 1-4 도 사이에서 변화한다. 일부 실시형태들에서, 오버랩은 4 도보다 더 크다. 예를 들어, 일부 실시형태들에서, 센서 면적의 이용 효율 및 관련된 손실에 적어도 부분적으로 기초하여, 설계로서 적절할 수도 있는 경우에, 오버랩은 10 도 이상일 수도 있다. 각도 오버랩이 3 도인 일부 실시형태들에서, 1 미터 시야들 (515 및 525) 은 2 개의 중첩하는 시야들의 전체 캡처된 면적의 3.3% 를 포함하는 오버랩을 가질 수도 있다. 시야들 (525 및 535), 시야들 (545 및 555), 및 시야들 (555 및 565) 은 또한 동일 사양의 삼각형 오버랩을 공유할 수도 있다. 또한, 시야들 (515 및 545) 은 4 도에서 5.1% 의 삼각형 오버랩을 공유할 수도 있다. 시야들 (535 및 565) 은 유사한 오버랩을 공유할 수도 있다. 시야들 (525 및 555) 은 센서 어레이 (500, 501) 에 걸쳐 중첩될 수도 있고, 3 도에서 3.3% 를 공유할 수도 있다. 전체 어레이 (500, 501) 의 시야는 82 도일 수도 있다. 중첩하는 시야들의 일부 실시형태들은 직사각형 4:3 애스펙트 비 (596) 로 크로핑되어 18.8% 의 손실을 초래할 수도 있다. 다른 실시형태들은 1:1 정사각형 애스펙트 비 (595) 로 크로핑되어 11.3% 의 손실을 초래할 수도 있다.
다른 실시형태들에서, 시야들 (515 및 525) 은 2 개의 중첩하는 시야들의 전체 캡처된 면적의 6.7% 를 포함하는 5.2 도의 오버랩을 가질 수도 있다. 시야들 (525 및 535), 시야들 (545 및 555), 및 시야 (555 및 565) 는 또한 동일 사양들의 삼각형 오버랩을 공유할 수도 있다. 또한, 시야들 (515 및 545) 은 4.9 도에서 8.5% 의 삼각형 오버랩을 공유할 수도 있다. 도시된 바와 같이, 시야들 (535 및 565) 은 유사한 오버랩을 공유한다. 시야들 (525 및 555) 은 센서 어레이 (500, 501) 에 걸쳐 중첩하고, 5.3 도에서 7.5% 를 공유할 수도 있다. 다른 실시형태들은 다양한 각도들에서 더 크거나 더 작은 백분율의 캡처된 영역을 공유할 수도 있다. 중첩 시야들의 일부 실시형태들은 직사각형 4:3 의 애스펙트 비 (596) 로 크로핑되어 24.2% 의 손실을 초래할 수도 있다. 다른 실시형태들은 최대 직사각형으로 크로핑되어 6.6% 의 손실을 초래할 수도 있다. 전체 시야는 76 도일 수도 있다. 하지만, 이들 수들은 오버랩 영역들의 가시적 최적화에 기초하고, 허용가능한 손실 면적 및 대상 거리와 같은 팩터들에 따라 변화한다.
센서 어레이 (500) 의 일 실시형태에서, 중앙-중앙 오버랩 (525, 555) 은 3.7 도에서 5% 일 수도 있고, 측면-측면 오버랩은 4 도에서 5.1% 일 수도 있으며, 중앙-측면 오버랩은 3.3 도에서 3.3% 일 수도 있다. 4:3 직사각형 애스펙트 비에서의 크로핑은 18.8% 의 손실을 초래할 수도 있는 한편, 가능 최대 직사각형에서의 크로핑은 11.3% 의 손실을 초래할 수도 있다. 센서 어레이 (501) 의 일 실시형태에서, 중앙-중앙 오버랩 (525, 555) 은 4.7 도에서 5% 일 수도 있고, 측면-측면 오버랩은 4 도에서 5% 일 수도 있으며, 중앙-측면 오버랩은 2.2 도에서 3.6% 일 수도 있다. 4:3 직사각형 애스펙트 비에서의 크로핑은 19.4% 의 손실을 초래할 수도 있는 한편, 가능 최대 직사각형에서의 크로핑은 11.2% 의 손실을 초래할 수도 있다. 센서 어레이 (501) 의 다른 실시형태에서, 중앙-중앙 오버랩 (525, 555) 은 1.6 도에서 2.4% 일 수도 있고, 측면-측면 오버랩은 6.2 도에서 8% 일 수도 있으며, 중앙-측면 오버랩은 4.3 도에서 6.9% 일 수도 있다. 4:3 직사각형 애스펙트 비에서의 크로핑은 14.2% 의 손실을 초래할 수도 있는 한편, 가능 최대 직사각형에서의 크로핑은 14.2% 의 손실을 초래할 수도 있다. 전체 시야는 83 도일 수도 있다. 일 실시형태에서, 최종 이미지는 4:3 크로핑 후에 19 메가픽셀들 정도일 수도 있다.
시스템의 총 Z-높이를 제한하는 것은 어레이에서의 각 센서의 일부분이 각 부 거울의 제한된 높이로 인해 사용가능하지 않게 되는 결과를 초래할 수도 있다.예를 들어, 도 4 에서 기술된 것과 같은 센서 어셈블리들을 채용하는 어레이 (501) 의 일 실시형태에서, 그리고 시스템의 Z-높이가 2.5㎜ 로 제한되는 경우에, 센서들 (551 및 521) 은 54.2% 의 가용 면적을 가질 수도 있고, 센서들 (511, 531, 541, 및 561) 은 52.1% 의 가용 면적을 가질 수도 있다. 이용가능한 센서의 높이는 시스템에 대한 높이 제약 하에서 2㎜ 정도일 수도 있다.
도 6a 는 폴드형 광학 센서 어레이 (600) 의 다른 실시형태를 나타낸다. 센서 어레이 (600) 는 중앙 거울 (505) 주위로 제 1 열의 센서 어셈블리들 (610, 620, 및 630) 및 제 2 열의 센서 어셈블리들 (640, 650, 및 660) 을 갖는다. 각 열의 센서 어셈블리들은, 센서들이 동일 평면에 탑재되지 않도록, 서로에 대해 회전 또는 경사될 수도 있다. 일부 실시형태들에서, 이러한 센서 구성은, 이미지 평면 및 초점 평면이 평행할 수도 있으므로, 복수의 직사각형 이미지들을 제공한다. 센서 어레이 (600) 의 어떤 실시형태들은 12㎜ × 15㎜ - 4.6㎜ (W × L - Z-높이) 를 측정할 수도 있다.
중앙 거울 (670) 은 6 개의 면들을 포함할 수도 있고, 각 면은 타겟 이미지 장면의 일부분을 포함하는 광을 센서 어셈블리들 중의 하나를 향해 재지향시키도록 구성된다. 중앙 거울의 일부 실시형태들은 6 개의 면들을 갖는 복합 거울을 포함할 수도 있고, 다른 실시형태들은 3 개의 별개의 웨지 형상의 거울들을 포함할 수도 있다. 예를 들어, 면 (673) 은 광을 센서 어셈블리 (640) 에 지향시킬 수도 있고, 면 (672) 은 광을 센서 어셈블리 (650) 에 지향시킬 수도 있으며, 면 (671) 은 광을 센서 어셈블리 (660) 에 지향시킬 수도 있고, 면 (674) 은 광을 센서 어셈블리 (630) 에 지향시킬 수도 있다. 비록 도 6a 의 투시도에서는 보이지 않지만, 중앙 거울 (505) 의 대향 측은 센서 어셈블리들 (510 및 520) 에 대응하는 2 개의 추가적인 면들을 포함할 수도 있다. N 개의 센서들을 갖는 다른 실시형태들에서, 중앙 거울은 N 개의 면들을 포함할 수도 있고, 여기서, N 개의 면들의 각각은 타겟 이미지 장면의 일부분을 포함하는 광을 N 개의 센서들 중의 하나를 향해 지향시키도록 구성된다.
도 6b 는 도 6a 의 폴드형 광학 센서 어레이 (600) 의 투영된 시야들의 일 실시형태를 나타낸다. 시야 (615) 는 센서 (610) 에 대응하고; 시야 (625) 는 센서 (620) 에 대응하고; 시야 (635) 는 센서 (630) 에 대응하고; 시야 (645) 는 센서 (640) 에 대응하며; 시야 (655) 는 센서 (650) 에 대응하고; 시야 (665) 는 센서 (660) 에 대응한다.
시야들 (615 및 625) 은 X- 및 Y-방향에서 일정하고 Z-방향에서 점근적으로 일정한 직사각형 오버랩을 공유할 수도 있다. 각도 오버랩이 1.8 도인 일부 실시형태들에서, 1 미터 시야들 (615 및 625) 은 2 개의 중첩하는 시야들의 전체 캡처된 면적의 3.3% 를 포함하는 오버랩을 가질 수도 있다. 시야들 (625 및 635), 시야들 (645 및 655), 및 시야들 (655 및 665) 은 또한 동일 사양들의 직사각형 오버랩을 공유할 수도 있다. 중앙 시야들 (625 및 655) 은 3.4 도에서 5.1% 의 직사각형 오버랩을 공유할 수도 있다. 측면 시야들 (615 및 645, 및 635 및 665) 은 3.6 도에서 5% 의 직사각형 오버랩을 공유할 수도 있다. 직사각형 4:3 애스펙트 비로의 크로핑 (680) 은 15.6% 의 손실을 초래할 수도 있고, 1:1 정사각형 애스펙트 비로의 크로핑 (690) 은 4% 의 손실을 초래할 수도 있다.
다른 실시형태들에서, 시야들 (615 및 625) 사이의 각도 오버랩은 3-5 도일 수도 있고, 1 미터 시야들 (615 및 625) 은 2 개의 중첩하는 시야들의 전체 캡처된 면적의 4% - 6% 를 포함하는 오버랩을 가질 수도 있다. 시야들 (625 및 635), 시야들 (645 및 655), 및 시야들 (655 및 665) 은 또한 동일 사양들의 직사각형 오버랩을 공유할 수도 있다. 중앙 시야들 (625 및 655) 은 4-8 도에서 6%-8% 의 직사각형 오버랩을 공유할 수도 있다. 측면 시야들 (615 및 645, 및 635 및 665) 은 4-10 도에서 6% - 9% 의 직사각형 오버랩을 공유할 수도 있다. 직사각형 4:3 애스펙트 비로의 크로핑 (680) 은 17.8% 의 손실을 초래할 수도 있고, 최대 직사각형으로의 크로핑은 4.5% 의 손실을 초래할 수도 있다. 전체 시야는 70 도와 120 도 사이일 수도 있다. 하지만, 이들 수들은 오버랩 영역들의 가시적 최적화에 기초하고, 허용가능한 손실 면적 및 대상 거리와 같은 팩터들에 따라 변화한다.
도 7 은 복수의 센서 어셈블리들 (705) 및 복수의 중앙 거울들 (710) 을 갖는 폴드형 광학 센서 어레이 (700) 의 다른 실시형태를 나타낸다. 도 4 에 대해 상기 논의된 바와 같이, 각 센서 어셈블리는 센서, 렌즈 시스템, 및 렌즈 시스템으로부터의 광을 센서 상으로 재지향시키도록 구성된 반사 면을 포함할 수도 있다. 이 실시형태에서, 중앙 거울 (710) 의 양 측에 2 개의 3x1 어레이들을 포함하는 센서 어레이는, 센서 어레이들의 2x2 캐스케이딩 어레이가 존재하도록 반복되었다. 다른 실시형태들은 임의의 적합한 캐스케이드된 어레이 구성을 채용할 수도 있다.
도 8 은 폴드형 광학 센서 어셈블리 (800) 의 다른 실시형태를 나타낸다. 본질적으로, 거울들은 상기 설명된 실시형태들에 비해 역 포지션이다. 예를 들어, 타겟 이미지를 포함하는 광은 센서 (810, 811) 를 둘러싸는 2 개의 주 반사 면들 (820, 821) 에 입사한다. 광은 2 개의 렌즈 어셈블리들 (840, 841) 을 통해 안쪽으로 재지향되고, 그 다음, 중앙의 부 반사 면들 (830, 831) 에서 반사되어 센서들 (810, 811) 상으로 아래로 향한다. 센서들 (810, 811) 은 개별 센서들 또는 센서들의 어레이를 나타낼 수도 있다.
도 9 는 폴드형 광학 이미지 캡처 프로세스 (900) 의 일 실시형태를 나타낸다. 프로세스 (900) 는 복수의 이미징 센서 어셈블리들이 있는 단계 905 에서 시작한다. 이 단계는 이전 이미지들에 대해 상기 논의된 센서 어레이 구성들 중 임의의 것을 포함한다. 센서 어셈블리들은, 도 4 에 대해 상기 논의된 바와 같이, 센서, 렌즈 시스템, 렌즈 시스템으로부터의 광을 센서 상으로 재지향시키도록 포지셔닝된 반사 면을 포함할 수도 있다. 프로세스 (900) 는 그 다음 단계 910 로 이동하고, 여기서, 적어도 하나의 반사 면이 복수의 이미지 센서들에 근접하여 탑재된다. 예를 들어, 이 단계는 2 개 열의 센서 어레이들 사이에 중앙 거울을 탑재하는 것을 포함할 수 있을 것이고, 여기서, 중앙 거울은 어레이들에서의 각 센서와 연관된 면을 포함한다.
프로세스 (900) 는 그 다음 단계 915 로 천이하고, 여기서, 장면의 타겟 이미지를 포함하는 광이 이미징 센서들을 향해 적어도 하나의 반사 면에서 반사된다. 예를 들어, 광의 일부분은 복수의 면들의 각각에서 복수의 센서들의 각각을 향해 반사될 수도 있다. 이 단계는, 광을 각 센서와 연관된 렌즈 어셈블리를 통과하게 하는 것을 더 포함할 수도 있고, 제 2 면에서 센서 상으로 광을 반사시키는 것을 또한 포함할 수도 있다. 단계 915 는 렌즈 어셈블리를 이용하여 또는 반사 면들 중 임의의 것의 움직임을 통해 광을 포커싱 (focusing) 하는 것을 더 포함할 수도 있다.
프로세스 (900) 는 그 다음 단계 920 으로 이동할 수도 있고, 여기서, 센서들은 타겟 이미지 장면의 복수의 이미지들을 캡처한다. 예를 들어, 각 센서는 그 센서의 시야에 대응하는 장면의 일부분의 이미지를 캡처할 수도 있다. 함께, 복수의 센서들의 시야들은 적어도 대상 공간에서의 타겟 이미지를 커버한다.
프로세스 (900) 는 그 다음 단계 925 로 천이할 수도 있고, 여기서, 복수의 이미지들로부터 단일 이미지를 생성하기 위해 이미지 스티칭 방법이 수행된다. 일부 실시형태들에서, 도 2 의 이미지 스티칭 모듈 (240) 이 이 단계를 수행할 수도 있다. 이것은 공지의 이미지 스티칭 기법들을 포함할 수도 있다. 또한, 시야들에서의 오버랩의 임의의 영역들은, 스티칭 프로세스에서 이미지들을 정렬시키는데 사용될 수도 있는, 복수의 이미지들에서의 오버랩을 생성할 수도 있다. 예를 들어, 단계 925 는 인접 이미지들의 중첩하는 영역에서의 공통 피처들을 식별하는 것 및 이미지들을 정렬하기 위해 그 공통 피처들을 이용하는 것을 더 포함할 수도 있다.
다음으로, 프로세스 (900) 는 단계 930 으로 천이하고, 여기서, 스티칭된 이미지는 특정 애프펙트 비, 예컨대 4:3 또는 1:1 로 크로핑된다. 마지막으로, 단계 935 에서 크로핑된 이미지를 저장한 후에 프로세스는 종료된다. 예를 들어, 이미지는 도 2 의 스토리지 (210) 에 저장될 수도 있고, 또는, 타겟 장면의 프리뷰 이미지로서의 디스플레이를 위해 도 2 의 작업 메모리 (205) 에 저장될 수도 있다.
용어에 관한 명확화
통상의 기술자는, 본 명세서에서 개시된 구현형태들과 관련하여 기술된 다양한 예시적인 논리 블록들, 모듈들, 회로들, 및 알고리즘 단계들이 전자적 하드웨어, 컴퓨터 소프트웨어, 또는 양자의 조합으로서 구현될 수도 있다는 것을 또한 이해할 것이다. 하드웨어와 소프트웨어의 이러한 상호교환가능성을 명확히 예시하기 위해, 다양한 예시적인 컴포넌트들, 블록들, 모듈들, 회로들, 및 단계들이 그들의 기능성 관점에서 일반적으로 상기 설명되었다. 이러한 기능성이 하드웨어로 구현될지 또는 소프트웨어로 구현될 지는 전체 시스템에 부과되는 설계 제약들 및 특정 애플리케이션들에 의존한다. 통상의 기술자는 각각의 특정 애플리케이션에 대하여 다양한 방식들로 기술된 기능성을 구현할 수도 있지만, 이러한 구현 결정들이 본 발명의 범위로부터의 이탈을 야기하는 것으로 해석되어서는 아니된다. 통상의 기술자는, 부분 또는 일부분은 전체보다 적거나 전체와 동일한 어떤 것을 포함할 수도 있다는 것을 인식할 것이다. 예를 들어, 픽셀들의 집합의 부분은 그들 픽셀들의 하위 집합을 지칭할 수도 있다.
본 명세서에서 개시된 구현형태들과 관련하여 기술된 다양한 예시적인 논리 블록들, 모듈들, 및 회로들은 범용 프로세서, 디지털 신호 프로세서 (DSP), 주문형 집적 회로 (ASIC), 필드 프로그래머블 게이트 어레이 (FPGA) 또는 다른 프로그래머블 로직 디바이스, 이산 게이트 또는 트랜지스터 로직, 이산 하드웨어 컴포넌트들, 또는 본 명세서에서 기술된 기능들을 수행하도록 설계되는 이들의 임의의 조합으로 구현 또는 수행될 수도 있다. 범용 프로세서는 마이크로프로세서일 수도 있지만, 대안적으로, 그 프로세서는 임의의 종래의 프로세서, 제어기, 마이크로제어기, 또는 상태 머신일 수도 있다. 프로세서는 또한 컴퓨팅 디바이스들의 조합, 예를 들어, DSP 와 마이크로프로세서, 복수의 마이크로프로세서들, DSP 코어와 결합된 하나 이상의 마이크로프로세서들의 조합, 또는 임의의 다른 이러한 구성으로서 구현될 수도 있다.
본 명세서에서 개시된 실시형태들과 함께 기술된 방법 또는 프로세스의 단계들은 직접 하드웨어에, 프로세서에 의해 실행된 소프트웨어 모듈에, 또는 이 둘의 조합으로 구현될 수도 있다. 소프트웨어 모듈은 RAM 메모리, 플래시 메모리, ROM 메모리, EPROM 메모리, EEPROM 메모리, 레지스터들, 하드 디스크, 착탈식 디스크, CD-ROM, 또는 당해 기술분야에 공지된 임의의 다른 형태의 비-일시적 (non-transitory) 저장 매체에 상주할 수도 있다. 일 예시적인 컴퓨터 판독가능 저장 매체는 프로세서가 컴퓨터 판독가능 저장 매체로부터 정보를 판독할 수 있고 컴퓨터 판독가능 저장 매체에 정보를 기입할 수 있도록 프로세서에 커플링된다. 대안적으로, 저장 매체는 프로세서와 일체형일 수도 있다. 프로세서 및 저장 매체는 ASIC 에 상주할 수도 있다. ASIC 은 사용자 단말기, 카메라, 또는 다른 디바이스에 상주할 수도 있다. 대안적으로, 프로세서 및 저장 매체는 이산 컴포넌트들로서 사용자 단말기, 카메라, 또는 다른 디바이스에 상주할 수도 있다.
제목들은 참조를 위해 그리고 여러 섹션들을 위치시키는 것을 돕기 위해 본 명세서에 포함된다. 이들 제목들은 그에 대해 기술된 개념들의 범위를 제한하도록 의도되지 아니한다. 이러한 개념들은 전체 명세서에 걸쳐 적용성을 가질 수도 있다.
개시된 구현형태들의 이전 설명은 통상의 기술자가 본 발명을 실시 또는 이용할 수 있도록 하기 위해 제공된다. 이들 구현형태들에 대한 다양한 변형들은 통상의 기술자에게 자명할 것이며, 본 명세서에서 정의된 일반적인 원리들은 본 발명의 사상 또는 범위로부터 벗어나지 않고도 다른 구현형태들에 적용될 수도 있다. 따라서, 본 발명은 본 명세서에 나타난 구현형태들로 제한되는 것으로 의도되지 않고, 본 명세서에 개시된 원리들 및 신규한 특징들과 부합하는 최광의 범위에 부합한다.
Claims (30)
- 광학 시스템으로서,
제 1 시야를 갖도록 배열된 제 1 카메라로서,
광을 재지향시키도록 구성된 광 재지향기;
제 1 렌즈와 상기 제 1 렌즈를 이동시키기 위한 제 1 액츄에이터를 포함하는 제 1 렌즈 어셈블리로서, 상기 제 1 렌즈 어셈블리는 상기 광 재지향기의 광학적으로 하류 (downstream) 에 배치되는, 상기 제 1 렌즈 어셈블리; 및
상기 제 1 시야를 나타내는 광을 수신하도록 구성되는 제 1 이미지 센서로서, 상기 제 1 이미지 센서는 상기 광 재지향기 및 상기 제 1 렌즈 어셈블리 둘 다의 광학적으로 하류에 배치되고, 상기 제 1 이미지 센서는 제 1 기준 평면을 정의하는 제 1 감광성 표면을 포함하는, 상기 제 1 이미지 센서를 포함하는, 상기 제 1 카메라; 및
상기 제 1 시야와 적어도 부분적으로 오버랩되는 제 2 시야를 갖도록 배열된 제 2 카메라로서,
제 2 렌즈와 상기 제 2 렌즈를 이동시키기 위한 제 2 액츄에이터를 포함하는 제 2 렌즈 어셈블리; 및
상기 제 2 시야를 나타내는 광을 수신하도록 구성되는 제 2 이미지 센서로서, 상기 제 2 이미지 센서는 상기 제 2 센서 어셈블리의 광학적으로 하류에 배치되고, 상기 제 2 이미지 센서는 제 2 기준 평면을 정의하는 제 2 감광성 표면을 포함하고, 상기 제 1 기준 평면은 상기 제 2 기준 평면과는 상이한, 상기 제 2 이미지 센서를 포함하는, 상기 제 2 카메라
를 포함하는, 광학 시스템. - 제 1 항에 있어서,
상기 제 1 기준 평면은 상기 제 2 기준 평면과 평행하지 않아서, 상기 제 1 기준 평면과 상기 제 2 기준 평면이 비-제로 각도로 교차하는, 광학 시스템. - 제 2 항에 있어서,
상기 제 1 감광성 표면은 상기 제 1 기준 평면에 법선으로 전파되는 적어도 하나의 광선을 수신하도록 구성되고, 상기 제 2 감광성 표면은 상기 제 2 기준 평면에 법선으로 전파되는 적어도 하나의 광선을 수신하도록 구성되는, 광학 시스템. - 제 3 항에 있어서,
상기 제 1 렌즈 어셈블리는 상기 광 재지향기와 상기 제 1 이미지 센서 사이에 배치되고, 상기 제 1 렌즈 어셈블리는 상기 제 1 이미지 센서를 교차하는 제 1 광학 축을 정의하는, 광학 시스템. - 제 3 항에 있어서,
상기 제 1 렌즈 어셈블리는 제 1 광학 축을 정의하고, 상기 광 재지향기는 상기 제 1 광학 축에 대해 비-제로 각도로 입사하는 광을 수용하고, 상기 제 1 광학 축과 동일 선상의 광을 출력하도록 구성되는, 광학 시스템. - 제 5 항에 있어서,
상기 광 재지향기는 굴절을 통해 광을 재-각도를 이루도록 (re-angle) 구성되는 프리즘을 포함하는, 광학 시스템. - 제 6 항에 있어서,
상기 제 1 액츄에이터는 제 1 명령을 수신한 것에 응답하여 상기 제 1 렌즈를 이동시키도록 구성되고, 상기 제 2 액츄에이터는 제 2 명령을 수신한 것에 응답하여 상기 제 2 렌즈를 이동시키도록 구성되는, 광학 시스템. - 제 7 항에 있어서,
하나 이상의 프로세서들로서,
상기 제 1 이미지 센서로 측정된 광에 기초하여 상기 제 1 명령을 상기 제 1 액츄에이터에 발행하고; 및
상기 제 2 이미지 센서로 측정된 광에 기초하여 상기 제 2 명령을 상기 제 2 액츄에이터에 발생하도록 구성된, 상기 하나 이상의 프로세서들을 더 포함하는, 광학 시스템. - 제 8 항에 있어서,
상기 하나 이상의 프로세서들은:
상기 제 1 이미지 센서로 측정된 광에 기초하여 장면의 제 1 이미지 및 상기 제 2 이미지 센서로 측정된 광에 기초하여 상기 장면의 제 2 이미지를 마련하되, 상기 제 1 이미지는 상기 제 1 시야를 갖고, 상기 제 2 이미지는 상기 제 2 시야를 가지고; 그리고
상기 제 1 이미지 및 상기 제 2 이미지 중 적어도 하나를 상기 제 1 이미지 및 상기 제 2 이미지 중 다른 하나에 대해 정렬시키도록 구성되는, 광학 시스템. - 제 1 항에 있어서,
상기 제 1 렌즈는 상기 제 2 렌즈와는 상이한 초점 거리를 갖는, 광학 시스템. - 제 1 항에 있어서,
상기 광 재지향기는 거울 및 프리즘 중 적어도 하나를 포함하는, 광학 시스템. - 제 1 항에 있어서,
하나 이상의 프로세서들로서,
상기 제 1 이미지 센서로 측정된 광에 기초하여 제 1 명령을 상기 제 1 액츄에이터에 발행하고;
상기 제 2 이미지 센서로 측정된 광에 기초하여 제 2 명령을 상기 제 2 액츄에이터에 발행하고;
상기 제 1 이미지 센서로 측정된 광에 기초하여 장면의 제 1 이미지 및 상기 제 2 이미지 센서로 측정된 광에 기초하여 상기 장면의 제 2 이미지를 마련하되, 상기 제 1 이미지는 상기 제 1 시야를 갖고, 상기 제 2 이미지는 상기 제 2 시야를 가지고;
상기 제 1 이미지 및 상기 제 2 이미지 중 적어도 하나를 상기 제 1 이미지 및 상기 제 2 이미지 중 다른 하나에 대해 정렬시키도록 구성되는, 상기 하나 이상의 프로세서들을 포함하고,
상기 제 1 액츄에이터는 상기 제 1 명령을 수신한 것에 응답하여 상기 제 1 렌즈를 이동시키도록 구성되고, 상기 제 2 액츄에이터는 상기 제 2 명령을 수신한 것에 응답하여 상기 제 2 렌즈를 이동시키도록 구성되는, 광학 시스템. - 제 12 항에 있어서,
상기 하나 이상의 프로세서들은:
정렬된 상기 제 1 이미지와 정렬된 상기 제 2 이미지를 합성하고; 그리고
합성된 이미지를 메모리에 저장하도록 구성되는, 광학 시스템. - 제 13 항에 있어서,
상기 합성된 이미지는 합성된 시야를 갖고, 상기 합성된 시야는 상기 제 1 시야와 상기 제 2 시야 사이에 오버랩되는 적어도 일부를 포함하는, 광학 시스템. - 제 12 항에 있어서,
상기 하나 이상의 프로세서들은:
상기 제 1 시야와 상기 제 2 시야 사이의 오버랩을 구성하는 제 3 시야를 포함하는 제 3 이미지를 마련하도록 구성되는, 광학 시스템. - 이미징 방법으로서,
광학 시스템의 제 1 카메라로서, 상기 제 1 카메라는 제 1 시야를 갖도록 배열되고, 상기 제 1 카메라는: (a) 광 재지향기, (b) 제 1 렌즈 및 상기 제 1 렌즈를 이동하기 위한 제 1 액츄에이터를 포함하는 제 1 렌즈 어셈블리, 및 (c) 제 1 기준 평면을 정의하는 제 1 감광성 표면을 포함하는 제 1 이미지 센서를 포함하는, 상기 제 1 카메라를 이용하여,
상기 광 재지향기로 상기 제 1 시야를 나타내는 제 1 광을 재지향시키고, 상기 제 1 렌즈를 통해 재지향된 상기 제 1 광을 흐르게 하고, 흘러든 상기 제 1 광을 상기 제 1 이미지 센서로 수신하는 단계; 및
상기 광학 시스템의 제 2 카메라로서, 상기 제 2 카메라는 상기 제 1 시야와 적어도 부분적으로 오버랩되는 제 2 시야를 갖도록 배열되고, 상기 제 2 카메라는: (a) 제 2 렌즈 및 상기 제 2 렌즈를 움직이기 위한 제 2 액츄에이터를 포함하는 제 2 렌즈 어셈블리 및 (b) 제 2 기준 평면을 정의하는 제 2 감광성 표면을 포함하는 제 2 이미지 센서를 포함하며, 상기 제 1 기준 평면은 상기 제 2 기준 평면과는 상이한, 상기 제 2 카메라를 이용하여,
상기 제 2 렌즈를 통해 상기 제 2 시야를 나타내는 제 2 광을 흐르게 하고, 흘러든 상기 제 2 광을 상기 제 2 이미지 센서로 수신하는 단계를 포함하는, 이미징 방법. - 제 16 항에 있어서,
상기 제 1 기준 평면은 상기 제 2 기준 평면과 평행하지 않아서, 상기 제 1 기준 평면과 상기 제 2 기준 평면이 비-제로 각도로 교차하는, 이미징 방법. - 제 17 항에 있어서,
상기 제 1 감광성 표면은 상기 제 1 기준 평면에 법선으로 전파되는 적어도 하나의 광선을 수신하도록 구성되고, 상기 제 2 감광성 표면은 상기 제 2 기준 평면에 법선으로 전파되는 적어도 하나의 광선을 수신하도록 구성되는, 이미징 방법. - 제 18 항에 있어서,
상기 제 1 렌즈 어셈블리는 상기 광 재지향기와 상기 제 1 이미지 센서 사이에 배치되고, 상기 제 1 렌즈 어셈블리는 상기 제 1 이미지 센서를 교차하는 제 1 광학 축을 정의하는, 이미징 방법. - 제 18 항에 있어서,
상기 제 1 렌즈 어셈블리는 제 1 광학 축을 정의하고, 상기 광 재지향기는 상기 제 1 광학 축에 대해 비-제로 각도로 입사하는 광을 수용하고, 상기 제 1 광학 축과 동일 선상의 광을 출력하도록 구성되는, 이미징 방법. - 제 20 항에 있어서,
상기 광 재지향기는 굴절을 통해 광을 재-각도를 이루도록 (re-angle) 구성되는 프리즘을 포함하는, 이미징 방법. - 제 21 항에 있어서,
상기 제 1 액츄에이터는 제 1 명령을 수신한 것에 응답하여 상기 제 1 렌즈를 이동시키도록 구성되고, 상기 제 2 액츄에이터는 제 2 명령을 수신한 것에 응답하여 상기 제 2 렌즈를 이동시키도록 구성되는, 이미징 방법. - 제 22 항에 있어서,
상기 제 1 이미지 센서로 수신된 제 1 광을 측정하는 단계;
상기 제 2 이미지 센서로 수신된 제 2 광을 측정하는 단계;
측정된 제 1 광에 기초하여 상기 제 1 명령을 상기 제 1 액츄에이터에 발행하는 단계; 및
측정된 제 2 광에 기초하여 상기 제 2 명령을 상기 제 2 액츄에이터에 발행하는 단계를 더 포함하는, 이미징 방법. - 제 23 항에 있어서,
상기 제 1 명령에 응답하여 상기 제 1 액츄에이터가 이동된 후에, 제 1 이미지가 상기 제 1 시야를 갖도록 측정된 제 1 광에 기초하여 장면의 제 1 이미지를 마련하는 단계;
상기 제 2 명령에 응답하여 상기 제 2 액츄에이터가 이동된 후에, 상기 제 2 이미지가 상기 제 2 시야를 갖도록 측정된 제 2 광에 기초하여 상기 장면의 제 2 이미지를 마련하는 단계; 및
상기 제 1 이미지 및 상기 제 2 이미지 중 적어도 하나를 상기 제 1 이미지 및 상기 제 2 이미지 중 다른 하나에 대해 정렬시키는 단계를 포함하는, 이미징 방법. - 제 16 항에 있어서,
상기 제 1 렌즈는 상기 제 2 렌즈와는 상이한 초점 거리를 갖는, 이미징 방법. - 제 16 항에 있어서,
상기 광 재지향기는 거울 및 프리즘 중 적어도 하나를 포함하는,
이미징 방법. - 제 16 항에 있어서,
상기 제 1 이미지 센서로 측정된 제 1 광에 기초하여 제 1 명령을 상기 제 1 액츄에이터에 발행하는 단계로서, 상기 제 1 액츄에이터는 상기 제 1 명령에 응답하여 이동하는, 상기 제 1 명령을 발행하는 단계;
상기 제 2 이미지 센서로 측정된 제 2 광에 기초하여 제 2 명령을 상기 제 2 액츄에이터에 발행하는 단계로서, 상기 제 2 액츄에이터는 상기 제 2 명령에 응답하여 이동하는, 상기 제 2 명령을 발행하는 단계;
상기 제 1 이미지 센서로 측정된 제 1 광에 기초하여 상기 제 1 시야를 갖는 장면의 제 1 이미지를 마련하는 단계;
상기 제 2 이미지 센서로 측정된 제 2 광에 기초하여 상기 제 2 시야를 갖는 상기 장면의 제 2 이미지를 마련하는 단계; 및
상기 제 1 이미지 및 상기 제 2 이미지 중 적어도 하나를 상기 제 1 이미지 및 상기 제 2 이미지 중 다른 하나에 대해 정렬시키는 단계를 포함하는, 이미징 방법. - 제 27 항에 있어서,
정렬된 상기 제 1 이미지와 정렬된 상기 제 2 이미지를 합성하는 단계; 및
합성된 이미지를 메모리에 저장하는 단계를 포함하는, 이미징 방법. - 제 28 항에 있어서,
상기 합성된 이미지는 합성된 시야를 갖고, 상기 합성된 시야는 상기 제 1 시야와 상기 제 2 시야 사이에 오버랩되는 적어도 일부를 포함하는, 이미징 방법. - 제 27 항에 있어서,
상기 제 1 시야와 상기 제 2 시야 사이의 오버랩을 구성하는 제 3 시야를 포함하는 제 3 이미지를 마련하는 단계를 포함하는, 이미징 방법.
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201261716339P | 2012-10-19 | 2012-10-19 | |
US61/716,339 | 2012-10-19 | ||
US13/837,098 | 2013-03-15 | ||
US13/837,098 US9398264B2 (en) | 2012-10-19 | 2013-03-15 | Multi-camera system using folded optics |
PCT/US2013/064381 WO2014062481A1 (en) | 2012-10-19 | 2013-10-10 | Multi-camera system using folded optics |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20150072439A KR20150072439A (ko) | 2015-06-29 |
KR102108597B1 true KR102108597B1 (ko) | 2020-05-07 |
Family
ID=50485000
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020157012776A KR102108597B1 (ko) | 2012-10-19 | 2013-10-10 | 폴드형 광학계를 이용한 다중-카메라 시스템 |
Country Status (9)
Country | Link |
---|---|
US (3) | US9398264B2 (ko) |
EP (1) | EP2910011B1 (ko) |
JP (2) | JP6692640B2 (ko) |
KR (1) | KR102108597B1 (ko) |
CN (2) | CN104704809B (ko) |
BR (1) | BR112015008296B1 (ko) |
ES (1) | ES2714278T3 (ko) |
HU (1) | HUE042567T2 (ko) |
WO (1) | WO2014062481A1 (ko) |
Families Citing this family (163)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9485495B2 (en) | 2010-08-09 | 2016-11-01 | Qualcomm Incorporated | Autofocus for stereo images |
US9007432B2 (en) * | 2010-12-16 | 2015-04-14 | The Massachusetts Institute Of Technology | Imaging systems and methods for immersive surveillance |
US9438889B2 (en) | 2011-09-21 | 2016-09-06 | Qualcomm Incorporated | System and method for improving methods of manufacturing stereoscopic image sensors |
US9870504B1 (en) * | 2012-07-12 | 2018-01-16 | The United States Of America, As Represented By The Secretary Of The Army | Stitched image |
US9398264B2 (en) | 2012-10-19 | 2016-07-19 | Qualcomm Incorporated | Multi-camera system using folded optics |
CN113472989A (zh) | 2012-11-28 | 2021-10-01 | 核心光电有限公司 | 多孔径成像系统以及通过多孔径成像系统获取图像的方法 |
US9671595B2 (en) | 2013-01-05 | 2017-06-06 | Light Labs Inc. | Methods and apparatus for using multiple optical chains in paralell |
US9769365B1 (en) | 2013-02-15 | 2017-09-19 | Red.Com, Inc. | Dense field imaging |
US9377902B2 (en) * | 2013-02-18 | 2016-06-28 | Microsoft Technology Licensing, Llc | Systems and methods for wedge-based imaging using flat surfaces |
KR102052553B1 (ko) * | 2013-05-14 | 2019-12-05 | 삼성전자주식회사 | 이미징 시스템 및 그것의 자동초점 방법 |
CN105308947B (zh) | 2013-06-13 | 2018-10-02 | 核心光电有限公司 | 双孔径变焦数字摄影机 |
US20150029601A1 (en) | 2013-07-04 | 2015-01-29 | Corephotonics Ltd. | Miniature telephoto lens assembly |
CN109246339B (zh) | 2013-08-01 | 2020-10-23 | 核心光电有限公司 | 用于对对象或场景进行成像的双孔径数字摄影机 |
US10178373B2 (en) | 2013-08-16 | 2019-01-08 | Qualcomm Incorporated | Stereo yaw correction using autofocus feedback |
US9851527B2 (en) | 2013-10-18 | 2017-12-26 | Light Labs Inc. | Methods and apparatus for capturing and/or combining images |
US9374514B2 (en) | 2013-10-18 | 2016-06-21 | The Lightco Inc. | Methods and apparatus relating to a camera including multiple optical chains |
US9549127B2 (en) | 2013-10-18 | 2017-01-17 | Light Labs Inc. | Image capture control methods and apparatus |
CN103593647A (zh) * | 2013-10-21 | 2014-02-19 | 王晓鹏 | 一种生物特征成像的方法与设备 |
US9467627B2 (en) | 2013-10-26 | 2016-10-11 | The Lightco Inc. | Methods and apparatus for use with multiple optical chains |
US9736365B2 (en) | 2013-10-26 | 2017-08-15 | Light Labs Inc. | Zoom related methods and apparatus |
US9426365B2 (en) | 2013-11-01 | 2016-08-23 | The Lightco Inc. | Image stabilization related methods and apparatus |
US9554031B2 (en) | 2013-12-31 | 2017-01-24 | Light Labs Inc. | Camera focusing related methods and apparatus |
US9979878B2 (en) | 2014-02-21 | 2018-05-22 | Light Labs Inc. | Intuitive camera user interface methods and apparatus |
US20150244949A1 (en) | 2014-02-21 | 2015-08-27 | Rajiv Laroia | Illumination methods and apparatus |
US9196039B2 (en) | 2014-04-01 | 2015-11-24 | Gopro, Inc. | Image sensor read window adjustment for multi-camera array tolerance |
US9383550B2 (en) | 2014-04-04 | 2016-07-05 | Qualcomm Incorporated | Auto-focus in low-profile folded optics multi-camera system |
US9374516B2 (en) | 2014-04-04 | 2016-06-21 | Qualcomm Incorporated | Auto-focus in low-profile folded optics multi-camera system |
CN103901587B (zh) * | 2014-04-15 | 2017-04-12 | 中山联合光电科技有限公司 | 一种光学系统结构 |
US10013764B2 (en) | 2014-06-19 | 2018-07-03 | Qualcomm Incorporated | Local adaptive histogram equalization |
US9549107B2 (en) * | 2014-06-20 | 2017-01-17 | Qualcomm Incorporated | Autofocus for folded optic array cameras |
US9294672B2 (en) * | 2014-06-20 | 2016-03-22 | Qualcomm Incorporated | Multi-camera system using folded optics free from parallax and tilt artifacts |
BR112016029776A2 (pt) * | 2014-06-20 | 2017-08-22 | Qualcomm Inc | sistema multicâmeras fino livre de paralaxe capaz de capturar campo amplo total de imagens de visão |
US20150373269A1 (en) * | 2014-06-20 | 2015-12-24 | Qualcomm Incorporated | Parallax free thin multi-camera system capable of capturing full wide field of view images |
US9541740B2 (en) * | 2014-06-20 | 2017-01-10 | Qualcomm Incorporated | Folded optic array camera using refractive prisms |
US9819863B2 (en) | 2014-06-20 | 2017-11-14 | Qualcomm Incorporated | Wide field of view array camera for hemispheric and spherical imaging |
US9386222B2 (en) | 2014-06-20 | 2016-07-05 | Qualcomm Incorporated | Multi-camera system using folded optics free from parallax artifacts |
WO2016004422A1 (en) | 2014-07-04 | 2016-01-07 | The Lightco Inc. | Methods and apparatus relating to detection and/or indicating a dirty lens condition |
DE102014213371B3 (de) * | 2014-07-09 | 2015-08-06 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung und verfahren zur erfassung eines objektbereichs |
US10110794B2 (en) * | 2014-07-09 | 2018-10-23 | Light Labs Inc. | Camera device including multiple optical chains and related methods |
US9392188B2 (en) | 2014-08-10 | 2016-07-12 | Corephotonics Ltd. | Zoom dual-aperture camera with folded lens |
US9912864B2 (en) | 2014-10-17 | 2018-03-06 | Light Labs Inc. | Methods and apparatus for using a camera device to support multiple modes of operation |
US9832381B2 (en) * | 2014-10-31 | 2017-11-28 | Qualcomm Incorporated | Optical image stabilization for thin cameras |
EP3235243A4 (en) | 2014-12-17 | 2018-06-20 | Light Labs Inc. | Methods and apparatus for implementing and using camera devices |
US9544503B2 (en) | 2014-12-30 | 2017-01-10 | Light Labs Inc. | Exposure control methods and apparatus |
US10288840B2 (en) | 2015-01-03 | 2019-05-14 | Corephotonics Ltd | Miniature telephoto lens module and a camera utilizing such a lens module |
GB2535706A (en) | 2015-02-24 | 2016-08-31 | Nokia Technologies Oy | Device with an adaptive camera array |
EP3492958B1 (en) | 2015-04-02 | 2022-03-30 | Corephotonics Ltd. | Dual voice coil motor structure in a dual-optical module camera |
US9824427B2 (en) | 2015-04-15 | 2017-11-21 | Light Labs Inc. | Methods and apparatus for generating a sharp image |
ES2907810T3 (es) | 2015-04-16 | 2022-04-26 | Corephotonics Ltd | Enfoque automático y estabilización de imagen óptica en una cámara compacta de plegado |
US9857584B2 (en) | 2015-04-17 | 2018-01-02 | Light Labs Inc. | Camera device methods, apparatus and components |
US10075651B2 (en) | 2015-04-17 | 2018-09-11 | Light Labs Inc. | Methods and apparatus for capturing images using multiple camera modules in an efficient manner |
US9967535B2 (en) | 2015-04-17 | 2018-05-08 | Light Labs Inc. | Methods and apparatus for reducing noise in images |
US10091447B2 (en) | 2015-04-17 | 2018-10-02 | Light Labs Inc. | Methods and apparatus for synchronizing readout of multiple image sensors |
WO2016172641A1 (en) | 2015-04-22 | 2016-10-27 | The Lightco Inc. | Filter mounting methods and apparatus and related camera apparatus |
US9667848B2 (en) | 2015-04-22 | 2017-05-30 | Qualcomm Incorporated | Tiltable camera module |
US10036895B2 (en) | 2015-05-28 | 2018-07-31 | Corephotonics Ltd. | Bi-directional stiffness for optical image stabilization in a dual-aperture digital camera |
EP3101890B1 (en) * | 2015-06-03 | 2017-11-22 | Axis AB | A mechanism and a method for optical image stabilization |
TWI569640B (zh) | 2015-06-23 | 2017-02-01 | 台灣東電化股份有限公司 | 攝影模組 |
TWI641263B (zh) * | 2015-06-23 | 2018-11-11 | 台灣東電化股份有限公司 | 電子裝置及其攝影模組 |
US10129483B2 (en) | 2015-06-23 | 2018-11-13 | Light Labs Inc. | Methods and apparatus for implementing zoom using one or more moveable camera modules |
US10491806B2 (en) | 2015-08-03 | 2019-11-26 | Light Labs Inc. | Camera device control related methods and apparatus |
KR102214287B1 (ko) | 2015-08-13 | 2021-02-09 | 코어포토닉스 리미티드 | 비디오 지원 및 스위칭/비스위칭 동적 제어 기능이 있는 듀얼-애퍼처 줌 카메라 |
TWI592015B (zh) * | 2015-08-14 | 2017-07-11 | 晶睿通訊股份有限公司 | 多鏡頭攝影機及監視系統 |
DE102015215836B4 (de) * | 2015-08-19 | 2017-05-18 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung mit einer reflektierende Facetten aufweisenden Strahlumlenkvorrichtung |
DE102015215845B4 (de) | 2015-08-19 | 2017-06-22 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung mit kanalindividueller Einstellbarkeit |
DE102015215837A1 (de) * | 2015-08-19 | 2017-02-23 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung, Verfahren zum Herstellen derselben und Abbildungssystem |
DE102015215841B4 (de) * | 2015-08-19 | 2017-06-01 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung mit einer Multikanalabbildungsvorrichtung und Verfahren zum Herstellen derselben |
DE102015215844B4 (de) * | 2015-08-19 | 2017-05-18 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung, tragbare Vorrichtung und Verfahren zum Herstellen einer Multiaperturabbildungsvorrichtung |
DE102015216140A1 (de) | 2015-08-24 | 2017-03-02 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | 3D-Multiaperturabbildungsvorrichtung |
US11244434B2 (en) | 2015-08-24 | 2022-02-08 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multi-aperture imaging device |
KR102340778B1 (ko) * | 2015-08-24 | 2021-12-20 | 엘지이노텍 주식회사 | 카메라 모듈 |
US10365480B2 (en) | 2015-08-27 | 2019-07-30 | Light Labs Inc. | Methods and apparatus for implementing and/or using camera devices with one or more light redirection devices |
KR101993077B1 (ko) | 2015-09-06 | 2019-06-25 | 코어포토닉스 리미티드 | 소형의 접이식 카메라의 롤 보정에 의한 자동 초점 및 광학식 손떨림 방지 |
US9992477B2 (en) | 2015-09-24 | 2018-06-05 | Ouster, Inc. | Optical system for collecting distance information within a field |
US9749549B2 (en) | 2015-10-06 | 2017-08-29 | Light Labs Inc. | Methods and apparatus for facilitating selective blurring of one or more image portions |
DE102015220566B4 (de) | 2015-10-21 | 2021-03-18 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung mit einer Multiaperturabbildungsvorrichtung, Verfahren zum Bereitstellen derselben und Verfahren zum Erfassen eines Gesamtgesichtsfeldes |
US10225445B2 (en) | 2015-12-18 | 2019-03-05 | Light Labs Inc. | Methods and apparatus for providing a camera lens or viewing point indicator |
US10003738B2 (en) | 2015-12-18 | 2018-06-19 | Light Labs Inc. | Methods and apparatus for detecting and/or indicating a blocked sensor or camera module |
US9955057B2 (en) * | 2015-12-21 | 2018-04-24 | Qualcomm Incorporated | Method and apparatus for computational scheimpflug camera |
KR102140882B1 (ko) | 2015-12-29 | 2020-08-04 | 코어포토닉스 리미티드 | 자동 조정가능 텔레 시야(fov)를 갖는 듀얼-애퍼처 줌 디지털 카메라 |
DE102016200287A1 (de) | 2016-01-13 | 2017-07-13 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtungen, Verfahren zum Herstellen derselben und Abbildungssystem |
US10455214B2 (en) * | 2016-03-03 | 2019-10-22 | Disney Enterprises, Inc. | Converting a monocular camera into a binocular stereo camera |
US11956544B2 (en) | 2016-03-11 | 2024-04-09 | Apple Inc. | Optical image stabilization with voice coil motor for moving image sensor |
US10924675B2 (en) | 2016-03-11 | 2021-02-16 | Apple Inc. | Optical image stabilization with voice coil motor for moving image sensor |
DE102016204148A1 (de) * | 2016-03-14 | 2017-09-14 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Erfassen eines Objektbereichs |
US10306218B2 (en) | 2016-03-22 | 2019-05-28 | Light Labs Inc. | Camera calibration apparatus and methods |
US10437023B2 (en) * | 2016-03-28 | 2019-10-08 | Apple Inc. | Folded lens system with three refractive lenses |
LT3236545T (lt) * | 2016-04-22 | 2022-07-11 | Universität Stuttgart | Optinis modulis, lazerinio stiprintuvo sistema, būdas ir panaudojimas |
DE102016208210A1 (de) | 2016-05-12 | 2017-11-16 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | 3d-multiaperturabbildungsvorrichtungen, multiaperturabbildungsvorrichtung, verfahren zum bereitstellen eines ausgangssignals einer 3d-multiaperturabbildungsvorrichtung und verfahren zum erfassen eines gesamtgesichtsfeldes |
US10466501B2 (en) * | 2016-05-26 | 2019-11-05 | Ams Sensors Singapore Pte. Ltd. | Optoelectronic modules including an optical system tilted with respect to a focal plane |
EP3518520B1 (en) | 2016-05-30 | 2020-08-26 | Corephotonics Ltd. | Rotational ball-guided voice coil motor |
US9936129B2 (en) | 2016-06-15 | 2018-04-03 | Obsidian Sensors, Inc. | Generating high resolution images |
CN112217977A (zh) | 2016-06-19 | 2021-01-12 | 核心光电有限公司 | 双孔径摄影机系统中的帧同步 |
US9948832B2 (en) | 2016-06-22 | 2018-04-17 | Light Labs Inc. | Methods and apparatus for synchronized image capture in a device including optical chains with different orientations |
US20170374249A1 (en) * | 2016-06-23 | 2017-12-28 | Microsoft Technology Licensing, Llc | Imaging device with reflective optical element |
CN107924064B (zh) | 2016-07-07 | 2020-06-12 | 核心光电有限公司 | 用于折叠式光学装置的线性滚珠引导音圈电动机 |
US10706518B2 (en) | 2016-07-07 | 2020-07-07 | Corephotonics Ltd. | Dual camera system with improved video smooth transition by image blending |
TWI616675B (zh) | 2016-07-14 | 2018-03-01 | 大立光電股份有限公司 | 光學攝像系統組、取像裝置及電子裝置 |
US10297034B2 (en) * | 2016-09-30 | 2019-05-21 | Qualcomm Incorporated | Systems and methods for fusing images |
CN110140078B (zh) | 2016-12-28 | 2021-11-19 | 核心光电有限公司 | 具有延伸光折叠元件扫描范围的折叠相机结构 |
US10571679B2 (en) * | 2017-01-06 | 2020-02-25 | Karl Storz Imaging, Inc. | Endoscope incorporating multiple image sensors for increased resolution |
CN113791484A (zh) | 2017-01-12 | 2021-12-14 | 核心光电有限公司 | 紧凑型折叠式摄影机及其组装方法 |
US10205909B2 (en) | 2017-01-16 | 2019-02-12 | Amazon Technologies, Inc. | Audio/video recording and communication devices in network communication with additional cameras |
DE102017204035B3 (de) | 2017-03-10 | 2018-09-13 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Bereitstellen einer Multiaperturabbildungsvorrichtung |
WO2018167581A1 (en) | 2017-03-15 | 2018-09-20 | Corephotonics Ltd. | Camera with panoramic scanning range |
US10890734B1 (en) | 2017-03-29 | 2021-01-12 | Apple Inc. | Camera actuator for lens and sensor shifting |
DE102017206442B4 (de) * | 2017-04-13 | 2021-01-28 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung zur Abbildung von Teilgesichtsfeldern, Multiaperturabbildungsvorrichtung und Verfahren zum Bereitstellen derselben |
DE102017206429A1 (de) | 2017-04-13 | 2018-10-18 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Bereitstellen einer Multiaperturabbildungsvorrichtung |
US10863094B2 (en) | 2017-07-17 | 2020-12-08 | Apple Inc. | Camera with image sensor shifting |
WO2019048904A1 (en) | 2017-09-06 | 2019-03-14 | Corephotonics Ltd. | STEREOSCOPIC DEPTH CARTOGRAPHY AND COMBINED PHASE DETECTION IN A DOUBLE-OPENING CAMERA |
US10951834B2 (en) | 2017-10-03 | 2021-03-16 | Corephotonics Ltd. | Synthetically enlarged camera aperture |
KR102104761B1 (ko) | 2017-11-23 | 2020-04-27 | 코어포토닉스 리미티드 | 컴팩트 폴디드 카메라 구조 |
CN108282610A (zh) * | 2017-12-31 | 2018-07-13 | 深圳市秦墨科技有限公司 | 一种多目标跟拍控制方法、装置及云台 |
JP2019128517A (ja) * | 2018-01-26 | 2019-08-01 | ソニーセミコンダクタソリューションズ株式会社 | 撮像装置、及び、電子機器 |
US10976567B2 (en) | 2018-02-05 | 2021-04-13 | Corephotonics Ltd. | Reduced height penalty for folded camera |
CN113568250B (zh) | 2018-02-12 | 2023-04-07 | 核心光电有限公司 | 数字摄像机及用于提供聚焦及补偿摄像机倾斜的方法 |
KR102431488B1 (ko) * | 2018-03-05 | 2022-08-12 | 삼성전자주식회사 | 전자 장치 및 이미지 처리 방법 |
US10694168B2 (en) | 2018-04-22 | 2020-06-23 | Corephotonics Ltd. | System and method for mitigating or preventing eye damage from structured light IR/NIR projector systems |
KR102299752B1 (ko) | 2018-04-23 | 2021-09-08 | 코어포토닉스 리미티드 | 연장된 2 자유도 회전 범위를 갖는 광학 경로 폴딩 요소 |
WO2020008419A2 (en) * | 2018-07-04 | 2020-01-09 | Corephotonics Ltd. | Cameras with scanning optical path folding elements for automotive or surveillance applications |
EP3652728B1 (en) | 2018-08-04 | 2023-06-07 | Corephotonics Ltd. | Switchable continuous display information system above camera |
WO2020039302A1 (en) | 2018-08-22 | 2020-02-27 | Corephotonics Ltd. | Two-state zoom folded camera |
US11122205B1 (en) | 2018-09-14 | 2021-09-14 | Apple Inc. | Camera actuator assembly with sensor shift flexure arrangement |
CN108965833B (zh) * | 2018-09-26 | 2024-08-06 | 孙振友 | 一种多向多清晰度图像视频采集装置 |
US11375092B2 (en) | 2018-10-04 | 2022-06-28 | Samsung Electronics Co., Ltd. | Image sensor and image sensing method |
US10924667B2 (en) * | 2018-10-04 | 2021-02-16 | Samsung Electronics Co., Ltd. | Image sensor and image sensing method |
IL263035B2 (en) * | 2018-11-14 | 2023-10-01 | Israel Aerospace Ind Ltd | A method for increasing the field of view in a hyperspectral system |
US10682955B1 (en) * | 2018-12-03 | 2020-06-16 | Beijing Voyager Technology Co., Ltd. | Multicamera system for autonomous driving vehicles |
KR102681159B1 (ko) * | 2019-01-03 | 2024-07-02 | 코어포토닉스 리미티드 | 적어도 하나의 2 상태 줌 카메라를 갖는 멀티-애퍼처 카메라 |
CN111919057B (zh) | 2019-01-07 | 2021-08-31 | 核心光电有限公司 | 具有滑动接头的旋转机构 |
CN109633854B (zh) * | 2019-01-08 | 2020-09-29 | 瑞声通讯科技(常州)有限公司 | 一种图像采集器及移动电子设备 |
CN113891059B (zh) | 2019-03-09 | 2024-02-13 | 核心光电有限公司 | 对双摄像机进行立体校准的方法 |
CN110049218A (zh) * | 2019-04-19 | 2019-07-23 | 信利光电股份有限公司 | 柔性传感器的成像方法、装置、系统及可读存储介质 |
CN114270815A (zh) * | 2019-06-06 | 2022-04-01 | 弗劳恩霍夫应用研究促进协会 | 多通道成像设备和具有多孔径成像设备的设备 |
KR102099232B1 (ko) | 2019-07-03 | 2020-04-08 | 주식회사 레티널 | 소형 반사부를 이용한 카메라 모듈 및 이를 이용한 증강 현실용 광학 장치 |
KR20240027858A (ko) | 2019-07-31 | 2024-03-04 | 코어포토닉스 리미티드 | 카메라 패닝 또는 모션에서 배경 블러링을 생성하는 시스템 및 방법 |
KR102680342B1 (ko) * | 2019-09-23 | 2024-07-03 | 삼성전자주식회사 | 복수의 이미지 센서들에 의해 획득되는 이미지 데이터에 기초하여 비디오 hdr 처리를 수행하기 위한 전자 장치 |
US11659135B2 (en) | 2019-10-30 | 2023-05-23 | Corephotonics Ltd. | Slow or fast motion video using depth information |
US11949976B2 (en) | 2019-12-09 | 2024-04-02 | Corephotonics Ltd. | Systems and methods for obtaining a smart panoramic image |
WO2021116851A2 (en) | 2019-12-09 | 2021-06-17 | Corephotonics Ltd. | Systems and methods for obtaining a smart panoramic image |
CN111007693B (zh) * | 2019-12-17 | 2022-05-31 | 广州立景创新科技有限公司 | 广角摄像装置 |
CN111225221B (zh) * | 2020-01-15 | 2021-12-14 | 未来新视界文化科技(嘉善)有限公司 | 全景视频图像处理方法和装置 |
WO2021165764A1 (en) | 2020-02-22 | 2021-08-26 | Corephotonics Ltd. | Split screen feature for macro photography |
US11681139B2 (en) | 2020-03-19 | 2023-06-20 | Samsung Electro-Mechanics Co., Ltd. | Camera module |
CN115580780A (zh) | 2020-04-26 | 2023-01-06 | 核心光电有限公司 | 摄像机致动器及其移动装置 |
US11006041B1 (en) | 2020-05-07 | 2021-05-11 | Qualcomm Incorporated | Multiple camera system for wide angle imaging |
WO2021234515A1 (en) | 2020-05-17 | 2021-11-25 | Corephotonics Ltd. | Image stitching in the presence of a full field of view reference image |
KR20240001277A (ko) | 2020-05-30 | 2024-01-03 | 코어포토닉스 리미티드 | 슈퍼 매크로 이미지를 얻기 위한 시스템 및 방법 |
US11516391B2 (en) | 2020-06-18 | 2022-11-29 | Qualcomm Incorporated | Multiple camera system for wide angle imaging |
US11637977B2 (en) | 2020-07-15 | 2023-04-25 | Corephotonics Ltd. | Image sensors and sensing methods to obtain time-of-flight and phase detection information |
WO2022013753A1 (en) | 2020-07-15 | 2022-01-20 | Corephotonics Ltd. | Point of view aberrations correction in a scanning folded camera |
KR102345118B1 (ko) * | 2020-07-24 | 2021-12-30 | 삼성전기주식회사 | 카메라 모듈 및 이를 포함하는 휴대 단말기 |
CN114270145B (zh) | 2020-07-31 | 2024-05-17 | 核心光电有限公司 | 用于大行程线性位置感测的霍尔传感器-磁体几何结构 |
KR102480820B1 (ko) | 2020-08-12 | 2022-12-22 | 코어포토닉스 리미티드 | 스캐닝 폴디드 카메라의 광학 이미지 안정화 |
CN112037128B (zh) * | 2020-08-21 | 2023-11-03 | 苏州巨能图像检测技术有限公司 | 一种全景视频拼接方法 |
US11683573B2 (en) | 2020-09-02 | 2023-06-20 | Samsung Electronics Co., Ltd. | Folded optic for multicamera device and multicamera device including the same |
TWI771811B (zh) * | 2020-09-18 | 2022-07-21 | 大立光電股份有限公司 | 電子裝置 |
CN116472483A (zh) | 2020-12-26 | 2023-07-21 | 核心光电有限公司 | 具有扫描式变焦摄像机的多光圈移动摄像机中的视频支持 |
KR102589548B1 (ko) | 2021-03-11 | 2023-10-13 | 코어포토닉스 리미티드 | 팝-아웃 카메라 시스템 |
KR102638173B1 (ko) | 2021-06-08 | 2024-02-19 | 코어포토닉스 리미티드 | 슈퍼-매크로 이미지의 초점면을 틸팅하기 위한 시스템 및 카메라 |
TWI793851B (zh) | 2021-07-16 | 2023-02-21 | 大立光電股份有限公司 | 具有雙通光區域的電子裝置 |
US20230031023A1 (en) * | 2021-07-29 | 2023-02-02 | Qualcomm Incorporated | Multiple camera system |
WO2024088640A1 (en) * | 2022-10-28 | 2024-05-02 | Ams International Ag | Miniaturized 3d-sensing camera system |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060023106A1 (en) * | 2004-07-28 | 2006-02-02 | Microsoft Corporation | Multi-view integrated camera system |
Family Cites Families (337)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FR2102987A5 (ko) | 1970-09-09 | 1972-04-07 | Hitachi Shipbuilding Eng Co | |
US4114171A (en) | 1976-04-06 | 1978-09-12 | Vivitar Corporation | Reflex camera with internal zoom lens |
US4437745A (en) | 1982-09-30 | 1984-03-20 | Stephen Hajnal | Three dimensional camera system |
JPS60213178A (ja) * | 1984-04-06 | 1985-10-25 | Olympus Optical Co Ltd | 撮像装置 |
GB8430980D0 (en) | 1984-12-07 | 1985-01-16 | Robinson M | Generation of apparently three-dimensional images |
US4639586A (en) | 1985-02-06 | 1987-01-27 | The United States Of America As Represented By The Secretary Of The Air Force | Optically phased laser transmitter |
US4740780A (en) | 1985-06-24 | 1988-04-26 | Gec Avionics, Inc. | Head-up display for automobile |
US5012273B1 (en) | 1986-05-12 | 1996-10-01 | Asahi Optical Co Ltd | Lens shutter type of camera including zoom lens |
US4890314A (en) | 1988-08-26 | 1989-12-26 | Bell Communications Research, Inc. | Teleconference facility with high resolution video display |
US6031892A (en) | 1989-12-05 | 2000-02-29 | University Of Massachusetts Medical Center | System for quantitative radiographic imaging |
US5194959A (en) | 1989-12-21 | 1993-03-16 | Ricoh Company, Ltd. and Nippon Telegraph and Telephone Corporation | Image forming apparatus for forming image corresponding to subject, by dividing optical image corresponding to the subject into plural adjacent optical image parts |
US5016109A (en) | 1990-07-02 | 1991-05-14 | Bell South Corporation | Apparatus and method for segmenting a field of view into contiguous, non-overlapping, vertical and horizontal sub-fields |
US5142357A (en) | 1990-10-11 | 1992-08-25 | Stereographics Corp. | Stereoscopic video camera with image sensors having variable effective position |
US5063441A (en) | 1990-10-11 | 1991-11-05 | Stereographics Corporation | Stereoscopic video cameras with image sensors having variable effective position |
US5207000A (en) | 1991-06-14 | 1993-05-04 | Industrial Technology Research Institute | Method and apparatus useful for determining an angle between a virtual optical axis and a planar surface |
US5231461A (en) | 1991-12-09 | 1993-07-27 | Hughes Danbury Optical Systems, Inc. | Solar monochromator for filter calibration |
US5926411A (en) | 1991-12-30 | 1999-07-20 | Ioptics Incorporated | Optical random access memory |
US5686960A (en) | 1992-01-14 | 1997-11-11 | Michael Sussman | Image input device having optical deflection elements for capturing multiple sub-images |
DE4212271C1 (ko) | 1992-04-11 | 1993-07-08 | Deutsche Forschungsanstalt Fuer Luft- Und Raumfahrt E.V., 5300 Bonn, De | |
US5243413A (en) | 1992-09-02 | 1993-09-07 | At&T Bell Laboratories | Color parallax-free camera and display |
US5313542A (en) | 1992-11-30 | 1994-05-17 | Breault Research Organization, Inc. | Apparatus and method of rapidly measuring hemispherical scattered or radiated light |
JP2888713B2 (ja) | 1993-01-14 | 1999-05-10 | キヤノン株式会社 | 複眼撮像装置 |
EP0610605B1 (en) | 1993-02-11 | 1997-07-16 | Agfa-Gevaert N.V. | Method of recognising an irradiation field |
US5586063A (en) | 1993-09-01 | 1996-12-17 | Hardin; Larry C. | Optical range and speed detection system |
US5614941A (en) | 1993-11-24 | 1997-03-25 | Hines; Stephen P. | Multi-image autostereoscopic imaging system |
GB2284273B (en) | 1993-11-29 | 1997-01-08 | Hadland Photonics Limited | Electronic high speed camera incorporating a beam splitter |
JPH089424A (ja) | 1994-06-20 | 1996-01-12 | Sanyo Electric Co Ltd | 立体画像撮像制御装置 |
JP3186448B2 (ja) | 1994-08-01 | 2001-07-11 | ミノルタ株式会社 | 立体テレビカメラ |
JP3458486B2 (ja) | 1994-10-25 | 2003-10-20 | 松下電器産業株式会社 | 全方位撮影装置及び全方位画像合成装置 |
KR100235343B1 (ko) | 1994-12-29 | 1999-12-15 | 전주범 | 영역분할 기법을 이용한 동영상신호 부호화기의 움직임 벡터 측정장치 |
JPH08194274A (ja) | 1995-01-13 | 1996-07-30 | Olympus Optical Co Ltd | 立体撮像装置 |
US5606627A (en) | 1995-01-24 | 1997-02-25 | Eotek Inc. | Automated analytic stereo comparator |
US5990934A (en) | 1995-04-28 | 1999-11-23 | Lucent Technologies, Inc. | Method and system for panoramic viewing |
US5745305A (en) | 1995-04-28 | 1998-04-28 | Lucent Technologies Inc. | Panoramic viewing apparatus |
US5793527A (en) | 1995-06-30 | 1998-08-11 | Lucent Technologies Inc. | High resolution viewing system |
US5539483A (en) | 1995-06-30 | 1996-07-23 | At&T Corp. | Panoramic projection apparatus |
JPH0946729A (ja) | 1995-08-01 | 1997-02-14 | Olympus Optical Co Ltd | 立体撮像装置 |
US5903306A (en) | 1995-08-16 | 1999-05-11 | Westinghouse Savannah River Company | Constrained space camera assembly |
US6115176A (en) | 1995-11-30 | 2000-09-05 | Lucent Technologies Inc. | Spherical viewing/projection apparatus |
US6111702A (en) | 1995-11-30 | 2000-08-29 | Lucent Technologies Inc. | Panoramic viewing system with offset virtual optical centers |
US6141034A (en) | 1995-12-15 | 2000-10-31 | Immersive Media Co. | Immersive imaging method and apparatus |
JPH09214992A (ja) * | 1996-02-06 | 1997-08-15 | Asahi Optical Co Ltd | 撮像装置 |
JPH09224180A (ja) * | 1996-02-15 | 1997-08-26 | Matsushita Electric Ind Co Ltd | 撮像装置 |
US5640222A (en) | 1996-03-15 | 1997-06-17 | Paul; Eddie | Method and apparatus for producing stereoscopic images |
US6850279B1 (en) | 1996-06-18 | 2005-02-01 | Sony Corporation | Optical image recording system, and associated processing system |
AU3166097A (en) * | 1996-06-18 | 1998-01-07 | Herman Scherling | Optical image recording system, and associated processing system |
US5721585A (en) | 1996-08-08 | 1998-02-24 | Keast; Jeffrey D. | Digital video panoramic image capture and display system |
JPH10142490A (ja) | 1996-11-15 | 1998-05-29 | Canon Inc | 環境認識装置及びカメラ |
AU6515798A (en) | 1997-04-16 | 1998-11-11 | Isight Ltd. | Video teleconferencing |
KR100219638B1 (ko) * | 1997-05-27 | 1999-09-01 | 윤종용 | 반사형 프로젝트 장치 |
US7028899B2 (en) | 1999-06-07 | 2006-04-18 | Metrologic Instruments, Inc. | Method of speckle-noise pattern reduction and apparatus therefore based on reducing the temporal-coherence of the planar laser illumination beam before it illuminates the target object by applying temporal phase modulation techniques during the transmission of the plib towards the target |
DE19903807A1 (de) | 1998-05-05 | 1999-11-11 | Zeiss Carl Fa | Beleuchtungssystem insbesondere für die EUV-Lithographie |
JP3745117B2 (ja) | 1998-05-08 | 2006-02-15 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
US6195204B1 (en) | 1998-08-28 | 2001-02-27 | Lucent Technologies Inc. | Compact high resolution panoramic viewing system |
US6141145A (en) | 1998-08-28 | 2000-10-31 | Lucent Technologies | Stereo panoramic viewing system |
US6285365B1 (en) | 1998-08-28 | 2001-09-04 | Fullview, Inc. | Icon referenced panoramic image display |
US6144501A (en) | 1998-08-28 | 2000-11-07 | Lucent Technologies Inc. | Split mirrored panoramic image display |
US6128143A (en) | 1998-08-28 | 2000-10-03 | Lucent Technologies Inc. | Panoramic viewing system with support stand |
DE19942900B4 (de) | 1998-09-08 | 2004-01-22 | Ricoh Company, Ltd. | Vorrichtung zur Korrektur von Bildfehlern, die durch ein Kameraverwackeln hervorgerufen werden |
US7271803B2 (en) | 1999-01-08 | 2007-09-18 | Ricoh Company, Ltd. | Method and system for simulating stereographic vision |
US6611289B1 (en) | 1999-01-15 | 2003-08-26 | Yanbin Yu | Digital cameras using multiple sensors with multiple lenses |
US6870680B2 (en) | 2001-08-17 | 2005-03-22 | Sony Corporation | Imaging device |
US7015954B1 (en) | 1999-08-09 | 2006-03-21 | Fuji Xerox Co., Ltd. | Automatic video system using multiple cameras |
JP3587506B2 (ja) | 1999-08-30 | 2004-11-10 | 富士重工業株式会社 | ステレオカメラの調整装置 |
GB2354389A (en) | 1999-09-15 | 2001-03-21 | Sharp Kk | Stereo images with comfortable perceived depth |
GB2354390A (en) | 1999-09-16 | 2001-03-21 | Ibm | Wide-angle image capture apparatus |
US6650774B1 (en) | 1999-10-01 | 2003-11-18 | Microsoft Corporation | Locally adapted histogram equalization |
US6862364B1 (en) | 1999-10-27 | 2005-03-01 | Canon Kabushiki Kaisha | Stereo image processing for radiography |
US6782137B1 (en) | 1999-11-24 | 2004-08-24 | General Electric Company | Digital image display improvement system and method |
JP2001194114A (ja) | 2000-01-14 | 2001-07-19 | Sony Corp | 画像処理装置および画像処理方法、並びにプログラム提供媒体 |
JP2001209037A (ja) | 2000-01-26 | 2001-08-03 | Olympus Optical Co Ltd | 可変ホログラム素子及びそれらを用いた光学装置 |
US6823021B1 (en) | 2000-10-27 | 2004-11-23 | Greenwich Technologies Associates | Method and apparatus for space division multiple access receiver |
US6701081B1 (en) | 2000-06-06 | 2004-03-02 | Air Controls, Inc. | Dual camera mount for stereo imaging |
US6768509B1 (en) | 2000-06-12 | 2004-07-27 | Intel Corporation | Method and apparatus for determining points of interest on an image of a camera calibration object |
AU2002226873A1 (en) | 2000-07-14 | 2002-04-08 | Applied Wdm, Inc. | Optical waveguide transmission devices |
JP2002040584A (ja) | 2000-07-28 | 2002-02-06 | Hamamatsu Photonics Kk | 高速撮像カメラ |
JP2002158913A (ja) * | 2000-11-16 | 2002-05-31 | Canon Inc | 撮像装置及び撮像方法 |
IL139995A (en) | 2000-11-29 | 2007-07-24 | Rvc Llc | System and method for spherical stereoscopic photographing |
EP1231780A3 (en) | 2001-02-07 | 2004-01-14 | Sony Corporation | Image pickup apparatus |
GB2372659A (en) | 2001-02-23 | 2002-08-28 | Sharp Kk | A method of rectifying a stereoscopic image |
JP2002277736A (ja) | 2001-03-21 | 2002-09-25 | Olympus Optical Co Ltd | 撮像装置 |
US6421185B1 (en) | 2001-04-16 | 2002-07-16 | The United States Of America As Represented By The Secretary Of The Air Force | Wide field-of-view imaging system using a spatial light modulator |
WO2002089664A2 (en) | 2001-05-03 | 2002-11-14 | Masimo Corporation | Flex circuit shielded optical sensor and method of fabricating the same |
US6628897B2 (en) | 2001-06-20 | 2003-09-30 | Sony Corporation | Camera system |
US20030038814A1 (en) | 2001-08-27 | 2003-02-27 | Blume Leo R. | Virtual camera system for environment capture |
US7116351B2 (en) | 2001-10-29 | 2006-10-03 | Sony Corporation | Imaging device |
JP4198449B2 (ja) | 2002-02-22 | 2008-12-17 | 富士フイルム株式会社 | デジタルカメラ |
JP2003260025A (ja) | 2002-03-08 | 2003-09-16 | Olympus Optical Co Ltd | カプセル型内視鏡 |
US6768598B2 (en) | 2002-04-02 | 2004-07-27 | Sony Corporation | Image pickup system |
US6861633B2 (en) | 2002-06-20 | 2005-03-01 | The Aerospace Corporation | Microelectromechanical system optical sensor providing bit image data of a viewed image |
US7298392B2 (en) * | 2003-06-26 | 2007-11-20 | Microsoft Corp. | Omni-directional camera design for video conferencing |
US7209161B2 (en) | 2002-07-15 | 2007-04-24 | The Boeing Company | Method and apparatus for aligning a pair of digital cameras forming a three dimensional image to compensate for a physical misalignment of cameras |
US7602969B2 (en) | 2002-07-18 | 2009-10-13 | Sony Corporation | Imaging data processing method, imaging data processing device, and computer program |
JP2004072349A (ja) | 2002-08-05 | 2004-03-04 | Canon Inc | 撮像装置、及びその制御方法 |
JP2004080088A (ja) | 2002-08-09 | 2004-03-11 | Sony Corp | 撮像装置 |
US7893957B2 (en) | 2002-08-28 | 2011-02-22 | Visual Intelligence, LP | Retinal array compound camera system |
JP2004260787A (ja) * | 2002-09-09 | 2004-09-16 | Rohm Co Ltd | イメージセンサモジュール |
US7084904B2 (en) | 2002-09-30 | 2006-08-01 | Microsoft Corporation | Foveated wide-angle imaging system and method for capturing and viewing wide-angle images in real time |
JP2004170479A (ja) | 2002-11-18 | 2004-06-17 | Olympus Corp | 撮像装置及びその制御方法 |
US7583289B2 (en) | 2003-01-02 | 2009-09-01 | Ge Security, Inc. | Optical block assembly |
US6933493B2 (en) | 2003-04-07 | 2005-08-23 | Kingpak Technology Inc. | Image sensor having a photosensitive chip mounted to a metal sheet |
IL155525A0 (en) | 2003-04-21 | 2009-02-11 | Yaron Mayer | System and method for 3d photography and/or analysis of 3d images and/or display of 3d images |
JP3709879B2 (ja) | 2003-05-01 | 2005-10-26 | 日産自動車株式会社 | ステレオ画像処理装置 |
US7463280B2 (en) | 2003-06-03 | 2008-12-09 | Steuart Iii Leonard P | Digital 3D/360 degree camera system |
JP4642659B2 (ja) | 2003-06-09 | 2011-03-02 | オリンパス株式会社 | 可変ミラー |
US6809887B1 (en) | 2003-06-13 | 2004-10-26 | Vision Technologies, Inc | Apparatus and method for acquiring uniform-resolution panoramic images |
JP4233394B2 (ja) | 2003-06-17 | 2009-03-04 | オリンパス株式会社 | レンズ装置及びそれを用いたデジタルカメラ |
US7495694B2 (en) * | 2004-07-28 | 2009-02-24 | Microsoft Corp. | Omni-directional camera with calibration and up look angle improvements |
US20050117015A1 (en) | 2003-06-26 | 2005-06-02 | Microsoft Corp. | Foveated panoramic camera system |
US7336299B2 (en) | 2003-07-03 | 2008-02-26 | Physical Optics Corporation | Panoramic video system with real-time distortion-free imaging |
KR100541028B1 (ko) | 2003-07-21 | 2006-01-11 | 주식회사 옵토메카 | 이미지 센서 및 그 제조 방법 |
US20050057659A1 (en) | 2003-09-16 | 2005-03-17 | Takami Hasegawa | Camera image shake correcting device |
US7028546B2 (en) | 2003-10-21 | 2006-04-18 | Instrumented Sensor Technology, Inc. | Data recorder |
US20050111106A1 (en) | 2003-10-31 | 2005-05-26 | Kazuhiro Matsumoto | Optical element assembly formed of multiple optical elements such as prisms, and image pickup apparatus using the same in image pickup function section |
JPWO2005081020A1 (ja) | 2004-02-19 | 2008-05-15 | キヤノン株式会社 | 光学機器およびビームスプリッター |
US20050185711A1 (en) | 2004-02-20 | 2005-08-25 | Hanspeter Pfister | 3D television system and method |
JP4223420B2 (ja) | 2004-03-05 | 2009-02-12 | メガビジョン株式会社 | 撮影装置 |
GB0406730D0 (en) | 2004-03-25 | 2004-04-28 | 1 Ltd | Focussing method |
JP2005303693A (ja) | 2004-04-13 | 2005-10-27 | Auto Network Gijutsu Kenkyusho:Kk | カメラ装置 |
JP2008509438A (ja) | 2004-08-06 | 2008-03-27 | ユニヴァーシティ オブ ワシントン | 可変固定視距離で走査される光表示装置 |
CN101427372B (zh) | 2004-08-25 | 2012-12-12 | 普罗塔里斯菲洛有限责任公司 | 用于多个相机装置的设备和操作该设备的方法 |
US7039292B1 (en) | 2004-09-09 | 2006-05-02 | Rockwell Collins, Inc. | Optical system for vehicle flight control |
DE102004045430A1 (de) | 2004-09-18 | 2006-05-18 | Deutsche Telekom Ag | Vorrichtung zur Bildstabilisierung |
CN101426085B (zh) | 2004-10-01 | 2012-10-03 | 小利兰·斯坦福大学托管委员会 | 成像装置及其方法 |
JP3791847B1 (ja) | 2005-08-10 | 2006-06-28 | 京セラ株式会社 | カメラモジュールおよび該カメラモジュールを搭載した情報端末 |
EP2357527B1 (en) | 2004-11-15 | 2012-10-17 | Hitachi Ltd. | Stereo camera having two imaging elements mounted on a common stay |
US7372996B2 (en) | 2004-12-27 | 2008-05-13 | Trw Automotive U.S. Llc | Method and apparatus for determining the position of a vehicle seat |
WO2006075528A1 (ja) | 2005-01-13 | 2006-07-20 | National University Corporation NARA Institute of Science and Technology | 3次元オブジェクト計測装置 |
US7512262B2 (en) | 2005-02-25 | 2009-03-31 | Microsoft Corporation | Stereo-based image processing |
JP4177826B2 (ja) | 2005-03-23 | 2008-11-05 | 株式会社東芝 | 画像処理装置および画像処理方法 |
US20060215054A1 (en) | 2005-03-23 | 2006-09-28 | Eastman Kodak Company | Wide angle camera with prism array |
JP2006279538A (ja) | 2005-03-29 | 2006-10-12 | Sony Corp | 撮像装置 |
US20060238441A1 (en) | 2005-04-25 | 2006-10-26 | The Boeing Company | Method and apparatus for displaying a stereoscopic image |
US20070102622A1 (en) | 2005-07-01 | 2007-05-10 | Olsen Richard I | Apparatus for multiple camera devices and method of operating same |
US20090268983A1 (en) | 2005-07-25 | 2009-10-29 | The Regents Of The University Of California | Digital imaging system and method using multiple digital image sensors to produce large high-resolution gapless mosaic images |
JP5364965B2 (ja) | 2005-07-26 | 2013-12-11 | コニカミノルタ株式会社 | 撮像光学系、撮像レンズ装置及びデジタル機器 |
KR100716829B1 (ko) * | 2005-08-10 | 2007-05-09 | 삼성전기주식회사 | 초박형 모바일 카메라 광학 렌즈 시스템 및 이를 이용한이미지 결상 방법 |
JP2007081473A (ja) | 2005-09-09 | 2007-03-29 | Eastman Kodak Co | 複数光学系を有する撮像装置 |
US20070085903A1 (en) | 2005-10-17 | 2007-04-19 | Via Technologies, Inc. | 3-d stereoscopic image display system |
US20070164202A1 (en) | 2005-11-16 | 2007-07-19 | Wurz David A | Large depth of field line scan camera |
JP4979928B2 (ja) | 2005-11-28 | 2012-07-18 | 株式会社トプコン | 三次元形状演算装置及び三次元形状演算方法 |
US8059185B2 (en) | 2005-12-28 | 2011-11-15 | Canon Kabushiki Kaisha | Photographing apparatus, image display method, computer program and storage medium for acquiring a photographed image in a wide range |
JP4661606B2 (ja) * | 2006-01-19 | 2011-03-30 | 株式会社ニコン | 屈曲光学系及び電子撮像装置 |
US7215479B1 (en) | 2006-02-10 | 2007-05-08 | Micron Technology, Inc. | Integrated lens system for image sensor and method for manufacturing the same |
GB2435360B (en) | 2006-02-16 | 2009-09-23 | Imagination Tech Ltd | Method and apparatus for determining motion between video images |
JP4844177B2 (ja) | 2006-03-07 | 2011-12-28 | 株式会社ニコン | ブレ補正装置及びカメラ |
JP2007274542A (ja) | 2006-03-31 | 2007-10-18 | Sony Corp | 撮像装置および携帯電話機 |
CN101055342A (zh) | 2006-04-12 | 2007-10-17 | 鸿富锦精密工业(深圳)有限公司 | 自动对焦镜头模组 |
US8433157B2 (en) | 2006-05-04 | 2013-04-30 | Thomson Licensing | System and method for three-dimensional object reconstruction from two-dimensional images |
US8139125B2 (en) | 2006-05-05 | 2012-03-20 | Nokia Corporation | Optical image recording device with small height and high resolution |
US8836693B2 (en) | 2006-05-09 | 2014-09-16 | Kabushiki Kaisha Sega | Image processing apparatus and image processing program |
US20080007617A1 (en) | 2006-05-11 | 2008-01-10 | Ritchey Kurtis J | Volumetric panoramic sensor systems |
JP4972779B2 (ja) | 2006-05-30 | 2012-07-11 | コニカミノルタアドバンストレイヤー株式会社 | 光学ユニットおよび撮像装置 |
JP5067021B2 (ja) | 2006-06-01 | 2012-11-07 | 富士ゼロックス株式会社 | 画像形成装置、画像形成装置の組立方法及び解体方法並びに画像形成装置に用いられる仮止め部材 |
JP4851239B2 (ja) | 2006-06-05 | 2012-01-11 | 株式会社トプコン | 画像処理装置及びその処理方法 |
US8456515B2 (en) * | 2006-07-25 | 2013-06-04 | Qualcomm Incorporated | Stereo image and video directional mapping of offset |
JP2008048293A (ja) | 2006-08-18 | 2008-02-28 | Kyocera Corp | 撮像装置、およびその製造方法 |
US20080058629A1 (en) | 2006-08-21 | 2008-03-06 | University Of Washington | Optical fiber scope with both non-resonant illumination and resonant collection/imaging for multiple modes of operation |
DE102006044786A1 (de) | 2006-09-14 | 2008-03-27 | Schefenacker Vision Systems Germany Gmbh | Kamerasystem, Verfahren zum Betreiben eines Kamerasystems und Sensoreinrichtung eines Kamerasystems |
EP1912098B1 (en) | 2006-10-12 | 2012-04-25 | Carl Zeiss SMT GmbH | Unit magnification projection objective |
US7817354B2 (en) | 2006-10-25 | 2010-10-19 | Capsovision Inc. | Panoramic imaging system |
JP5040493B2 (ja) | 2006-12-04 | 2012-10-03 | ソニー株式会社 | 撮像装置及び撮像方法 |
KR100866491B1 (ko) | 2007-01-30 | 2008-11-03 | 삼성전자주식회사 | 영상 처리 방법 및 장치 |
JP4917060B2 (ja) | 2007-02-26 | 2012-04-18 | Hoya株式会社 | 撮像ユニット及び携帯用電子機器 |
US7683962B2 (en) | 2007-03-09 | 2010-03-23 | Eastman Kodak Company | Camera using multiple lenses and image sensors in a rangefinder configuration to provide a range map |
US8356035B1 (en) | 2007-04-10 | 2013-01-15 | Google Inc. | Association of terms with images using image similarity |
JP4582423B2 (ja) | 2007-04-20 | 2010-11-17 | 富士フイルム株式会社 | 撮像装置、画像処理装置、撮像方法、及び画像処理方法 |
JP5013078B2 (ja) | 2007-04-24 | 2012-08-29 | コニカミノルタアドバンストレイヤー株式会社 | レンズ鏡胴及び撮像装置 |
US20080290435A1 (en) | 2007-05-21 | 2008-11-27 | Micron Technology, Inc. | Wafer level lens arrays for image sensor packages and the like, image sensor packages, and related methods |
JP2008294819A (ja) | 2007-05-25 | 2008-12-04 | Sony Corp | 撮像装置 |
US7860214B1 (en) | 2007-06-13 | 2010-12-28 | The United States Of America As Represented By Secretary Of Agriculture | Correction of x-ray images |
US20090003646A1 (en) | 2007-06-29 | 2009-01-01 | The Hong Kong University Of Science And Technology | Lossless visible watermarking |
US20090005112A1 (en) | 2007-06-29 | 2009-01-01 | Samsung Electronics Co., Ltd. | Optical imaging system configurations for handheld devices |
JPWO2009011153A1 (ja) | 2007-07-13 | 2010-09-16 | 三菱電機株式会社 | 画像読取装置 |
JP4900118B2 (ja) | 2007-07-31 | 2012-03-21 | コニカミノルタオプト株式会社 | カメラモジュールおよび電子機器 |
TWI383666B (zh) | 2007-08-21 | 2013-01-21 | Sony Taiwan Ltd | 多重鏡頭相機系統之先進式動態接圖方法 |
JP5000428B2 (ja) | 2007-08-22 | 2012-08-15 | Hoya株式会社 | 撮像装置 |
US7973834B2 (en) | 2007-09-24 | 2011-07-05 | Jianwen Yang | Electro-optical foveated imaging and tracking system |
KR20090032261A (ko) | 2007-09-27 | 2009-04-01 | 삼성전자주식회사 | 움직임 추정에 기초하여 움직임 보상을 수행하는 영상 처리장치 및 그 방법 |
JP5152483B2 (ja) | 2007-10-05 | 2013-02-27 | ソニー株式会社 | 撮像装置 |
EP2208354A4 (en) | 2007-10-10 | 2010-12-22 | Gerard Dirk Smits | IMAGE PROJECTOR WITH REFLECTIVE LIGHT TRACKING |
CN101822068B (zh) | 2007-10-11 | 2012-05-30 | 皇家飞利浦电子股份有限公司 | 用于处理深度图的方法和设备 |
US20100259655A1 (en) | 2007-11-01 | 2010-10-14 | Konica Minolta Holdings, Inc. | Imaging device |
JP4831514B2 (ja) | 2007-11-13 | 2011-12-07 | 独立行政法人情報通信研究機構 | 設定パラメータ最適化装置およびそのプログラム |
KR100927347B1 (ko) | 2007-11-13 | 2009-11-24 | 파워옵틱스 주식회사 | 줌렌즈 광학계 |
US8791984B2 (en) | 2007-11-16 | 2014-07-29 | Scallop Imaging, Llc | Digital security camera |
US9118850B2 (en) * | 2007-11-27 | 2015-08-25 | Capso Vision, Inc. | Camera system with multiple pixel arrays on a chip |
CN100465699C (zh) | 2007-12-05 | 2009-03-04 | 浙江大学 | 利用棱镜分光渐晕补偿实现多ccd无缝拼接的光电系统 |
KR101349589B1 (ko) | 2007-12-13 | 2014-01-10 | 엘지이노텍 주식회사 | 카메라 모듈 |
US8300086B2 (en) | 2007-12-20 | 2012-10-30 | Nokia Corporation | Image processing for supporting a stereoscopic presentation |
US20090185067A1 (en) | 2007-12-21 | 2009-07-23 | Stereo Display, Inc. | Compact automatic focusing camera |
WO2009088930A2 (en) | 2008-01-02 | 2009-07-16 | The Regents Of The University Of California | High numerical aperture telemicroscopy apparatus |
US7978222B2 (en) | 2008-03-01 | 2011-07-12 | Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. | Systems and methods for image stabilization |
WO2009111642A1 (en) | 2008-03-05 | 2009-09-11 | Contrast Optical Design & Engineering, Inc. | Multiple image camera and lens system |
US20110043623A1 (en) | 2008-03-26 | 2011-02-24 | Konica Minolta Opto, Inc. | Imaging device |
JP5786149B2 (ja) | 2008-03-28 | 2015-09-30 | ザ トラスティーズ オブ コロンビア ユニヴァーシティ イン ザ シティ オブ ニューヨーク | 汎用的に詰め合わせたピクセル配列のカメラシステムおよび方法 |
US7864336B2 (en) | 2008-04-28 | 2011-01-04 | Agilent Technologies, Inc. | Compact Littrow encoder |
CN101571666A (zh) * | 2008-04-28 | 2009-11-04 | 鸿富锦精密工业(深圳)有限公司 | 成像设备 |
US8280194B2 (en) | 2008-04-29 | 2012-10-02 | Sony Corporation | Reduced hardware implementation for a two-picture depth map algorithm |
US9001187B2 (en) | 2009-05-11 | 2015-04-07 | CapsoVision, Inc. | Capsule imaging system having a folded optical axis |
US9171221B2 (en) | 2010-07-18 | 2015-10-27 | Spatial Cam Llc | Camera to track an object |
WO2009147814A1 (ja) | 2008-06-02 | 2009-12-10 | パナソニック株式会社 | 法線情報を生成する画像処理装置、方法、コンピュータプログラム、および、視点変換画像生成装置 |
JP5223486B2 (ja) | 2008-06-18 | 2013-06-26 | ソニー株式会社 | 電子双眼鏡 |
CN101772730B (zh) | 2008-07-24 | 2014-12-03 | 松下电器(美国)知识产权公司 | 照相机驱动装置 |
JP2010041381A (ja) | 2008-08-05 | 2010-02-18 | Nikon Corp | 電子カメラ、ステレオ画像生成方法およびステレオ画像生成システム |
KR100942925B1 (ko) | 2008-08-11 | 2010-02-22 | 한국전자통신연구원 | 스테레오 비전 시스템 및 그 제어방법 |
US8451318B2 (en) | 2008-08-14 | 2013-05-28 | Remotereality Corporation | Three-mirror panoramic camera |
US8305425B2 (en) | 2008-08-22 | 2012-11-06 | Promos Technologies, Inc. | Solid-state panoramic image capture apparatus |
JP2010067014A (ja) | 2008-09-11 | 2010-03-25 | Ricoh Co Ltd | 画像分類装置及び画像分類方法 |
WO2010035223A1 (en) | 2008-09-25 | 2010-04-01 | Koninklijke Philips Electronics N.V. | Three dimensional image data processing |
CN102177465B (zh) | 2008-10-14 | 2014-06-18 | 日本电产三协株式会社 | 摄影用光学装置 |
US8267601B2 (en) | 2008-11-04 | 2012-09-18 | James Cameron | Platform for stereoscopy for hand-held film/video camera stabilizers |
JP4852591B2 (ja) | 2008-11-27 | 2012-01-11 | 富士フイルム株式会社 | 立体画像処理装置、方法及び記録媒体並びに立体撮像装置 |
CN101770059B (zh) | 2008-12-27 | 2012-06-20 | 鸿富锦精密工业(深圳)有限公司 | 相机模组 |
US9395617B2 (en) | 2009-01-05 | 2016-07-19 | Applied Quantum Technologies, Inc. | Panoramic multi-scale imager and method therefor |
US8326036B2 (en) | 2009-02-20 | 2012-12-04 | Qylur Security Systems, Inc. | Automated image separation method |
GB0903689D0 (en) | 2009-03-03 | 2009-04-15 | Sigmavision Ltd | Vehicle tyre measurement |
JP5316118B2 (ja) | 2009-03-12 | 2013-10-16 | オムロン株式会社 | 3次元視覚センサ |
US20100265313A1 (en) * | 2009-04-17 | 2010-10-21 | Sony Corporation | In-camera generation of high quality composite panoramic images |
US20100278423A1 (en) | 2009-04-30 | 2010-11-04 | Yuji Itoh | Methods and systems for contrast enhancement |
US8503778B2 (en) | 2009-05-14 | 2013-08-06 | National University Of Singapore | Enhancing photograph visual quality using texture and contrast data from near infra-red images |
US8170408B2 (en) | 2009-05-18 | 2012-05-01 | Invensense, Inc. | Optical image stabilization in a digital still camera or handset |
US8194170B2 (en) | 2009-06-02 | 2012-06-05 | Algonquin College | Axicon lens array |
US9124874B2 (en) | 2009-06-05 | 2015-09-01 | Qualcomm Incorporated | Encoding of three-dimensional conversion information with two-dimensional video sequence |
US8405750B2 (en) | 2009-06-08 | 2013-03-26 | Aptina Imaging Corporation | Image sensors and image reconstruction methods for capturing high dynamic range images |
CN101581828B (zh) | 2009-06-09 | 2011-06-22 | 苏州大学 | 环形孔径超薄光学成像系统 |
US9479768B2 (en) | 2009-06-09 | 2016-10-25 | Bartholomew Garibaldi Yukich | Systems and methods for creating three-dimensional image media |
JP5293463B2 (ja) | 2009-07-09 | 2013-09-18 | ソニー株式会社 | 画像処理装置、画像処理方法およびプログラム |
US8228417B1 (en) | 2009-07-15 | 2012-07-24 | Adobe Systems Incorporated | Focused plenoptic camera employing different apertures or filtering at different microlenses |
JP5450200B2 (ja) | 2009-07-17 | 2014-03-26 | 富士フイルム株式会社 | 撮像装置、方法およびプログラム |
TWI389559B (zh) | 2009-08-14 | 2013-03-11 | Ind Tech Res Inst | 前景影像分離方法 |
CN101674424B (zh) * | 2009-09-27 | 2011-04-06 | 北京航空航天大学 | 一种虚拟扩展成像的装置及方法 |
US8294073B1 (en) | 2009-10-01 | 2012-10-23 | Raytheon Company | High angular rate imaging system and related techniques |
US9063345B2 (en) | 2009-10-19 | 2015-06-23 | Pixar | Super light-field lens with doublet lenslet array element |
TWM399332U (en) | 2009-10-20 | 2011-03-01 | Fujifilm Corp | Photographic lens and photographic device |
JP5539818B2 (ja) | 2009-10-20 | 2014-07-02 | 富士フイルム株式会社 | 撮像レンズおよび撮像装置 |
US8325187B2 (en) * | 2009-10-22 | 2012-12-04 | Samsung Electronics Co., Ltd. | Method and device for real time 3D navigation in panoramic images and cylindrical spaces |
US8457398B2 (en) | 2009-10-27 | 2013-06-04 | Himax Media Solutions, Inc. | Image enhancement method and apparatuses utilizing the same |
WO2011063347A2 (en) | 2009-11-20 | 2011-05-26 | Pelican Imaging Corporation | Capturing and processing of images using monolithic camera array with heterogeneous imagers |
WO2011066275A2 (en) | 2009-11-25 | 2011-06-03 | Massachusetts Institute Of Technology | Actively addressable aperture light field camera |
US8400555B1 (en) | 2009-12-01 | 2013-03-19 | Adobe Systems Incorporated | Focused plenoptic camera employing microlenses with different focal lengths |
US9030530B2 (en) | 2009-12-15 | 2015-05-12 | Thomson Licensing | Stereo-image quality and disparity/depth indications |
US8442392B2 (en) | 2009-12-22 | 2013-05-14 | Nokia Corporation | Method and apparatus for operating the automatic focus or the optical imaging stabilizing system |
US9128281B2 (en) | 2010-09-14 | 2015-09-08 | Microsoft Technology Licensing, Llc | Eyepiece with uniformly illuminated reflective display |
US20110213664A1 (en) | 2010-02-28 | 2011-09-01 | Osterhout Group, Inc. | Local advertising content on an interactive head-mounted eyepiece |
JP5491617B2 (ja) | 2010-03-05 | 2014-05-14 | パナソニック株式会社 | 立体撮像装置、および立体撮像方法 |
WO2011132364A1 (ja) | 2010-04-19 | 2011-10-27 | パナソニック株式会社 | 立体画像撮影装置および立体画像撮影方法 |
JP5593118B2 (ja) | 2010-04-30 | 2014-09-17 | 日本電産サンキョー株式会社 | 振れ補正機能付き光学ユニット |
WO2011155318A1 (ja) | 2010-06-08 | 2011-12-15 | 日本電産サンキョー株式会社 | 振れ補正装置、撮影用光学装置およびレンズ駆動装置 |
JP5622443B2 (ja) | 2010-06-08 | 2014-11-12 | 日本電産サンキョー株式会社 | 振れ補正機能付き光学ユニット |
JP5138734B2 (ja) | 2010-06-15 | 2013-02-06 | シャープ株式会社 | 撮像レンズ、および撮像モジュール |
CN101902657B (zh) | 2010-07-16 | 2011-12-21 | 浙江大学 | 一种基于深度图分层的虚拟多视点图像的生成方法 |
US9485495B2 (en) | 2010-08-09 | 2016-11-01 | Qualcomm Incorporated | Autofocus for stereo images |
TWI409577B (zh) | 2010-08-20 | 2013-09-21 | Primax Electronics Ltd | 光學影像系統 |
US20120056987A1 (en) | 2010-09-03 | 2012-03-08 | Luke Fedoroff | 3d camera system and method |
WO2012039043A1 (ja) | 2010-09-22 | 2012-03-29 | 富士通株式会社 | ステレオ画像生成装置、ステレオ画像生成方法及びステレオ画像生成用コンピュータプログラム |
US9237252B2 (en) | 2010-10-01 | 2016-01-12 | Contex A/S | Signal intensity matching of image sensors |
JP4956658B2 (ja) | 2010-10-12 | 2012-06-20 | シャープ株式会社 | 立体映像変換装置及び立体映像表示装置 |
TW201222288A (en) | 2010-11-22 | 2012-06-01 | Inst Information Industry | Image retrieving system and method and computer program product thereof |
WO2012078114A1 (en) | 2010-12-09 | 2012-06-14 | Nanyang Technological University | Method and an apparatus for determining vein patterns from a colour image |
JP5716465B2 (ja) | 2011-03-09 | 2015-05-13 | ソニー株式会社 | 撮像装置 |
US9030550B2 (en) | 2011-03-25 | 2015-05-12 | Adobe Systems Incorporated | Thin plenoptic cameras using solid immersion lenses |
US9087375B2 (en) | 2011-03-28 | 2015-07-21 | Sony Corporation | Image processing device, image processing method, and program |
US9172856B2 (en) | 2011-03-29 | 2015-10-27 | Microsoft Technology Licensing, Llc | Folded imaging path camera |
US8928988B1 (en) | 2011-04-01 | 2015-01-06 | The Regents Of The University Of California | Monocentric imaging |
WO2012136388A1 (en) | 2011-04-08 | 2012-10-11 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Capturing panoramic or semi-panoramic 3d scenes |
EP2703867A4 (en) | 2011-04-28 | 2014-12-24 | Fujifilm Corp | IMAGE REALIZATION OBJECTIVE AND IMAGE REALIZATION DEVICE |
EP2703869B1 (en) | 2011-04-28 | 2019-12-25 | FUJIFILM Corporation | Imaging lens and imaging device |
JP5777180B2 (ja) | 2011-04-28 | 2015-09-09 | 富士フイルム株式会社 | 撮像レンズおよび撮像装置 |
WO2012157250A1 (ja) | 2011-05-16 | 2012-11-22 | パナソニック株式会社 | レンズユニット及び撮像装置 |
US20120293607A1 (en) * | 2011-05-17 | 2012-11-22 | Apple Inc. | Panorama Processing |
US9390530B2 (en) | 2011-05-27 | 2016-07-12 | Nokia Technologies Oy | Image stitching |
JP5882455B2 (ja) | 2011-06-15 | 2016-03-09 | マイクロソフト テクノロジー ライセンシング,エルエルシー | 高解像度マルチスペクトル画像キャプチャ |
TWI507807B (zh) | 2011-06-24 | 2015-11-11 | Mstar Semiconductor Inc | 自動對焦方法與裝置 |
US20130265459A1 (en) | 2011-06-28 | 2013-10-10 | Pelican Imaging Corporation | Optical arrangements for use with an array camera |
US8896890B2 (en) | 2011-06-30 | 2014-11-25 | Lexmark International, Inc. | Image capture system having a folded optical path |
JP5848052B2 (ja) | 2011-07-21 | 2016-01-27 | 日本電産サンキョー株式会社 | 振れ補正機能付き光学ユニット |
US8784301B2 (en) | 2011-08-12 | 2014-07-22 | Intuitive Surgical Operations, Inc. | Image capture unit and method with an extended depth of field |
US20130057655A1 (en) | 2011-09-02 | 2013-03-07 | Wen-Yueh Su | Image processing system and automatic focusing method |
US8988564B2 (en) | 2011-09-09 | 2015-03-24 | Apple Inc. | Digital camera with light splitter |
JPWO2013039035A1 (ja) | 2011-09-14 | 2015-03-26 | コニカミノルタ株式会社 | 撮像レンズ、撮像装置及び携帯端末並びにデジタル機器 |
US9438889B2 (en) | 2011-09-21 | 2016-09-06 | Qualcomm Incorporated | System and method for improving methods of manufacturing stereoscopic image sensors |
US8855476B2 (en) | 2011-09-28 | 2014-10-07 | DigitalOptics Corporation MEMS | MEMS-based optical image stabilization |
WO2013059399A1 (en) | 2011-10-20 | 2013-04-25 | Monsanto Technology Llc | Plant stand counter |
US9692991B2 (en) | 2011-11-04 | 2017-06-27 | Qualcomm Incorporated | Multispectral imaging system |
JP2013117568A (ja) | 2011-12-01 | 2013-06-13 | Olympus Corp | 視差画像取得装置、携帯情報端末及び視差画像取得方法 |
CN102520505B (zh) * | 2011-12-04 | 2015-02-25 | 中国科学院光电技术研究所 | 基于棱镜的双通光学延迟线 |
US8582220B2 (en) | 2011-12-05 | 2013-11-12 | Himax Technologies Limited | Lens module |
CN202405984U (zh) | 2011-12-10 | 2012-08-29 | 东莞市旭业光电科技有限公司 | 一种用于音圈马达的垫片 |
CN102611828B (zh) | 2012-01-11 | 2014-03-26 | 四川大学 | 一种雾天连续视频图像实时性增强处理系统 |
KR101975893B1 (ko) | 2012-03-21 | 2019-09-10 | 엘지이노텍 주식회사 | 카메라 모듈 |
US9210405B2 (en) | 2012-03-22 | 2015-12-08 | Qualcomm Technologies, Inc. | System and method for real time 2D to 3D conversion of video in a digital camera |
KR101818778B1 (ko) | 2012-03-23 | 2018-01-16 | 한국전자통신연구원 | 실감 파노라마 영상 생성을 위한 3d 데이터 포맷 생성/소비 장치 및 방법 |
US20130260823A1 (en) | 2012-03-31 | 2013-10-03 | Ashutosh Y. Shukla | Compact Portable Electronic Device Having Augmented Back Volume for Speaker |
NL2008639C2 (en) | 2012-04-13 | 2013-10-16 | Cyclomedia Technology B V | Device, system and vehicle for recording panoramic images, and a device and method for panoramic projection thereof. |
JP2013238848A (ja) | 2012-04-20 | 2013-11-28 | Hoya Corp | 撮像装置 |
CN103428521A (zh) | 2012-05-25 | 2013-12-04 | 北京新岸线移动多媒体技术有限公司 | 一种3d摄像附加镜头和3d摄像头 |
US9571818B2 (en) | 2012-06-07 | 2017-02-14 | Nvidia Corporation | Techniques for generating robust stereo images from a pair of corresponding stereo images captured with and without the use of a flash device |
EP2677734A3 (en) | 2012-06-18 | 2016-01-13 | Sony Mobile Communications AB | Array camera imaging system and method |
EP2677733A3 (en) | 2012-06-18 | 2015-12-09 | Sony Mobile Communications AB | Array camera imaging system and method |
US9134503B2 (en) | 2012-07-06 | 2015-09-15 | Apple Inc. | VCM OIS actuator module |
WO2014012603A1 (en) | 2012-07-17 | 2014-01-23 | Heptagon Micro Optics Pte. Ltd. | Optical devices, in particular computational cameras, and methods for manufacturing the same |
RU2580093C2 (ru) | 2012-08-08 | 2016-04-10 | Долби Лабораторис Лайсэнзин Корпорейшн | Обработка изображений для изображений с расширенным динамическим диапазоном (hdr) |
JP6207303B2 (ja) | 2012-09-10 | 2017-10-04 | キヤノン株式会社 | 制御装置、制御装置を備えるアクチュエータ、画像振れ補正装置、交換用レンズ、撮像装置、及び自動ステージ |
JP6116168B2 (ja) | 2012-09-14 | 2017-04-19 | キヤノン株式会社 | 情報処理装置およびその方法 |
JP5995624B2 (ja) | 2012-09-19 | 2016-09-21 | キヤノン株式会社 | 撮像装置および交換レンズ |
JP5995637B2 (ja) | 2012-10-04 | 2016-09-21 | キヤノン株式会社 | 撮像装置、撮像装置の制御方法、プログラム、記憶媒体 |
US9398264B2 (en) | 2012-10-19 | 2016-07-19 | Qualcomm Incorporated | Multi-camera system using folded optics |
US9659991B2 (en) | 2012-10-22 | 2017-05-23 | Canon Kabushiki Kaisha | Image capturing apparatus, manufacturing method thereof, and camera |
JP2014112302A (ja) | 2012-12-05 | 2014-06-19 | Ricoh Co Ltd | 所定領域管理システム、通信方法、及びプログラム |
US9857470B2 (en) | 2012-12-28 | 2018-01-02 | Microsoft Technology Licensing, Llc | Using photometric stereo for 3D environment modeling |
US9671595B2 (en) | 2013-01-05 | 2017-06-06 | Light Labs Inc. | Methods and apparatus for using multiple optical chains in paralell |
US9171355B2 (en) | 2013-04-12 | 2015-10-27 | Qualcomm Incorporated | Near infrared guided image denoising |
US9602806B1 (en) | 2013-06-10 | 2017-03-21 | Amazon Technologies, Inc. | Stereo camera calibration using proximity data |
JP2015036716A (ja) | 2013-08-12 | 2015-02-23 | ソニー株式会社 | 像ぶれ補正装置及び撮像装置 |
US10178373B2 (en) | 2013-08-16 | 2019-01-08 | Qualcomm Incorporated | Stereo yaw correction using autofocus feedback |
EP2860699A1 (en) | 2013-10-11 | 2015-04-15 | Telefonaktiebolaget L M Ericsson (Publ) | Technique for view synthesis |
US9223118B2 (en) | 2013-10-31 | 2015-12-29 | Apple Inc. | Small form factor telephoto camera |
CN203745777U (zh) | 2014-01-10 | 2014-07-30 | 瑞声声学科技(深圳)有限公司 | 阵列式镜头装置 |
EP3105916A1 (en) | 2014-02-13 | 2016-12-21 | Sony Corporation | Method and system for adjusting camera settings using corneal reflection |
US9557627B2 (en) | 2014-03-07 | 2017-01-31 | Apple Inc. | Folded camera lens systems |
US9316810B2 (en) | 2014-03-07 | 2016-04-19 | Apple Inc. | Folded telephoto camera lens system |
US9383550B2 (en) | 2014-04-04 | 2016-07-05 | Qualcomm Incorporated | Auto-focus in low-profile folded optics multi-camera system |
US9374516B2 (en) | 2014-04-04 | 2016-06-21 | Qualcomm Incorporated | Auto-focus in low-profile folded optics multi-camera system |
US10013764B2 (en) | 2014-06-19 | 2018-07-03 | Qualcomm Incorporated | Local adaptive histogram equalization |
US9386222B2 (en) | 2014-06-20 | 2016-07-05 | Qualcomm Incorporated | Multi-camera system using folded optics free from parallax artifacts |
US9541740B2 (en) | 2014-06-20 | 2017-01-10 | Qualcomm Incorporated | Folded optic array camera using refractive prisms |
US9294672B2 (en) | 2014-06-20 | 2016-03-22 | Qualcomm Incorporated | Multi-camera system using folded optics free from parallax and tilt artifacts |
US20150373269A1 (en) | 2014-06-20 | 2015-12-24 | Qualcomm Incorporated | Parallax free thin multi-camera system capable of capturing full wide field of view images |
US9819863B2 (en) | 2014-06-20 | 2017-11-14 | Qualcomm Incorporated | Wide field of view array camera for hemispheric and spherical imaging |
US9549107B2 (en) | 2014-06-20 | 2017-01-17 | Qualcomm Incorporated | Autofocus for folded optic array cameras |
US9832381B2 (en) | 2014-10-31 | 2017-11-28 | Qualcomm Incorporated | Optical image stabilization for thin cameras |
US10334158B2 (en) | 2014-11-03 | 2019-06-25 | Robert John Gove | Autonomous media capturing |
US10070055B2 (en) | 2015-03-25 | 2018-09-04 | Massachusetts Institute Of Technology | Devices and methods for optically multiplexed imaging |
US10142113B2 (en) | 2015-06-18 | 2018-11-27 | Bank Of America Corporation | Identifying and maintaining secure communications |
US20170038502A1 (en) | 2015-08-06 | 2017-02-09 | Qualcomm Incorporated | Methods and apparatus having a two-surface microlens array for low f-number plenoptic cameras |
KR20170063803A (ko) | 2015-09-03 | 2017-06-08 | 쓰리엠 이노베이티브 프로퍼티즈 컴파니 | 헤드 마운트 디스플레이 |
-
2013
- 2013-03-15 US US13/837,098 patent/US9398264B2/en active Active
- 2013-10-10 JP JP2015537741A patent/JP6692640B2/ja active Active
- 2013-10-10 EP EP13779716.3A patent/EP2910011B1/en active Active
- 2013-10-10 ES ES13779716T patent/ES2714278T3/es active Active
- 2013-10-10 CN CN201380053373.9A patent/CN104704809B/zh active Active
- 2013-10-10 KR KR1020157012776A patent/KR102108597B1/ko active IP Right Grant
- 2013-10-10 CN CN201910105791.7A patent/CN110072048B/zh active Active
- 2013-10-10 BR BR112015008296-3A patent/BR112015008296B1/pt active IP Right Grant
- 2013-10-10 HU HUE13779716A patent/HUE042567T2/hu unknown
- 2013-10-10 WO PCT/US2013/064381 patent/WO2014062481A1/en active Application Filing
-
2016
- 2016-06-15 US US15/183,043 patent/US9838601B2/en active Active
-
2017
- 2017-11-03 US US15/802,994 patent/US10165183B2/en active Active
-
2018
- 2018-08-01 JP JP2018144722A patent/JP6700345B2/ja active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060023106A1 (en) * | 2004-07-28 | 2006-02-02 | Microsoft Corporation | Multi-view integrated camera system |
Also Published As
Publication number | Publication date |
---|---|
US10165183B2 (en) | 2018-12-25 |
EP2910011B1 (en) | 2018-12-05 |
EP2910011A1 (en) | 2015-08-26 |
CN110072048A (zh) | 2019-07-30 |
US9398264B2 (en) | 2016-07-19 |
US20180084193A1 (en) | 2018-03-22 |
KR20150072439A (ko) | 2015-06-29 |
CN104704809B (zh) | 2019-03-01 |
JP6692640B2 (ja) | 2020-05-13 |
US20140111650A1 (en) | 2014-04-24 |
JP2016500962A (ja) | 2016-01-14 |
WO2014062481A1 (en) | 2014-04-24 |
CN110072048B (zh) | 2021-06-18 |
US9838601B2 (en) | 2017-12-05 |
BR112015008296A2 (pt) | 2017-07-04 |
BR112015008296B1 (pt) | 2022-03-15 |
US20160295112A1 (en) | 2016-10-06 |
JP2018201214A (ja) | 2018-12-20 |
HUE042567T2 (hu) | 2019-07-29 |
ES2714278T3 (es) | 2019-05-28 |
JP6700345B2 (ja) | 2020-05-27 |
CN104704809A (zh) | 2015-06-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102108597B1 (ko) | 폴드형 광학계를 이용한 다중-카메라 시스템 | |
US9854182B2 (en) | Folded optic array camera using refractive prisms | |
KR102225429B1 (ko) | 시차 및 틸트 아티팩트들이 없는 폴딩형 광학계를 이용한 멀티-카메라 시스템 | |
EP3158723B1 (en) | Autofocus for folded optic array cameras | |
EP3158394B1 (en) | Multi-camera system using folded optics free from parallax artifacts | |
US20150373269A1 (en) | Parallax free thin multi-camera system capable of capturing full wide field of view images | |
US12007680B2 (en) | Device comprising a multi-aperture imaging device for generating a depth map |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |