TW201904266A - 用於成像局部視場的裝置、多孔徑成像裝置及其提供方法 - Google Patents
用於成像局部視場的裝置、多孔徑成像裝置及其提供方法 Download PDFInfo
- Publication number
- TW201904266A TW201904266A TW107112446A TW107112446A TW201904266A TW 201904266 A TW201904266 A TW 201904266A TW 107112446 A TW107112446 A TW 107112446A TW 107112446 A TW107112446 A TW 107112446A TW 201904266 A TW201904266 A TW 201904266A
- Authority
- TW
- Taiwan
- Prior art keywords
- image
- view
- field
- optical
- total field
- Prior art date
Links
- 238000003384 imaging method Methods 0.000 title claims description 124
- 238000000034 method Methods 0.000 title claims description 17
- 230000003287 optical effect Effects 0.000 claims abstract description 210
- 230000033001 locomotion Effects 0.000 claims description 48
- 239000003381 stabilizer Substances 0.000 claims description 47
- 230000006641 stabilisation Effects 0.000 claims description 37
- 238000011105 stabilization Methods 0.000 claims description 37
- 238000004364 calculation method Methods 0.000 claims description 36
- 238000012886 linear function Methods 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 9
- 230000008859 change Effects 0.000 description 7
- 238000006073 displacement reaction Methods 0.000 description 7
- 230000008901 benefit Effects 0.000 description 6
- 238000013461 design Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 5
- 230000004075 alteration Effects 0.000 description 4
- 235000012431 wafers Nutrition 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000000873 masking effect Effects 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 239000013589 supplement Substances 0.000 description 2
- 238000012952 Resampling Methods 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000003990 capacitor Substances 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 239000013078 crystal Substances 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005265 energy consumption Methods 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 238000003702 image correction Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 238000009331 sowing Methods 0.000 description 1
- 230000001502 supplementing effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/58—Means for changing the camera field of view without moving the camera body, e.g. nutating or panning of optics or image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/685—Vibration or motion blur correction performed by mechanical compensation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
- H04N9/3188—Scale or resolution adjustment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Studio Devices (AREA)
- Cameras In General (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Stereoscopic And Panoramic Photography (AREA)
- Automatic Focus Adjustment (AREA)
- Focusing (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
一種裝置,包括一圖像傳感器和一光學通道陣列,每個光學通道包括一光學器件,用於將一總視場的一局部視場投影到該圖像傳感器的一圖像傳感器區域上。該陣列的一第一光學通道被配置成對該總視場的一第一局部視場進行成像。該陣列的一第二光學通道被配置成對該總視場的一第二局部視場進行成像。該裝置包括一計算單元,該計算單元被配置為基於該成像的局部視場獲得該第一和第二局部視場的圖像信息,並且獲得該總視場的圖像信息,並且將該局部視場的該圖像信息與該總視場的該圖像信息相結合以生成該總視場的組合圖像信息。
Description
本揭露係關於一種用於多通道擷取一總視場的裝置、一種用於補充現有一照相機的補充裝置、一種多孔徑成像裝置以及一種用於製造本揭露描述之一裝置和多孔徑成像裝置的方法。本揭露還關於對不同視場的一對稱通道佈置。
傳統的照相機各自展示一成像通道,該成像通道對整個物場進行成像。其他相機包括幾個成像通道,以便藉由幾個局部視場成像該總視場。對於具有與相機不同距離的物體的一總視場,為了正確拼接圖像(一起傳播(sowing)和/或連接),可能需要計算擷取的該總視場的一深度圖。如果立體拍攝用於此目的,則可能需要合成該(人造,中央)參考相機的一視角。這可能會導致掩蔽或遮擋問題,因為一些物體可能沿著一視線被遮蓋。為了輸出一預覽和/或一視頻,可以執行圖像處理(例如藉由拼接),這需要大量的計算耗費(expenditure)。
因此,提供不具有上述缺點的高品質圖像的一概念是想要的。
因此,本揭露的目的是提供該總視場的高品質圖像,同時在預處理方面耗費很少的情況下對圖像擷取產生影響。
該目的可藉由獨立請求項的主題來達成。
本揭露的一發現在於認識到可以在該圖像信息中實現上述目的,舉例而言,一總視場的一分辨率可以藉由將其與該同一總視場的局部視場的圖像信息組合來增加,然而,該總視場的該圖像信息已經存在,並且可被用作粗略信息,並且可藉由使用該整體圖像信息來避免掩蔽人工現象的發生。
根據一個實施例,一種裝置包括一圖像傳感器和一光學通道陣列。每個光學通道包括一光學器件,其用於將一總視場的一局部視場投影(成像) 到該圖像傳感器的一圖像傳感器區域上。該陣列的一第一光學通道被配置為對該總視場的一第一局部視場進行成像,並且該陣列的一第二光學通道被配置成對該總視場的一第二局部視場進行成像。該裝置包括一計算單元,該計算單元被配置為基於該成像的局部視場,以獲得該第一和第二局部視場的圖像信息。該計算單元還被配置為獲得該總視場的圖像信息(例如,從另一設備),並且將該局部視場的該圖像信息與該總視場的該圖像信息組合,以生成該總視場的組合圖像信息。藉由組合該局部視場的該圖像信息和該總視場的該圖像信息,由於存在大量的圖像信息,因此獲得高品質的組合圖像信息。另外,該總視場的該圖像信息能夠以少量的預處理耗費來施加一影響,因為它可以被顯示給用戶而不需要拼接局部圖像。
根據另一實施例,一補充設備包括這樣的設備並且被配置為耦合到相機,以從中獲得該總視場的該圖像信息。通過附加地對該局部視場進行成像,這使能夠補充既存的相機(可能是單相機),從而獲得該總視場的高品質組合圖像信息。同時,由於關於該總視場的信息已經至少以一粗略的方式存在,該相機的該圖像可以用於對圖像處理施加一影響。
根據另一實施例,一多孔徑成像裝置包括一圖像傳感器、一光學通道陣列,每個光學通道包括一光學器件,其係用於將一總視場的至少一個局部視場投影到該圖像傳感器的一圖像傳感器區域上。該陣列的一第一光學通道被配置成對該總視場的一第一局部視場成像,該陣列的一第二光學通道被配置成對該總視場的一第二局部視場成像,以及一第三光學通道被配置為完全成像該總視場。這使得能夠獲得關於該總視場的圖像信息,並且另外獲得關於該相同總視場的該局部視場的圖像信息,使得該局部視場的該圖像區域被掃描多次,這致能例如立體地生成的深度圖,並且因此生成高品質的圖像。同時,除了關於該局部視場的信息之外,還存在關於該總視場的信息,這使得用戶在沒有任何先前的圖像處理被執行的情況下施加一影響。
另外的實施例涉及一種製造用於多通道擷取一總視場的裝置的方法、以及用於提供一多孔徑成像裝置的一裝置。
由於該總視場的圖像的該主視線和該總視場的組合圖像信息的 該主視線未改變,並且由該局部視場的圖像補充,因此所提及的實施例能夠避免或減少掩蓋。
其他有利的實施例是從屬請求項的主題。
本揭露的較佳實施例係隨後參照附圖描述。
依據本揭露之一特色,本揭露提出一種裝置,其包含:一個圖像傳感器、一光學通道陣列及一計算單元。該陣列的一第一光學通道被配置為對該總視場的一第一局部視場成像和該陣列的一第二光學通道被配置為對該總視場的一第二局部視場成像。該計算單元被配置為基於該成像的局部視場獲得該第一和第二局部視場的圖像信息,並且獲得該總視場的圖像信息,並且將該局部視場的該圖像信息與該總視場的該圖像信息組合,以生成該總視場的組合圖像信息。
依據本揭露之另一特色,本揭露提出一種補充裝置,其包括如前述的裝置,並且被配置為耦合到一相機以從中獲得該總視場的圖像信息。
依據本揭露之又一特色,本揭露提出一種多孔徑成像裝置,其包含:一個圖像傳感器、及一光學通道陣列。該光學通道陣列的每個光學通道包含一光學器件,其用於投影一總視場的至少一局部視場於該圖像傳感器的一圖像傳感器區域。該陣列的一第一光學通道被配置為對該總視場的一第一局部視場進行成像,並且該陣列的一第二光學通道被配置成對該總視場的一第二局部視場進行成像,以及一第三光學通道被配置為完全成像該總視場。
依據本揭露之再一特色,本揭露提出一種提供設備的方法包括:提供一圖像傳感器;佈置一光學通道陣列,使得每個光學通道包括一光學器件,其係用於將一總視場的至少一個局部視場投影到該圖像傳感器的一圖像傳感器區域上,使得該陣列的一第一光學通道被配置為對該總視場的一第一局部視場進行成像,並且使得該陣列的一第二光學通道被配置為對該總視場的一第二局部視場進行成像;佈置一計算單元,使得該計算單元被配置為基於該成像的局部視場獲得該第一和第二局部視場的圖像信息,並且獲得該總視場的圖像信息,並且組合該局部視場的該圖像信息與該總視場的該圖像,以生成該總視場 的組合圖像信息。
依據本揭露之更一特色,本揭露提出一種提供設備的方法包括:提供一圖像傳感器;佈置一光學通道陣列,使得每個光學通道包括一光學器件,其係用於將一總視場的至少一個局部視場投影到該圖像傳感器的一圖像傳感器區域上,並且使得該陣列的一第一光學通道被配置為對該總視場的一第一局部視場進行成像,使得該陣列的一第二光學通道被配置成對該總視場的一第二局部視場成像,並且使得一第三光通道被配置為對該總視場完全成像。
本揭露主題的各種目的、特徵、面向和優點將從以下對優選實施例的詳細描述以及附圖中變得更加明顯,附圖中相同的附圖標記表示相同的部件。
所示實施例在附圖中以示例,而非限制的方式示出,其中相同的參考標號表示相似的元件。
10、30、71、60、80、90、100、110‧‧‧多孔徑成像裝置
12‧‧‧圖像傳感器
24a-c‧‧‧圖像傳感器區域
14‧‧‧陣列
16a-c‧‧‧光學通道
64a-c‧‧‧光學器件
26a-c‧‧‧光路
18‧‧‧光束偏轉裝置
46a-c‧‧‧光束偏轉區域
70‧‧‧總視場
72a、72b、72c、72d‧‧‧局部視場
28、32‧‧‧圖像方向
73、73a、73b、73c、73d、73e‧‧‧重疊區域
33‧‧‧計算單元
61‧‧‧組合圖像信息
a、b‧‧‧物理擴展
a、c‧‧‧延伸或像素
z‧‧‧方向
63a、63b、63c‧‧‧圖像區塊
63a3、63c1、63a2、63b1、63c2、63b2、63c3、63c4‧‧‧區塊
x、#、*‧‧‧物體
81‧‧‧深度圖
83a、83b‧‧‧視差
85‧‧‧顯示裝置
22‧‧‧光學圖像穩定器
41‧‧‧電子圖像穩定器
36a、36b、42、89a、89b、89c‧‧‧致動器
35‧‧‧線延伸方向
38‧‧‧旋轉運動
f1、f2、f3‧‧‧焦距
691至693‧‧‧位移
87‧‧‧聚焦裝置
d1、d2‧‧‧距離
120‧‧‧裝置
91‧‧‧信號
130‧‧‧補充裝置
93‧‧‧相機或圖像擷取裝置
33‧‧‧相機模塊
1400、1500‧‧‧方法
1410、1420、1430、1510、1520‧‧‧步驟
圖1係顯示根據一個實施例的一多孔徑成像裝置的一示意性透視圖。
圖2a至圖2c係顯示根據一實施例的一總視場內的局部視場的佈置的示意圖。
圖3係顯示根據一個實施例的包括一計算單元的一多孔徑成像裝置的一示意性透視圖。
圖4係顯示根據一個實施例的圖像傳感器區域的一示意圖,該圖像傳感器區域例如可以佈置在圖1或圖3的多孔徑成像裝置內。
圖5係顯示根據一個實施例的該計算單元的一可能實施方式的一示意圖。
圖6係顯示根據一個實施例的圖3的該多孔徑成像裝置的一示意性俯視圖,該多孔徑成像裝置被配置為生成一深度圖。
圖7係顯示根據另一實施例的一多孔徑成像裝置的一示意性透視圖,其包括顯示裝置。
圖8示係顯示根據一個實施例的一多孔徑成像裝置的一示意性透視圖,其包括一光學穩定器和一電子圖像穩定器。
圖9係顯示根據另一實施例的一多孔徑成像裝置的一示意性透視圖,其包括 聚焦裝置。
圖10係顯示根據另一實施例的一多孔徑成像裝置的一示意性透視圖,其中該圖像傳感器區域佈置在至少兩個互不相同的晶片上並且彼此相對定向。
圖11係顯示根據另一實施例的一多孔徑成像裝置的一示意性透視圖,其中光學器件具有不同的光學長度。
圖12係顯示根據另一實施例的一裝置的一示意性透視圖。
圖13係顯示根據一個實施例的一補充裝置的一示意性透視圖。
圖14係顯示根據一個實施例的提供一設備的一方法的一示意性流程圖。
圖15係顯示根據一個實施例的提供一多孔徑成像裝置的一方法的一示意性流程圖。
在參照附圖對本揭露的實施例進行更詳細的說明之前,應該注意的是,元件、物體和/或結構係相同、在功能上相同或者在作用上相同的,在不同的圖示中具有相同的參考圖號,使得在不同實施例中呈現的該元件的描述是可互換的和/或可相互適用的。
圖1係顯示根據一個實施例的一多孔徑成像裝置10的一示意性透視圖。該多孔徑成像裝置10包括具有多個圖像傳感器區域24a-c的一圖像傳感器12。該圖像傳感器12可以被實現為使得該圖像傳感器區域24a-c是一共享晶片的一部分,但是另外地,其還可以包括多個組件,這意味著該圖像傳感器區域24a-c可以被佈置在不同的晶片上。可選地或附加地,位於該圖像傳感器區域24b對面的該圖像傳感器區域24a和24c和/或位於該圖像傳感器區域24b對面的該圖像傳感器區域24a在傳感器表面具有不同的尺寸、和/或不同數量和/或尺寸的像素。
該多孔徑成像裝置10還包括一光學通道16a-c的陣列14。每個光學通道16a-c包括一光學器件64a-c,其係用於將一總視場或一物體區域的一至少局部視場投影到該圖像傳感器12的一圖像傳感器區域24a-c上。該光學器件64a-c中的一個分別與該圖像傳感器區域24a-c中的一個相關聯,並且被配置為影響一光路26a-c(例如,藉由集中或散射),使得該相應的局部視場或總視 場被投影到該圖像傳感器區域24a-c上。該光學器件64a-c可以佈置在一共享載體上以形成該陣列14,但是它們也可以以一不同方式彼此機械連接或者可以不機械地接觸。該光學通道的性質,例如長度、垂直於光軸的延伸等,和/或光學器件的性質,例如,焦距、f值、光圈直徑、像差校正或物理尺寸可以在該光學通道16a、16b和/或16c之間變化,並且可以彼此不同。
兩個光學通道16a及16c被配置為分別將一個局部視場投射到該相關聯的圖像傳感器區域24a及24c上。此處投影(成像)一局部視場意味著該總視場以一不完整的方式成像。該光學通道16a及16c的另一個光學通道被配置為完全成像該總視場。舉例而言,該多孔徑成像裝置10被實現為使得該光學通道16b被配置為完全擷取該總視場。舉例而言,該光學通道16a和16c被配置成擷取該總視場的局部視場,這種局部視場至多以一不完全方式彼此重疊或以一相互不相交方式佈置。這意味著用於擷取該第一和第二局部視場的該陣列14中的該光學器件64a和64c的該佈置可以和於用於擷取該總視場成像的該光學器件64b對稱,和/或用於對該第一和第二局部視場進行成像的該圖像傳感器區域24a和24c的佈置和對該總視場進行成像的該圖像傳感器區域24b的一位置可以是對稱。即使視場之間任何其他關聯,光學器件和圖像傳感器區域之間的關聯也是可能的,特別地,該對稱佈置提供了以下優點,即該局部視場的額外擷取使得關於該中央視場的對稱差異成為可能,即擷取該整個視場。
該多孔徑成像裝置10可以包括可選的光束偏轉裝置18,其另外包括光束偏轉區域46a-c,該光束偏轉裝置18被配置為使用每個光束偏轉區域46a-c以偏轉一光路26a-c。該光束偏轉裝置18可以包括一鏡面,其具有光束偏轉區域46a-c。或者,該光束偏轉區域46a-c中的至少兩個可以相互傾斜並形成多個鏡面。可選地或附加地,該光束偏轉裝置18可以包括複數個或多個小平面。如果待擷取的該視場位於該多孔徑成像裝置10的一方向上,其與該圖像傳感器12和該陣列14之間的該視線不同,則該光束偏轉裝置18的利用可能是有利的。或者,如果該光束偏轉裝置18不存在,該總視場則可以沿著該多孔徑成像裝置10的該視線被擷取,和/或沿著該圖像傳感器12與該陣列14之間的該方向或其延伸被擷取。然而,佈置該光束偏轉裝置18可以藉由以平移和/或旋轉方式移動 該光束偏轉裝置18,而能夠改變該多孔徑成像裝置10的該視線,為此目的,而不必改變該圖像傳感器12和/或該陣列14的空間取向。
圖2a係顯示可以由例如該多孔徑成像裝置10擷取的一總視場70內的局部視場72a和72b的一佈置的一示意圖。舉例而言,該總視場70可以藉由使用光學通道16b投影到該圖像傳感器區域24b上。舉例而言,該光學通道16a可以被配置為擷取該局部視場72a並將其投影到該圖像傳感器區域24a上。該光學通道16c可以被配置為擷取該局部視場72b並將其投影到該圖像傳感器區域24c上。這意味著一組光學通道可以被配置為精確地擷取兩個局部視場72a和72b。
即使該局部視場72a和72b被描繪為具有不同的延伸以改善可區分性,但是它們可以沿著至少一個圖像方向28或32具有相同或可比較的延伸(例如,沿著圖像方向32)。該局部視場72a和72b的該延伸可以與沿著該圖像方向32的該總視場70的該延伸相同。這意味著該局部視場72a和72b可以沿著該圖像方向32完全擷取該總視場70,並且可以沿著垂直於前者的一不同圖像方向28以一僅部分方式擷取該總視場,並且可以被佈置成彼此偏移,使得藉由組合也可以沿著第二方向完全擷取該總視場70。於此,該局部視場72a和72b可以彼此不相交,或者可以一不完全方式重疊,最多重疊在一重疊區域73中,該重疊區域73可能完全沿著圖像方向32在總視場70中延伸。包括該光學通道16a和16c的一組光學通道可以被配置為當組合時完全成像該總視場70。該圖像方向28可以是例如圖像被提供的一水平方向。簡而言之,圖像方向28和32表示以任何期望的方式在空間中排列的兩個不同的圖像方向。
圖2b係顯示該局部視場72a和72b的一佈置的一示意圖,其被佈置為沿一不同的圖像方向(即該圖像方向32)相互偏移並且相互重疊。該局部視場72a和72b可以分別沿著該圖像方向28完全擷取該總視場70,並且以一不完全的方式沿著該圖像方向32擷取。該重疊區域73完全佈置在例如沿著該圖像方向28的該總視場70內。
圖2c示出了係顯示四個局部視場72a至72d的一示意圖,其分別以一不完全的方式在兩個方向28和32上擷取該總視場70。兩個相鄰的局部 視場72a和72b在一重疊區域73b中重疊。兩個重疊的局部視場72b和72c在一重疊區域73c中重疊。類似地,局部視場72c和72d在一重疊區域73d中重疊,並且局部視場72d在一重疊區域73a中與局部視場72a重疊。所有四個局部視場72a至72d可以在該總視場70的一重疊區域73e中重疊。
為了擷取該總視場70和該等局部視場72a-d,可以類似於在圖1的上下文中描述的配置來配置一多孔徑成像裝置,其中該陣列14可以包括例如五個光學器件,用於擷取該等局部視場72a-d的四個光學器件,以及用於擷取該總視場70的一個光學器件。
在該重疊區域73a至73e中有大量的圖像信息項目可用。舉例而言,該重疊區域73b經由該總視場70、該局部視場72a和該局部視場72b而被擷取。該總視場的一圖像格式可以對應於成像的該局部視場的一無冗餘組合,例如圖2c中的該局部視場72a-d,其中在每種情況下在該場景中重疊區域73a-e被計數只有一次。結合圖2a和2b,這適用於該局部視場72a和72b的無冗餘組合。重疊區域73和/或73a-e中的一重疊可以包括例如各個局部圖像的最多50%、最多35%、或者最多20%。
圖3係顯示根據另一實施例的一多孔徑成像裝置30的一示意性透視圖,其藉由一計算單元33擴展了該多孔徑成像裝置10。
該計算單元33被配置為從該圖像傳感器12獲得圖像信息,該圖像信息表示關於該局部視場,例如已被投影到該圖像傳感器區域24a和24c上的該局部視場72a和72b,以及該總視場的圖像信息,例如可以被投影到圖像傳感器區域24b上的該總視場70。該計算單元33被配置為合併該局部視場的圖像信息和該總視場的圖像信息。圖像信息的組合可以被執行,舉例而言,使得該總視場的該掃描程度低於該局部視場的一掃描程度。一掃描程度可以被理解為是指該局部視場或總視場的一局部分辨率,即指示該物體區域中的哪個表面被投影到該圖像傳感器的哪個表面區域或像素大小的一數量。在這裡描述的實施方式中,術語「分辨率」被理解為意指投影到對應的一圖像傳感器表面上的該局部或總視場的該擴展。因此,相對較大的分辨率意味著給定一相同的像素尺寸下,一視場的一固定的表面積被投影到一個較大的圖像傳感器表面上,並且/或 者在一相同的像素尺寸下,相對較小的物體表面積被投影到一固定的圖像傳感器表面上。藉由組合該圖像信息,掃描的一程度和/或該組合圖像信息61的一分辨率可以相對於擷取該總視場而增加。
圖4係顯示圖像傳感器區域24a-c如可以佈置在例如該多孔徑成像裝置10或30內的的一示意圖。舉例而言,該局部視場72a被投影到該圖像傳感器區域24a上。舉例而言,該局部視場72b被投影到該圖像傳感器區域24c上。舉例而言,該總視場70被投影到該圖像傳感器區域24b上。舉例而言,該局部視場72a和72b的該空間佈置可對應於圖2b的配置。
該圖像傳感器區域24a、24b和24c可以沿著該圖像方向32具有相同的或在20%、10%或5%的公差範圍內相同的一物理擴展b,並且其可以對應於一相同數量的像素。沿著該圖像方向28,該圖像傳感器區域24a和24c可以具有一物理擴展a,其可以對應於一相同數量的a個像素。沿著該圖像方向28,該延伸或像素a可以比該圖像傳感器區域24b的該延伸或像素c的數量更大。由於該局部視場72a和72b沿著該圖像方向28係尺寸相同並且與該總視場70相比較,掃描發生在一更高的分辨率或者沿著該圖像方向28在該總視場70的一更高程度掃描,即,將該物體區域中的一較小區域投影到具有恆定大小的a個像素上,使得所得到的該組合分辨率和/或該掃描程度增加。舉例而言,當該局部視場的該圖像的該等像素呈現相互有一子像素偏移時,可以實現一超分辨率效果。
沿著該圖像方向32,例如使用多個2×b像素以便經由該局部視場72a和72b對該總視場70進行成像,這裡必須考慮該重疊區域73。然而,不相交或僅部分重疊的該局部視場72a和72b也會導致沿該圖像方向32的一分辨率與在該圖像傳感器區域24中所擷取的該總視場70相比,其係增加。
因此,藉由組合該圖像傳感器區域24a至24c中的該圖像,與在該成像區域24b中所獲得的該分辨率相比,該總視場61的組合圖像信息可以是增加。該圖像傳感器區域24b中該圖像的一長寬比可以具有3:4的一數值。這使得能夠獲得具有一相同長寬比的該組合圖像。沿著該相應的圖像方向和/或該新生圖像,在該圖像傳感器區域24a和/或24c中的一分辨率可以比該圖像傳感器區域24b更大,其係在20%、10%的一公差範圍內或準確的至少30%、至少 50%或至少100%;在這裡,該重疊區域的一延伸將被考慮在內。
該圖像傳感器區域24a-c可以沿著一線延伸方向35佈置,該線延伸方向35可以佈置為例如與該圖像方向28平行和/或可以安排沿著該多孔徑成像裝置10或30的該光學器件64a-c。舉例而言,沿著與其垂直並且可以是該多孔徑成像裝置的厚度方向的一方向z,該圖像傳感器區域24a-c可以具有在公差範圍內相同的一延伸,這意味著可以在避免該多孔徑成像裝置的一附加厚度的同時,可獲得該擷取的總視場的該分辨率的增加。
換句話說,可以實現至少三個照相機通道,即光學通道,的一線性對稱佈置,其中光學通道之一較佳為該中央光學通道,以覆蓋該總視場,並且該(兩個)外部通道每個僅覆蓋該視場的一部分,例如頂部/底部或左側/右側,以使它們一起覆蓋該總視場,並且同時可以在該視場的該中心具有輕微重疊。這意味著在左側/右側和/或在頂部/底部,可獲得高分辨率的局部圖像。在該中心,覆蓋該整個相關視場的一較低分辨率的圖像可被擷取。該中央圖像中的該分辨率可以減小到一程度,其係在沒有考慮該長寬比,由該相同圖像高度的該相應較短焦距以及相同像素尺寸所規定或實現的。換句話說,該圖像傳感器高度24a、24b和24c是相同的。因此,在沒有任何重疊的情況下,該圖像傳感器區域24b中的該圖像高度僅是24a和24c的一組合圖像高度的一半。為了對相同的視場成像,用於該圖像傳感器區域24b(光學通道26b)的該光學器件的該焦距(或放大率)因此可以是24a和24c長度或尺寸的一半。給定該相同的像素尺寸,這意味著24b中的分辨率的一半(或者視場的掃描)對照於24a和24c的組合。相應的圖像寬度僅由圖像的該所需長寬比產生。
該中心相機通道是用於生成該深度圖的該參考相機,如果後者是由該計算單元創建的。包括關於該中央通道的該對稱性的該佈置使得關於該深度圖中的掩蓋的所獲得的該組合總圖像的一高品質成為可能。因此,該中心圖像也是計算更高分辨率組合圖像的該參考也是合理的。將該至少兩個更高分辨率的圖像逐塊地插入該低分辨率參考。因此,它們用作在確保配合的精度時可以使用的材料,即當在該局部視場和該總視場中發現匹配特徵時。該插入可以以非常小的區塊來實現,使得即使對包含大的深度跳躍的精細物體,也可以避 免與視差有關的問題。舉例而言,適當的區塊可藉由相關性來搜索,這可能意味著一視差圖被生成,即一深度圖。但是,如果對於低分辨率的的區塊,沒有發現具有足夠可靠性的高分辨率的區塊,則這沒有嚴重影響。只是簡單地保留低分辨率原始圖像。換句話說:於該深度圖中存在的孔洞只會導致整個圖像中更加模糊的位置,而不是清晰可見的偽影。
換句話說,由於一較短的焦距,該中央圖像傳感器可以擷取一較低分辨率圖像,其係覆蓋該總視場且固有地呈現所需長寬比。該相機還可以被參考為一參考相機,例如由於該所獲得的組合圖像展現出該相機的視角。接下來的是更高分辨率的局部圖像的一加入,這些局部圖像可能部分重疊,並且在組合上將與該參考相機顯示一相同的長寬比。藉由使用該參考相機,該局部視場的圖像的連接,可以在重疊區域進行高度正確的拼接,因為存在那裡的是本質上正確的一圖像,雖然其具有較低的分辨率。根據一有利的實施方式,所有三個圖像傳感器的高度相同或幾乎相同,以便以一最佳方式利用可用的設計高度。所有的相機可以藉由一共用的鏡子(光束偏轉裝置)來偏轉。一深度圖可按需要如下計算。在兩個高分辨率的該局部圖像的該重疊區域73中,所述計算可以由後者和該低分辨率總圖像執行;在其餘區域中,所述計算可以藉由將高分辨率的該局部圖像之一與該低分辨率總圖像的對應部分組合來實現。
圖5係顯示該計算單元33的一可能實施方式的一示意圖。該計算單元33可以被配置為將該總視場70的該圖像信息和該局部視場72a和72b的該圖像信息分成該局部視場72a的圖像區塊63a、該局部視場72b的圖像區塊63b、及該總視場70的的圖像區塊63c。一圖像區塊可以包括沿著圖像方向28和32的一特定數量的像素。沿著該圖像方向28和32,該區塊可以具有,例如最小為2和最大為1000像素、最小為10最大為500像素、或最小為20最大為100像素。
該計算單元可以被配置為逐塊地將包含在該總視場的一圖像區塊內的圖像信息與該第一局部視場72a或第二局部視場72b的一圖像區塊的匹配圖像信息相關聯,以藉由組合該第一圖像區塊和第二圖像區塊來提高該組合圖像信息中的該總視場的該圖像信息的一分辨率。該第一圖像區塊和第二圖像區 塊均可以是其一重疊區域中的不同部分視場的一圖像的一匹配圖像區塊。可選地或附加地,第一或第二區塊可以是該總圖像的區塊,並且另一區塊可以是該局部圖像的一區塊。舉例而言,該計算單元33被配置為將區塊63a3中描繪為x的物體標識為匹配該總視場70的區塊63c1中的物體x。基於該局部視場72a的分辨率,其係高於該總視場70的分辨率,該計算單元可以將兩個區塊63a3和63c1的圖像信息相互組合,以便獲得在該區塊中所產生的一分辨率,其高於最初的該總視場70的分辨率。在這種情況下,所得到的該組合分辨率可以對應於或高於該局部視場72a的所擷取的該分辨率的值。該計算單元例如在該局部視場72a的一區塊63a2中和在該局部視場72b的一區塊63b1中識別該總視場70的一區塊63c2中由#描繪的物體,因此為了改善圖像品質,可以使用來自該局部視場72a和72b的兩個圖像的圖像信息。
由該計算單元例如在該局部視場72b的一區塊63b2中識別在一區塊63c3中由*描繪的物體,使得該區塊63b2中的的圖像信息被例如該計算單元所採用,以增加區塊63c3中的該圖像信息。
在該局部視場72a和72b的區塊中沒有區塊可以與該總視場的一區塊相關聯的一情況下,例如該區塊63c4所示,該計算單元可以被配置為輸出該組合總圖像的一個區塊,使得至少該區塊63c4位於該總圖像內。亦即,即使該分辨率沒有局部增加,也可以描繪圖像信息。這最多將導致該總圖像的微小變化,這意味著例如在該區塊63c4的位置處將有例如一局部降低的分辨率。
該計算單元33可以被配置為基於該總視場70的該圖像信息來執行該局部視場72a和72b的該圖像信息的拼接。這意味著可以採用該總視場的總成像來至少支持或甚至執行該局部視場72a和72b的該局部圖像的相互對準。可選地或附加地,來自該總視場的該總成像的信息可以用於支持或甚至執行來自該局部圖像和/或該總圖像內的一局部圖像內的該場景的該物體的佈置。該總視場包括大量或者甚至全部的物體,其係亦在該局部視場72a和72b中描繪的,使得各個局部圖像與該總視場的該總圖像的一個比較和/或該物體的該位置的一個比較,將使得能夠相對於該總圖像進行對齊,並且因此將能夠實現局部圖像的相互拼接。
換言之,該低分辨率圖像將作為先前技術用於提供支持高分辨率圖像的拼接的一基礎,即定向的一基礎,因為物體已經以一結合方式存在該總圖像中。除了簡單連接兩個全局的局部圖像區域之外,拼接還可能意味著物體以其在一拼接圖像內的距離之一函數,而被重新集成到該場景和/或不同地對比該背景(關於它們在該圖像內的橫向位置),取決於該場景內的該距離相關物體分佈,其係可能需要或期望的。這裡描述的概念相當程度地簡化了該拼接過程,即使精確拼接需要深度圖也是如此。由於在至少三個光學通道實現了至少三個朝向總視場的視線,所以可以避免由於在該中央位置沒有攝像機而引起的掩蓋問題。因此可以藉由一個或兩個其他視角來減少或阻止以一個視角中的掩蓋。
圖6係顯示根據一個實施例的該多孔徑成像裝置30的一示意性上視圖。該計算單元33可以被配置為生成一深度圖81。該深度圖81可以參考該總視場70的該圖像信息。舉例而言,該計算單元33被配置為利用該局部視場72a的該圖像與該總視場70和73b的該圖像之間以及該局部視場72b的該圖像與該總視場70之間的視差83a,以便生成一深度圖。這意味著由於該光學器件64a、64b和64c以及該圖像傳感器區域24a、24b和24c的物理距離,不同視角或透視可被獲得,其係被用於在該計算單元33的部分,以生成該深度圖81。該計算單元33可以被配置為在使用該局部視場72a和72b的圖像信息的同時,在該重疊區域73中生成該深度圖81,該重疊區域73係在該局部視場72a和72b內重疊。這使得能夠利用與各個視差83a和83b相比的更大一個視差,簡單來說,即是各視差的總和以及高分辨率(局部)圖像的利用。這意味著,在一個實施例中,該計算單元33可以被配置成在該重疊區域73中生成該深度圖81,而無需該總視場70投影到該圖像傳感器區域24b上的信息。或者,舉例而言,為了實現高信息密度,在該重疊區域73中使用該總視場70的該信息是可能的而且是有利的。
根據一有利的進一步發展,該圖像傳感器區域24a和24c中的該投影如在24b中可以在不利用(例如RGB)拜耳濾色片裝置的情況下或者至少在使用單一色濾色片的情況下實現,使得將由該多孔徑成像裝置提供具有單色亮度信息的該成像的第一和第二局部視場。舉例而言,可以配置單色紅外濾光片、 紫外線濾光片、紅色濾光片、藍色濾光片等或根本不需要濾光片,而不像24b那樣具有拜耳排列的一多色濾光片。換句話說,由於該外部通道在提高該總視場圖像的該品質方面僅貢獻細節,因此外部通道16a和16c不包括濾色器可能是有利的。然後,該外部通道將僅貢獻亮度信息,即總體清晰度/細節的一增加,但沒有改進的顏色信息;由此獲得的優點在於增加的靈敏度並且因此降低了噪聲,這部分最終也使得能夠提高分辨率和/或清晰度,因為由於例如沒有疊加在該等像素上的Bayer濾色器圖案,該圖像將必須減少平滑;然而,僅該亮度通道中存在的分辨率本質上較高(理想情況下為雙倍),因為不需要去除Bayer效應(de-Bayering)。實際上,一彩色像素可能大約是一黑白像素大小的兩倍。這可能不適用於實際方面,因為這裡黑白像素不能僅用於分辨率,但也可以用於藉由將黑白像素與該典型的RGBG濾波器圖案疊加來進行顏色辨別。
圖7係顯示根據另一實施例的一多孔徑成像裝置71的一示意性透視圖,其包括顯示裝置85。該多孔徑成像裝置71被配置為用該顯示裝置85重新產生投影到該圖像傳感器區域24b上的該總視場70的表示。為此,該計算單元33可以被配置為例如將來自圖像傳感器12的該相應信號轉發到該顯示裝置85。另外地,該顯示裝置85也可以直接耦合到該圖像傳感器12並獲得來自該圖像傳感器12的該相應信號。
該顯示裝置85被配置為接收並輸出由該圖像傳感器區域24b提供的至多該分辨率的該總視場的該圖像信息。較佳地,投影到該圖像傳感器區域24b上的該總視場的該分辨率將被無變化地傳送到該顯示裝置85。這使得能夠顯示可能已經現在被擷取的該圖像或視頻,例如作為一用戶的一預覽,使得該用戶可以影響擷取。由該組合圖像信息61提供的該較高分辨率圖像可以在一不同的時間點提供給該顯示裝置85,可以提供給一不同的顯示裝置,可以存儲或發送。也有可能不時地獲得該組合圖像信息61,即,僅在需要時和當需要時獲得該組合圖像信息61,並且否則利用可能具有一較低分辨率的該總視場70的圖像,如果這足以用於當前的使用,例如在該顯示裝置85上觀看,而不需要一深度圖或當放大細節時。這使得能夠對圖像擷取施加一影響,而不需要該圖像信號的任何組合,這將需要在計算和時間方面的一定數量的耗費,這將對該顯 示裝置85的該延遲和該計算所需的該能量具有有利的影響。藉由在該多孔徑成像裝置71的該部分上串聯多個圖像,還可以從該圖像傳感器12獲得一視頻信號,並且在該顯示裝置85上輸出該總視場的一視頻信號。
舉例而言,本文描述的該多孔徑成像裝置71或一不同的多孔徑成像裝置,例如多孔徑成像裝置10、30或60,可以形成為一行動電話、一智能電話、一平板電腦或者一監視器。
該多孔徑成像裝置71可以在該顯示器85上提供一即時預覽;因此不需要總是激活該兩個外部攝像機通道,從而可以節省電流和/或不需要額外的計算耗費來鏈接該局部圖像,這使得能夠減少處理器的電容器利用率並減少能量消耗,這也可延長電池壽命。可替代地或另外地,原始數據可以首先被存儲,並且可以生成高分辨率圖像,無需等到發送到諸如PC的不同計算單元和/或當在放大時在該顯示設備上放大觀看所述圖像細節。在這裡可以僅為該等相關圖像區域生成該組合圖像係為可能,或者至少在區域中為不相關圖像區域不生成該組合圖像。相關區域可以是例如需要放大描繪(縮放)的圖像區域。
對於個別的圖像(圖框)和對於一視頻而言,該圖像傳感器區域24b的該圖像因此可以被直接使用並且可能具有足以用於一視頻的一分辨率。同樣可想到的是,該中央攝像機從一開始就具有適合於普通視頻格式(即例如1080p或4K)的一分辨率,從而可以避免重新採樣(採樣率轉換)、分箱(組合相鄰圖像元素)或通常執行的跳過(跳過像素);在這種情況下,分辨率可能足夠高,從而可以生成高分辨率的靜止圖片。
圖8係顯示包括一光學圖像穩定器22和一電子圖像穩定器41的一多孔徑成像裝置80的一示意性透視圖。以下將在圖像穩定方面描述的觀點可以在使用該計算單元33的功能的單獨或組合地實現而沒有任何限制。
該光學圖像穩定器22包括例如致動器36a、36b和42,該致動器36a和36b被配置為藉由沿著線延伸方向35移動該陣列14來實現該圖像傳感器區域24a至24c中的該局部視場的該圖像的該光學圖像穩定。另外,該光學圖像穩定器22例如被配置為藉由該光束偏轉裝置18的一旋轉運動38來獲得沿著該圖像軸32的光學圖像穩定。舉例而言,該陣列14的該光學器件64a和64b分 別包括在最大10%、最大5%或最大3%的公差範圍內彼此不同的有效焦距f1和f3,以便以一或多或少地相同的方式擷取該局部視場。該光學器件64b可具有一焦距f2,該焦距f2與其相差至少10%。對於所有通道執行的該旋轉運動38,其係結合焦距f2和f1的差異或者在f1和f3之間的焦距的差異內,以導致在該圖像傳感器區域24a-c中的該圖像的不同位移691至693。這意味著該光學圖像穩定器22藉由對所有通道執行的該旋轉運動38來實現該圖像中的不同效果,使得圖像中的至少一個、多個或全部偏離理論上的一無缺陷狀態。該光學圖像穩定器22可以被配置為在總體上最小化所有該等圖像的偏差,然而這可能導致在每個圖像中出現缺陷。另外地,該光學圖像穩定器22可以被配置成在該圖像傳感器區域24a-d中的一個選擇作為一參考圖像並且控制該致動器42,使得該參考圖像或該參考通道中的該圖像盡可能精確,這可以也被參考為無缺陷。這意味著藉由針對所有通道執行該光學圖像穩定,相對於受影響的圖像方向,一通道可以保持無缺陷,由於焦距f1至f3不同,而其他通道則偏離該參考圖像。換句話說,一通道藉由實施的機械光學圖像穩定器而被校正,這將對所有通道產生一影響,但不會保持所有通道的穩定。所述另外的通道將藉由該電子圖像穩定器被附加地校正。
該光學圖像穩定器可以被配置成以一通道特定的方式和/或個別地為光學通道群組提供該光學通道的該相對運動,舉例而言,用於該光學通道16a和16c的群組以用於擷取該局部視場,並且對於包括用於擷取該總視場的該光學通道16b的群組。
該電子圖像穩定器41可以被配置為根據取決於該圖像傳感器12、該陣列14和該光束偏轉裝置18之間的該相對運動的一指定的功能相關性,來在每個通道中執行通道特定的電子圖像穩定。該電子圖像穩定器41可以被配置為分別穩定每個圖像。為此,該電子圖像穩定器41可以使用全域值,例如相機移動等,以增加該圖像的光學品質。該電子圖像穩定器41被配置為基於該光學圖像穩定器22的一參考圖像執行電子圖像校正,這對該電子圖像穩定器41特別有利的。不同的焦距可以提供該功能相關性,其係由該光學圖像穩定引起的圖像之間的不同變化,其較佳以線性形式,例如以以下的形式: aberration(像差)=f(fi,relative movement(相對移動)),亦即,全局或與該參考通道有關的該像差可以描繪為焦距或或焦距差、以及為了改變視線或實現光學圖像穩定而執行的該相對移動的一函數。該電子圖像穩定器41可以將該圖像傳感器12、該陣列14和該光束偏轉裝置18之間的該相對移動的一範圍與該焦距f1至f3或相對於該參考通道的焦距差異相關聯,以便獲得關於要執行的電子圖像穩定之可靠信息,並且為了創建該功能相關性和/或使用它們。可以在一校準期間獲得該光學特性和/或該功能相關性的必要數據。圖像間相對於彼此的對準以確定一個圖像相對於另一個圖像的一位移,也可以藉由確定該局部視場的圖像中之一匹配特徵來實現,舉例而言,邊緣輪廓、物體尺寸等。其係可被例如該電子圖像穩定器41所識別,該電子圖像穩定器41可以進一步被配置為基於該第一圖像和該第二圖像中的特徵移動之一比較來提供該電子圖像穩定。通道特定的電子圖像穩定因此可以藉由對圖像細節的該移動之個別通道圖像評估來實現。
作為對不同圖像中的一比較的替代或附加,還可以在同一圖像內執行特徵的比較,特別是關於以兩次之間的時間間隔拍攝的兩個圖片或圖框(frame)。該光學圖像穩定器41可以被配置為在一第一時間點和在一第二時間點識別對應的局部圖像中的一匹配特徵,並且基於該第一圖像中的特徵移動之一比較來提供該電子圖像穩定。該比較可以指示例如藉由該特徵已經藉由一相對運動而被移位且該圖像需被移回的位移的一段移位,以為了至少部分地校正圖像偽像。
該光學圖像穩定器係被使用以便穩定在諸如該圖像傳感器區域24a中圖像的一參考通道的該成像的局部視場之一圖像。這意味著該參考通道可以完全光學穩定。根據實施例,多個光學圖像穩定器可以被配置為對至少一組光學通道提供光學圖像穩定,該至少一組光學通道可以為例如該光學通道或具有一第一焦距的光學通道,諸如用於對該總視場進行成像的該光學通道,以及具有一第二焦距的光學通道,例如用於對該局部視場進行成像。或者,也可以提供通道特定的光學圖像穩定。該電子圖像穩定器41被配置為例如針對與該參考通道不同並且投影到該圖像傳感器區域24b和24c上的光學通道,以一通道專 用方式執行圖像穩定。該多孔徑成像裝置可以被配置為以一專門光學方式穩定該參考通道。亦即,在一個實施例中,藉由僅使用機械實現的該光學圖像穩定,可以在該參考通道中實現足夠的圖像穩定。對於其他通道,將存在額外的電子圖像穩定,以完全或局部地補償由於焦距差異所導致的光學圖像穩定性不足的上述效果,該電子穩定性在每個通道中單獨執行。
根據另一實施例,該多孔徑成像裝置的每個通道也可以包括單獨的電子圖像穩定。針對該多孔徑成像裝置的每個通道個別地,即以一專用程度執行的電子圖像穩定化可以被實現,使得利用在各個通道中實現該圖像位移之間的一指定的功能相關性。舉例而言,在一通道內沿該方向32的位移合計為在不同圖像中沿該方向32的該位移的1.1倍、1.007倍、1.3倍或2或5倍。此外,這種通道特定的功能相關性可以取決於該光束偏轉單元和/或該陣列和/或該圖像傳感器之間的該相對運動,該功能相關性可以是線性的或對應於一角度函數,該角度函數將該將光束偏轉裝置的一旋轉角度沿著該圖像方向成像到該電子圖像穩定的一程度。對於該方向28可以以相同或不同的數值獲得一相同的相關性。
施行於所有實施例的是該實現的相對移動可以由例如陀螺儀等的相應的附加傳感器所擷取,或者可以從擷取的一個、多個或全部通道的該圖像數據中導出。該數據或信息可以用於該光學和/或電子圖像穩定器,即,該多孔徑成像裝置被配置為例如接收來自一傳感器的一傳感器信號,並且針對與該多孔徑成像裝置和該物體之間的一相對運動的一相關信息來評估該傳感器信號,並使用該信息控制光學和/或電子圖像穩定器。
該光學圖像穩定器可以被配置為藉由移動不同的部件,例如用於沿方向28穩定的陣列14,以及該光束偏轉裝置18沿方向32穩定的旋轉38,來沿著圖像軸28和32獲得光學圖像穩定。在這兩種情況下,該光學器件64a-c的差異會產生一影響。先前關於電子圖像穩定的討論可針對兩種相對運動實施。特別地,考慮到彼此分離的方向28和32使能夠考慮沿著該方向28和32的光學器件64a-c之間的不同偏差。
本文描述的實施例可以共享用於該圖像傳感器區域24a-c中的該 局部圖像的一圖像軸28和/或32。或者,方向也可以不同並且彼此轉換。
圖9係顯示根據另一實施例的一多孔徑成像裝置90的一示意性透視圖,其包括聚焦裝置87。該聚焦裝置87可以包括一個或多個致動器89a、89b和/或89c,其被配置為改變該陣列14和該圖像傳感器12之間和/或在該光束偏轉裝置18和該陣列14和/或該光束偏轉裝置18和該圖像傳感器12之間的距離,以便調整該圖像到該圖像傳感器區域24a、24b和/或24c上的聚焦。儘管該光學元件64a、64b和64c被示出為佈置在一共同的載體上以便可以一起移動,但是至少該光學元件64b、該圖像傳感器區域24b和/或該光束偏轉區域46b可以單獨地移動,以調節該光學通道16b的聚焦,使其不同於其他通道中的聚焦。亦即,該聚焦裝置87可以被配置為調整該第一和第二光學通道16a和16c的一相對運動以及該光學通道16b的一相對運動,使得所述相對運動彼此不同。
該聚焦裝置87可以與該光學圖像穩定器22組合,即,藉由致動器在該光學圖像穩定器22和該聚焦裝置87中所提供的一運動可以由附加佈置的致動器提供,或者也可以藉由一共享致動器來提供用於聚焦和光學圖像穩定的部件之間的運動。
換句話說,利用用於自動對焦(AF)和可能的光學圖像穩定(OIS)的分開的致動器是有利的。由於該相鄰通道在分辨率和焦距方面可能不同的體系結構,通道特定的致動可以獲得通道特定的調節,從而可以獲得所有通道中的自動對焦和/或圖像穩定的優點。舉例而言,對於不同焦距處的自動對焦功能,為了聚焦的目的,需要覆蓋不同的圖像側距離,以便以高質量執行自動對焦。替代的結構形式可以被實現,使得被配置成擷取該總視場的光學通道被配置為沒有任何光束偏轉裝置。
圖10係顯示根據另一實施例的一多孔徑成像裝置100的一示意性透視圖,其中該圖像傳感器區域24a至24c佈置在至少兩個晶片上,所述個晶彼此不同並且被定向為,亦即相互傾斜。該圖像傳感器區域24b可以包括與該光學部件64b結合的一第一視線,其可能直接與該總視場70相關聯。與關聯的該光學器件64a和64c相結合的該圖像傳感器區域24a和24c可以包括與之前不同的一視線,舉例而言,沿著一x方向與其垂直,該光路26a和26c藉由該光束 偏轉裝置18被偏轉朝向該局部視場72a和72b。這代表了一種結構形式,它可替代先前描述的該多孔徑成像裝置。
利用該光束偏轉裝置18可以產生特定的鏡子尺寸或偏轉表面區域尺寸,對於該通道24b而言可以比對於擷取該局部視場的相鄰通道更大,因為該通道16b必須全部擷取大於該局部視場72a和72b該總視場。這可能導致沿該裝置厚度方向的尺寸增加,舉例而言,沿一z方向,這在一些實施例中是不期望的。因此該光束偏轉裝置18的利用可以被重新配置,使得只有該光路26a和26c被偏轉,而該光路26b被直接指向,即沒有任何偏轉地朝向該總視場70。
換句話說,該中央照相機通道被安裝在中央且沒有任何偏轉鏡面,即以一傳統的方向在兩個偏轉的高分辨率照相機通道之間,使得它直接從設備的平面看去,例如一電話。由於相對較低的分辨率,例如0.77和/或1/1.3、0.66和/或1/1.5或0.5和/或1/2的值,其對應於上述更高的該附加分辨率的通道至少30%、至少50%或至少100%,並且由於相應較短的焦距,該中央照相機通道在這種一直立構型中,沿著該z方向與呈一平躺配置的兩個外部照相機通道有大致相同的設計高度。所述解決方案可能可防止該中央通道16b的視線的切換,但是然而也可以藉由佈置一另外的照相機通道補償該中央通道16b的視線。可以藉由個別佈置致動器來提供一自動對焦功能和/或光學圖像穩定。再換句話說:一個大視場「1」可以以短的焦距和/或小放大倍率而成像為「直立」,並且一個較小的局部視場「2」可以以長的焦距和/或更大的放大倍率而成像為「處於一平躺並具有一折疊的光路」,並且可以最好地適應各自的情況。「1」已經設計得很短,但可致能一大視場,但是也可能使得鏡子變大,而「2」可能設計得很長,並且由於視場較小,所以需要一面小鏡子。
圖11係顯示根據另一實施例的一多孔徑成像裝置110的一示意性透視圖,其中該光學器件64a和64c的一距離d1大於在該光學器件64b和該圖像傳感器12之間的一距離d2,且該光學器件64a和64c包含來自該圖像傳感器12的該焦距f1和f3,該光學器件64b包含該焦距f2。該距離d1和/或d2因此可以適應於該光學器件64a至64c的焦距。如果有設置該光束偏轉裝置18,該光束偏轉裝置18的該光束偏轉區域46a至46c可以是單獨可控制的。
圖12係顯示根據另一實施例的一裝置120的一示意性透視圖。該裝置120包括該圖像傳感器12,該圖像傳感器12包含該圖像傳感器區域24a和24c。該裝置120進一步包括該陣列14,該陣列14包含該光學通道16a和16c。每個光學通道16a和16c分別不變地包括該光學器件64a和64c,係分別用於成像該整個視場70的該局部視場72a和72b,如結合上述所描述的該多孔徑成像裝置。簡而言之,該圖像傳感器12和該陣列14可以配置為不存在該光學通道,而對該總視場進行成像。該設備120包括該計算單元33,其被配置為從該圖像傳感器12獲得關於該局部視場72a和72b的圖像信息。該計算單元33還用於獲取包括該總視場70的圖像信息的一信號91。該計算單元33被配置為將該局部視場72a和72b的圖像信息與該總視場70的該圖像信息91組合,以獲得該總視場70的該組合圖像信息61。
簡言之,該裝置120可以是用於現有照相機設備的一附加模塊,並且可以配置為從照相機設備獲得關於該擷取的總視場的該圖像信號。該相機設備可以是任何相機。該裝置120因此可以被配置為增加該外部裝置的一分辨率,因為所獲得的圖像信號91與額外擷取的局部視場72a和72b疊加以提高品質。
該計算單元33可以被配置為提供與結合在此描述的該多孔徑成像裝置所描述的相同的功能。這意味著該設備120可以被配置為以一第一圖像分辨率獲得該圖像信息91,並且以一更高的分辨率獲得關於該局部視場72a和72b的該圖像信息。該組合圖像信息61可以包括比該圖像信號91更高的分辨率或至少更高的分辨率。沿著第一和第二圖像方向,該圖像信號91的該分辨率,在上述的20%、10%或0%的容差範圍內,可以對應於或小於該圖像傳感器區域24a和24c的該分辨率乘以值0.77、0.66和/或1/2。
如結合圖5所描述的,該計算單元33還可以被配置為逐塊執行所述圖像關聯。這也可以意味著該計算單元33執行一關聯標準,例如一相似性分析、一邊緣比較等,並且僅在滿足該關聯標準時才執行該區塊的組合。如果不滿足該關聯標準,則可以由該計算單元33提供該組合圖像信息,使得該評估區塊中的該區塊組合不執行。
該計算單元33可以被配置為基於該總視場70的該圖像信息來執行該局部視場72a和72b的該圖像信息的拼接。由於僅對該圖像信息進行評估,因此該計算單元33可能與系統自身的圖像傳感器12或外部設備的圖像傳感器是否獲得關於該總視場70的該圖像信息無關。
如針對該多孔徑成像裝置所描述的,該計算單元可以被配置為生成針對該總視場的該圖像信息的一深度圖,其係當使用擷取該總視場的該通道的一視線與該第一局部視場的一圖像之間的一第一視差、和/或總視場的該圖像與該第二局部視場的一圖像之間的一第二視差時生成該深度圖。即使該總視場被一不同的相機擷取,它也包括朝向該總視場的一視線,以便可以評估一視差,特別是如果該裝置與提供該圖像信號91的裝置一起被校準的情況。
如上所述,該計算單元33可以被配置為藉由僅使用該局部視場的該圖像信息,來在該局部視場72a和72b的該局部圖像的一重疊區域中生成該深度圖。
該設備120可以包括一光學圖像穩定器,例如該光學圖像穩定器22,其被配置為藉由沿著第一和第二方向,例如沿著方向28和32,以產生該圖像傳感器12和該陣列14之間的一相對移動來提供光學圖像穩定。可選地或附加地,該裝置120可以包括聚焦裝置,例如聚焦裝置87,以便調節該裝置120的一焦點。這可以藉由在該光學通道16a和16b的該光學器件64a和64b中的至少一個與該圖像傳感器12之間產生一相對運動來實現。
圖13係顯示根據一個實施例的一補充裝置130的一示意性透視圖。該補充裝置130被配置為補充一相機或圖像擷取裝置93,該相機或圖像擷取裝置93被配置為生成該圖像信號91並且將其提供給該補充裝置130。舉例而言,該補充裝置130包括該裝置120並且被配置為耦合到該相機93。因此,該補充裝置130被配置為擴展或補充該相機93的圖像處理。這也可以被理解作為一附加裝置,其例如提供一對外部通道作為對現有系統的分辨率提升。這意味著上述中央通道可以是例如一行動電話的供應商知道並理解並且存在已建立的供應鏈中的一習知相機模塊。包括該光學器件64a和64c的該外部通道是附加模塊,其安裝在前者附近或周圍。一折疊的光路可能保留,該設計高度因此適應 該舊相機模塊。儘管整個系統的一設計高度不會比該相機模塊33薄,但可藉由憑藉該附加模塊而提高分辨率也可以避免設計高度的增加。相反,該外部通道一起具有比該內部模塊更大的一傳感器面積。如果該像素大小相等,則該模塊將具有更高的整體分辨率,並因此具有一更精細的角分辨率。因此,與該相機93相比,它可以用於提高分辨率。這裡也可以在實施例中將該傳感器配置為沒有任何濾色器。這意味著該成像的第一和第二局部視場的該圖像信息可以被提供為具有單色亮度信息。該附加模塊可以但並非必須地圍繞該照相機93的該照相機模塊對稱地組裝。例如對角線或不對稱的其他形式的組裝也是可以想到的,並且可以藉由圖像處理來補償。可以不變地生成深度圖,可以提供光學和/或電子圖像穩定以及自動對焦。
圖14係顯示用於提供根據一個實施例的設備例如設備120的一方法1400的一示意性流程圖。一步驟1410包括提供一圖像傳感器。一步驟1420包括佈置一光學通道陣列,使得每個光學通道包括一光學器件,其係用於將一總視場的至少一個局部視場投影到該圖像傳感器的一圖像傳感器區域上,使得該陣列的一第一光學通道被配置為對該總視場的一第一局部視場成像,並且使得該陣列的一第二光學通道被配置成對該總視場的一第二局部視場成像。一步驟1430包括佈置一計算單元,使得其被配置為基於該成像的局部視場以獲得該第一和第二局部視場的圖像信息,並且獲得該總視場的圖像信息,並將該局部視場的該圖像信息與該總視場的該圖像信息進行組合,以生成該總視場的組合圖像信息。
圖15係顯示用於提供根據實施例的一多孔徑成像裝置例如該多孔徑成像裝置10的一方法1500的一示意性流程圖。一步驟1510包括提供一圖像傳感器。一步驟1520包括佈置一光學通道陣列,使得每個光學通道包括一光學器件,其係用於將一總視場的至少一個局部視場投影到該圖像傳感器的一圖像傳感器區域上,並且使得該陣列的一第一光學通道被配置為對該總視場的一第一局部視場進行成像,使得該陣列的一第二光學通道被配置成對該總視場的一第二局部視場成像,並且使得一第三光學通道被配置為對該總視場完全成像。
這裡描述的實施例提供了這樣的優點:仍然使用一低分辨率圖像 作為一先前技術來支持該高分辨率圖像的拼接,從而簡化拼接過程。由於該照相機的該中央佈置和其他通道的圍繞該中央佈置的該對稱佈置,這允許在該深度圖中較不明顯的遮掩實例。這也導致最終組合圖像中的偽影更少。即時取景可以直接從該中央通道獲得,而不需要任何計算耗費,可能在使用像素的分檔或略過的同時,將分辨率降低到一所需的程度,但是正確長寬比的該總視場可以已經從該中央通道獲得,因為所述的中央通道覆蓋整個視場(Field Of View,FOV)。一視頻可以直接從該中央通道導出而不需要任何計算耗費,這是藉由與導出圖像的類推(analogy)來實現。僅利用三個通道,即用於擷取該局部視場的一組光學通道,包括用於精確擷取兩個局部視場的光學通道,允許較少數量的部件、較少的傳感器、一小的數據傳輸帶寬和一小體積容量的裝置或多孔徑成像裝置。
此處描述的實施例可以用作為或用於具有線性通道佈置和最小設計高度的多孔徑成像系統,同時在與已知解決方案相比,其可提供在此描述的優點。
一些解釋涉及諸如上/下或左/右的相對方向。可以理解的是,如果空間方向改變,它們可以根據需要互換。這就是為什麼這些術語不應該被認為是限制性的,而只是為了提高清晰度。
儘管在設備的上下文中描述了一些觀點,應該理解,該觀點也表示相應方法的一描述,使得裝置的一區塊或一結構部件也被理解為對應的一方法步驟或者作為一方法步驟的一特徵。藉由類推,已經在方法步驟的上下文中或者作為方法步驟描述的觀點也表示一相應設備的一對應區塊或細節或特徵的描述。
上述實施例僅僅表示本揭露的原理的一圖式。應該理解,本領域的其他技術人員將會理解這裡描述的佈置和細節的修改和變化。這就是為什麼希望本揭露僅由所附請求項來限制範圍,而不是藉由本文中藉由描述和實施例的討論及呈現的具體細節來限制範圍。
上述實施例僅係為了方便說明而舉例而已,本揭露所主張之請求項自應以申請專利範圍該為準,而非僅限於上述實施例。
Claims (51)
- 一種裝置,包含:一個圖像傳感器;一光學通道陣列,每個光學通道包含一光學器件,其用於投影一總視場的一局部視場於該圖像傳感器的一圖像傳感器區域,該陣列的一第一光學通道被配置為對該總視場的一第一局部視場成像和該陣列的一第二光學通道被配置為對該總視場的一第二局部視場成像;以及一計算單元,被配置為基於該成像的局部視場獲得該第一和第二局部視場的圖像信息,並且獲得該總視場的圖像信息,並且將該局部視場的該圖像信息與該總視場的該圖像信息組合,以生成該總視場的組合圖像信息。
- 如申請專利範圍第1項之該裝置,其中,該第一和第二光學通道是被配置為分別對該總視場的一個局部視場成像的一組光學通道的一部分,該光學通道組被配置為共同完全成像該總視場。
- 如申請專利範圍第2項之該裝置,其中,該組光學通道被配置為精確地擷取兩個局部視場。
- 如申請專利範圍第1項之該裝置,其中,代表該第一和第二局部視場的該圖像信息的一第一局部圖像和一第二局部圖像沿著一第一圖像方向包括與代表該總視場的該圖像信息的一總圖像的相同尺寸,並且沿著一第二圖像方向包括與該總圖像相比的一不同尺寸。
- 如申請專利範圍第1項之該裝置,其被配置為提供具有單色亮度信息的該成像的第一和第二局部視場的該圖像信息。
- 如申請專利範圍第1項之該裝置,其被配置為獲得具有一第一掃描程度的該總視場的該圖像信息,以獲得具有一第二掃描程度的該第一或第二局部視場的該圖像信息,該第二掃描程度係大於第一掃描程度,並且提供具有一第三掃描程度的該總視場的該組合圖像信息,該第三掃描程度係大於第一掃描程度。
- 如申請專利範圍第6項之該裝置,其中,該第二掃描程度沿著第一和第二圖像方向比該第一掃描程度大至少30%。
- 如申請專利範圍第1項之該裝置,其中,該計算單元被配置為將該總視場的該圖像信息和該局部視場的該圖像信息細分成圖像區塊,並且逐塊地將被包含在該總視場的一第一圖像塊內的圖像信息和該第一或第二局部視場的一第二圖像區塊的匹配圖像信息相關連,以藉由組合該第一圖像區塊和第二圖像區塊來提高在該組合圖像信息中的該總視場的該圖像信息的一掃描程度。
- 如申請專利範圍第8項之該裝置,其中,該計算單元被配置為在應用一關聯標準的同時將該第一區塊與該第二區塊相關聯,以便僅當滿足該關聯標準時才執行該組合,並且如果不滿足該關聯標準,則提供該總視場在第一區塊內的該組合圖像信息,而沒有任何組合。
- 如申請專利範圍第1項之該裝置,其中,該計算單元被配置為基於該總視場的該圖像信息來執行該局部視場的該圖像信息的拼接。
- 如申請專利範圍第1項之該裝置,其中,該計算單元可以被配置為生成針對該總視場的該圖像信息的一深度圖,其係當使用該總視場的一圖像與該第一局部視場的一圖像之間的一第一視差、和該總視場的該圖像與該第二局部視場的一圖像之間的一第二視差時生成該深度圖。
- 如申請專利範圍第1項之該裝置,其中,該局部視場在該總視場內的一重疊區域內重疊,該計算單元被配置為在當使用該第一和第二局部視場的該圖像信息的同時在該重疊區域內生成針對該總視場的該圖像信息的一深度圖。
- 如申請專利範圍第1項之該裝置,其包含一光學圖像穩定器,其沿著一第一圖像軸藉由在該圖像傳感器和該陣列之間生成一第一相對運動進行圖像穩定,並沿著一第二圖像軸藉由在該圖像傳感器和該陣列之間生成一第二相對運動進行圖像穩定。
- 如申請專利範圍第1項之該裝置,其更包含聚焦裝置,該聚焦裝置包括用於調節該裝置的一焦點的至少一個致動器,該致動器被配置為提供該光學通道中的一個的至少一個光學器件和該圖像傳感器之間的一相對運動。
- 一種補充裝置,其包括如申請專利範圍第1項所述的裝置,並且被配置為耦合到一相機以從中獲得該總視場的該圖像信息。
- 一種多孔徑成像裝置,包含:一個圖像傳感器;以及一光學通道陣列,每個光學通道包含一光學器件,其用於投影一總視場的至少一局部視場於該圖像傳感器的一圖像傳感器區域;該陣列的一第一光學通道被配置為對該總視場的一第一局部視場進行成像,並且該陣列的一第二光學通道被配置成對該總視場的一第二局部視場進行成像,以及一第三光學通道被配置為完全成像該總視場。
- 如申請專利範圍第16項之該多孔徑成像裝置,其包括用於共同偏轉該第一和第二光通道的一光路的光束偏轉裝置。
- 如申請專利範圍第16項之該多孔徑成像裝置,其中,用於擷取該第一和第二局部視場的該陣列中的光學器件的一佈置係對稱於用於成像該總視場的該光學器件的一位置;或者其中用於對該第一和第二局部視場進行成像的圖像傳感器區域的一佈置係對稱於對該總視場進行成像的該圖像傳感器區域的一位置。
- 如申請專利範圍第16項之該多孔徑成像裝置,其中,該總視場的一圖像格式對應於該成像的第一局部視場和該成像的第二局部視場的一無冗餘組合。
- 如申請專利範圍第16項之該多孔徑成像裝置,其包括一計算單元,被配置為基於該成像的局部視場獲得該第一和第二局部視場的圖像信息,並且基於該成像的總視場獲得該總視場的該圖像信息,並且將該局部視場的該圖像信息與該總視場的該圖像信息組合,以生成該總視場的組合圖像信息。
- 如申請專利範圍第20項之該多孔徑成像裝置,其中,該計算單元被配置為將該總視場的該圖像信息和該局部視場的該圖像信息細分成圖像區塊,並且逐塊地將包含在該總視場的一第一圖像區塊內的圖像信息與該第一或第二局部視場的一第二圖像區塊的匹配圖像信息相關聯,以藉由組合該第一圖像區塊和第二圖像區塊來提高在該組合圖像信息中的該總視場的該圖像信息的一掃描程度。
- 如申請專利範圍第21項之該多孔徑成像裝置,其中,該計算單元被配置為 在應用一關聯標準的同時將該第一區塊與該第二區塊相關聯,以便僅當滿足該關聯標準時才執行該組合,並且如果不滿足該關聯標準,則提供該總視場在該第一區塊內的該組合圖像信息,而沒有任何組合。
- 如申請專利範圍第20項之該多孔徑成像裝置,其中,該計算單元被配置為基於該總視場的該圖像信息來執行該局部視場的該圖像信息的拼接。
- 如申請專利範圍第20項之該多孔徑成像裝置,其中,該計算單元可以被配置為生成針對該總視場的該圖像信息的一深度圖,其係當使用該總視場的一圖像與該第一局部視場的一圖像之間的一第一視差、和該總視場的該圖像與該第二局部視場的一圖像之間的一第二視差時生成該深度圖。
- 如申請專利範圍第20項之該多孔徑成像裝置,其中,該局部視場在該總視場內的一重疊區域內重疊,該計算單元被配置為在當使用該第一和第二局部視場的該圖像信息的同時在該重疊區域內生成該總視場的該圖像信息的一深度圖。
- 如申請專利範圍第20項之該多孔徑成像裝置,其被配置為從該傳感器獲得具有一第一掃描程度的該總視場的圖像信息,從該傳感器獲得具有一第二掃描程度的該第一或第二局部視場的該圖像信息,該第二掃描程度係大於第一掃描程度,並且提供具有一第三掃描程度的該總視場的該組合圖像信息,該第三掃描程度係大於第一掃描程度。
- 如申請專利範圍第26項之該多孔徑成像裝置,其中,該第二掃描程度沿第一和第二圖像方向比該第一掃描程度大至少30%。
- 如申請專利範圍第16項之該多孔徑成像裝置,其被配置為以一第一圖像分辨率從該圖像傳感器獲得由該第三光學通道擷取的該總視場的圖像信息,該多孔徑成像裝置包括顯示裝置並且被配置為至多在第一個圖像分辨率下,顯示該圖像信息。
- 如申請專利範圍第28項之該多孔徑成像裝置,其被配置為基於該總視場的連續圖像在該顯示裝置上輸出該總視場的一視頻信號。
- 如申請專利範圍第16項之該多孔徑成像裝置,其包括用於該光學通道的一光路的共同偏轉的光束偏轉裝置,並且包括一光學圖像穩定器,其沿著一 第一圖像軸藉由在該圖像傳感器、該陣列和該光束偏轉裝置之間生成一第一相對運動進行圖像穩定,並沿著一第二圖像軸藉由在該圖像傳感器、該陣列和該光束偏轉裝置之間生成一第二相對運動進行圖像穩定。
- 如申請專利範圍第30項之該多孔徑成像裝置,其中,該光學圖像穩定器被配置為提供該第一和第二光學通道的一第一相對運動和該第三光學通道的一第二相對運動。
- 如申請專利範圍第30項之該多孔徑成像裝置,其中,該第一相對運動包括該圖像傳感器與該陣列之間的一平移相對運動、該圖像傳感器與該光束偏轉裝置之間的一平移相對運動、及該陣列與該光束偏轉裝置之間的一平移相對運動中的至少一個,並且其中該第二相對運動包括該束偏轉裝置的一旋轉運動、該圖像傳感器與該陣列之間的一平移相對運動、及該陣列與該光束偏轉裝置之間的一平移相對運動中的至少一個。
- 如申請專利範圍第30項之該多孔徑成像裝置,其進一步包括一電子圖像穩定器,其係用於使該陣列的該第一光學通道沿著該第一和第二圖像軸圖像穩定。
- 如申請專利範圍第33項之該多孔徑成像裝置,其中,該電子圖像穩定器被配置為沿著該第一和第二圖像軸將該第一光學通道穩定到一第一程度,並且還被配置為該第一和第二圖像軸將該第二光學通道穩定到一第二程度。
- 如申請專利範圍第33項之該多孔徑成像裝置,其中,該光學圖像穩定器被配置為執行光學圖像穩定,使得該光學圖像穩定與該局部視場中的一第一個的一圖像相關,其中該電子圖像穩定器是配置成穩定一第二局部視場的一圖像,其係相對於該第一局部視場的該圖像。
- 如申請專利範圍第33項之該多孔徑成像裝置,其中,該光學圖像穩定器被配置為穩定包括該第一光學通道和該第二光學通道的一群組的一參考通道的該成像的局部視場的一圖像,並且其中該電子圖像穩定器被配置為針對不同於該參考通道的光學通道以一個別通道方式執行圖像穩定,其中該多孔徑成像裝置被配置為僅以一光學方式穩定該參考通道。
- 如申請專利範圍第33項之該多孔徑成像裝置,其中,該電子圖像穩定器被 配置為以一個別通道的方式對每個光學通道執行圖像穩定。
- 如申請專利範圍第37項之該多孔徑成像裝置,其中,該電子圖像穩定器被配置為根據取決於該圖像傳感器、該陣列和該光束偏轉裝置之間的該相對運動的一預定功能相關性在每個通道中執行該個別通道電子圖像穩定。
- 如申請專利範圍第38項之該多孔徑成像裝置,其中,該功能相關性是一個線性函數。
- 如申請專利範圍第33項之該多孔徑成像裝置,其中,該光學圖像穩定器被配置為基於該光束偏轉裝置的一旋轉運動沿著該圖像方向中的一個以提供該光學圖像穩定,其中該功能相關性是一角度函數,其將該光束偏轉裝置的一旋轉角投影在沿著該圖像方向的該電子圖像穩定上的一程度。
- 如申請專利範圍第33項之該多孔徑成像裝置,其中,該電子圖像穩定器被配置為在一第一時間點和一第二時間點處識別一第一局部視場的一第一局部圖像中的匹配特徵,並且基於該第一圖像中的該特徵的移動的一比較來提供電子圖像穩定。
- 如申請專利範圍第16項之該多孔徑成像裝置,其更包括聚焦裝置,該聚焦裝置包括用於調節該設備的一焦點的至少一個致動器,該致動器被配置為提供在該光學通道之一的至少一個光學器件和該圖像傳感器之間的一相對運動。
- 如申請專利範圍第42項之該多孔徑成像裝置,其中,該聚焦裝置被配置為提供該第一和第二光學通道的一第三相對運動和該第三光學通道的一第四相對運動。
- 如申請專利範圍第16項之該多孔徑成像裝置,其中,該等圖像傳感器區域沿著一線延伸方向佈置在該圖像傳感器上,並且其中沿著垂直於該線延伸方向的一圖像方向,該等圖像傳感器區域的展示尺寸在20%的容差範圍內相同。
- 如申請專利範圍第16項之該多孔徑成像裝置,其中,該第一和第二光學通道是被配置為分別對該總視場的一局部視場成像的一組光學通道的一部分,該組光學通道被配置為共同對該總視場完全成像。
- 如申請專利範圍第44項之該多孔徑成像裝置,其中,該組光學通道被配置為精確地擷取兩個局部視場。
- 如申請專利範圍第16項之該多孔徑成像裝置,其中,由該圖像傳感器提供的該第一和第二局部視場的一第一局部圖像和一第二局部圖像代表該圖像信息,沿著一第一圖像方向,該第一局部圖像和該第二局部圖像與一總圖像具有相同的尺寸,該總圖像係代表由該圖像傳感器提供的該總視場的圖像信息,並且沿著一第二圖像方向,該第一局部圖像和該第二局部圖像展示與該總圖像不同的尺寸。
- 如申請專利範圍第16項之該多孔徑成像裝置,其被配置成提供具有單色亮度信息的該成像的第一和第二局部視場。
- 如申請專利範圍第16項之該多孔徑成像裝置,其被配置為一手機、一智能手機、一平板電腦或顯示器。
- 一種提供設備的方法包括:提供一圖像傳感器;佈置一光學通道陣列,使得每個光學通道包括一光學器件,其係用於將一總視場的至少一個局部視場投影到該圖像傳感器的一圖像傳感器區域上,使得該陣列的一第一光學通道被配置為對該總視場的一第一局部視場進行成像,並且使得該陣列的一第二光學通道被配置為對該總視場的一第二局部視場進行成像;以及佈置一計算單元,使得該計算單元被配置為基於該成像的局部視場獲得該第一和第二局部視場的圖像信息,並且獲得該總視場的圖像信息,並且組合該局部視場的該圖像信息與該總視場的該圖像信息,以生成該總視場的組合圖像信息。
- 一種提供一多孔徑成像裝置的方法,包括:提供一圖像傳感器;以及佈置一光學通道陣列,使得每個光學通道包括一光學器件,其係用於將一總視場的至少一個局部視場投影到該圖像傳感器的一圖像傳感器區域上,並且使得該陣列的一第一光學通道被配置為對該總視場的一第一局 部視場進行成像,使得該陣列的一第二光學通道被配置成對該總視場的一第二局部視場成像,並且使得一第三光通道被配置為對該總視場完全成像。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102017206442.0 | 2017-04-13 | ||
DE102017206442.0A DE102017206442B4 (de) | 2017-04-13 | 2017-04-13 | Vorrichtung zur Abbildung von Teilgesichtsfeldern, Multiaperturabbildungsvorrichtung und Verfahren zum Bereitstellen derselben |
Publications (2)
Publication Number | Publication Date |
---|---|
TW201904266A true TW201904266A (zh) | 2019-01-16 |
TWI687099B TWI687099B (zh) | 2020-03-01 |
Family
ID=62167274
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW107112446A TWI687099B (zh) | 2017-04-13 | 2018-04-11 | 用於成像局部視場的裝置、多孔徑成像裝置及其提供方法 |
Country Status (9)
Country | Link |
---|---|
US (1) | US11457152B2 (zh) |
EP (3) | EP4376404A3 (zh) |
JP (2) | JP6860692B2 (zh) |
KR (1) | KR102230188B1 (zh) |
CN (2) | CN114727009A (zh) |
DE (1) | DE102017206442B4 (zh) |
ES (1) | ES2981966T3 (zh) |
TW (1) | TWI687099B (zh) |
WO (1) | WO2018188815A1 (zh) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7212611B2 (ja) * | 2017-02-27 | 2023-01-25 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 画像配信方法、画像表示方法、画像配信装置及び画像表示装置 |
DE102017206442B4 (de) * | 2017-04-13 | 2021-01-28 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung zur Abbildung von Teilgesichtsfeldern, Multiaperturabbildungsvorrichtung und Verfahren zum Bereitstellen derselben |
JP7095693B2 (ja) * | 2017-05-30 | 2022-07-05 | ソニーグループ株式会社 | 医療用観察システム |
DE102018222861A1 (de) * | 2018-12-21 | 2020-06-25 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung mit einer Multiaperturabbildungsvorrichtung zum Akkumulieren von Bildinformation |
DE102018222865A1 (de) | 2018-12-21 | 2020-06-25 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung mit einer Multiaperturabbildungsvorrichtung zur Erzeugung einer Tiefenkarte |
JP7399989B2 (ja) | 2019-06-06 | 2023-12-18 | フラウンホーファー-ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン | 多チャネル撮像デバイスおよび多開口撮像デバイスを有するデバイス |
DE102020110052A1 (de) * | 2020-04-09 | 2021-10-14 | Hybrid Lidar Systems Ag | Vorrichtung zur erfassung von bilddaten |
EP4147193B1 (en) | 2020-05-05 | 2024-05-08 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Acquiring a digital image of an image content |
US11606517B1 (en) * | 2021-06-07 | 2023-03-14 | Waymo Llc | Enhanced depth of focus cameras using variable apertures and pixel binning |
WO2024118403A1 (en) * | 2022-11-30 | 2024-06-06 | Qualcomm Incorporated | Image sensor with multiple image readout |
Family Cites Families (72)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050084179A1 (en) * | 2003-09-04 | 2005-04-21 | Keith Hanna | Method and apparatus for performing iris recognition from an image |
US20070182812A1 (en) * | 2004-05-19 | 2007-08-09 | Ritchey Kurtis J | Panoramic image-based virtual reality/telepresence audio-visual system and method |
JP4297111B2 (ja) * | 2005-12-14 | 2009-07-15 | ソニー株式会社 | 撮像装置、画像処理方法及びそのプログラム |
WO2008020899A2 (en) | 2006-04-17 | 2008-02-21 | Cdm Optics, Inc. | Arrayed imaging systems and associated methods |
US20080030592A1 (en) * | 2006-08-01 | 2008-02-07 | Eastman Kodak Company | Producing digital image with different resolution portions |
KR100871566B1 (ko) | 2006-12-04 | 2008-12-02 | 삼성전자주식회사 | 이미지 촬상 장치의 손떨림 보상을 위한 장치 및 방법 |
US7643063B2 (en) | 2006-12-29 | 2010-01-05 | The Boeing Company | Dual loop stabilization of video camera images |
US20090122195A1 (en) * | 2007-11-09 | 2009-05-14 | Van Baar Jeroen | System and Method for Combining Image Sequences |
CN102356630B (zh) * | 2009-03-19 | 2016-01-27 | 数字光学公司 | 双传感器照相机 |
AU2009201637B2 (en) * | 2009-04-24 | 2011-08-11 | Canon Kabushiki Kaisha | Processing multi-view digital images |
US9144714B2 (en) | 2009-05-02 | 2015-09-29 | Steven J. Hollinger | Ball with camera for reconnaissance or recreation and network for operating the same |
US20100328471A1 (en) | 2009-06-24 | 2010-12-30 | Justin Boland | Wearable Multi-Channel Camera |
JP5553597B2 (ja) | 2009-12-25 | 2014-07-16 | キヤノン株式会社 | 撮像装置及びその制御方法 |
WO2011093538A1 (en) * | 2010-01-27 | 2011-08-04 | Iris Id | Iris scanning apparatus employing wide-angle camera, for identifying subject, and method thereof |
EP2369382A1 (en) * | 2010-03-22 | 2011-09-28 | Schott Corporation | Rigid multi-directional imaging bundle and imaging assembly incorporating the same |
JP5506504B2 (ja) | 2010-03-31 | 2014-05-28 | キヤノン株式会社 | 撮像装置及び撮像方法 |
US20120098971A1 (en) | 2010-10-22 | 2012-04-26 | Flir Systems, Inc. | Infrared binocular system with dual diopter adjustment |
JP5830662B2 (ja) | 2010-12-09 | 2015-12-09 | パナソニックIpマネジメント株式会社 | 撮像装置 |
US9007432B2 (en) * | 2010-12-16 | 2015-04-14 | The Massachusetts Institute Of Technology | Imaging systems and methods for immersive surveillance |
US10412367B2 (en) | 2011-08-05 | 2019-09-10 | 3D Media Ltd | Multi-lens camera with a single image sensor |
JP2013045032A (ja) * | 2011-08-26 | 2013-03-04 | Fujifilm Corp | 多眼撮像装置 |
EP2582128A3 (en) | 2011-10-12 | 2013-06-19 | Canon Kabushiki Kaisha | Image-capturing device |
JP6004785B2 (ja) | 2012-06-29 | 2016-10-12 | キヤノン株式会社 | 撮像装置、光学機器、撮像システムおよび制御方法 |
US20140114534A1 (en) * | 2012-10-19 | 2014-04-24 | GM Global Technology Operations LLC | Dynamic rearview mirror display features |
US9398264B2 (en) * | 2012-10-19 | 2016-07-19 | Qualcomm Incorporated | Multi-camera system using folded optics |
CN105556944B (zh) * | 2012-11-28 | 2019-03-08 | 核心光电有限公司 | 多孔径成像系统和方法 |
US9591241B2 (en) * | 2012-12-11 | 2017-03-07 | Konica Minolta, Inc. | Compound eye optical system and imaging device using the same |
WO2014091986A1 (ja) | 2012-12-11 | 2014-06-19 | コニカミノルタ株式会社 | 複眼光学系とそれを用いた撮像装置 |
US20140160231A1 (en) * | 2012-12-12 | 2014-06-12 | Daniel C. Middleton | Multi-focal image capture and display |
JP6100089B2 (ja) * | 2013-05-17 | 2017-03-22 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラム |
US9232138B1 (en) | 2013-06-03 | 2016-01-05 | Amazon Technologies, Inc. | Image stabilization techniques |
CN108989648B (zh) * | 2013-08-01 | 2021-01-15 | 核心光电有限公司 | 具有自动聚焦的纤薄多孔径成像系统及其使用方法 |
JP6429440B2 (ja) | 2013-09-18 | 2018-11-28 | キヤノン株式会社 | 撮像装置、その制御方法、および制御プログラム |
US9851527B2 (en) | 2013-10-18 | 2017-12-26 | Light Labs Inc. | Methods and apparatus for capturing and/or combining images |
DE102013222780B3 (de) | 2013-11-08 | 2015-04-16 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturvorrichtung und verfahren zur erfassung eines objektbereichs |
KR20150067608A (ko) * | 2013-12-10 | 2015-06-18 | 한국전자통신연구원 | 시력 보조 기구 착용 여부 및 사용자 움직임에 무관한 시선 정보 획득 방법 |
DE102013226789B4 (de) * | 2013-12-19 | 2017-02-09 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Mehrkanaloptik-Bildaufnahmevorrichtung und Mehrkanaloptik-Bildaufnahmeverfahren |
KR102163045B1 (ko) | 2014-02-17 | 2020-10-08 | 삼성전기주식회사 | 이미지 보정 장치 및 그 방법 |
JP2015185947A (ja) | 2014-03-20 | 2015-10-22 | 株式会社東芝 | 撮像システム |
US9383550B2 (en) | 2014-04-04 | 2016-07-05 | Qualcomm Incorporated | Auto-focus in low-profile folded optics multi-camera system |
US20150373269A1 (en) * | 2014-06-20 | 2015-12-24 | Qualcomm Incorporated | Parallax free thin multi-camera system capable of capturing full wide field of view images |
DE102014213371B3 (de) | 2014-07-09 | 2015-08-06 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung und verfahren zur erfassung eines objektbereichs |
US20160044247A1 (en) * | 2014-08-10 | 2016-02-11 | Corephotonics Ltd. | Zoom dual-aperture camera with folded lens |
US9596411B2 (en) | 2014-08-25 | 2017-03-14 | Apple Inc. | Combined optical and electronic image stabilization |
US9992483B2 (en) * | 2014-09-03 | 2018-06-05 | Intel Corporation | Imaging architecture for depth camera mode with mode switching |
US20160173869A1 (en) * | 2014-12-15 | 2016-06-16 | Nokia Corporation | Multi-Camera System Consisting Of Variably Calibrated Cameras |
JP6436783B2 (ja) * | 2015-01-09 | 2018-12-12 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法、プログラム、および、記憶媒体 |
JP6659086B2 (ja) | 2015-03-16 | 2020-03-04 | キヤノン株式会社 | 像ブレ補正装置、光学機器、撮像装置および制御方法 |
CN104730688B (zh) * | 2015-04-17 | 2017-01-11 | 张家港中贺自动化科技有限公司 | 一种宽视场高分辨率光学系统 |
CN107852467B (zh) * | 2015-08-13 | 2021-01-26 | 核心光电有限公司 | 具有视频支持和切换/无切换动态控制的双孔径变焦摄影机 |
DE102015215845B4 (de) * | 2015-08-19 | 2017-06-22 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung mit kanalindividueller Einstellbarkeit |
DE102015215837A1 (de) * | 2015-08-19 | 2017-02-23 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung, Verfahren zum Herstellen derselben und Abbildungssystem |
DE102015215836B4 (de) | 2015-08-19 | 2017-05-18 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung mit einer reflektierende Facetten aufweisenden Strahlumlenkvorrichtung |
DE102015215833A1 (de) | 2015-08-19 | 2017-02-23 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung mit Optiksubstrat |
DE102015215844B4 (de) | 2015-08-19 | 2017-05-18 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung, tragbare Vorrichtung und Verfahren zum Herstellen einer Multiaperturabbildungsvorrichtung |
DE102015215840B4 (de) | 2015-08-19 | 2017-03-23 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Bereitstellen einer Multiaperturabbildungsvorrichtung |
DE102015215841B4 (de) | 2015-08-19 | 2017-06-01 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung mit einer Multikanalabbildungsvorrichtung und Verfahren zum Herstellen derselben |
DE102015216140A1 (de) * | 2015-08-24 | 2017-03-02 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | 3D-Multiaperturabbildungsvorrichtung |
US10936881B2 (en) * | 2015-09-23 | 2021-03-02 | Datalogic Usa, Inc. | Imaging systems and methods for tracking objects |
ITUB20154043A1 (it) | 2015-09-30 | 2017-03-30 | Datalogic IP Tech Srl | Sistema e metodo di lettura di informazioni codificate |
DE102015220566B4 (de) | 2015-10-21 | 2021-03-18 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung mit einer Multiaperturabbildungsvorrichtung, Verfahren zum Bereitstellen derselben und Verfahren zum Erfassen eines Gesamtgesichtsfeldes |
DE102016200285A1 (de) | 2016-01-13 | 2017-07-13 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Erfassen eines Objektbereichs |
DE102016200287A1 (de) | 2016-01-13 | 2017-07-13 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtungen, Verfahren zum Herstellen derselben und Abbildungssystem |
US11703326B2 (en) * | 2016-02-25 | 2023-07-18 | Kyocera Corporation | Stereo camera apparatus, vehicle, and parallax calculation method |
DE102016204148A1 (de) | 2016-03-14 | 2017-09-14 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Erfassen eines Objektbereichs |
JP2017204674A (ja) * | 2016-05-09 | 2017-11-16 | 株式会社ソニー・インタラクティブエンタテインメント | 撮像装置、ヘッドマウントディスプレイ、情報処理システム、および情報処理方法 |
DE102016208210A1 (de) | 2016-05-12 | 2017-11-16 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | 3d-multiaperturabbildungsvorrichtungen, multiaperturabbildungsvorrichtung, verfahren zum bereitstellen eines ausgangssignals einer 3d-multiaperturabbildungsvorrichtung und verfahren zum erfassen eines gesamtgesichtsfeldes |
US10007854B2 (en) * | 2016-07-07 | 2018-06-26 | Ants Technology (Hk) Limited | Computer vision based driver assistance devices, systems, methods and associated computer executable code |
US9940695B2 (en) * | 2016-08-26 | 2018-04-10 | Multimedia Image Solution Limited | Method for ensuring perfect stitching of a subject's images in a real-site image stitching operation |
US10165194B1 (en) * | 2016-12-16 | 2018-12-25 | Amazon Technologies, Inc. | Multi-sensor camera system |
DE102017204035B3 (de) | 2017-03-10 | 2018-09-13 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Bereitstellen einer Multiaperturabbildungsvorrichtung |
DE102017206442B4 (de) * | 2017-04-13 | 2021-01-28 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung zur Abbildung von Teilgesichtsfeldern, Multiaperturabbildungsvorrichtung und Verfahren zum Bereitstellen derselben |
-
2017
- 2017-04-13 DE DE102017206442.0A patent/DE102017206442B4/de active Active
-
2018
- 2018-04-11 EP EP24166960.5A patent/EP4376404A3/de active Pending
- 2018-04-11 TW TW107112446A patent/TWI687099B/zh active
- 2018-04-11 JP JP2019555889A patent/JP6860692B2/ja active Active
- 2018-04-11 WO PCT/EP2018/025110 patent/WO2018188815A1/de active Search and Examination
- 2018-04-11 EP EP18724780.4A patent/EP3610637B1/de active Active
- 2018-04-11 ES ES18724780T patent/ES2981966T3/es active Active
- 2018-04-11 KR KR1020197033460A patent/KR102230188B1/ko active IP Right Grant
- 2018-04-11 CN CN202210154442.6A patent/CN114727009A/zh active Pending
- 2018-04-11 EP EP24166959.7A patent/EP4369708A3/de active Pending
- 2018-04-11 CN CN201880039912.6A patent/CN110754081B/zh active Active
-
2019
- 2019-09-27 US US16/585,693 patent/US11457152B2/en active Active
-
2021
- 2021-03-26 JP JP2021052628A patent/JP7189992B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
TWI687099B (zh) | 2020-03-01 |
EP3610637B1 (de) | 2024-05-01 |
JP2021103181A (ja) | 2021-07-15 |
EP3610637A1 (de) | 2020-02-19 |
JP6860692B2 (ja) | 2021-04-21 |
EP4369708A2 (de) | 2024-05-15 |
CN110754081A (zh) | 2020-02-04 |
ES2981966T3 (es) | 2024-10-14 |
US20200029023A1 (en) | 2020-01-23 |
JP2020517183A (ja) | 2020-06-11 |
DE102017206442B4 (de) | 2021-01-28 |
EP4369708A3 (de) | 2024-07-24 |
CN114727009A (zh) | 2022-07-08 |
EP4376404A2 (de) | 2024-05-29 |
KR20190138853A (ko) | 2019-12-16 |
EP4376404A3 (de) | 2024-07-24 |
DE102017206442A1 (de) | 2018-10-18 |
KR102230188B1 (ko) | 2021-03-23 |
CN110754081B (zh) | 2022-02-25 |
US11457152B2 (en) | 2022-09-27 |
JP7189992B2 (ja) | 2022-12-14 |
WO2018188815A1 (de) | 2018-10-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI687099B (zh) | 用於成像局部視場的裝置、多孔徑成像裝置及其提供方法 | |
JP5515396B2 (ja) | 撮像装置 | |
JP2015521411A (ja) | πフィルタ群を用いてパターン化されたカメラモジュール | |
US9648305B2 (en) | Stereoscopic imaging apparatus and stereoscopic imaging method | |
JP4764624B2 (ja) | 立体視表示装置及び立体視用画像生成方法 | |
TW201839455A (zh) | 多孔徑成像裝置、成像系統和提供多孔徑成像裝置的方法 | |
US11924395B2 (en) | Device comprising a multi-aperture imaging device for generating a depth map | |
US7586662B2 (en) | Three-dimensional light ray input apparatus | |
JP2014026051A (ja) | 撮像装置、画像処理装置 | |
TWI794571B (zh) | 包含用於累積圖像資訊的多孔徑成像裝置的裝置 | |
US20100103276A1 (en) | Split aperture capture of rangemap for 3d imaging | |
US12007680B2 (en) | Device comprising a multi-aperture imaging device for generating a depth map | |
JP2010231192A (ja) | ステレオ撮像装置 | |
JP6022428B2 (ja) | 画像撮影装置及び画像撮影方法 | |
JP5907668B2 (ja) | 撮像装置及び撮像素子 | |
JP2013110711A (ja) | 画像処理装置および画像処理方法、並びにプログラム | |
US20020008757A1 (en) | Stereoscopic picture image forming apparatus | |
JP6055595B2 (ja) | 立体画像撮影装置および立体画像表示装置 | |
JP2019219594A (ja) | 処理装置、撮像装置、交換レンズ、処理方法およびプログラム | |
JP2017198850A (ja) | 撮像装置及びその調整方法 | |
JP2009186938A (ja) | 立体視用印刷物 |