TW201807998A - 根據多個圖像感測器幀進行高解析度數位攝影的方法和設備 - Google Patents

根據多個圖像感測器幀進行高解析度數位攝影的方法和設備 Download PDF

Info

Publication number
TW201807998A
TW201807998A TW106126514A TW106126514A TW201807998A TW 201807998 A TW201807998 A TW 201807998A TW 106126514 A TW106126514 A TW 106126514A TW 106126514 A TW106126514 A TW 106126514A TW 201807998 A TW201807998 A TW 201807998A
Authority
TW
Taiwan
Prior art keywords
image
deflector
voltage
configuration
light sensor
Prior art date
Application number
TW106126514A
Other languages
English (en)
Other versions
TWI693833B (zh
Inventor
勤 王
剛 陳
大江 楊
Original Assignee
豪威科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 豪威科技股份有限公司 filed Critical 豪威科技股份有限公司
Publication of TW201807998A publication Critical patent/TW201807998A/zh
Application granted granted Critical
Publication of TWI693833B publication Critical patent/TWI693833B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/685Vibration or motion blur correction performed by mechanical compensation
    • H04N23/687Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Color Television Image Signal Generators (AREA)

Abstract

一種相機系統具有鏡頭,該鏡頭通過具有至少一個偏轉器板的偏轉器系統將入射光聚焦到光感測器陣列上。圖像處理器利用第一位置的偏轉器系統來捕獲至少第一圖像並且利用第二位置的偏轉器系統來捕獲第二圖像,以在光感測器陣列上提供第一軸上的焦點偏移,並且固件被配置成根據至少第一和第二圖像來準備增強圖像。一種成像的方法包括:通過具有至少一個偏轉器板的偏轉器系統將入射光聚焦到光感測器陣列上;利用第一位置的偏轉器系統來接收至少第一圖像;利用被配置成在光感測器陣列上提供焦點偏移的偏轉器系統來接收第二圖像;以及根據第一和第二圖像來準備增強圖像。

Description

根據多個圖像感測器幀進行高解析度數位攝影的方法和設備
本發明係有關一種根據多個圖像感測器幀進行高解析度數位攝影的方法和設備。
光感測器陣列積體電路被組織成光感測器單元的陣列,每個光感測器單元具有光敏二極體或光電晶體以及被佈置成在曝光之前對光感測器單元的電容預先充電的電晶體,電容可以是光敏二極體的結電容。光敏二極體或光電晶體一般被佈置成使電容放電,與在光敏二極體或光電晶體上接收的光成比例。光感測器單元也具有被佈置成從電容讀取電荷的電晶體。陣列可以具有一個或多個有缺陷的光感測器單元,或者並不以與陣列的多數其他光敏二極體單元完全相同的方式對應於光的光感測器單元。在生產期間,對光感測器陣列進行測試並且丟棄具有過度缺陷或者不良缺陷或不一致的光感測器單元的那些陣列,因為大型陣列更可能具有有缺陷的單元,陣列越大成本越高。
光感測器陣列通常在光感測器陣列的光敏二極體或光電晶體上形成有顏色濾光件的“拜耳模式(Bayer-pattern)”;通常是在四個單元的巨集單元中。每個巨集單元只可以提供一個完整的三色信號,因此,顏色的固有空間解析度顯著小於陣列的公認圖元計數,因為顏色檢測需要多個光敏二極體或光電晶體單元。在典型的拜耳模式巨集單元中,三個單元各自由不同的顏色濾光件覆蓋,諸如,紅色濾光件、綠色濾光件和藍色濾光件,單元的第四光感測器可以不被覆蓋或者可以用複製其他三個單元中的一個的顏色濾光件進行覆蓋。
在低光度下,諸如夜晚,具有大型光敏二極體和/或長積分時間的光感測器陣列需要捕獲足夠的光子來呈現適當的亮度解析度;然而,高空間解析度圖像通常需要大量的光敏二極體。具有大量大型光敏二極體的圖像感測器比具有少量大型光敏二極體或大量小型光敏二極體的感測器貴得多;它們也比具有較小表面積的感測器更可能有缺陷。
通常,每個感測器陣列的有效表面的一部分被準備用於曝光的每個光敏二極體和讀取所曝光的光敏二極體所需的預先充電和選擇電晶體佔據。其他空間通常被意圖減少相鄰光敏二極體之間的串擾的互連和保護環消耗。如果完全位於光敏二極體之間,那麼圖像中可無法捕獲很好地聚焦於圖像感測器陣列的形狀(甚至是明顯的界限)。
在有些情形下,諸如,基於三腳架的風景和靜物攝影,攝影師希望得到在曝光期間沒有多少(如果有的話)移動的場景的極高解析度的圖像。
為在實施例中,相機系統具有鏡頭,該鏡頭通過具有至少一個偏轉器板的偏轉器系統將入射光聚焦到光感測器陣列上。圖像處理器被配置成利用第一位置的偏轉器系統來捕獲至少第一圖像並且利用第二位置的偏轉器系統來捕獲第二圖像,以在光感測器陣列上提供第一軸上的焦點偏移,並且固件被配置成根據至少第一和第二圖像來準備增強圖像。
在另一實施例中,成像的方法包括:通過具有至少一個偏轉器板的偏轉器系統將入射光聚焦到光感測器陣列上;利用第一位置的偏轉器系統來接收至少第一圖像;利用配置在第二位置的偏轉器系統來接收第二圖像,以在光感測器陣列上提供焦點偏移;以及根據至少第一和第二圖像來準備增強圖像。
提議產生靜止物體的圖像的相機系統,所述圖像的空間解析度比相機的光感測器陣列直接提供的空間解析度高。
相機系統100具有鏡頭102,所述鏡頭將入射光聚焦到光感測器陣列104上;光感測器陣列是具有單元陣列的CMOS積體電路,每個單元具有光敏二極體或光電晶體以及相關聯的預先充電和感測電晶體,諸如數位攝影領域中已知的。數位圖像處理器106進行聯接以讀取光感測器陣列104,圖像處理器106具有存儲器系統108並且適於在存儲於存儲器108中的固件112中的機器可讀指令的控制下從光感測器陣列104中讀取圖像、處理這些圖像,並且將已處理圖像110存儲在存儲器108中。在實施例中,存儲器108是分級的異構型存儲器系統,所述存儲器系統具有高速緩衝存儲器、含有固件112的唯讀存儲器、適合用於臨時圖像116的中間處理和存儲的RAM,以及適合存儲已處理圖像110的可移動“快閃存儲器”存儲卡,諸如,“SD”卡。在替代實施例中,存儲器108具有適合存儲已處理圖像110的固定“快閃存儲器”存儲器以及用於將圖像傳輸到電腦的通訊電路。在另一替代實施例中,相機系統構建到另一電子裝置中,諸如,手機、平板電腦或筆記本電腦,並且存儲器108的適合存儲已處理圖像的那部分是手機、平板電腦或筆記本電腦的存儲器;在此替代實施例中,相機系統的一個或多個其他部分(諸如,圖像處理器106)也可以有兩種用途,作為手機、平板電腦或筆記本電腦的部件。
相機系統具有與至少一個偏轉器致動器118結合操作的圖像偏轉器114,所述偏轉器適合使光感測器陣列104上的圖像在至少一個軸上轉移確定的距離。偏轉器致動器118在相機控制器122的控制下操作,所述相機控制器也適合控制圖像處理器106、光感測器陣列104以及可選的焦點和/或光圈控制器120的操作。相機系統可以具有一個或多個額外的部件,諸如,電池、電池充電感測器、包括“快門”觸發按鈕在內的控制按鈕、閃光燈系統、麥克風和音訊處理電路、諸如可以適合無線或USB通訊的通訊系統,以及其他裝置。
在實施例中,圖像偏轉器114包括至少一個透明板150(圖2),所述透明板放置在由鏡頭102和光感測器陣列104限定的光學系統內並且與光學系統的軸124取向成非垂直角度,在此實施例中,偏轉器致動器118是機電致動器152,所述機電致動器可以是電磁致動器,或者在替代實施例中是壓電致動器,所述機電致動器進行聯接以使偏轉器在光學系統內的至少第一角位置到第二角位置之間機械轉移,所述第二角位置不等於第一角位置。在特定實施例中,機電致動器152直接或通過推杆154聯接到板150。在此實施例中,機電致動器152可以進行聯接以移動偏轉器板150的第一端,偏轉器板150的第二端通過樞軸、鉸鏈或柔性安裝件156錨固到安裝架158,機電致動器152附接到所述安裝架。偏轉器板具有比空氣大的折射率。當偏轉器150處於第一角度160時,由鏡頭聚焦的來自物體的特定點的入射光161聚焦到光感測器陣列170上的第一點162上。當偏轉器150被致動器驅動到第二角度164時,其他條件一樣,來自物體的特定點的入射光161通過板而不同地折射,因為板的第一角度與第二角度之間存在差異,使得光聚焦到光感測器陣列170上的第二點166上,從而使光感測器陣列170上的物體的圖像在陣列的軸上移位。對這個移位元的校準需要調整板角度和機械致動器移位。
應注意,所有附圖中示出的偏轉器114、150、202的角度意圖說明偏轉器位於一定角度;所示的角度遠遠超過實際角度,並且在實施例中,推杆154可以接近豎直。
在圖3所示的替代實施例中,圖像偏轉器是由電光調製(EOM)材料製成的透明板202,諸如,鈮酸鋰、鈦酸鋯酸鑭鉛(PLZT)、鉭酸鋰或者某些聚合物。透明EOM材料板202覆在具有包括透明電導體層的單獨電極的第一和第二相對側上,用作電容器的第一板204和第二板206,而EOM材料用作電容器的電介質。在特定實施例中,透明電容器板204、206由氧化銦錫(ITO)或氧化錫(TO)形成。在此實施例中,偏轉器致動器118是可控電壓源208,所述可控電壓源進行聯接以在電容器的第一板與第二板之間施加第一電壓或第二電壓,所述第一電壓和第二電壓不同。在特定實施例中,第一電壓為零伏。偏轉器與光學系統的鏡頭102和光感測器陣列104之間的軸210設置成特定的預定非垂直角度。相對於施加低電壓的折射率,EOM材料利用所施加的高電壓來改變有效折射率。因此,當電壓源208在電容器的第一板204與第二板206之間提供第一電壓時,來自物體的特定點的入射光212聚焦在圖像感測器陣列216上的第一點214上。當電壓源在電容器的第一板204與第二板206之間提供第二電壓時,板的折射率改變並且來自物體的特定點的入射光212聚焦在圖像感測器陣列216的第二點218上,從而使光感測器陣列216上的物體的圖像在陣列216的軸上移位。通過調整第一電壓和第二電壓來實現對特定移位的校準。
具有單個偏轉器板的實施例可以通過在兩個正交軸上旋轉單個偏轉器板來實現X和Y移位。替代實施例250(圖4)通過使用兩個偏轉器板252、256來實現X和Y移位,所述偏轉器板分別在正交軸上傾斜並且沿著光學系統的鏡頭260與光感測器陣列262之間的光軸253串聯地定位。根據圖4的實施例可以具有獨立的機械致動器,或者如果由電光材料製成,則具有獨立的電子電壓源致動器254、258。
在任何自動對焦之後,利用圖1的系統的兩軸(X和Y)的實施例且使用圖4的光路的圖像採集300(圖5)以在相機控制器122中執行的固件將X和Y軸偏轉器設置302到第一位置開始。隨後將圖像感測器陣列104預先充電並且讀取,以得到304第一圖像並且由在圖像處理器106中執行的固件將它存儲在存儲器108的臨時圖像116部分中。隨後將偏轉器切換到第二位置;在示例性實施例中,將X致動器設置306到第二位置。得到308第二圖像並且將它存儲在臨時圖像116中。隨後將另一偏轉器切換到第二位置,在示例性實施例中,將Y致動器設置310到第二位置,因此X和Y都在第二位置。隨後得到312第三圖像並且將它存儲在臨時圖像116中。隨後將致動器重置314到第一位置,在示例性實施例中,將X致動器返回到第一位置,因此只有Y致動器在第二位置。隨後得到316第四圖像並且將它存儲在臨時圖像116中。隨後由圖像處理器106來處理第四捕獲圖像,以形成增強圖像,所述增強圖像經過壓縮並存儲在存儲器系統108的已處理圖像110區域中。在一些實施例中,省略對第三圖像的捕獲和保存。
在黑白增強320實施例中,偏轉器板經過配置和校準以使光感測器陣列上的聚焦圖像在陣列上偏移光感測器中心到光感測器中心距離的(整數N+二分之一)倍數的距離。在一些實施例中,N可以為零。如果N為非零,那麼在插入圖元之前,執行第二、第三和第四圖像中的圖元資料的對準轉移。通過在第一圖像的每行的圖元之間插入第二圖像的圖元以創建臨時圖像A並且在第四圖像的圖元之間插入第三圖像的圖元以創建臨時圖像B,這些實施例准許來自原始捕獲圖像的已處理圖像中的有效X和Y解析度加倍。臨時圖像B的行隨後插入在臨時圖像A的行之間,以創建可以進行壓縮並作為已處理圖像110存儲的增強解析度圖像。
彩色增強322實施例使用具有拜耳型模式的單元的濾光件,每個單元中具有至少三個原色濾光件。偏轉器板經過配置和校準以使光感測器陣列上的聚焦圖像在陣列上偏移光感測器中心到光感測器中心距離的整數(N)倍的距離。在一些實施例中,N可以是一或更多,如果N大於一,那麼執行圖像的初步對準轉移。假設每個拜耳模式單元350(如在圖6上所見)中的第四濾光件是第一濾光件的複本並且位於第一濾光件的對角線上,那麼通過對在特定圖元處給出第一顏色值的第一和第三捕獲圖像的強度進行平均來匯出增強圖像,其中第二圖像給出第二顏色值並且第四圖像作為第三顏色值。如果第一顏色是綠色,第二顏色是紅色並且第三顏色是藍色,那麼這將給出可以壓縮並存儲為已處理圖像110的一部分的傳統紅綠藍(RGB)三色平面彩色圖元。然而,增強圖像的X中的相鄰圖元從第二和第四捕獲圖像的平均中接收它的第一顏色值,從第一捕獲圖像中接收第二顏色值,從第三捕獲圖像中接收第三顏色值。增強圖像的Y中的相鄰圖元從第二和第四捕獲圖像的平均中接收它的第一顏色值,從第一捕獲圖像中接收第三顏色值,並且從第三捕獲圖像中接收第二顏色值。確定每個圖元的三色平面的替代操作可以被設計為與不同於圖6所示的顏色濾光件的模式一起使用。
很多照片拍攝的是運動物體;上述成像技術依賴於第一圖像的捕獲304與第四圖像的捕獲316之間發生的很少運動。為了避免運動模糊,在實施例中,在生成已處理圖像之前,在圖像上執行邊緣檢測。將這些圖像中的檢測的邊緣位置進行比較,以確定在捕獲第一圖像與捕獲第四圖像之間流逝的時間期間快速移動的區域和沒有移動的區域。在此實施例中,快速移動的區域中上述黑白或彩色圖像增強被抑制,而只在沒有移動的區域中執行所述圖像增強。
應注意,捕獲第一、第二、第三和第四圖像、將這些圖像存儲在臨時圖像116中、邊緣檢測、插入圖像的圖元以及圖像壓縮全部都由執行存儲於存儲器108中的固件112的圖像處理器106執行,並且這些功能在由相機控制器122所指示的拍照時間執行,或者在嵌入手機、平板電腦或膝上型電腦中的實施例中,在由手機、平板電腦或膝上型電腦的處理器指示的時間執行。此外,在一些實施例中,圖像處理器106可以執行額外的功能,諸如,快速移動區域的拜耳模式顏色解析度確定以及自動對焦確定。
特徵的組合
在實施例中,上述特徵可以採用多種方式組合。例如,本文中描述的機電和電光偏轉器可以都與本文中描述的顏色解析度增強方法一起使用,或者與本文中描述的單色圖元交織解析度增強方法一起使用。發明人預期的具體實施例是:
一種標記為A的相機系統,其包括:光路,其具有鏡頭,鏡頭被配置成將入射光聚焦到光感測器陣列上;偏轉器系統,其包括在鏡頭與光感測器陣列之間以非垂直角度設置的至少一個偏轉器板;致動裝置,其聯接到偏轉器板並且可在命令下操作;以及圖像處理器,其進行聯接以從光感測器陣列接收圖像、將圖像存儲在存儲器系統的臨時存儲區域中、處理來自存儲器系統的臨時存儲單元的圖像,並且將已處理圖像存儲在存儲器系統的已處理圖像區域中,這些都是在來自存儲器系統的固件的指導下進行的。相機系統被配置成利用第一位置的偏轉器系統來捕獲至少第一圖像並且利用第二位置的偏轉器系統來捕獲第二圖像,以在光感測器陣列上提供第一圖像與第二圖像之間的第一偏移軸上的焦點偏移,並且固件被配置成根據至少第一和第二圖像準備增強圖像。
一種標記為AA的相機系統,其包括標記為A的相機系統,其中偏轉器系統可配置成在光感測器陣列上提供垂直於第一偏移軸的第二軸上的焦點偏移,其中相機系統被配置成利用被配置成提供第二軸上的焦點偏移的偏轉器系統來捕獲至少第三圖像,並且其中固件被配置成根據至少第一、第二和第三圖像來準備增強圖像。
一種標記為AB的相機系統,其包括標記為A或AA的相機系統,其中偏轉器系統被配置成使得第二圖像從第一圖像偏移大於或等於一的整數個圖元,並且其中增強圖像的每個圖元接收來自第一、第二、第三和第四圖像中的至少兩個圖像的強度作為顏色資訊。
一種標記為AC的相機系統,其包括標記為A或AA的相機系統,其中偏轉器系統被配置成使得第二圖像從第一圖像偏移整數個圖元加上二分之一的圖元,並且其中固件被配置成通過將第一、第二、第三和第四圖像中的至少一個圖像的圖元插入第一、第二、第三和第四圖像中的另一圖像來準備增強圖像。
一種標記為AD的相機系統,其包括標記為A、AA、AB或AC的相機系統,其中致動裝置包括機電致動器,機電致動器進行聯接以在第一位置與第二位置之間移動偏轉器板,第一位置對應於第一配置。
一種標記為AE的相機系統,其包括標記為A、AA、AB或AC的相機系統,其中致動裝置是電壓源,電壓源進行聯接以將電壓提供到偏轉器板上的透明導電電極,其中偏轉器板由電光材料形成,其中致動裝置在偏轉器系統的第一配置下在透明導電電極之間施加第一電壓,並且在偏轉器系統的第二配置下在透明導電電極之間施加第二電壓。
一種標記為B的成像方法,其包括:將入射光聚焦到光感測器陣列上;聚焦的入射光穿過偏轉器系統,偏轉器系統包括設置在鏡頭與光感測器陣列之間的至少一個偏轉器板以及聯接到偏轉器板的致動裝置;利用第一配置下的偏轉器系統來接收至少第一圖像;利用第二配置下的偏轉器系統來接收第二圖像,以在光感測器陣列上提供第一軸上的焦點偏移;以及根據至少第一和第二圖像來準備增強圖像。
一種標記為BA的成像方法,其包括標記為B的方法,其中偏轉器系統可配置成在光感測器陣列上提供垂直於第一偏移軸的第二軸上的焦點偏移,並且方法還包括利用被配置成提供第二軸上的焦點偏移的偏轉器系統來捕獲第三圖像。
一種標記為BB的成像方法,其包括標記為B或BA的方法,其中偏轉器系統被配置成使得第二圖像從第一圖像偏移大於或等於一的整數個圖元,並且其中增強圖像的每個圖元接收來自第一、第二和第三圖像中的至少兩個圖像的強度作為顏色資訊。
一種標記為BC的成像方法,其包括標記為B或BA的方法,其中偏轉器系統被配置成使得第二圖像從第一圖像偏移整數個圖元加上二分之一的圖元,並且其中固件被配置成通過將第一、第二和第三圖像中的至少一個圖像的圖元插入第一、第二和第三圖像中的另一圖像來準備增強圖像。
一種標記為BD的成像方法,其包括標記為B、BA、BB或BC的方法,其中致動裝置包括機電致動器,機電致動器進行聯接以在第一位置到第二位置之間移動偏轉器板,第一位置對應於第一配置。
一種標記為BE的成像方法,其包括標記為B、BA、BB或BC的方法,其中致動裝置是電壓源,電壓源進行聯接以將電壓提供到偏轉器板上的透明導電電極,其中偏轉器板由電光材料形成,其中致動裝置在偏轉器系統的第一配置下在透明導電電極之間施加第一電壓,並且在偏轉器系統的第二配置下在透明導電電極之間施加第二電壓。
應注意,以上描述中含有或附圖中示出的主題應被解釋為說明性的,而不是限制性的。所附請求項意圖涵蓋本文中描述的一般和具體特徵,以及本方法和系統的範圍的所有表述。
100‧‧‧相機系統
102、260‧‧‧鏡頭
104、170、262‧‧‧光感測器陣列
106‧‧‧圖像處理器
108‧‧‧存儲器
110‧‧‧已處理圖像
111‧‧‧通訊
112‧‧‧固件
116‧‧‧臨時圖像
114‧‧‧偏轉器
118‧‧‧偏轉器致動器
120‧‧‧焦點和/或光圈控制器
122‧‧‧相機控制器
124、210‧‧‧軸
150、202‧‧‧透明板
152‧‧‧機電致動器
154‧‧‧推杆
156‧‧‧樞軸、鉸鏈或柔性安裝件
158‧‧‧安裝架
160‧‧‧第一角度
161、212‧‧‧入射光
162、214‧‧‧第一點
164‧‧‧第二角度
166、218‧‧‧第二點
204‧‧‧第一板
206‧‧‧第二板
20‧‧‧電壓源8
216‧‧‧陣列
252、256‧‧‧偏轉器板
253‧‧‧光軸
254、258‧‧‧致動器
300‧‧‧圖像採集
302~322‧‧‧步驟
350‧‧‧拜耳模式單元
圖1是實施例中的相機系統的框圖。
圖2是適合用在實施例中的機電圖像偏轉裝置的示意圖。
圖3是示出適合用在替代實施例中的電光圖像偏轉裝置的示意圖。
圖4是示出圖2和圖3所示的類型的兩個圖像偏轉裝置的示意圖,所述圖像偏轉裝置串聯地放置在相機的光路中,以提供光感測器陣列的兩個軸上的偏轉。
圖5是示出圖1的相機系統的操作的流程圖。
圖6是拜耳模式光感測器的說明,其中R表示陣列的光電晶體或光敏二極體上的紅色濾光件、B表示陣列的光電晶體或光敏二極體上的藍色濾光件並且G表示陣列的光電晶體或光敏二極體上的綠色濾光件。
100‧‧‧相機系統
102‧‧‧鏡頭
104‧‧‧光感測器陣列
106‧‧‧圖像處理器
108‧‧‧存儲器
110‧‧‧已處理圖像
111‧‧‧通訊
112‧‧‧固件
116‧‧‧臨時圖像
114‧‧‧偏轉器
118‧‧‧偏轉器致動器
120‧‧‧焦點和/或光圈控制器
122‧‧‧相機控制器
124‧‧‧軸

Claims (16)

  1. 一種相機系統,包括: 一鏡頭,配置成將入射光聚焦到一光感測器陣列上; 一偏轉器系統,包括在該鏡頭與該光感測器陣列之間以非垂直角度設置的至少一個偏轉器板; 一致動裝置,聯接到該偏轉器板並且能夠在相機控制器的命令下進行操作; 一圖像處理器,進行聯接以在來自該存儲器系統的一固件的指導下從該光感測器陣列接收圖像、將圖像存儲在存儲器系統的臨時存儲區域中、處理來自該存儲器系統的臨時存儲區域的圖像,並且將已處理圖像保存在該存儲器系統的已處理圖像區域中; 其中該相機系統組態成利用一第一配置的該偏轉器系統來捕獲至少第一圖像並且利用一第二配置的該偏轉器系統來捕獲一第二圖像,以在該光感測器陣列上提供該第一圖像與該第二圖像之間在一第一偏移軸上的一焦點偏移,以及 其中該固件配置成根據至少該第一圖像和該第二圖像來準備一增強圖像。
  2. 根據請求項1所述的相機系統,其中該偏轉器系統能夠配置成在該光感測器陣列上提供與該第一偏移軸垂直的一第二軸上的焦點偏移,其中該相機系統組態成利用配置成提供該第二軸上的該焦點偏移的該偏轉器系統來捕獲至少第三圖像,並且其中該固件配置成根據至少該第一圖像、該第二圖像和該第三圖像來準備該增強圖像。
  3. 根據請求項2所述的相機系統,其中該偏轉器系統組態成使得該第二圖像從該第一圖像偏移大於或等於一的整數個圖元,並且其中該增強圖像的每個圖元接收來自該第一圖像、該第二圖像、該第三圖像和第四圖像中的至少兩個圖像的強度作為顏色資訊。
  4. 根據請求項3所述的相機系統,其中該致動裝置包括一機電致動器,該機電致動器進行聯接以在一第一位置到一第二位置之間移動該偏轉器板,該第一位置對應於該第一配置。
  5. 根據請求項3所述的相機系統,其中該致動裝置是一電壓源,該電壓源進行聯接以將電壓提供到該偏轉器板上的一透明導電電極,其中該偏轉器板由電光材料形成,其中該致動裝置在該偏轉器系統的該第一配置中在該透明導電電極之間施加第一電壓,並且在該偏轉器系統的該第二配置中在該透明導電電極之間施加第二電壓。
  6. 根據請求項2所述的相機系統,其中該偏轉器系統組態成使得該第二圖像從該第一圖像偏移整數個圖元加上二分之一圖元,並且其中該固件被配置成通過將該第一圖像、第二圖像、第三圖像和第四圖像中的至少一個圖像的圖元插入該第一圖像、第二圖像、第三圖像和第四圖像中的另一圖像來準備該增強圖像。
  7. 根據請求項6所述的相機系統,其中該致動裝置包括一機電致動器,該機電致動器進行聯接以在一第一位置到一第二位置之間移動該偏轉器板,該第一位置對應於該第一配置。
  8. 根據請求項3所述的相機系統,其中該致動裝置是一電壓源,該電壓源進行聯接以將電壓提供到該偏轉器板上的一透明導電電極,其中該偏轉器板由電光材料形成,其中該致動裝置在該偏轉器系統的該第一配置中在該透明導電電極之間施加第一電壓,並且在該偏轉器系統的該第二配置中在該透明導電電極之間施加第二電壓。
  9. 一種成像的方法,其包括: 將入射光聚焦到一光感測器陣列上; 聚焦的入射光穿過一偏轉器系統,該偏轉器系統包括設置在一鏡頭與該光感測器陣列之間的至少一個偏轉器板,該偏轉器系統包括聯接到該偏轉器板的一致動裝置; 利用一第一配置的該偏轉器系統來接收至少第一圖像; 利用一第二配置的該偏轉器系統來接收一第二圖像,以在該光感測器陣列上提供第一軸上的一焦點偏移;以及根據至少該第一圖像和該第二圖像來準備一增強圖像。
  10. 根據請求項9所述的方法,其中該偏轉器系統能夠配置成在該光感測器陣列上提供與該第一偏移軸垂直的一第二軸上的一焦點偏移,並且該方法還包括利用配置成提供該第二軸上的該焦點偏移的該偏轉器系統來捕獲一第三圖像。
  11. 根據請求項10所述的方法,其中該偏轉器系統組態成使得該第二圖像從該第一圖像偏移大於或等於一的整數個圖元,並且其中該增強圖像的每個圖元接收來自該第一圖像、該第二圖像和該第三圖像中的至少兩個圖像的強度作為顏色資訊。
  12. 根據請求項11所述的方法,其中該致動裝置包括一機電致動器,該機電致動器進行聯接以在一第一位置到一第二位置之間移動該偏轉器板,該第一位置對應於該第一配置。
  13. 根據請求項11所述的方法,其中該致動裝置是一電壓源,該電壓源進行聯接以將電壓提供到該偏轉器板上的一透明導電電極,其中該偏轉器板由電光材料形成,其中該致動裝置在該偏轉器系統的該第一配置中在該透明導電電極之間施加第一電壓,並且在該偏轉器系統的該第二配置中在該透明導電電極之間施加第二電壓。
  14. 根據請求項10所述的方法,其中該偏轉器系統組態成使得該第二圖像從該第一圖像偏移整數個圖元加上二分之一圖元,並且其中該固件被配置成通過將該第一圖像、該第二圖像和該第三圖像中的至少一個圖像的圖元插入該第一圖像、該第二圖像、該第三圖像和第四圖像中的另一圖像來準備該增強圖像。
  15. 根據請求項14所述的方法,其中該致動裝置包括一機電致動器,該機電致動器進行聯接以在一第一位置到一第二位置之間移動該偏轉器板。
  16. 根據請求項14所述的方法,其中該致動裝置是一電壓源,該電壓源進行聯接以將電壓提供到該偏轉器板上的一透明導電電極,並且其中該偏轉器板由電光材料形成。
TW106126514A 2016-08-29 2017-08-07 根據多個圖像感測器幀進行高解析度數位攝影的方法和設備 TWI693833B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/249,787 2016-08-29
US15/249,787 US10104285B2 (en) 2016-08-29 2016-08-29 Method and apparatus for high resolution digital photography from multiple image sensor frames

Publications (2)

Publication Number Publication Date
TW201807998A true TW201807998A (zh) 2018-03-01
TWI693833B TWI693833B (zh) 2020-05-11

Family

ID=61244078

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106126514A TWI693833B (zh) 2016-08-29 2017-08-07 根據多個圖像感測器幀進行高解析度數位攝影的方法和設備

Country Status (3)

Country Link
US (1) US10104285B2 (zh)
CN (1) CN107786859B (zh)
TW (1) TWI693833B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110164384B (zh) * 2018-09-29 2022-06-10 京东方科技集团股份有限公司 一种亮度补偿方法及装置
CN113422899A (zh) * 2021-07-30 2021-09-21 深圳市汇顶科技股份有限公司 一种获取超分辨率图像的装置及方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09116911A (ja) * 1995-10-20 1997-05-02 Canon Inc 撮像システム
US8072574B2 (en) * 2008-02-25 2011-12-06 LensVector Tunable liquid lens with reduced aberration
WO2010059966A2 (en) * 2008-11-21 2010-05-27 Panavision International, L.P. Imaging system with a dynamic optical low-pass filter
CN102798959B (zh) 2012-08-20 2014-10-29 爱佩仪光电技术(深圳)有限公司 一种可实现镜头可控倾斜的音圈马达结构
US9288395B2 (en) 2012-11-08 2016-03-15 Apple Inc. Super-resolution based on optical image stabilization
US9057896B1 (en) * 2012-12-20 2015-06-16 Amazon Technologies, Inc. Orientation variable polarization

Also Published As

Publication number Publication date
US20180063424A1 (en) 2018-03-01
CN107786859A (zh) 2018-03-09
TWI693833B (zh) 2020-05-11
US10104285B2 (en) 2018-10-16
CN107786859B (zh) 2020-04-17

Similar Documents

Publication Publication Date Title
JP6709632B2 (ja) イメージセンサ、及びイメージセンサを含む撮像装置
KR100927360B1 (ko) 이미지 센서 및 디지털 카메라
JP4797606B2 (ja) 撮像装置
US20090051984A1 (en) Image sensor having checkerboard pattern
RU2490715C1 (ru) Устройство захвата изображения
US9648221B2 (en) Autofocus system using phase difference data for electronic device and electronic device using the same
KR101880635B1 (ko) 촬상장치 및 촬상방법
US10566358B2 (en) Image sensor and image capturing apparatus
TW201038061A (en) Extended depth of field for image sensor
TW200903792A (en) Image sensor
JP5809390B2 (ja) 測距・測光装置及び撮像装置
JP2007201915A (ja) 平面カメラユニット
WO2015159727A1 (ja) 焦点検出装置、電子機器
TWI693833B (zh) 根據多個圖像感測器幀進行高解析度數位攝影的方法和設備
WO2013018471A1 (ja) 撮像装置
US8078049B2 (en) Imaging apparatus
JP2006303995A (ja) 固体撮像素子及び撮像装置
JP2003018445A (ja) 画像撮像装置
JP2014165778A (ja) 固体撮像素子、撮像装置及び焦点検出装置
JP2006094263A (ja) 撮像装置
JP2009070912A (ja) 固体撮像素子及び撮像装置
WO2023125629A1 (zh) 图像传感器、曝光控制方法、摄像模组和电子设备
US11122196B2 (en) Image processing apparatus
JP2010176071A (ja) 撮像装置、撮像機器システム及び撮影レンズ
US20100194673A1 (en) Device and a method for an image sensor and a method for manufacturing an image sensor