TW201638620A - 鏡頭模組陣列、影像感測裝置與數位縮放影像融合方法 - Google Patents

鏡頭模組陣列、影像感測裝置與數位縮放影像融合方法 Download PDF

Info

Publication number
TW201638620A
TW201638620A TW104124309A TW104124309A TW201638620A TW 201638620 A TW201638620 A TW 201638620A TW 104124309 A TW104124309 A TW 104124309A TW 104124309 A TW104124309 A TW 104124309A TW 201638620 A TW201638620 A TW 201638620A
Authority
TW
Taiwan
Prior art keywords
image
angle
lens module
monochrome
color
Prior art date
Application number
TW104124309A
Other languages
English (en)
Other versions
TWI599809B (zh
Inventor
周宏隆
曾逸鴻
Original Assignee
聚晶半導體股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 聚晶半導體股份有限公司 filed Critical 聚晶半導體股份有限公司
Priority to US14/943,038 priority Critical patent/US9743007B2/en
Publication of TW201638620A publication Critical patent/TW201638620A/zh
Application granted granted Critical
Publication of TWI599809B publication Critical patent/TWI599809B/zh

Links

Landscapes

  • Studio Devices (AREA)

Abstract

一種鏡頭模組陣列,用以安裝於一可攜式裝置上。鏡頭模組陣列包括一廣角單色鏡頭模組、一窄角單色鏡頭模組以及兩個彩色鏡頭模組。廣角單色鏡頭模組、窄角單色鏡頭模組與彩色鏡頭模組安裝於可攜式裝置上時,廣角單色鏡頭模組、窄角單色鏡頭模組與彩色鏡頭模組分別位於一四邊形的四個頂點,且彩色鏡頭模組位於相對的兩個頂點。

Description

鏡頭模組陣列、影像感測裝置與數位縮放影像融合方法
本發明是有關於一種鏡頭模組陣列,且特別是有關於一種具有四個鏡頭模組的鏡頭模組陣列、影像感測裝置與數位縮放影像融合方法。
隨著科技的發展,各式各樣的智慧型電子裝置,例如平板電腦以及智慧型手機等,已成為現代人不可或缺的工具。其中,高階款的智慧型電子裝置所搭載的相機鏡頭拍攝之影像品質,已經與傳統消費型相機不相上下,甚至可以取而代之。少數高階款智慧型電子裝置搭載之相機鏡頭更具有接近數位單眼的畫素和畫質,甚至搭載雙鏡頭並具有拍攝三維影像的功能。
以搭載雙鏡頭的上述電子裝置而言,常見的應用是利用雙鏡頭之一廣角鏡頭(wide-angle lens)拍攝廣角影像,並且利用另一遠攝鏡頭(telephoto lens)拍攝窄角影像,再依據放大倍率選擇廣角影像或是窄角影像為標的影像,進行單張標的影像的數位放大而模擬光學變焦功能。然而,影像經過數位放大後,往往無法保留影像的細節,而放大倍率越高,影像越模糊失真。在影像持續縮放的過程中,若標的影像須更替為廣角影像或是窄角影像時,影像畫面會產生不順暢或是跳躍的現象。
本發明提供一種鏡頭模組陣列、影像感測裝置與數位縮放影像融合方法,用以解決傳統雙鏡頭模組無法兼顧影像品質與尺寸輕薄的問題。
本發明的鏡頭模組陣列用以安裝於一可攜式裝置上。鏡頭模組陣列包括一廣角單色(mono)鏡頭模組、一窄角單色鏡頭模組以及兩個彩色鏡頭模組。廣角單色鏡頭模組、窄角單色鏡頭模組與彩色鏡頭模組安裝於可攜式裝置上時,廣角單色鏡頭模組、窄角單色鏡頭模組與彩色鏡頭模組分別位於一四邊形的四個頂點,且彩色鏡頭模組位於相對的兩個頂點。
本發明的影像感測裝置包括一影像處理模組、一廣角單色鏡頭模組、一窄角單色鏡頭模組以及兩個彩色鏡頭模組。廣角單色鏡頭模組、窄角單色鏡頭模組與彩色鏡頭模組安裝於可攜式裝置上時,廣角單色鏡頭模組、窄角單色鏡頭模組與彩色鏡頭模組分別位於一四邊形的四個頂點,且彩色鏡頭模組位於相對的兩個頂點。影像處理模組用於將廣角單色鏡頭模組、窄角單色鏡頭模組與彩色鏡頭模組所擷取的影像進行數位縮放,並融合為一合成影像。
本發明的數位縮放影像融合方法包括下列步驟。以一廣角單色鏡頭模組、一窄角單色鏡頭模組與兩個彩色鏡頭模組分別擷取影像。其中,廣角單色鏡頭模組、窄角單色鏡頭模組與兩個彩色鏡頭模組分別位於一四邊形之四個頂點,且兩個彩色鏡頭模組位於相對的兩個頂點。接著,整合廣角單色鏡頭模組、窄角單色鏡頭模組與兩個彩色鏡頭模組所擷取的影像為一合成影像。
在本發明的數位縮放影像融合方法的一實施例中,整合出合成影像的方法包括下列步驟。依據縮放比例,融合廣角單色鏡頭模組與窄角單色鏡頭模組所擷取的單色影像為一數位縮放單色影像。接著,將數位縮放單色影像與兩個彩色鏡頭模組所擷取的彩色影像融合為符合縮放比例的彩色的合成影像。
在本發明的數位縮放影像融合方法的一實施例中,將數位縮放單色影像與彩色鏡頭模組所擷取的彩色影像融合的方法包括下列步驟。分別對數位縮放單色影像與彩色鏡頭模組所擷取的彩色影像進行像素位置校準。接著,以數位縮放單色影像為基礎,將彩色鏡頭模組所擷取的彩色影像中的色彩資訊填入數位縮放單色影像中對應位置的像素,以獲得合成影像。
在本發明的一實施例中,上述的廣角單色鏡頭模組的最大可攝角度介於70度至80度之間,窄角單色鏡頭模組的最大可攝角度介於35度至40度之間。
在本發明的一實施例中,上述的彩色鏡頭模組的最大可攝角度介於70度至80度之間。
在本發明的一實施例中,上述的四邊形可為正方形、矩形、菱形、鳶形等。
在本發明的一實施例中,上述的廣角單色鏡頭模組的畫素量與彩色鏡頭模組的畫素量相同。
在本發明的一實施例中,上述的影像處理模組包括一儲存單元以及一處理單元,儲存單元耦接處理單元。
在本發明的一實施例中,上述的處理單元包括一影像輸入模組、一影像前處理模組、一特徵點分析模組、一影像縮放變形模組、一影像融合模組以及一著色模組。
基於上述,本發明的鏡頭模組陣列、影像感測裝置與數位縮放影像融合方法中採用廣角單色鏡頭模組與窄角單色鏡頭模組,因此在相同面積的感測元件的條件下可以模擬較為窄角的光學變焦效果,並避免整體厚度的增加。
為讓本發明的上述特徵和優點能更明顯易懂,下文特舉實施例,並配合所附圖式作詳細說明如下。
本發明的部份實施例接下來將會配合附圖來詳細描述,以下的描述所引用的元件符號,當不同附圖出現相同的元件符號將視為相同或相似的元件。這些實施例只是本發明的一部份,並未揭示所有本發明的可實施方式。更確切的說,這些實施例只是本發明的專利申請範圍中的裝置的範例。
圖1是本發明一實施例的鏡頭模組陣列安裝於可攜式裝置上的示意圖,但此僅是為了方便說明,並不用以限制本發明。其中,鏡頭模組陣列是以表示四個鏡頭模組的實體位置的方式呈現,而其餘部分則以功能方塊示意。
請參照圖1,本實施例的鏡頭模組陣列100安裝於可攜式裝置50上。在本實施例中,可攜式裝置50例如是數位相機、單眼相機、數位攝影機、網路攝影機或是其他具有影像擷取功能的智慧型手機、平板電腦、個人數位助理、頭戴式顯示器等電子裝置,本發明不以此為限。
鏡頭模組陣列100包括一廣角單色鏡頭模組110、一窄角單色鏡頭模組120以及兩個彩色鏡頭模組130A與130B。廣角單色鏡頭模組110、窄角單色鏡頭模組120與彩色鏡頭模組130A與130B安裝於可攜式裝置50上後,廣角單色鏡頭模組110、窄角單色鏡頭模組120與彩色鏡頭模組130A與130B分別位於一四邊形S10的四個頂點S12處,且彩色鏡頭模組130A與130B位於相對的兩個頂點S12。在此,廣角單色鏡頭模組110的最大可攝角度大於窄角單色鏡頭模組120的最大可攝角度。另一方面來說,窄角單色鏡頭模組120也可稱為遠攝鏡頭模組。
廣角單色鏡頭模組110的所有畫素都是用於感應並記錄進入該畫素的光線的總亮度的強弱,窄角單色鏡頭模組120的所有畫素也都是用於感應並記錄進入該畫素的光線的總亮度的強弱。在一實施例中,廣角單色鏡頭模組110與窄角單色鏡頭模組120可以是黑白鏡頭模組,也就是不分波長範圍地記錄光線的強弱。反之,彩色鏡頭模組130A與130B的所有畫素則包括了用於感應並記錄多種波長範圍的光線的強弱的畫素,例如部分畫素用於感應並記錄紅光的強弱,部分畫素用於感應並記錄綠光的強弱,部分畫素則用於感應並記錄藍光的強弱。當然,彩色鏡頭模組130A與130B的畫素所用於感應並記錄的光線不侷限於區分成紅光、綠光與藍光,也可以是其他組合,只要適合提供全彩的影像記錄。
相較於習知技術的雙鏡頭模組採用廣角彩色鏡頭模組與於窄角彩色鏡頭模組,本實施例的廣角單色鏡頭模組110與窄角單色鏡頭模組120的解析度更高,因為畫素不需分組感應不同色光。另一方面,單色鏡頭模組較彩色鏡頭模組少了彩色濾光膜,因此進光量也較大,即使在低光源的環境下也能有效抑制雜訊產生,提高訊噪比而提供清晰的影像。也因為如此,在相同的感光元件的面積下,窄角單色鏡頭模組120可以較薄的尺寸提供與習知的窄角彩色鏡頭模組相同的解析度,藉以降低本實施例的鏡頭模組陣列100的整體厚度。
以下說明本實施例的鏡頭模組陣列100的其他選擇性設計,但本發明不侷限於此。在本實施例中,上述的廣角單色鏡頭模組110的最大可攝角度介於70度至80度之間,窄角單色鏡頭模組120的最大可攝角度介於35度至40度之間。最大可攝角度是指鏡頭模組所能拍攝的影像在水平方向上最左側的方位與最右側的方位的夾角。在具有相同的畫素時,廣角單色鏡頭模組110所擷取的影像的最大可攝角度較大而可以擷取較寬廣的影像,窄角單色鏡頭模組120所擷取的影像的最大可攝角度較小而可以提供較多的影像細節。整合廣角單色鏡頭模組110與窄角單色鏡頭模組120所擷取的影像,就可提供數位變焦的功能以模擬光學變焦。稍後,將簡述如何進行影像整合。另外,兩個彩色鏡頭模組130A與130B的作用是提供彩色資訊給整合後的影像。若要能提供最寬廣的影像所需的彩色資訊,則可選擇讓彩色鏡頭模組130A與130B的最大可攝角度與廣角單色鏡頭模組110的最大可攝角度相同,例如介於70度至80度之間。再者,彩色鏡頭模組130A與130B的畫素量與廣角單色鏡頭模組110的畫素量也可以相同。另外,為了使四個鏡頭模組的影像的整合較為容易,上述的四邊形可以是正方形、矩形、菱形、鳶形等。
廣角單色鏡頭模組110、窄角單色鏡頭模組120與彩色鏡頭模組130A與130B分別都可包括感光元件,用以感測光線強度而產生影像。所述的感光元件例如是電荷耦合元件(Charge Coupled Device,CCD)或互補性氧化金屬半導體(Complementary Metal-Oxide Semiconductor,CMOS)元件,本發明不在此設限。廣角單色鏡頭模組110、窄角單色鏡頭模組120與彩色鏡頭模組130A與130B用以擷取拍攝物的影像,其中拍攝物可以為一特定物體或是一場景。
接著請繼續參照圖1,可攜式裝置50可以包括影像處理模組51。影像處理模組51用於將廣角單色鏡頭模組110、窄角單色鏡頭模組120與彩色鏡頭模組130A與130B所擷取的影像整合為一合成影像。本實施例的影像處理模組51包括儲存單元52以及處理單元54。儲存單元52例如是任意型式的固定式或可移動式隨機存取記憶體(Random Access Memory,RAM)、唯讀記憶體(Read-Only Memory,ROM)、快閃記憶體(Flash Memory)、硬碟或其他類似裝置或這些裝置的組合。儲存單元52耦接於鏡頭模組陣列100,以儲存廣角單色鏡頭模組110、窄角單色鏡頭模組120與彩色鏡頭模組130A與130B所擷取的影像。
處理單元54可以是中央處理單元(Central Processing Unit,CPU),或是其他可程式化之一般用途或特殊用途的微處理器(Microprocessor)、數位訊號處理器(Digital Signal Processor,DSP)、可程式化控制器(Programmable Controller)、特殊應用積體電路(Application Specific Integrated Circuits,ASIC)、可程式化邏輯裝置(Programmable Logic Device,PLD)或其他類似裝置或這些裝置的組合。
儲存單元52耦接鏡頭模組陣列100以及處理單元54,其可利用廣角單色鏡頭模組110與窄角單色鏡頭模組120所擷取的影像取得拍攝物的完整深度資訊。處理單元54例如包括影像輸入模組541、影像前處理模組542、特徵點分析模組543、影像縮放變形模組544、影像融合模組545以及著色模組546,其可載入儲存單元52,從而執行數位變焦的功能。以下即列舉實施例說明針對可攜式裝置50執行數位變焦方法的詳細步驟。
圖2為本發明一實施例的數位縮放影像融合方法的流程圖,在此以應用圖1的電子裝置進行此數位縮放影像融合為例。請同時參照圖1以及圖2,首先,可攜式裝置50的儲存單元52控制鏡頭模組陣列100的廣角單色鏡頭模組110、窄角單色鏡頭模組120與彩色鏡頭模組130A與130B分別擷取一場景的影像,以產生四個影像並輸入至影像輸入模組541,步驟S110。在本實施例中,廣角單色鏡頭模組110所擷取的單色主影像,其影像品質較低,但涵蓋較大的視角範圍。窄角單色鏡頭模組120所擷取的單色副影像,其影像品質較高,但涵蓋較小的視角範圍,用以在後續步驟中做為數位變焦的輔助。
接著,整合廣角單色鏡頭模組110、窄角單色鏡頭模組120與彩色鏡頭模組所擷取130A與130B的影像為一合成影像。舉例而言,影像前處理模組542針對單色主影像、單色副影像以及兩個彩色影像進行影像校正處理,以產生單色主校正影像、單色副校正影像以及兩個彩色校正影像。詳言之,影像前處理模組542將會針對廣角單色鏡頭模組110、窄角單色鏡頭模組120與彩色鏡頭模組130A與130B所分別造成四個影像的亮度、色彩與幾何位置上的偏差進行校正。
在本實施例中,影像前處理模組542將自儲存單元52取得關聯於廣角單色鏡頭模組110、窄角單色鏡頭模組120與彩色鏡頭模組130A與130B的多個校正參數。校正參數可以是鏡頭模組陣列100的內部參數(intrinsic parameters)與外部參數(extrinsic parameters)等用以進行影像校正(image rectification)的參數。內部參數可用來描述鏡頭模組陣列100座標(camera coordinates)與影像座標(image coordinates)之間的轉換關係,也就是利用針孔(pinhole)成像原理將鏡頭模組陣列100座標投影到成像平面(projective plane)。舉例而言,內部參數包括焦距(focal length)、影像中心(image center)、主軸點(principal point)以及鏡頭扭曲變形係數(distortion coefficients)等參數。外部參數則是用來描述世界座標系統(world coordinate system)與鏡頭模組陣列100的相機座標系統(camera coordinate system)之間的轉換關係。舉例而言,可攜式裝置50在三維座標中的位置與拍攝方向,包括旋轉矩陣(rotation matrix)與位移向量(translation vector)等與可攜式裝置50擺放位置與拍攝方向相關的參數。此外,校正參數亦可以是亮度補償(illumination compensation)或是色彩修正(color correction)等相關參數,本發明不在此設限。影像前處理模組542將根據上述校正參數來校正單色主影像、單色副影像以及兩個彩色影像進行影像校正。
接著,特徵點分析模組543針對單色主校正影像以及單色副校正影像進行特徵點偵測,藉以偵測出單色主校正影像以及單色副校正影像的重疊區域,進而取得該重疊區域的像素位移特性以及像素深度資訊。詳言之,特徵點分析模組543可利用邊緣偵測(edge detection)、轉角偵測(corner detection)、區域偵測(blob detection)或其它特徵點偵測演算法(feature-points detection algorithm)來偵測單色主校正影像以及單色副校正影像的多個特徵點。接著,特徵點分析模組543將自所述特徵點中找出相同特性特徵點的對應組合,以及分別於單色主校正影像以及單色副校正影像中區分出重疊的區域。特徵點分析模組543可針對廣角單色鏡頭模組110與窄角單色鏡頭模組120的重疊區域的各個像素進行景深程度的計算,以得到重疊區域的深度資訊,並且以例如是深度圖(depth map)的形式記錄。
接著,根據使用者所輸入的指令而進行影像的縮放變形,也就是切換縮放倍率,步驟S120。當縮放倍率介於1與單色主副影像倍率之間時,影像縮放變形模組544根據縮放倍率、各所述像素位移特性以及各所述像素深度資訊,分別針對單色主校正影像、單色副校正影像以及兩張彩色校正影像進行影像縮放處理(image zooming)與影像形變處理(image warping),據以產生單色主形變影像、單色副形變影像以及兩張彩色形變影像。在此的「單色主副影像倍率」為單色主校正影像與單色副校正影像之間的大小倍率,其為固定且事先已知,而縮放倍率為使用者欲針對所要觀看或輸出的主要畫面的大小變化幅度,其可以為使用者設定,也可以是可攜式裝置50的預設值。影像縮放變形模組544可利用兩個重疊區域的相對位移、偏斜以及深度特性,並且依據縮放倍率,分別對單色主校正影像、單色副校正影像以及兩張彩色校正影像進行影像縮放處理與影像形變處理,以產生符合使用者的縮放倍率需求並且重疊區域視角與外觀雷同的影像。此外,影像形變的幅度關聯於兩個重疊區域的深度資訊。
之後,影像融合模組545根據縮放倍率,針對單色主形變影像與單色副形變影像的重疊區域進行影像融合處理(image blending),以產生單色數位變焦影像,步驟S130。詳言之,影像融合模組545可根據縮放倍率,設定單色主形變影像以及單色副形變影像的重疊區域進行影像融合時所需的權重,在此分別定義為「第一權重集(First weight-set )」以及「第二權重集(Second weight-set)」。接著,影像融合模組545將以第一權重集與第二權重集來加權兩個重疊區域的像素灰階之混合比例,針對兩個重疊區域進行影像融合處理。在此將經過影像融合處理後所產生的結果定義為「融合重疊區域」。之後,影像融合模組545將以融合重疊區域取代原單色主形變影像中的重疊區域,從而產生高品質的數位變焦單色影像標的。
在另一實施例中,當縮放倍率小於1時,則僅以單色主校正影像以及兩張彩色校正影像進行數位縮小處理以及後續的影像形變處理,以產生單色主形變影像以及兩張彩色形變影像,並且直接設定此單色主形變影像為數位變焦單色影像標的。另一方面,當縮放倍率大於單色主副影像倍率時,則僅以單色副校正影像以及兩張彩色校正影像進行數位放大處理以及後續的影像形變處理,以產生單色副形變影像以及兩張彩色形變影像,並且直接設定此單色副形變影像為數位變焦單色影像標的。
接著,著色模組546先分別針對兩個彩色形變影像與融合後之數位變焦單色影像標的,進行像素位置校準(Pixel Alignment)。然後,以數位變焦單色影像標的為基礎,將各單色像素所欠缺的色彩資訊,從兩個彩色形變影像中找到對應位置的像素色彩,進行融合並填入該單色像素位置,以獲得一合成影像,例如是數位變焦彩色影像,步驟S140。最後,輸出數位變焦彩色影像,例如是以可攜式裝置50的螢幕(未繪示)顯示前述各步驟完成後最終所獲得的數位變焦彩色影像,步驟S150。
綜上所述,本發明採用廣角單色鏡頭模組與窄角單色鏡頭模組所擷取的影像作為數位變焦影像的基礎,因此影像解析度與訊噪比都可大幅地提高。同時,由於解析度的提高,在相同面積的感測元件的條件下,可以較薄的窄角單色鏡頭模組取得高倍的光學變焦效果。利用彩色鏡頭模組取得所需的色彩資訊,可於著色模組中,使數位變焦影像彩色化。此外,本發明採用兩個彩色鏡頭模組並位在單色主副鏡頭之兩側,於著色模組進行中,可解決或大幅改善傳統雙鏡頭模組常遭遇的遮避(Occlusion)問題。
雖然本發明已以實施例揭露如上,然其並非用以限定本發明,任何所屬技術領域中具有通常知識者,在不脫離本發明的精神和範圍內,當可作些許的更動與潤飾,故本發明的保護範圍當視後附的申請專利範圍所界定者為準。
50‧‧‧可攜式裝置
51‧‧‧影像處理模組
52‧‧‧儲存單元
54‧‧‧處理單元
541‧‧‧影像輸入模組
542‧‧‧影像前處理模組
543‧‧‧特徵點分析模組
544‧‧‧影像縮放變形模組
545‧‧‧影像融合模組
546‧‧‧著色模組
100‧‧‧鏡頭模組陣列
110‧‧‧廣角單色鏡頭模組
120‧‧‧窄角單色鏡頭模組
130A、130B‧‧‧彩色鏡頭模組
S10‧‧‧四邊形
S12‧‧‧頂點
S110-S150‧‧‧步驟
圖1是本發明一實施例的鏡頭模組陣列安裝於可攜式裝置上的示意圖。 圖2為本發明一實施例的數位縮放影像融合方法的流程圖。
50‧‧‧可攜式裝置
51‧‧‧影像處理模組
52‧‧‧儲存單元
54‧‧‧處理單元
541‧‧‧影像輸入模組
542‧‧‧影像前處理模組
543‧‧‧特徵點分析模組
544‧‧‧影像縮放變形模組
545‧‧‧影像融合模組
546‧‧‧著色模組
100‧‧‧鏡頭模組陣列
110‧‧‧廣角單色鏡頭模組
120‧‧‧窄角單色鏡頭模組
130A、130B‧‧‧彩色鏡頭模組
S10‧‧‧四邊形
S12‧‧‧頂點

Claims (15)

  1. 一種鏡頭模組陣列,用以安裝於一可攜式裝置上,該鏡頭模組陣列包括: 一廣角單色鏡頭模組; 一窄角單色鏡頭模組;以及 兩個彩色鏡頭模組, 其中,該廣角單色鏡頭模組、該窄角單色鏡頭模組與該些彩色鏡頭模組安裝於該可攜式裝置上時,分別位於一四邊形之四個頂點,且該些彩色鏡頭模組位於相對的兩個頂點。
  2. 如申請專利範圍第1項所述的鏡頭模組陣列,其中該廣角單色鏡頭模組的最大可攝角度介於70度至80度之間,該窄角單色鏡頭模組的最大可攝角度介於35度至40度之間。
  3. 如申請專利範圍第2項所述的鏡頭模組陣列,其中該些彩色鏡頭模組的最大可攝角度介於70度至80度之間。
  4. 如申請專利範圍第1項所述的鏡頭模組陣列,其中該四邊形可為正方形、矩形、菱形或鳶形。
  5. 如申請專利範圍第1項所述的鏡頭模組陣列,其中該廣角單色鏡頭模組的畫素量與該些彩色鏡頭模組的畫素量相同。
  6. 一種影像感測裝置,包括: 一影像處理模組; 一廣角單色鏡頭模組; 一窄角單色鏡頭模組;以及 兩個彩色鏡頭模組, 其中,該廣角單色鏡頭模組、該窄角單色鏡頭模組與該些彩色鏡頭模組安裝於一可攜式裝置上時,分別位於一四邊形之四個頂點,且該些彩色鏡頭模組位於相對的兩個頂點,該影像處理模組用於將該廣角單色鏡頭模組、該窄角單色鏡頭模組與該些彩色鏡頭模組所擷取的影像整合為一合成影像。
  7. 如申請專利範圍第6項所述的影像感測裝置,其中該廣角單色鏡頭模組的最大可攝角度介於70度至80度之間,該窄角單色鏡頭模組的最大可攝角度介於35度至40度之間。
  8. 如申請專利範圍第7項所述的影像感測裝置,其中該些彩色鏡頭模組的最大可攝角度介於70度至80度之間。
  9. 如申請專利範圍第6項所述的影像感測裝置,其中該四邊形可為正方形、矩形、菱形或鳶形。
  10. 如申請專利範圍第6項所述的影像感測裝置,其中該廣角單色鏡頭模組的畫素量與該些彩色鏡頭模組的畫素量相同。
  11. 如申請專利範圍第6項所述的影像感測裝置,其中該影像處理模組包括一儲存單元以及一處理單元,該儲存單元耦接該處理單元。
  12. 如申請專利範圍第11項所述的影像感測裝置,其中該處理單元包括一影像輸入模組、一影像前處理模組、一特徵點分析模組、一影像縮放變形模組、一影像融合模組以及一著色模組。
  13. 一種數位縮放影像融合方法,包括: 以一廣角單色鏡頭模組、一窄角單色鏡頭模組與兩個彩色鏡頭模組分別擷取影像,其中該廣角單色鏡頭模組、該窄角單色鏡頭模組與該些彩色鏡頭模組分別位於一四邊形之四個頂點,且該些彩色鏡頭模組位於相對的兩個頂點;以及 整合該廣角單色鏡頭模組、該窄角單色鏡頭模組與該些彩色鏡頭模組所擷取的影像為一合成影像。
  14. 如申請專利範圍第13項所述的數位縮放影像融合方法,其中整合出該合成影像的方法包括: 依據一縮放比例,融合該廣角單色鏡頭模組與該窄角單色鏡頭模組所擷取的單色影像為一數位縮放單色影像;以及 將該數位縮放單色影像與該些彩色鏡頭模組所擷取的彩色影像融合為符合該縮放比例的彩色的該合成影像。
  15. 如申請專利範圍第14項所述的數位縮放影像融合方法,其中將該數位縮放單色影像與該些彩色鏡頭模組所擷取的彩色影像融合的方法包括: 分別對該數位縮放單色影像與該些彩色鏡頭模組所擷取的彩色影像進行像素位置校準;以及 以該數位縮放單色影像為基礎,將該些彩色鏡頭模組所擷取的彩色影像中的色彩資訊填入該數位縮放單色影像中對應位置的像素,以獲得該合成影像。
TW104124309A 2015-04-23 2015-07-28 鏡頭模組陣列、影像感測裝置與數位縮放影像融合方法 TWI599809B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US14/943,038 US9743007B2 (en) 2015-04-23 2015-11-17 Lens module array, image sensing device and fusing method for digital zoomed images

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US201562151435P 2015-04-23 2015-04-23

Publications (2)

Publication Number Publication Date
TW201638620A true TW201638620A (zh) 2016-11-01
TWI599809B TWI599809B (zh) 2017-09-21

Family

ID=57419729

Family Applications (1)

Application Number Title Priority Date Filing Date
TW104124309A TWI599809B (zh) 2015-04-23 2015-07-28 鏡頭模組陣列、影像感測裝置與數位縮放影像融合方法

Country Status (2)

Country Link
CN (1) CN106067937A (zh)
TW (1) TWI599809B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI581211B (zh) * 2016-11-18 2017-05-01 財團法人工業技術研究院 影像融合裝置及其方法

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102204596B1 (ko) * 2017-06-02 2021-01-19 삼성전자주식회사 프로세서, 이를 포함하는 이미지 프로세싱 장치 및 이미지 프로세싱 방법
CN109923850B (zh) * 2017-07-07 2020-09-11 华为技术有限公司 一种图像捕捉装置及方法
CN108600652B (zh) * 2018-05-08 2021-01-15 重庆邮电大学 多摄像机综合图像采集设备及其控制方法
CN108377325A (zh) * 2018-05-21 2018-08-07 Oppo广东移动通信有限公司 拍摄装置、电子设备及图像获取方法
CN112104796B (zh) * 2019-06-18 2023-10-13 Oppo广东移动通信有限公司 图像处理方法和装置、电子设备、计算机可读存储介质

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1480716A (zh) * 2003-06-13 2004-03-10 北京雷波泰克信息技术有限公司 快速多目标红外实时图像温度自动跟踪监测系统
CN1544990A (zh) * 2003-11-12 2004-11-10 浙江大学 四镜头分色成像的超薄手机成像方法
TWM348034U (en) * 2008-06-20 2009-01-01 Appro Technology Inc Automobile monitoring device with long and short lens
CN201331749Y (zh) * 2008-08-29 2009-10-21 广东威创视讯科技股份有限公司 一种具有颜色和大小识别功能的触摸装置
CN101668115A (zh) * 2008-09-03 2010-03-10 中国科学院自动化研究所 一种多镜头多分辨率摄像机
CN102959941B (zh) * 2010-07-02 2015-11-25 索尼电脑娱乐公司 信息处理系统、信息处理装置及信息处理方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI581211B (zh) * 2016-11-18 2017-05-01 財團法人工業技術研究院 影像融合裝置及其方法

Also Published As

Publication number Publication date
CN106067937A (zh) 2016-11-02
TWI599809B (zh) 2017-09-21

Similar Documents

Publication Publication Date Title
TWI554103B (zh) 影像擷取裝置及其數位變焦方法
JP6767543B2 (ja) 異なる種類の撮像装置を有するモノリシックカメラアレイを用いた画像の撮像および処理
TWI599809B (zh) 鏡頭模組陣列、影像感測裝置與數位縮放影像融合方法
CN108600576B (zh) 图像处理装置、方法和系统以及计算机可读记录介质
US9264610B2 (en) Capturing and processing of images including occlusions captured by heterogeneous camera arrays
JP5971207B2 (ja) 画像調整装置、画像調整方法およびプログラム
US20140347509A1 (en) Capturing and Processing of Images Including Occlusions Captured by Arrays of Luma and Chroma Cameras
JP6812862B2 (ja) 画像処理システム、撮像装置、画像処理方法及びプログラム
JP6951917B2 (ja) 撮像装置
WO2013027504A1 (ja) 撮像装置
WO2019082820A1 (ja) カメラシステム
JP6222205B2 (ja) 画像処理装置
US9743007B2 (en) Lens module array, image sensing device and fusing method for digital zoomed images
JP6299116B2 (ja) 撮像装置、撮像方法および記録媒体
JP2015046051A (ja) 画像処理装置、画像処理方法、プログラムおよび撮像システム
JP6079838B2 (ja) 画像処理装置、プログラム、画像処理方法および撮像システム
JP6439845B2 (ja) 画像処理装置
JP5399986B2 (ja) 撮像装置、画像処理方法
TW202405548A (zh) 使用獨立運動校正之全景影像處理方法
JP2015060111A (ja) 撮像装置、撮像システム、撮像装置の制御方法、プログラム、および、記憶媒体