TW201544890A - 手持式電子裝置、圖像擷取裝置及其圖像擷取方法 - Google Patents

手持式電子裝置、圖像擷取裝置及其圖像擷取方法 Download PDF

Info

Publication number
TW201544890A
TW201544890A TW104101089A TW104101089A TW201544890A TW 201544890 A TW201544890 A TW 201544890A TW 104101089 A TW104101089 A TW 104101089A TW 104101089 A TW104101089 A TW 104101089A TW 201544890 A TW201544890 A TW 201544890A
Authority
TW
Taiwan
Prior art keywords
image
depth
camera
remote
field
Prior art date
Application number
TW104101089A
Other languages
English (en)
Other versions
TWI627487B (zh
Inventor
Yu-Chun Peng
Wei-Feng Chien
Gor-Don Horng
Original Assignee
Htc Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Htc Corp filed Critical Htc Corp
Publication of TW201544890A publication Critical patent/TW201544890A/zh
Application granted granted Critical
Publication of TWI627487B publication Critical patent/TWI627487B/zh

Links

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00—Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/25—Image signal generators using stereoscopic image cameras using two or more image sensors with different characteristics other than in their location or field of view, e.g. having different resolutions or colour pickup characteristics; using image signals from one sensor to control the characteristics of another sensor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88—Lidar systems specially adapted for specific applications
    • G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
    • G01S17/894—3D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0081—Depth or disparity estimation from stereoscopic image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

本發明提供電子裝置、圖像擷取裝置及其圖像擷取方法。所述圖像擷取裝置包含主要相機、遠距離相機、景深相機和處理單元。所述主要相機用於擷取主要圖像，所述遠距離相機用於擷取遠距離圖像，且所述景深相機用於擷取景深圖像。所述處理單元耦接到所述主要相機、所述遠距離相機和所述景深相機。所述處理單元用於：組合所述主要圖像和所述遠距離圖像以獲得經縮放的圖像；以及基於所述主要圖像、所述遠距離圖像和所述景深圖像而產生對應於所述經縮放的圖像的景深圖。

Description

手持式電子裝置、圖像擷取裝置及其圖像擷取方法
本發明是有關於一種圖像擷取裝置及其圖像擷取方法，且特別是有關於一種用於獲得縮放圖像的景深圖的圖像擷取裝置及其圖像擷取方法。
隨著電子技術的進步，手持式電子裝置已成為日常生活中的重要工具。手持式電子裝置通常設有圖像擷取裝置，其中圖像擷取裝置現為手持式電子裝置的標準設備。
為了提高手持式電子裝置中的圖像擷取裝置的效率，需要所擷取的圖像的更多顯示功能。舉例來說，這是為了在手持式電子裝置上行圖像縮放的動作。也就是說，為了以良好的圖像品質處理圖像的縮放動作，還需要對應於經縮放的圖像的精確的景深圖。
本發明提供一種手持式電子裝置及其圖像擷取裝置以及圖像擷取裝置的圖像擷取方法，有效獲得縮放圖像的景深圖。
本發明的圖像擷取裝置包括主要相機、遠距離相機、景深相機以及處理單元。主要相機用於擷取主要圖像。遠距離相機用於擷取遠距離圖像。景深相機用於擷取景深圖像。處理單元耦接到主要相機、遠距離相機和景深相機，用於：組合主要圖像和遠距離圖像以獲得經縮放的圖像；以及，基於所述主要圖像、所述遠距離圖像和景深圖像而產生對應於經縮放的圖像的景深圖。
本發明提供一種手持式電子裝置，包含外殼、主要相機、遠距離相機、景深相機和處理單元。外殼具有前側和後側。主要相機用於擷取主要圖像，其中，主要相機安裝在外殼中且設置在後側上。遠距離相機用於擷取遠距離圖像，其中，遠距離相機安裝在外殼中且設置在後側上。景深相機用於擷取景深圖像，其中景深相機安裝在外殼中且設置在後側上。處理單元耦接到主要相機、遠距離相機和景深相機，且用以組合主要圖像和遠距離圖像以獲得經縮放的圖像，並基於主要圖像、遠距離圖像和景深圖像而產生對應於經縮放的圖像的景深圖。
本發明提供一種圖像擷取方法，且所述方法的步驟包含：分別擷取主要圖像、遠距離圖像和景深圖像；組合主要圖像和遠距離圖像以獲得經縮放的圖像；以及基於主要圖像、遠距離圖像和景深圖像而產生對應於經縮放的圖像的景深圖。
基於上述，在本發明中，藉由提供主要相機和遠距離相機以獲得經縮放的圖像，並提供景深相機以獲得景深圖。基於分別由主要相機、遠距離相機和景深相機獲得的主要圖像、遠距離圖像和景深圖像而獲得對應於經縮放的圖像的所述景深圖。如此一來，景深圖可精確地被獲得，並使圖像擷取裝置可針對經縮放的圖像進行優質的影像處理動作。
為讓本發明的上述特徵和優點能更明顯易懂，下文特舉實施例，並配合所附圖式作詳細說明如下。
51‧‧‧圖像擷取裝置
52‧‧‧圖像擷取裝置
100‧‧‧手持式電子裝置
101‧‧‧後側
102‧‧‧前側
111‧‧‧主要相機
112‧‧‧遠距離相機
113‧‧‧景深相機
211‧‧‧主要相機/第一相機
212‧‧‧遠距離相機/第二相機
213‧‧‧景深相機/第三相機
501‧‧‧主要相機
502‧‧‧遠距離相機
503‧‧‧景深相機
504‧‧‧控制器
510‧‧‧處理單元
511‧‧‧影像處理單元
512‧‧‧縮放引擎
513‧‧‧深度引擎
515‧‧‧介面單元
520‧‧‧處理單元
521‧‧‧應用處理器
522‧‧‧外部圖像信號處理器
611‧‧‧主要相機
612‧‧‧遠距離相機
613‧‧‧景深相機
621‧‧‧主要相機
622‧‧‧遠距離相機
623‧‧‧景深相機
5211‧‧‧內部影像處理器
5212‧‧‧內部影像處理器
CIM1‧‧‧主要圖像
CIM2‧‧‧遠距離圖像
CIM3‧‧‧景深圖像
D1‧‧‧距離
D2‧‧‧距離
IDI‧‧‧景深圖
MB‧‧‧外殼
OBJ1‧‧‧物體
OBJ2‧‧‧物體
PMS1‧‧‧經處理的主要圖像
PMS2‧‧‧經處理的遠距離圖像
PMS3‧‧‧經處理的景深圖像
S710~S730‧‧‧步驟
W2‧‧‧FOV
W1‧‧‧FOV
ZF‧‧‧縮放因數
ZIM‧‧‧經縮放的圖像
圖1為根據本申請案的實施例的手持式電子裝置100的結構圖。
圖2為根據本申請案的實施例的手持式電子裝置的圖像擷取裝置的結構圖。
圖3說明根據本申請案的實施例的用於獲得景深圖的方法。
圖4說明根據本申請案的實施例的主要相機和遠距離相機的視場(FOV)。
圖5A、5C及5D為根據本申請案的多個實施例的圖像擷取裝置的方塊圖。
圖5B為根據本申請案的另一實施例的圖像擷取裝置的框圖。
圖6為根據本申請案的實施例的相機的佈置。
圖7為根據本申請案的實施例的圖像擷取方法的步驟的流程圖。
圖8為根據本申請案的實施例的獲得景深圖的獲得方式的步驟流程圖。
請參看圖1，圖1為根據本申請案的實施例的手持式電子裝置100的結構圖。手持式電子裝置100具有外殼MB。外殼MB具有前側102和後側101，且主要相機111、遠距離相機112和景深相機113安裝在外殼MB中，且設置在後側101上。手持式電子裝置100可為智慧型電話。
主要相機111鄰近於遠距離相機112，且遠距離相機112鄰近於景深相機113。在圖1中，遠距離相機112設置在主要相機111與景深相機113之間，且主要相機111、遠距離相機112和景深相機113可佈置在一條直線上。
處理單元設置在手持式電子裝置100中。處理單元耦接到主要相機111、遠距離相機112和景深相機113。主要相機111、遠距離相機112和景深相機113可分別用於擷取主要圖像、遠距離圖像和景深圖像。處理單元可包含縮放引擎，其用於對分別由主要相機111和遠距離相機112獲得的第一圖像和第二圖像進行操作。處理單元可還包括深度引擎，其用於根據由景深相機113擷取的第三圖像和主要圖像與遠距離圖像中的至少一者而獲得景 深圖。
此外，主要相機111、遠距離相機112和景深相機113可經配置以同步地進行拍攝以擷取主要圖像、遠距離圖像和景深圖像。或者，主要相機111、遠距離相機112和景深相機113可經配置以非同步地進行拍攝以擷取主要圖像、遠距離圖像和景深圖像。
處理單元可通過縮放操作而產生經縮放的圖像。手持式電子裝置100的控制器可根據經縮放的圖像和景深圖而產生輸出圖像。
參看圖2，圖2為根據本申請案的實施例的手持式電子裝置的圖像擷取裝置的結構圖。在圖2中，主要相機211、遠距離相機212和景深相機213設置在電子裝置的表面上。主要相機211與景深相機213之間的距離D1小於遠距離相機212與景深相機213之間的距離D2。主要相機211和遠距離相機212分別提供主要圖像和遠距離圖像以用於縮放操作。
請參看圖4，圖4說明根據本申請案的實施例的主要相機和遠距離相機的視場(FOV)。此處請注意，主要相機211的有效焦距小於遠距離相機212的有效焦距，且遠距離相機212的FOV W2的面積小於主要相機211的FOV W1。且，FOV W1覆蓋FOV W2，且FOV W1和FOV W2的幾何中心不重疊。此外，景深相機213的有效焦距可小於主要相機211的有效焦距，且景深相機213的FOV大於FOV W1和FOV W2且景深相機213的FOV可覆蓋FOV W1和FOV W2。
當在手持式電子裝置中執行縮放操作(放大)時，可根據分別由主要相機211和遠距離相機212擷取的第一圖像和第二圖像由處理單元進行內插運算。此外，主要相機211和遠距離相機212需要相互接近，且主要相機211和遠距離相機212可組合在同一機體上，或可為分開的模組且由機械夾具組合。
在圖2中，景深相機213用於獲得景深圖。處理單元可使用景深相機213的圖像以及由主要相機211和遠距離相機212中的至少一者獲得的圖像中的一者。舉例來說，對於具有近距離的物體來說，景深相機213和主要相機211的圖像用於計算景深圖。另一方面，對於具有遠距離的物體來說，景深相機213和遠距離相機212的圖像用於計算景深圖。
處理單元可選擇相機211和212中的至少一者以根據縮放因數來進行景深圖計算。縮放因數可由用戶設置，且如果縮放因數小於第一閾值，那麼處理單元可選擇主要相機211和景深相機213。相比之下，如果縮放因數大於第二閾值，那麼處理單元可選擇遠距離相機212和景深相機213。其中，第一閾值不大於第二閾值。
如果第一閾值不同於(小於)第二閾值，且當縮放因數介於第一閾值與第二閾值之間時，處理單元可選擇主要相機211與遠距離相機212兩者的圖像，以與景深相機213的圖像一起計算景深圖。
另一方面，處理單元可通過比較景深圖像和主要圖像而 計算短距離像差資訊，且通過比較景深圖像和遠距離圖像而計算長距離像差資訊。此外，處理單元選擇性地採用短距離像差資訊或長距離像差資訊以產生景深圖。
關於縮放操作，處理單元接收縮放因數，且基於縮放因數而裁剪主要圖像以獲得經裁剪的主要圖像。接著，處理單元通過參考遠距離圖像來增強經裁剪的主要圖像以獲得經縮放的圖像。
請參看圖3，圖3說明根據本申請案的實施例的用於獲得景深圖的方法。通過不同縮放因素，如果物體OBJ1具有近物距，那麼景深相機213和主要相機211的圖像用於景深圖計算。如果物體OBJ2具有遠物距，那麼景深相機213和遠距離相機212的圖像用於景深圖計算。這是因為主要相機211與景深相機213之間的距離小於遠距離相機212與景深相機213之間的距離。也就是說，根據具有較大距離的遠距離相機212和景深相機213，可精確地獲得景深圖。可對應地獲得具有高性能的輸出圖像。
簡單地說，如果物體的圖像深度小於20釐米，那麼主要相機211和景深相機213可用於計算圖像深度，且如果物體的圖像深度介於20釐米與2米之間，那麼遠距離相機212與景深相機213可用於計算圖像深度。
詳細地說，關於景深圖，處理單元經配置以在主要圖像、遠距離圖像和景深圖像中搜索目標物體，且計算在景深圖像和主要圖像上的目標物體之間所存在的短距離像差。此外，處理單元 計算景深圖像和遠距離圖像上的目標物體之間所存在的長距離像差，且基於短距離像差或長距離像差而估計對應於目標物體與圖像擷取裝置之間的距離的物距。可基於所估計的物距來產生景深圖。此處請注意，如果對焦因數設置在第一閾值內，那麼處理單元基於短距離像差來估計物距。且，如果對焦因數設置在第二閾值之外，那麼處理單元基於長距離像差來估計物距。第一閾值和第二閾值可由圖像擷取裝置的設計師來確定。
實際上，圖像中存在許多物體，且物體的物距可不同。處理單元可在主要圖像、遠距離圖像和景深圖像中搜索多個目標物體，且計算景深圖像與主要圖像之間所存在的短距離像差。此外，處理單元可計算景深圖像與遠距離圖像之間所存在的長距離像差，基於短距離像差和長距離像差而估計對應於多個目標物體與圖像擷取裝置之間的距離的第一組物距，且基於長距離像差而估計對應於多個目標物體與圖像擷取裝置之間的距離的第二組物距。處理單元可自第一組物距和第二組物距進行選擇以獲得一組優化的物距。
此處，處理單元可將景深圖像與經縮放的圖像兩者轉變為亮度色差(YUV)格式，且根據具有YUV格式的景深圖像和經縮放的圖像而計算景深圖。
在本申請案的一些實施例中，尤其對於具有中等圖像深度的物體來說，主要相機211、遠距離相機212和景深相機213全部用於景深圖計算。
此處，應注意，主要相機、遠距離相機和景深相機的解析度可為相同的。
請參看圖5A、5C及5D，圖5A、5C及5D為根據本申請案的多個實施例的圖像擷取裝置的方塊圖。圖像擷取裝置51包含主要相機501、遠距離相機502、景深相機503、處理單元510和控制器504。處理單元510耦接到主要相機501、遠距離相機502和景深相機503。主要相機501與景深相機503之間的距離小於遠距離相機502與景深相機503之間的距離。主要相機501、遠距離相機502和景深相機503分別擷取主要圖像CIM1、遠距離圖像CIM2和景深圖像CIM3。處理單元510接收縮放因數ZF，且處理單元510根據縮放因數ZF而對分別由主要相機501和遠距離相機502獲得的圖像CIM1和CIM2進行縮放操作以獲得經縮放的圖像ZIM。
處理單元510包含影像處理單元511、介面單元515、縮放引擎512和深度引擎513。影像處理單元511耦接到主要相機501、遠距離相機502和景深相機503且接收分別由主要相機501、遠距離相機502和景深相機503產生的主要圖像CIM1、遠距離圖像CIM2和景深圖像CIM3。影像處理單元511對主要圖像CIM1、遠距離圖像CIM2和景深圖像CIM3的信號進行信號處理，且分別產生經處理的主要圖像PMS1、經處理的遠距離圖像PMS2和經處理的景深圖像PMS3。
介面單元515耦接到影像處理單元511，且接收經處理的 主要圖像PMS1和經處理的遠距離圖像PMS2以及縮放因數ZF。介面單元515根據縮放因數ZF而將經處理的主要圖像PMS1和經處理的遠距離圖像PMS2中的一者傳送到深度引擎513。詳細地說，如果縮放因數ZF大於閾值，那麼介面單元515可將第一經處理的圖像信號PMS1傳送到深度引擎513，且如果縮放因數ZF小於閾值，那麼介面單元515可將第二經處理的圖像信號PMS2傳送到深度引擎513。
另一方面，介面單元515還將經處理的主要圖像PMS1和經處理的遠距離圖像PMS2傳送到縮放引擎512。縮放引擎512根據縮放因數ZF而對經處理的主要圖像PMS1和經處理的遠距離圖像PMS2進行縮放操作(例如，放大操作)以產生經縮放的圖像ZIM。
縮放引擎512經配置以通過交錯遠距離圖像和主要圖像而產生經縮放的圖像。
深度引擎513接收經處理的主要圖像PMS1和經處理的遠距離圖像PMS2中的一者、經處理的景深圖像信號PMS3和縮放因數ZF。如果經處理的主要圖像PMS1傳送到深度引擎513，那麼深度引擎513根據經處理的主要圖像PMS1和經處理的景深圖像PMS3而計算景深圖IDI。相比之下，如果經處理的遠距離圖像PMS2傳送到深度引擎513，那麼深度引擎513根據經處理的遠距離圖像PMS2和經處理的景深圖像PMS3而計算景深圖IDI。
當然，在一些實施例中，介面單元515可根據縮放因數 ZF而傳送經處理的主要圖像PMS1與經處理的遠距離圖像PMS2兩者。深度引擎513可根據經處理的主要圖像PMS1、經處理的遠距離圖像PMS2和經處理的景深圖像PMS3而獲得景深圖IDI。
詳細地說，深度引擎513可經配置以基於經縮放的圖像ZIM與景深圖像PMS3之間的縮放像差而計算來自縮放引擎512的經縮放的圖像ZIM的至少一個區域的物距，且基於所計算的物距而產生景深圖(請參照圖5C)。此外，深度引擎513可經配置以基於主要圖像PMS1和遠距離圖像PMS2中的至少一者與景深圖像PMS3之間的縮放像差而計算主要圖像PMS1和遠距離圖像PMS2中的至少一者的至少一個區域的物距(請參照圖5A)，且基於所計算的物距而產生景深圖。另一方面，深度引擎513可還經配置以基於主要圖像PMS1與景深圖像PMS3之間的縮放像差而計算主要圖像PMS1的至少一個區域的第一物距，且基於遠距離圖像PMS2與景深圖像PMS3之間的縮放像差而計算遠距離圖像PMS2的至少一個區域的第二物距，深度引擎513還經配置以基於第一物距和第二物距而產生景深圖(請參照圖5D)。
也就是說，深度引擎513可根據景深圖像PMS3以及主要圖像PMS1、遠距離圖像PMS2和經縮放的圖像ZIM中的至少一者而獲得景深圖。景深圖是通過景深圖像PMS3以及主要圖像PMS1、遠距離圖像PMS2和經縮放的圖像ZIM中的任何一個或一個以上圖像而獲得的，如此可獲得最佳景深圖。
控制器504耦接到縮放引擎單元512和深度引擎513。控 制器504接收經縮放的圖像ZIM和景深圖IDI，且根據經縮放的圖像ZIM和景深圖IDI而產生輸出圖像OI。
請參看圖5B，圖5B為根據本申請案的另一實施例的圖像擷取裝置的框圖。在圖5B中，圖像擷取裝置52包含主要相機501、遠距離相機502、景深相機503和處理單元520。處理單元520包含應用處理器521和外部圖像信號處理器522。應用處理器521包含兩個內部影像處理器5211和5212。內部影像處理器5211和5212分別連接到主要相機501和遠距離相機502，且用於分別接收主要圖像CIM1和遠距離圖像CIM2。內部影像處理器5211和5212分別對主要圖像CIM1和遠距離圖像CIM2進行影像處理。應用處理器521基於分別由內部影像處理器5211和5212處理的主要圖像CIM1和遠距離圖像CIM2而產生經縮放的圖像。
外部圖像信號處理器522連接在景深相機503與應用處理器521之間。外部圖像信號處理器522經配置以接收景深圖像CIM3。
參看圖6，圖6為根據本申請案的實施例的相機的佈置。在圖6中，第一相機611、第二相機612和第三相機613可佈置為L狀。主要相機611與景深相機613之間的距離D1小於遠距離相機612與景深相機613之間的距離D2。另外，主要相機621、遠距離相機622和景深相機623也可佈置為三角形。主要相機621與景深相機623之間的距離D1小於遠距離相機622與景深相機623之間的距離D2。
當然，在一些實施例中，主要相機、遠距離相機和景深相機可佈置為其它形狀。關鍵是，主要相機與景深相機之間的距離應小於遠距離相機與景深相機之間的距離。
請參看圖7，圖7為根據本申請案的實施例的圖像擷取方法的步驟的流程圖。在步驟S710中，分別由主要相機、遠距離相機和景深相機獲得主要圖像、遠距離圖像和景深圖像。此處，第一相機與第三相機之間的距離小於第二相機與第三相機之間的距離。在步驟S720中，通過組合主要圖像和遠距離圖像而獲得經縮放的圖像。在步驟S730中，基於主要圖像、遠距離圖像和景深圖像根據經縮放的圖像而獲得景深圖。可根據經縮放的圖像和景深圖而獲得輸出圖像。此外，步驟S710到S730中的每一者的詳細操作可參考圖1到圖6。
請參照圖8，圖8為根據本申請案的實施例的獲得景深圖的獲得方式的步驟流程圖。在步驟S810中，短距離的像差資訊藉由比較景深圖像以及主要圖像來獲得，其中，景深圖像以及主要圖像分別由景深相機以及主要像機來取得。在步驟S820中，長距離的像差資訊則藉由比較景深圖像以及遠距離圖像來獲得，其中，遠距離圖像由遠距離像機來取得。再者，在步驟S830中，長及短距離的像差資訊可選擇性的用來產生景深圖。
值得注意的是，步驟S810及S820的執行順序沒有一定的限制。在某些實施例中，步驟S810可優先於步驟S820而被執行，或者，步驟S810與步驟S820也可同時被執行。
綜上所述，透過分別由主要相機、遠距離相機和景深相機獲得主要圖像、遠距離圖像和景深圖像。並基於主要圖像和遠距離圖像而獲得經縮放的圖像，且基於主要圖像、遠距離圖像和景深圖像而獲得景深圖。在本揭露中，根據主要圖像、遠距離圖像和景深圖像中的至少兩者而計算景深圖。因此，可獲得具有高準確性的景深圖。
51‧‧‧圖像擷取裝置
501‧‧‧主要相機
502‧‧‧遠距離相機
503‧‧‧景深相機
504‧‧‧控制器
510‧‧‧處理單元
511‧‧‧影像處理單元
512‧‧‧縮放引擎
513‧‧‧深度引擎
515‧‧‧介面單元
CIM1‧‧‧主要圖像
CIM2‧‧‧遠距離圖像
CIM3‧‧‧景深圖像
IDI‧‧‧景深圖
PMS1‧‧‧經處理的主要圖像
PMS2‧‧‧經處理的遠距離圖像
PMS3‧‧‧經處理的景深圖像
ZF‧‧‧縮放因數
ZIM‧‧‧經縮放的圖像

Claims (35)

  1. 一種圖像擷取裝置，包括：主要相機，用於擷取主要圖像；遠距離相機，用於擷取遠距離圖像；景深相機，用於擷取景深圖像；以及處理單元，耦接到所述主要相機、所述遠距離相機和所述景深相機，用於：組合所述主要圖像和所述遠距離圖像以獲得經縮放的圖像；以及基於所述主要圖像、所述遠距離圖像和所述景深圖像而產生對應於所述經縮放的圖像的景深圖。
  2. 如申請專利範圍第1項所述的圖像擷取裝置，其中所述處理單元用於：通過比較所述景深圖像和所述主要圖像而計算短距離像差資訊；通過比較所述景深圖像和所述遠距離圖像而計算長距離像差資訊；以及選擇性地採用所述短距離像差資訊或所述長距離像差資訊以產生所述景深圖。
  3. 如申請專利範圍第1項所述的圖像擷取裝置，還包括具有前側和後側的外殼，其中所述遠距離相機、所述主要相機和所述景深相機安裝在所述外殼中且設置在所述後側上。
  4. 如申請專利範圍第1項所述的圖像擷取裝置，其中所述遠距離相機的視場由所述主要相機的視場覆蓋，且所述主要相機的所述視場由所述景深相機的視場覆蓋。
  5. 如申請專利範圍第1項所述的圖像擷取裝置，其中所述處理單元包括：應用處理器，包括連接到所述遠距離相機以接收所述遠距離圖像的第一內部圖像信號處理器和連接到所述主要相機以接收所述主要圖像的第二內部圖像信號處理器，其中所述應用處理器經配置以基於所述遠距離圖像和所述主要圖像而產生所述經縮放的圖像；以及外部圖像信號處理器，連接在所述景深相機與所述應用處理器之間，經配置以接收所述景深圖像。
  6. 如申請專利範圍第5項所述的圖像擷取裝置，其中所述經縮放的圖像和所述景深圖像變換為YUV格式。
  7. 如申請專利範圍第1項所述的圖像擷取裝置，其中所述處理器還包括：縮放引擎，經配置以通過交錯所述遠距離圖像和所述主要圖像而產生所述經縮放的圖像；以及深度引擎，經配置以根據由所述景深圖像以及所述主要圖像和所述遠距離圖像中的至少一者而獲得所述景深圖。
  8. 如申請專利範圍第7項所述的圖像擷取裝置，其中所述深度引擎經配置以基於所述經縮放的圖像與所述景深圖像之間的 縮放像差而計算所述經縮放的圖像的至少一個區域的物距，且基於所述所計算的物距而產生所述景深圖。
  9. 如申請專利範圍第7項所述的圖像擷取裝置，其中所述深度引擎經配置以基於所述主要圖像和所述遠距離圖像中的至少一者與所述景深圖像之間的縮放像差而計算所述主要圖像和所述遠距離圖像中的至少一者的至少一個區域的物距，且基於所述所計算的物距而產生所述景深圖。
  10. 如申請專利範圍第7項所述的圖像擷取裝置，其中所述深度引擎經配置以基於所述主要圖像與所述景深圖像之間的縮放像差而計算所述主要圖像的至少一個區域的第一物距，且基於所述遠距離圖像與所述景深圖像之間的所述縮放像差而計算所述遠距離圖像的至少一個區域的第二物距，所述深度引擎還經配置以基於所述第一物距與所述第二物距而產生所述景深圖。
  11. 如申請專利範圍第7項所述的圖像擷取裝置，其中所述處理單元還包括：圖像信號處理單元，接收所述主要圖像、所述遠距離圖像和所述景深圖像，且對所述主要圖像、所述遠距離圖像和所述景深圖像進行信號處理操作，所述圖像信號處理單元將經處理的主要圖像和經處理的遠距離圖像傳送到所述縮放引擎，且將經處理的景深圖像以及所述經處理的主要圖像和所述經處理的遠距離圖像中的至少一者傳送到所述深度引擎。
  12. 如申請專利範圍第11項所述的圖像擷取裝置，其中所述 圖像信號處理單元包括：第一信號處理器，耦接到所述主要相機，其中所述第一信號處理器處理所述主要圖像以獲得所述經處理的主要圖像；第二信號處理器，耦接到所述遠距離相機，其中所述第二信號處理器處理所述遠距離圖像以獲得所述經處理的遠距離圖像；以及第三信號處理器，耦接到所述景深相機，其中所述第三信號處理器處理所述景深圖像以獲得所述經處理的景深圖像。
  13. 如申請專利範圍第11項所述的圖像擷取裝置，其中所述處理單元還包括：介面單元，耦接在所述圖像信號處理單元、所述縮放引擎和所述深度引擎之間，其中所述介面單元接收縮放因數，且根據所述縮放因數而將所述經處理的主要圖像和所述經處理的遠距離圖像中的至少一者傳送到所述深度引擎。
  14. 如申請專利範圍第11項所述的圖像擷取裝置，還包括：控制器，耦接到所述縮放引擎和所述深度引擎，其中所述控制器根據所述經縮放的圖像和所述景深圖而產生輸出圖像。
  15. 如申請專利範圍第1項所述的圖像擷取裝置，其中所述主要相機與所述遠距離相機之間的距離小於所述遠距離相機與所述景深相機之間的距離。
  16. 如申請專利範圍第15項所述的圖像擷取裝置，其中所述主要相機以第一距離緊密鄰近於所述遠距離相機且以第二距離鄰 近於所述景深相機，且所述第一距離實質上小於所述第二距離，且因此所述主要圖像與所述遠距離圖像之間的像差實質上小於所述景深圖像與所述主要圖像之間的像差。
  17. 如申請專利範圍第1項所述的圖像擷取裝置，其中所述主要相機的有效焦距小於所述遠距離相機的有效焦距。
  18. 如申請專利範圍第1項所述的圖像擷取裝置，其中所述處理單元經配置以：接收縮放因數；基於所述縮放因數而裁剪所述主要圖像以獲得經裁剪的主要圖像；且通過參考所述遠距離圖像來增強所述經裁剪的主要圖像以獲得所述經縮放的圖像。
  19. 如申請專利範圍第1項所述的圖像擷取裝置，其中所述主要相機、所述遠距離相機和所述景深相機經配置以同步地進行拍攝以擷取所述主要圖像、所述遠距離圖像和所述景深圖像。
  20. 如申請專利範圍第2項所述的圖像擷取裝置，其中所述處理單元經配置以：在所述主要圖像、所述遠距離圖像和所述景深圖像中搜索目標物體；計算在所述景深圖像和所述主要圖像上的所述目標物體之間所存在的所述短距離像差；計算在所述景深圖像和所述遠距離圖像上的所述目標物體之 間所存在的所述長距離像差；基於所述短距離像差或所述長距離像差而估計對應於所述目標物體與所述圖像擷取裝置之間的距離的物距；且基於所述所估計的物距來產生所述景深圖。
  21. 如申請專利範圍第19項所述的圖像擷取裝置，其中如果對焦因數設置在第一閾值內，那麼所述處理單元基於所述短距離像差來估計所述物距。
  22. 如申請專利範圍第21項所述的圖像擷取裝置，其中如果對焦因數設置在第二閾值之外，那麼所述處理單元基於所述長距離像差來估計所述物距。
  23. 如申請專利範圍第1項所述的圖像擷取裝置，其中所述處理單元經配置以：在所述主要圖像、所述遠距離圖像和所述景深圖像中搜索多個目標物體；計算所述景深圖像與所述主要圖像之間所存在的短距離像差；計算所述景深圖像與所述遠距離圖像之間所存在的長距離像差；基於所述短距離像差和所述長距離像差而估計對應於所述多個目標物體與所述圖像擷取裝置之間的距離的第一組物距；基於所述長距離像差而估計對應於所述多個目標物體與所述圖像擷取裝置之間的所述距離的第二組物距；且 自所述第一組物距和所述第二組物距進行選擇以獲得一組優化的物距。
  24. 如申請專利範圍第22項所述的圖像擷取裝置，其中如果所述縮放因數介於所述第一閾值與所述第二閾值之間，那麼所述處理單元通過所述第一相機、所述第二相機和所述第三相機而獲得所述景深圖，其中所述第一閾值小於所述第二閾值。
  25. 如申請專利範圍第1項所述的圖像擷取裝置，其中所述主要相機、所述遠距離相機和所述景深相機的解析度是相同的。
  26. 如申請專利範圍第1項所述的圖像擷取裝置，其中所述主要相機、所述遠距離相機和所述景深相機佈置為直線、L狀或三角形形狀。
  27. 一種手持式電子裝置，包括：外殼，具有前側和後側；主要相機，用於擷取主要圖像，其中所述主要相機安裝在所述外殼中且設置在所述後側上；遠距離相機，用於擷取遠距離圖像，其中所述遠距離相機安裝在所述外殼中且設置在所述後側上；景深相機，用於擷取景深圖像，其中所述景深相機安裝在所述外殼中且設置在所述後側上；以及處理單元，耦接到所述主要相機、所述遠距離相機和所述景深相機，用於組合所述主要圖像和所述遠距離圖像以獲得經縮放的圖像； 以及基於所述主要圖像、所述遠距離圖像和所述景深圖像而產生對應於所述經縮放的圖像的景深圖。
  28. 如申請專利範圍第27項所述的手持式電子裝置，其中所述主要相機以第一距離緊密鄰近於所述遠距離相機且以第二距離鄰近於所述景深相機，且所述第一距離實質上小於所述第二距離，且因此所述主要圖像與所述遠距離圖像之間的像差實質上小於所述景深圖像與所述主要圖像之間的像差。
  29. 如申請專利範圍第28項所述的手持式電子裝置，其中所述主要相機的有效焦距小於所述遠距離相機的有效焦距。
  30. 一種圖像擷取方法，包括：分別擷取主要圖像、遠距離圖像和景深圖像；組合所述主要圖像和所述遠距離圖像以獲得經縮放的圖像；以及基於所述主要圖像、所述遠距離圖像和所述景深圖像而產生對應於所述經縮放的圖像的景深圖。
  31. 如申請專利範圍第30項所述的圖像擷取方法，其中基於所述主要圖像、所述遠距離圖像和所述景深圖像而產生對應於所述經縮放的圖像的所述景深圖的步驟包括：藉由比較所述主要圖像以及所述景深圖像來計算短距離像差資訊；藉由比較所述遠距離圖像以及所述景深圖像來計算長距離像 差資訊；以及選擇性的採用所述短距離像差資訊或所述長距離像差資訊已產生所述景深圖。
  32. 如申請專利範圍第30項所述的圖像擷取方法，其中組合所述主要圖像和所述遠距離圖像以獲得所述經縮放的圖像的步驟包括：藉由交錯所述所述主要圖像和所述遠距離圖像來建立所述縮放的圖像。
  33. 如申請專利範圍第32項所述的圖像擷取方法，其中基於所述主要圖像、所述遠距離圖像和所述景深圖像而產生對應於所述經縮放的圖像的所述景深圖的步驟包括：基於所述經縮放的圖像與所述景深圖像之間的縮放像差而計算所述經縮放的圖像的至少一個區域的物距；以及基於所述所計算的物距而產生所述景深圖。
  34. 如申請專利範圍第32項所述的圖像擷取方法，其中基於所述主要圖像、所述遠距離圖像和所述景深圖像而產生對應於所述經縮放的圖像的所述景深圖的步驟包括：基於所述主要圖像和所述遠距離圖像中的至少一者與所述景深圖像之間的縮放像差而計算所述主要圖像和所述遠距離圖像中的至少一者的至少一個區域的物距；以及基於所述所計算的物距而產生所述景深圖。
  35. 如申請專利範圍第32項所述的圖像擷取方法，其中基於 所述主要圖像、所述遠距離圖像和所述景深圖像而產生對應於所述經縮放的圖像的所述景深圖的步驟包括：基於所述主要圖像與所述景深圖像之間的縮放像差而計算所述主要圖像的至少一個區域的第一物距；基於所述遠距離圖像與所述景深圖像之間的所述縮放像差而計算所述遠距離圖像的至少一個區域的第二物距；以及基於所述第一物距與所述第二物距而產生所述景深圖。
TW104101089A 2014-05-16 2015-01-13 手持式電子裝置、圖像擷取裝置及其圖像擷取方法 TWI627487B (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
US201461994141P 2014-05-16 2014-05-16
US61/994,141 2014-05-16
US201462014127P 2014-06-19 2014-06-19
US62/014,127 2014-06-19
US14/585,185 2014-12-30
US14/585,185 US20150334309A1 (en) 2014-05-16 2014-12-30 Handheld electronic apparatus, image capturing apparatus and image capturing method thereof

Publications (2)

Publication Number Publication Date
TW201544890A true TW201544890A (zh) 2015-12-01
TWI627487B TWI627487B (zh) 2018-06-21

Family

ID=54361773

Family Applications (1)

Application Number Title Priority Date Filing Date
TW104101089A TWI627487B (zh) 2014-05-16 2015-01-13 手持式電子裝置、圖像擷取裝置及其圖像擷取方法

Country Status (4)

Country Link
US (1) US20150334309A1 (zh)
CN (1) CN105100559B (zh)
DE (1) DE102015006142A1 (zh)
TW (1) TWI627487B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11153506B2 (en) 2017-06-02 2021-10-19 Samsung Electronics Co., Ltd. Application processor including multiple camera serial interfaces receiving image signals from multiple camera modules

Families Citing this family (54)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105556944B (zh) 2012-11-28 2019-03-08 核心光电有限公司 多孔径成像系统和方法
CN109194849B (zh) 2013-06-13 2021-01-15 核心光电有限公司 双孔径变焦数字摄影机
CN107748432A (zh) 2013-07-04 2018-03-02 核心光电有限公司 小型长焦透镜套件
CN109246339B (zh) 2013-08-01 2020-10-23 核心光电有限公司 用于对对象或场景进行成像的双孔径数字摄影机
US9392188B2 (en) 2014-08-10 2016-07-12 Corephotonics Ltd. Zoom dual-aperture camera with folded lens
CN112327464A (zh) 2015-01-03 2021-02-05 核心光电有限公司 微型长焦镜头模块和使用该镜头模块的相机
EP3492958B1 (en) 2015-04-02 2022-03-30 Corephotonics Ltd. Dual voice coil motor structure in a dual-optical module camera
ES2908652T3 (es) 2015-04-16 2022-05-03 Corephotonics Ltd Enfoque automático y estabilización de imagen óptica en una cámara compacta de plegado
EP3722860B1 (en) 2015-05-28 2023-04-19 Corephotonics Ltd. Bi-directional stiffness for optical image stabilization and auto-focus in a digital camera
KR102143309B1 (ko) 2015-08-13 2020-08-11 코어포토닉스 리미티드 비디오 지원 및 스위칭/비스위칭 동적 제어 기능이 있는 듀얼-애퍼처 줌 카메라
US9426450B1 (en) * 2015-08-18 2016-08-23 Intel Corporation Depth sensing auto focus multiple camera system
WO2017037688A1 (en) 2015-09-06 2017-03-09 Corephotonics Ltd. Auto focus and optical image stabilization with roll compensation in a compact folded camera
KR102433623B1 (ko) 2015-12-29 2022-08-18 코어포토닉스 리미티드 자동 조정가능 텔레 시야(fov)를 갖는 듀얼-애퍼처 줌 디지털 카메라
KR102502451B1 (ko) * 2016-01-07 2023-02-22 삼성전자주식회사 깊이 추정 방법 및 장치, 및 거리 추정기 학습 방법 및 장치
EP3758356B1 (en) 2016-05-30 2021-10-20 Corephotonics Ltd. Actuator
KR102302004B1 (ko) 2016-06-19 2021-09-14 코어포토닉스 리미티드 듀얼 애퍼처 카메라 시스템에서의 프레임 동기화
KR102657464B1 (ko) 2016-07-07 2024-04-12 코어포토닉스 리미티드 폴디드 옵틱용 선형 볼 가이드 보이스 코일 모터
US10706518B2 (en) 2016-07-07 2020-07-07 Corephotonics Ltd. Dual camera system with improved video smooth transition by image blending
KR102609464B1 (ko) * 2016-10-18 2023-12-05 삼성전자주식회사 영상을 촬영하는 전자 장치
US10389948B2 (en) 2016-12-06 2019-08-20 Qualcomm Incorporated Depth-based zoom function using multiple cameras
WO2018122650A1 (en) 2016-12-28 2018-07-05 Corephotonics Ltd. Folded camera structure with an extended light-folding-element scanning range
JP7057364B2 (ja) 2017-01-12 2022-04-19 コアフォトニクス リミテッド コンパクト屈曲式カメラ
CN115857135A (zh) 2017-02-23 2023-03-28 核心光电有限公司 折叠式摄影机透镜设计
KR102530535B1 (ko) 2017-03-15 2023-05-08 코어포토닉스 리미티드 파노라마 스캐닝 범위를 갖는 카메라
US10904512B2 (en) 2017-09-06 2021-01-26 Corephotonics Ltd. Combined stereoscopic and phase detection depth mapping in a dual aperture camera
US10951834B2 (en) 2017-10-03 2021-03-16 Corephotonics Ltd. Synthetically enlarged camera aperture
WO2019102313A1 (en) 2017-11-23 2019-05-31 Corephotonics Ltd. Compact folded camera structure
WO2019150188A1 (en) 2018-02-05 2019-08-08 Corephotonics Ltd. Reduced height penalty for folded camera
CN113568251B (zh) 2018-02-12 2022-08-30 核心光电有限公司 数字摄像机及用于提供聚焦及补偿摄像机倾斜的方法
US10694168B2 (en) 2018-04-22 2020-06-23 Corephotonics Ltd. System and method for mitigating or preventing eye damage from structured light IR/NIR projector systems
KR20230098686A (ko) 2018-04-23 2023-07-04 코어포토닉스 리미티드 연장된 2 자유도 회전 범위를 갖는 광학 경로 폴딩 요소
KR102289149B1 (ko) 2018-08-04 2021-08-12 코어포토닉스 리미티드 카메라 위의 전환 가능한 연속 디스플레이 정보 시스템
US11635596B2 (en) 2018-08-22 2023-04-25 Corephotonics Ltd. Two-state zoom folded camera
US11055866B2 (en) * 2018-10-29 2021-07-06 Samsung Electronics Co., Ltd System and method for disparity estimation using cameras with different fields of view
US11412136B2 (en) 2018-12-07 2022-08-09 Samsung Electronics Co., Ltd. Apparatus and method for operating multiple cameras for digital photography
KR102242437B1 (ko) 2019-01-07 2021-04-20 코어포토닉스 리미티드 슬라이딩 조인트를 갖는 회전 메커니즘
US10887582B2 (en) 2019-01-22 2021-01-05 Fyusion, Inc. Object damage aggregation
US20210312702A1 (en) * 2019-01-22 2021-10-07 Fyusion, Inc. Damage detection from multi-view visual data
CN113891059B (zh) 2019-03-09 2024-02-13 核心光电有限公司 对双摄像机进行立体校准的方法
KR102515482B1 (ko) 2019-07-31 2023-03-29 코어포토닉스 리미티드 카메라 패닝 또는 모션에서 배경 블러링을 생성하는 시스템 및 방법
CN110487206B (zh) * 2019-08-07 2024-04-26 无锡弋宸智图科技有限公司 一种测量孔探仪、数据处理方法及装置
US11659135B2 (en) 2019-10-30 2023-05-23 Corephotonics Ltd. Slow or fast motion video using depth information
CN112788201A (zh) * 2019-11-07 2021-05-11 虹软科技股份有限公司 摄像系统
US11770618B2 (en) 2019-12-09 2023-09-26 Corephotonics Ltd. Systems and methods for obtaining a smart panoramic image
US11949976B2 (en) 2019-12-09 2024-04-02 Corephotonics Ltd. Systems and methods for obtaining a smart panoramic image
EP4097773A4 (en) 2020-04-26 2023-11-01 Corephotonics Ltd. TEMPERATURE CONTROL FOR HALL BAR SENSOR CORRECTION
CN117372250A (zh) 2020-05-17 2024-01-09 核心光电有限公司 全视场参考图像的图像拼接
CN117518313A (zh) 2020-05-30 2024-02-06 核心光电有限公司 用于获得超微距图像的系统
US11637977B2 (en) 2020-07-15 2023-04-25 Corephotonics Ltd. Image sensors and sensing methods to obtain time-of-flight and phase detection information
US11910089B2 (en) 2020-07-15 2024-02-20 Corephotonics Lid. Point of view aberrations correction in a scanning folded camera
CN114270145B (zh) 2020-07-31 2024-05-17 核心光电有限公司 用于大行程线性位置感测的霍尔传感器-磁体几何结构
KR102598070B1 (ko) 2020-08-12 2023-11-02 코어포토닉스 리미티드 스캐닝 폴디드 카메라의 광학 이미지 안정화
US11605151B2 (en) 2021-03-02 2023-03-14 Fyusion, Inc. Vehicle undercarriage imaging
CN113747028B (zh) * 2021-06-15 2024-03-15 荣耀终端有限公司 一种拍摄方法及电子设备

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100414425C (zh) * 2004-02-02 2008-08-27 光宝科技股份有限公司 撷取不失焦影像的影像撷取装置与方法
US7756330B2 (en) * 2006-07-27 2010-07-13 Eastman Kodak Company Producing an extended dynamic range digital image
US7729602B2 (en) * 2007-03-09 2010-06-01 Eastman Kodak Company Camera using multiple lenses and image sensors operable in a default imaging mode
US7683962B2 (en) * 2007-03-09 2010-03-23 Eastman Kodak Company Camera using multiple lenses and image sensors in a rangefinder configuration to provide a range map
JP2008294819A (ja) * 2007-05-25 2008-12-04 Sony Corp 撮像装置
JP5185097B2 (ja) * 2008-12-19 2013-04-17 富士フイルム株式会社 撮影装置および合焦位置決定方法
CN101771816A (zh) * 2008-12-27 2010-07-07 鸿富锦精密工业（深圳）有限公司 便携式电子装置及成像方法
JP2012044459A (ja) * 2010-08-19 2012-03-01 Fujifilm Corp 光学デバイス
US20120056982A1 (en) * 2010-09-08 2012-03-08 Microsoft Corporation Depth camera based on structured light and stereo vision
CN201910059U (zh) * 2010-12-03 2011-07-27 深圳市乐州光电技术有限公司 信息图像识别系统
CN102739949A (zh) * 2011-04-01 2012-10-17 张可伦 多镜头相机和多镜头装置的控制方法
JP5968107B2 (ja) * 2011-09-01 2016-08-10 キヤノン株式会社 画像処理方法、画像処理装置およびプログラム
KR101316433B1 (ko) * 2011-09-14 2013-10-08 현대자동차주식회사 차량 주변정보 제공 시스템 및 그 방법
WO2013081576A1 (en) * 2011-11-28 2013-06-06 Hewlett-Packard Development Company, L.P. Capturing a perspective-flexible, viewpoint-synthesizing panoramic 3d image with a multi-view 3d camera
US9191578B2 (en) * 2012-06-29 2015-11-17 Broadcom Corporation Enhanced image processing with lens motion
US9241111B1 (en) * 2013-05-30 2016-01-19 Amazon Technologies, Inc. Array of cameras with various focal distances

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11153506B2 (en) 2017-06-02 2021-10-19 Samsung Electronics Co., Ltd. Application processor including multiple camera serial interfaces receiving image signals from multiple camera modules
TWI811386B (zh) * 2017-06-02 2023-08-11 南韓商三星電子股份有限公司 應用處理器

Also Published As

Publication number Publication date
DE102015006142A1 (de) 2015-11-19
US20150334309A1 (en) 2015-11-19
CN105100559A (zh) 2015-11-25
CN105100559B (zh) 2018-11-30
TWI627487B (zh) 2018-06-21

Similar Documents

Publication Publication Date Title
TWI627487B (zh) 手持式電子裝置、圖像擷取裝置及其圖像擷取方法
TWI567693B (zh) 產生深度資訊的方法及其系統
EP3067746B1 (en) Photographing method for dual-camera device and dual-camera device
US8818097B2 (en) Portable electronic and method of processing a series of frames
CN108600576B (zh) 图像处理装置、方法和系统以及计算机可读记录介质
US9076214B2 (en) Image acquisition apparatus and image processing apparatus using selected in-focus image data
US9208396B2 (en) Image processing method and device, and program
US8988317B1 (en) Depth determination for light field images
US8928736B2 (en) Three-dimensional modeling apparatus, three-dimensional modeling method and computer-readable recording medium storing three-dimensional modeling program
US20110249117A1 (en) Imaging device, distance measuring method, and non-transitory computer-readable recording medium storing a program
CN107113415A (zh) 用于多技术深度图获取和融合的方法和设备
WO2016184131A1 (zh) 基于双摄像头拍摄图像的方法、装置及计算机存储介质
EP3154251A1 (en) Application programming interface for multi-aperture imaging systems
US20210377432A1 (en) Information processing apparatus, information processing method, program, and interchangeable lens
JP6452360B2 (ja) 画像処理装置、撮像装置、画像処理方法およびプログラム
JPWO2012176556A1 (ja) 対応点探索装置、および距離測定装置
JP2015005925A (ja) 画像処理装置および画像処理方法
JP2013093836A (ja) 撮像装置、画像処理装置およびその方法
US8908012B2 (en) Electronic device and method for creating three-dimensional image
TWI571099B (zh) 深度估測裝置及方法
JP2013044597A (ja) 画像処理装置および方法、プログラム
JP5514062B2 (ja) 電子機器、情報付き撮像画面表示方法及びプログラム
JP2017103695A (ja) 画像処理装置、画像処理方法、及びそのプログラム
TWI569642B (zh) 機器視覺中進行影像擷取之方法及裝置
TWI576648B (zh) 影像擷取裝置及方法