TWI489863B - 具有分享處理之多重影像感測系統及其操作方法 - Google Patents

具有分享處理之多重影像感測系統及其操作方法 Download PDF

Info

Publication number
TWI489863B
TWI489863B TW097146482A TW97146482A TWI489863B TW I489863 B TWI489863 B TW I489863B TW 097146482 A TW097146482 A TW 097146482A TW 97146482 A TW97146482 A TW 97146482A TW I489863 B TWI489863 B TW I489863B
Authority
TW
Taiwan
Prior art keywords
image
digital
image sensor
signal
signals
Prior art date
Application number
TW097146482A
Other languages
English (en)
Other versions
TW200935878A (en
Inventor
Robert M Guidash
Original Assignee
Omnivision Tech Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omnivision Tech Inc filed Critical Omnivision Tech Inc
Publication of TW200935878A publication Critical patent/TW200935878A/zh
Application granted granted Critical
Publication of TWI489863B publication Critical patent/TWI489863B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Telephone Function (AREA)

Description

具有分享處理之多重影像感測系統及其操作方法
本發明係關於成像系統，且更特定而言係關於具有多重影像感測器及分享處理之成像系統。
許多行動及手持式裝置為使用者提供多種特徵及功能，包含影像捕獲。此等行動或手持式裝置之實例包含蜂巢式電話及個人數位助理。圖1A係一根據先前技術之蜂巢式電話之正面透視圖。蜂巢式電話100包含標準顯示器102、小鍵盤104(數字0-9、#及*)、揚聲器106、麥克風108及使用者輸入裝置110。使用者輸入裝置110可用於存取或選擇蜂巢式電話100之各種特徵及功能。
內置式數位相機112(見圖1B)用於捕獲靜止及視訊影像。通常，一小顯示器114位於蜂巢式電話100之外側116上以顯示日期、時間及例如電池電量及信號強度之各種狀態圖標。數位相機112通常包含一單個影像感測器，例如一電荷耦合裝置(CCD)或互補金屬氧化物半導體(CMOS)影像感測器。
由於大多數行動及手持式裝置(例如蜂巢式電話100)包含一單個影像感測器，因此難以構建一些應用，例如視訊會議。相機112聚焦於定位於相機112前方之物體上而顯示器102位於蜂巢式電話100之內側118(圖1A)上。此意味著一使用者不能看著相機112捕獲他或她的影像而同時看著顯示器102上之影像。
因此，一些成像系統已考量或構建使用多重影像感測器或多重標準顯示器。然而，在給定一些成像裝置之有限大小之情況下，此等解決方法更為昂貴並難以構建。此外，當利用多重影像感測器時，一影像感測器中所包含之許多組件在每一個影像感測器中重複。
一種多重影像感測器系統包含一運作著連接至一個或多個次影像感測器之主整合式影像感測器。在根據本發明之一個實施例中，該主整合式影像感測器包含一與一影像信號處理電路、讀出電路、一數位串列介面、儲存器、一定時電路、一類比對數位轉換器及一雙向數位輸入/輸出電路一起整合於一半導體基板上之像素陣列。該一個或多個次影像感測器包含：一像素陣列、讀出電路、一數位串列介面、一定時電路及一輸出電路。一次影像感測器上之輸出電路可構建為一類比輸出電路或一數位輸出電路。當一次影像感測器包含一數位輸出電路時，該次影像感測器進一步包含一類比對數位轉換器。
由該主整合式影像感測器及每一個次影像感測器所捕獲之影像係由該主整合式影像感測器上之影像信號處理電路加以處理以產生再現影像。由每一個次影像感測器所捕獲之影像傳輸至該主整合式影像感測器以供由影像信號處理電路加以處理。由影像信號處理電路實施之處理功能之實例包含(但不限於)：色彩插值、白色平衡及色彩與伽瑪校正。
在根據本發明之一實施例中，每一個次影像感測器經由數位串列介面將實體及運作資料傳輸至主整合式影像感測器。主整合式影像感測器儲存此資料並基於該實體及運作資料調節一個或多個與由次影像感測器所捕獲之該(等)影像相關聯之輸出信號。僅舉例而言，一次影像感測器可將其解析度傳輸至主整合式影像感測器。該主整合式影像感測器接著基於自彼次影像感測器接收之解析度資料回應地產生同步信號，例如訊框、線路及像素時鐘信號。
自對實施例及隨附申請專利範圍之以下實施方式之審閱並參照隨附圖式將更清楚地理解及瞭解本發明之此等及其它態樣、目的、特徵及優點。
本發明之有利效應
本發明包含使影像信號處理電路及相關聯之記憶體整合於一多重影像感測器成像系統中之一單個主影像感測器上之優點。整合式影像信號處理電路接收並處理來自該整合式影像感測器上之像素陣列之影像信號以及來自一個或多個外部次影像感測器之影像信號。成像系統之成本因影像信號處理電路及相關聯之記憶體包含於僅一個影像感測器而並非所有影像感測器上而減小。另外，採用具有不同解析度之影像感測器之成像系統之開發成本可因該整合式影像信號處理電路可使用每一個影像感測器特有的實體及運作資料產生定製再現影像而減小。
在整個說明書及專利申請範圍中，除上下文另外清楚規定，以下術語取用與本文中明確相關聯之含義。「一(a)」、「一(an)」及「該(the)」之含義包含複數指示，且「在......中(in)」之含義包含「在......中(in)」及「在......上(on)」。術語「連接」意指所連接項目之間之一直接電連接，或透過一個或多個被動或主動中間裝置之一間接連接。術語「電路(circuit)」意指連接在一起以提供一期望功能之主動或被動的單個組件或大量組件。術語「信號(signal)」意指至少一個電流、電壓或資料信號。參照圖式，相同編號在該等視圖中指示相同部分。
現參照圖2，其顯示根據本發明之一實施例中之第一感測系統之一方塊圖。感測系統200包含運作地連接至次影像感測器204之主整合式影像感測器202。次影像感測器204在主整合式影像感測器202外部。在根據本發明之一實施例中，主整合式影像感測器202構建為一CMOS影像感測器。
主整合式影像感測器202包含像素陣列206，以供捕獲靜止或視訊影像。像素陣列206中之每一像素皆包含一光敏地點(未顯示)，該光敏地點捕獲來自一感興趣場景之光，並產生表示入射光之量的電荷。每一像素進一步包含至少一個(例如)一電晶體或放大器之輸出結構(未顯示)，以將該電荷轉換為一電壓影像信號。讀出電路208接著用於自像素陣列206讀出該等影像信號。讀出電路208包含(但不限於)：列或行解碼器、行取樣及保持電路及類比信號處理電路。
定時電路210產生供主整合式影像感測器202使用之定時信號，包含供讀出電路208使用之定時信號。自像素陣列206讀出之影像信號由類比對數位轉換器(ADC)212轉換為數位影像信號。該等數位影像信號接著由影像信號處理(ISP)電路214處理。由ISP電路214實施之影像處理功能之實例包含(但不限於)：色彩插值、白色平衡及色彩與伽瑪校正。
數位輸入/輸出電路216經由雙向信號線218輸出並接收如輸入、影像、定時及控制信號。定時及控制信號之實例包含(但不限於)：訊框、線路及像素時鐘信號。在根據本發明之一實施例中，雙向信號線218表示一共同資料匯流排，其可用於將已完成或再現影像信號或原始(亦即，未經處理的)影像信號自主整合式影像感測器202或次影像感測器204輸出至行動或手持式裝置。在根據本發明之其他實施例中，信號線218可構建為一個或多個單向信號線。
次影像感測器204包含像素陣列220以供捕獲靜止或視訊影像及讀出電路222以自像素陣列220讀出信號。在根據本發明之一實施例中，次影像感測器204構建為一CMOS影像感測器。在根據本發明之另一個實施例中，次影像感測器204構建為一與外部定時及ADC裝置組合在一起之CCD影像感測器。
當次影像感測器204構建為一CMOS影像感測器時，定時電路224產生供次影像感測器204使用之定時信號，包含供讀出電路222使用之定時信號。自像素陣列220讀出之信號由類比對數位轉換器226轉換為數位信號。數位輸出電路228在信號線230上輸出原始數位影像信號。該等原始數位影像信號接著經由雙向信號線218輸入至主整合式影像感測器202中。該等原始數位影像信號係由影像信號處理214加以處理。數位輸入/輸出電路216經由雙向信號線218輸出再現影像。
在根據本發明之一實施例中，次影像感測器204經由資料匯流排236將實體及運作資料自數位串列介面232傳輸至數位串列介面234。數位串列介面232、234亦可運作著連接至成像系統237內之一個或多個組件。由次影像感測器204傳輸之實體及運作資料之實例包含(但不限於)：列及行之數目、固定圖案校正資料、缺陷位置、白色平衡及色彩校正係數及感興趣的窗口。
在根據本發明之其他實施例中，由次感測器204傳輸之實體及運作資料可使用經由雙向信號線218或藉由使用專用定時引腳(未顯示)傳輸之數位影像信號資料流中之經編碼信號傳輸至主整合式影像感測器202。主整合式影像感測器202將實體及運作資料儲存在儲存器238中。在根據本發明之一實施例中，儲存器238構建為一組暫存器。在根據本發明之其他實施例中，可以不同方式構建儲存器238。
主整合式影像感測器202上之ISP電路214基於自次影像感測器204接收之實體及運作資料調節一個或多個經處理之影像信號。僅舉例而言，次影像感測器204將解析度資料、色彩校正矩陣係數或透鏡遮光校正傳輸至主整合感測器202。主整合式影像感測器202基於該自次影像感測器204接收之實體及運作資料產生並輸出定製影像信號或同步信號，例如訊框、線路及像素時鐘信號。
圖3係根據本發明之一實施例中之一第二感測系統之方塊圖。感測系統300包含運作著連接至外部次影像感測器302、304之主整合式影像感測器202。在根據本發明之一實施例中，次影像感測器302、304中之至少一者構建為一CMOS影像感測器。在根據本發明之另一實施例中，次影像感測器302、304中之一者或兩者構建為一CCD影像感測器及若干獨立定時及數位介面晶片。
當次影像感測器302、304構建為CMOS影像感測器時，根據圖2，每一個次影像感測器302、304包含像素陣列220、讀出電路222、定時電路224及數位串列介面232。類比輸出電路306經由信號線308將類比影像信號傳輸至主整合式影像感測器202。主整合式影像感測器202上之ADC 212將該等類比影像信號轉換為數位影像信號。ISP 214處理該等數位影像信號且數位輸入/輸出電路216接著輸出最後或再現影像信號。
在根據本發明之一實施例中，每一個次影像感測器302、304經由其數位串列介面232經由資料匯流排310將實體及運作資料傳輸至數位串列介面234。實體及運作資料儲存於儲存器238中。主整合式影像感測器202基於自次影像感測器302、304接收之實體及運作資料產生定製影像信號或同步信號，例如訊框、線路及像素時鐘信號。
在根據本發明之一實施例中，次影像感測器204(圖2)及次影像感測器302、304(圖3)係構建為較低解析度影像感測器，例如VGA或1.3MP影像感測器，而主整合式影像感測器202係構建為一較高解析度影像感測器。ISP電路214通常係構建於主整合式影像感測器202上，此乃因ISP電路214使用一較小百分數之晶粒區域。形成ISP電路214之組件可製造於該晶粒之可用或未使用區域中，而通常不增加用於主整合式影像感測器202之晶粒大小。次影像感測器204之晶粒大小因次影像感測器204不包含ISP電路而減小。主整合式影像感測器202上之ISP電路214用於處理影像信號。同樣地，次影像感測器302、304之晶粒大小甚至更加減小，此乃因ADC電路212及ISP電路214僅包含於主整合式影像感測器202上，但供感測系統300中之所有影像感測器202、302、304用於處理影像信號。移除ADC電路212亦可顯著減小引腳計數，此可導致低解析度感測器更小之晶粒大小。
現參照圖4A，其顯示根據本發明之一實施例中之一蜂巢式電話之正面透視圖。蜂巢式電話400僅係一可採用圖2或圖3中所示之感測系統之成像系統之一個實例。蜂巢式電話400包含參照圖1A至1B所述之顯示器102、鍵盤104、揚聲器106、麥克風108、使用者輸入裝置110及顯示器114。內置式數位相機裝置402聚焦在定位於蜂巢式電話400內側404之物體上，而內置式數位相機裝置406聚焦在位於蜂巢式電話400外側408之物體上。在根據本發明之一實施例中，相機裝置406包含一主整合式影像感測器(例如，圖2中之感測器202)，而相機裝置402使用一次影像感測器(例如，圖2中之感測器204)。
圖5係根據本發明之一實施例中之一成像系統之方塊圖。成像系統500包含蜂巢式電話502及計算裝置504。數位相機電話502產生儲存於記憶體506中之數位影像，記憶體506可係(例如)一內部快閃EPROM記憶體或一可移除記憶體卡。另一選擇為，可使用其他類型之數位影像儲存媒體(例如磁性硬驅動器、磁帶或光碟)來構建記憶體506。
數位相機電話502使用透鏡508將來自一場景(未顯示)之光聚焦至主整合式影像感測器510上。數位相機電話502使用透鏡512將來自一場景(未顯示)之光聚焦至次影像感測器514上。自主整合式影像感測器510輸出之再現影像儲存於緩衝記憶體516中，且隨後由數位處理器518處理。數位處理器518係由儲存於韌體記憶體520中之韌體控制，該韌體記憶體可係快閃EPROM記憶體。數位處理器518包含即時時鐘522，其甚至在蜂巢式電話502及數位處理器518處於一低功率狀態時保持日期及時間。經處理之數位影像檔案儲存於記憶體506中。記憶體506亦可儲存其他類型之資料，諸如，例如音樂檔案(例如，MP3檔案)、鈴聲音調、電話號碼、日曆及計劃清單。
在根據本發明之一實施例中，蜂巢式電話502使用主整合式影像感測器510捕獲靜止影像並使用次影像感測器514捕獲視訊影像。數位處理器518將該等靜止及視訊影像壓縮並儲存為記憶體56中之一影像檔案。僅舉例而言，可按照JPEG格式壓縮影像資料，其使用已知「Exif」影像格式。此格式包含一使用各種TIFF標籤儲存特定影像元資料之Exif應用程式段。獨立TIFF標籤可用於(例如)儲存捕獲圖片之日期及時間、透鏡f/數及其他相機設定值、並用於儲存影像標題。
在根據本發明之一實施例中，數位處理器518產生供使用者選擇之不同影像大小。一個此大小係低解析度「拇指指甲」大小影像。該拇指指甲影像儲存於RAM記憶體524中並供應至顯示器526，該顯示器可係(例如)一主動矩陣LCD或有機發光二極體(OLED)。產生拇指指甲大小影像允許在彩色顯示器526上快速審閱所捕獲之靜止影像。
音訊編碼解碼器528連接至數位處理器518且自麥克風(Mic)530接收一音訊信號。音訊編碼解碼器528亦將一音訊信號提供至揚聲器532。此等組件連用一視訊序列或靜止影像一起用於電話會話且用於記錄及播放一音訊軌道兩者。
在根據本發明之一實施例中，揚聲器532亦用於通知使用者一傳入電話呼叫。此可使用一儲存於韌體記憶體520中之標準鈴聲音調或藉由使用一自行動電話網路534下載並儲存於記憶體506中之定製鈴聲音調來完成。另外，一振動裝置(未顯示)可用於提供一傳入電話呼叫之一無聲(例如，非音頻)告知。
數位處理器518連接至無線數據機536，其使得蜂巢式電話502能夠經由射頻(RF)頻道538傳輸及接收資訊。無線數據機536使用例如一3GSM網路之另一RF鏈路(未顯示)與行動電話網路534通信。行動電話網路534與儲存自蜂巢式電話502上載之影像的照片服務提供者540通信。其他裝置(包括計算裝置504)經由網際網路542存取此等影像。在根據本發明之一實施例中，行動電話網路534亦連接至一標準電話網路(未顯示)以便提供正常電話服務。
一圖形使用者介面(未顯示)顯示於顯示器526上並由使用者控制器件544控制。在根據本發明之實施例中，使用者控制器件544包含：專用按鈕(例如，一電話鍵盤)，用以撥打一電話號碼；一控制器件，用以設定模式(例如，「電話」模式、「日曆」模式、「相機」模式)；一操縱桿控制器，其包含4路控制(上、下、左、右)及一按鈕中心「OK」或「選擇」開關。
電腦塢546為蜂巢式電話502中之電池(未顯示)再充電。電腦塢546經由電腦塢介面548將蜂巢式電話502連接至計算裝置504。在根據本發明之一實施例中，電腦塢介面548構建為一有線介面，例如一USB介面。另一選擇為，在根據本發明之其他實施例中，電腦塢介面548構建為一無線介面，例如一藍芽或一IEEE 802.11b無線介面。電腦塢介面548用於將影像自記憶體506下載至計算裝置504。電腦塢介面548亦用於將日曆資訊及其他資料自計算裝置504傳送至記憶體506。
提供一種成像系統，其中該主整合式影像感測器及該次影像感測器各自進一步包括：一數位串列介面；及一個或多個儲存電路，其可運作以儲存由該次影像感測器使用該數位串列介面傳輸之實體及作業資訊。
提供一種成像系統，其中該主整合式影像感測器之該定時電路及雙向輸入/輸出電路回應地輸出該所儲存之接收自該次影像感測器之實體及作業資訊特有的信號。
已參照一特定實施例(即一蜂巢式電話)闡述了本發明。然而，根據本發明之其他實施例並不侷限於此實施方案。本發明可構建於任一採用兩個或更多個影像感測器之成像系統中。此等成像系統之實例包含(但不限於)：個人數位助理、數位靜止相機及數位視訊相機。
100‧‧‧蜂巢式電話
102‧‧‧標準顯示器
104‧‧‧鍵盤
106‧‧‧揚聲器
108‧‧‧麥克風
110‧‧‧使用者輸入裝置
112‧‧‧內置式數位相機
114‧‧‧顯示器
116‧‧‧外側
118‧‧‧內側
200‧‧‧感測系統
202‧‧‧主整合式影像感測器
204‧‧‧次影像感測器
206‧‧‧像素陣列
208‧‧‧讀出電路
210‧‧‧定時電路
212‧‧‧類比對數位轉換器
214‧‧‧影像信號處理系統
216‧‧‧數位輸入/輸出電路
218‧‧‧雙向信號線
220‧‧‧像素陣列
222‧‧‧讀出電路
224‧‧‧定時電路
226‧‧‧類比對數位轉換器
228‧‧‧數位輸出電路
230‧‧‧信號線
232‧‧‧數位串列介面
234‧‧‧數位串列介面
236‧‧‧資料匯流排
237‧‧‧成像系統
238‧‧‧儲存器
300‧‧‧感測系統
302‧‧‧次影像感測器
304‧‧‧次影像感測器
306‧‧‧類比輸出電路
308‧‧‧信號線
310‧‧‧資料匯流排
400‧‧‧蜂巢式電話
402‧‧‧內置式數位相機裝置
404‧‧‧內側
406‧‧‧內置式數位相機裝置
408‧‧‧內側
500‧‧‧成像系統
502‧‧‧蜂巢式電話
504‧‧‧計算裝置
506‧‧‧記憶體
508‧‧‧透鏡
510‧‧‧主整合式影像感測器
512‧‧‧透鏡
514‧‧‧次影像感測器
516‧‧‧緩衝記憶體
518‧‧‧數位處理器
520‧‧‧韌體記憶體
522‧‧‧即時時鐘
524‧‧‧RAM記憶體
526‧‧‧顯示器
528‧‧‧音訊編碼解碼器
530‧‧‧麥克風
532‧‧‧揚聲器
534‧‧‧無線電話網路
536‧‧‧無線數據機
538‧‧‧射頻頻道
540‧‧‧照片服務提供者
542‧‧‧網際網路
544‧‧‧使用者控制器件
546‧‧‧電腦塢
548‧‧‧電腦塢介面
圖1A係一根據先前技術之蜂巢式電話之正面透視圖；圖1B係圖1A中所示之蜂巢式電話之背面透視圖；圖2係根據本發明之一實施例中之一第一感測器系統之一方塊圖；圖3係根據本發明之一實施例中之一第二感測器系統之一方塊圖。
圖4A係根據本發明之一實施例中之一蜂巢式電話之正面透視圖；圖4B係圖4A中所示之蜂巢式電話之背面透視圖；且圖5係根據本發明之一實施例中之一成像系統之方塊圖。
200．．．感測器系統
202．．．主整合式影像感測器
204．．．次影像感測器
206．．．像素陣列
208．．．讀出電路
210．．．定時電路
212．．．類比對數位轉換器
214．．．影像信號處理系統
216．．．數位輸入/輸出電路
218．．．雙向信號線
220．．．像素陣列
222．．．讀出電路
224．．．定時電路
226．．．類比對數位轉換器
228．．．數位輸出電路
230．．．信號線
232．．．數位串列介面
234．．．數位串列介面
236．．．資料匯流排
237．．．成像系統
238．．．儲存器

Claims (8)

  1. 一種成像系統，其包括：(a)一主整合式影像感測器，其包括：一第一像素陣列，用於捕獲影像，其中每一影像包含影像信號；一第一定時電路，用於產生定時信號，其中該等定時信號包含用於自該第一像素陣列讀出該等影像信號之信號；一影像信號處理電路，用於處理影像信號；一個或多個儲存電路，其可運作以儲存非影像的實體及作業資訊；一類比對數位轉換器，用於將該等影像信號轉換成數位影像信號；一數位串列介面；及一雙向數位輸入/輸出電路，用於接收數位影像信號並輸出經處理之數位影像信號；(b)一次影像感測器，其運作地連接至該主整合式影像感測器，該次影像感測器包括：一第二像素陣列，用於捕獲影像，其中每一影像包含影像信號；一第二定時電路，用於產生定時信號，其中該等定時信號包含用於自該第二像素陣列讀出該等影像信號之信號；一類比對數位轉換器，用於將該等影像信號轉換成 數位影像信號；一數位串列介面；及一數位輸出電路，其用於輸出數位影像信號；(c)一資料匯流排，其將該主整合式影像感測器上之該數位串列介面連接至該次影像感測器上之該數位串列介面，且該次影像感測器使用該資料匯流排傳輸非影像的實體及作業資訊至該主整合式影像感測器，其中該非影像的實體及作業資訊與該次影像感測器有關；及(d)一雙向信號線，其連接至該主整合式影像感測器上之該雙向數位輸入/輸出電路，其中該主整合式影像感測器上之該雙向數位輸入/輸出電路使用該雙向信號線自該次影像感測器上的該數位輸出電路接收數位影像信號，且該影像信號處理電路使用在該資料匯流排上的自該次影像感測器接收的該非影像的實體及作業資訊處理自該次影像感測器接收的該等數位影像信號，其中該影像信號處理電路也處理由該第一像素陣列產生的該等影像信號，且其中該主整合式影像感測器上之該雙向數位輸入/輸出電路使用該雙向信號線輸出經處理的數位影像信號。
  2. 如請求項1之成像系統，其中該次影像感測器進一步包括：一個或多個儲存電路，其可運作以儲存由該次影像感測器上之該數位串列介面使用該資料匯流排傳輸至該主整合式影像感測器之該非影像的實體及作業資訊。
  3. 如請求項1之成像系統，其中該主整合式影像感測器之該定時電路及雙向輸入/輸出電路回應地輸出特定於接收自該次影像感測器之該非影像的實體及作業資訊的信號。
  4. 一種成像系統，其包括：(a)一主整合式影像感測器，其包括：一第一像素陣列，用於捕獲影像，其中每一影像包含影像信號；一第一定時電路，用於產生定時信號，其中該等定時信號包含用於自該第一像素陣列讀出該等影像信號之信號；一影像信號處理電路，用於處理影像信號；一個或多個儲存電路，其可運作以儲存非影像的實體及作業資訊；一類比對數位轉換器，用於將該等影像信號轉換成數位影像信號；一數位串列介面；及一雙向輸入/輸出電路，用於接收數位影像信號並輸出經處理之數位影像信號；(b)一個或多個次影像感測器，其每一者運作著地連接至該主整合式影像感測器，其中每一個次影像感測器包括：一第二像素陣列，用於捕獲影像，其中每一影像包含影像信號； 一第二定時電路，用於產生定時信號，其中該等定時信號包含用於自該第二像素陣列讀出該等影像信號之信號；一類比對數位轉換器，用於將該等影像信號轉換成數位影像信號；一數位串列介面；及一數位輸出電路，其用於輸出數位影像信號；(c)一資料匯流排，其將該主整合式影像感測器上之該數位串列介面連接至該一個或多個次影像感測器上之該數位串列介面，且每一次影像感測器使用該資料匯流排傳輸非影像的實體及作業資訊至該主整合式影像感測器，其中該非影像的實體及作業資訊與每一次影像感測器有關；及(d)一雙向信號線，其連接至該主整合式影像感測器上之該雙向數位輸入/輸出電路，其中該主整合式影像感測器上之該雙向數位輸入/輸出電路使用該雙向信號線自每一次影像感測器上的該數位輸出電路接收數位影像信號，且該影像信號處理電路使用在該資料匯流排上的自各自的該等次影像感測器接收的該非影像的實體及作業資訊處理自每一次影像感測器接收的該等數位影像信號，其中該影像信號處理電路也處理由該第一像素陣列產生的該等影像信號，且其中該主整合式影像感測器上之該雙向數位輸入/輸出電路使用該雙向信號線輸出經處理的數位影像信號。
  5. 如請求項4之成像系統，其中至少一個次影像感測器包括：一個或多個儲存電路，其可運作以儲存由該至少一個次影像感測器上之該數位串列介面使用該資料匯流排傳輸至該主整合式影像感測器之非影像的實體及作業資訊。
  6. 如請求項4之成像系統，其中該主整合式影像感測器之該定時電路及雙向輸入/輸出電路回應地輸出特定於接收自該至少一個次影像感測器之該非影像的實體及作業資訊的信號。
  7. 一種運作一成像系統之方法，該成像系統包括一主整合式影像感測器，該主整合式影像感測器透過一資料匯流排及一雙向信號線運作著地連接至一個或多個次影像感測器，其中該主整合式影像感測器包含一影像信號處理電路，該方法包括：使用該一個或多個次影像感測器中之至少一者產生經捕獲的一影像，其中經捕獲的該影像包括影像信號；將該等影像信號轉換成數位影像信號；使用該雙向信號線將該等數位影像信號由各自的次影像感測器傳輸至該主整合式影像感測器；使用該資料匯流排將與一各自的次影像感測器有關的非影像的實體及作業資訊由該各自的次影像感測器傳輸至該主整合式影像感測器；使用該主整合式影像感測器上之該影像信號處理電路 以使用各自的經儲存非影像的實體及作業資訊處理接收自該等次影像感測器的該等數位影像信號；及使用該雙向信號線將該等經處理之數位影像信號傳輸至該成像系統內之一個或多個組件。
  8. 如請求項7之方法，進一步包括儲存該非影像的實體及作業資訊。
TW097146482A 2007-11-30 2008-11-28 具有分享處理之多重影像感測系統及其操作方法 TWI489863B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US11/947,980 US7969469B2 (en) 2007-11-30 2007-11-30 Multiple image sensor system with shared processing

Publications (2)

Publication Number Publication Date
TW200935878A TW200935878A (en) 2009-08-16
TWI489863B true TWI489863B (zh) 2015-06-21

Family

ID=40345063

Family Applications (1)

Application Number Title Priority Date Filing Date
TW097146482A TWI489863B (zh) 2007-11-30 2008-11-28 具有分享處理之多重影像感測系統及其操作方法

Country Status (7)

Country Link
US (1) US7969469B2 (zh)
EP (1) EP2215832B1 (zh)
JP (1) JP5140738B2 (zh)
KR (1) KR101471929B1 (zh)
CN (1) CN101849408B (zh)
TW (1) TWI489863B (zh)
WO (1) WO2009070206A1 (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2475532A (en) 2009-11-23 2011-05-25 St Microelectronics Array of daisy chained image sensors
US9084002B2 (en) 2010-05-03 2015-07-14 Microsoft Technology Licensing, Llc Heterogeneous image sensor synchronization
WO2012100541A1 (en) * 2011-01-25 2012-08-02 Galaxycore Inc. Method and device for data communication between two cameras
US9323250B2 (en) 2011-01-28 2016-04-26 Intouch Technologies, Inc. Time-dependent navigation of telepresence robots
US9098611B2 (en) * 2012-11-26 2015-08-04 Intouch Technologies, Inc. Enhanced video interaction for a user interface of a telepresence network
US9361021B2 (en) 2012-05-22 2016-06-07 Irobot Corporation Graphical user interfaces including touchpad driving interfaces for telemedicine devices
WO2013176762A1 (en) 2012-05-22 2013-11-28 Intouch Technologies, Inc. Social behavior rules for a medical telepresence robot
CN103679108B (zh) 2012-09-10 2018-12-11 霍尼韦尔国际公司 具有多个图像传感器的光学标记读取装置
KR102081087B1 (ko) 2013-06-17 2020-02-25 삼성전자주식회사 동기적 영상과 비동기적 영상을 위한 영상 정합 장치 및 이미지 센서
CN103533220B (zh) * 2013-09-24 2017-02-08 杭州电子科技大学 一种基于s5pv210的无线流媒体摄像头
US9619137B2 (en) * 2015-03-26 2017-04-11 Motorola Mobility Llc Portable device touchscreen optimization
CN105303144B (zh) * 2015-05-21 2018-02-09 福建新大陆电脑股份有限公司 具有全局电子快门控制的条形码摄像装置
CN105117675A (zh) * 2015-05-21 2015-12-02 福建新大陆电脑股份有限公司 具有全局电子快门控制的条形码摄像装置
US20170230637A1 (en) * 2016-02-07 2017-08-10 Google Inc. Multiple camera computing system having camera-to-camera communications link
JP6722044B2 (ja) * 2016-05-27 2020-07-15 ソニーセミコンダクタソリューションズ株式会社 処理装置、画像センサ、およびシステム
DE102018203969A1 (de) * 2018-03-15 2019-09-19 Conti Temic Microelectronic Gmbh Automobile Kamera mit Rohbildsignalschnittstelle

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030223001A1 (en) * 2002-05-31 2003-12-04 Minolta Co., Ltd. Image capturing apparatus
US20050041123A1 (en) * 2003-08-20 2005-02-24 Sbc Knowledge Ventures, L.P. Digital image capturing system and method
US20070070204A1 (en) * 2005-09-29 2007-03-29 Mentzer Ray A Multi-camera system and method

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3668604B2 (ja) * 1997-12-16 2005-07-06 株式会社東芝 固体撮像素子およびこれを用いた画像システム
US6721008B2 (en) * 1998-01-22 2004-04-13 Eastman Kodak Company Integrated CMOS active pixel digital camera
FI109742B (fi) 1999-10-26 2002-09-30 Nokia Corp Matkaviestin
US20020108011A1 (en) 2000-12-11 2002-08-08 Reza Tanha Dual interface serial bus
JP4192428B2 (ja) * 2001-01-09 2008-12-10 ソニー株式会社 固体撮像装置及び画像入力装置
AU2003282843A1 (en) 2002-08-05 2004-02-25 Koninklijke Philips Electronics N.V. Device for mobile image communication
JP2004165943A (ja) 2002-11-13 2004-06-10 Fujitsu Ltd 携帯電子機器及びその撮影方法
JP2004260676A (ja) 2003-02-27 2004-09-16 Sharp Corp 折畳式カメラ装置および折畳式携帯電話機
JP3814609B2 (ja) * 2003-12-12 2006-08-30 キヤノン株式会社 撮像装置、及び撮像装置の駆動方法
JP2006078738A (ja) * 2004-09-09 2006-03-23 Fuji Photo Film Co Ltd カメラシステム、カメラ本体およびカメラヘッド
KR100636969B1 (ko) * 2004-12-30 2006-10-19 매그나칩 반도체 유한회사 Ｉｓｐ 내장형 이미지 센서 및 듀얼 카메라 시스템
JP4481842B2 (ja) * 2005-01-24 2010-06-16 キヤノン株式会社 撮像装置及びその制御方法
US7561191B2 (en) * 2005-02-18 2009-07-14 Eastman Kodak Company Camera phone using multiple lenses and image sensors to provide an extended zoom range
CN100481937C (zh) * 2006-05-12 2009-04-22 北京理工大学 一种高动态、超分辨率图像重建装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030223001A1 (en) * 2002-05-31 2003-12-04 Minolta Co., Ltd. Image capturing apparatus
US20050041123A1 (en) * 2003-08-20 2005-02-24 Sbc Knowledge Ventures, L.P. Digital image capturing system and method
US20070070204A1 (en) * 2005-09-29 2007-03-29 Mentzer Ray A Multi-camera system and method

Also Published As

Publication number Publication date
US20090141146A1 (en) 2009-06-04
US7969469B2 (en) 2011-06-28
WO2009070206A1 (en) 2009-06-04
CN101849408A (zh) 2010-09-29
EP2215832A1 (en) 2010-08-11
EP2215832B1 (en) 2014-06-11
JP5140738B2 (ja) 2013-02-13
TW200935878A (en) 2009-08-16
KR20100095002A (ko) 2010-08-27
JP2011508992A (ja) 2011-03-17
KR101471929B1 (ko) 2014-12-11
CN101849408B (zh) 2013-09-25

Similar Documents

Publication Publication Date Title
TWI489863B (zh) 具有分享處理之多重影像感測系統及其操作方法
JP6320272B2 (ja) 撮像素子、撮像装置及び携帯電話機
KR101540656B1 (ko) 전하 영역 합산을 이용하는 이미지 센서 픽셀
US9077917B2 (en) Image sensor having HDR capture capability
TWI507033B (zh) 用於三維整合像素之高增益讀取電路
JP2006191622A (ja) Ｉｓｐ内蔵型イメージセンサ及びデュアルカメラシステム
JP2009159186A (ja) 撮像素子の駆動装置、撮像素子の駆動方法、撮像装置、及び撮像素子
JPWO2015046045A1 (ja) 撮像装置及び撮像方法
JP6334908B2 (ja) 撮像装置及びその制御方法、及び撮像素子
JP6278881B2 (ja) 撮像素子、撮像装置及び携帯電話機
JP6532213B2 (ja) 撮像素子、撮像装置及び携帯電話機
WO2019054031A1 (ja) 撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム
JP2011524659A (ja) （ｃｃｄ）シフトレジスタ内残留電荷排出
JP2015103945A (ja) 撮像装置及び画像信号処理方法
JP6494263B2 (ja) 撮像素子及び電子機器
JP6458114B2 (ja) 撮像素子、撮像装置及び携帯電話機
JPWO2018066306A1 (ja) 撮像装置、静止画撮像方法、及び、静止画撮像プログラム
JP2006186423A (ja) 撮像装置、撮像方法及びそのプログラム
JP2005333349A (ja) 撮像装置
JP2009124528A (ja) 撮像装置及びプログラム
JP2010200106A (ja) 撮像装置及びその制御方法